A Kakao anunciou na conferência internacional COLM 2026, na Coreia do Sul, uma tecnologia que otimiza o treinamento de grandes modelos de linguagem, prevendo a taxa de aprendizado em cerca de 1% do custo total.
Técnica de otimização baseado em μ‑parameterização
Segundo a Digital Daily, a empresa aplicou o método de μ‑parameterização ao modelo Kanana‑2.6‑155b‑a17b, permitindo treinar até 10 trilhões de tokens de forma estável.
Redução de tamanho com o BBT
De acordo com a Inews24 e a Digital Daily, o BBT (BPE‑Guided Byte Transformer) diminui o número de parâmetros entre 20,2% e 40,4% e eleva a performance em testes de 2,7% a 6,6%, além de melhorar robustez a erros de digitação e transferência entre idiomas.
Contextualização do COLM 2026
Conforme a Yonhap News, o COLM, criado em 2024, foca em grandes modelos de linguagem e recebeu a apresentação desses resultados na sua edição de 2026.
