Pular para o conteúdo

Kimi K3.1 passa no teste do cubo mágico

Ver no idioma original →

Autoria: Matthew Berman · Assistir no YouTube

Vídeo de autoria do canal indicado, não da IANIA; todos os direitos pertencem ao criador. Transcrição, resumo e tradução gerados automaticamente; o conteúdo no idioma original é preservado na versão em idioma original.

Idioma original: inglês

Vídeo original: Kimi K3.1 Passes the Rubik’s Cube Test · Canal: Matthew Berman · 00:31 · Assistir no YouTube

Tópicos: Avaliação e benchmarks de IA, Modelos de IA

Matthew Berman apresenta um teste de resolução do cubo mágico e comenta que modelos open weights costumam ter dificuldade com ele. O cubo está totalmente embaralhado, e o modelo o resolve usando um algoritmo, em vez de simplesmente desfazer uma sequência de movimentos. O sistema calcula os movimentos com antecedência e os executa em um espaço 3D. O apresentador considera o resultado uma aprovação clara e um dos melhores desempenhos.

  • O vídeo avalia a resolução de um cubo mágico totalmente embaralhado.
  • O modelo resolve o cubo com um algoritmo, sem apenas inverter os movimentos anteriores.
  • Os movimentos necessários são pré-calculados antes da execução.
  • A solução é mostrada sendo executada em um espaço 3D.
  • Matthew Berman considera o resultado uma aprovação clara e um dos melhores.
Início Capítulo Resumo
00:00 O teste do cubo mágico O apresentador diz que esperava que os modelos já passassem facilmente, mas observa que modelos open weights têm dificuldade.
00:12 Resolução algorítmica O modelo calcula os movimentos necessários e os executa em 3D, em vez de apenas desfazer uma sequência.
00:24 Resultado do teste O cubo é resolvido, e o apresentador classifica o desempenho como uma aprovação excepcional.

Achei que esse teste já tinha perdido a relevância. — 00:00

Isso vai usar um algoritmo para resolver o cubo. — 00:00

Isso é uma aprovação absoluta. — 00:31

Na verdade, um dos melhores. — 00:31

  • Kimi K3.1 (modelo): Modelo avaliado no vídeo ao resolver um cubo mágico embaralhado.
  • Rubik’s Cube test (conceito): Teste que avalia a capacidade de um modelo de encontrar uma solução para um cubo mágico embaralhado.
  • Matthew Berman (pessoa): Apresentador do vídeo que comenta o desempenho do modelo.
  • open-weight models (conceito): Categoria de modelos que, segundo o apresentador, costuma ter dificuldade nesse teste.

00:00 Achei que esse teste tinha morrido. Achei que, a essa altura, todos os modelos conseguiriam passar nele com facilidade, mas acontece que os modelos de pesos abertos não se saem bem no teste do Cubo Mágico. Certo, então ele está completamente embaralhado, e o modelo vai resolvê-lo, não apenas inverter a sequência de movimentos. Na verdade, ele vai usar um algoritmo para resolvê-lo. Então, vamos resolver. Aqui está, movimento por movimento. Ele realmente pré-calculou todos os movimentos de que vai precisar e agora está apenas executando tudo no espaço 3D. E pronto. Tivemos uma pequena animação de confete, e isso é

00:31 fenomenal. É uma aprovação incontestável. Na verdade, uma das melhores.

Transcrição original

[00:00] I thought this test was dead. I thought all the models could pass it easily at this point, but it turns out open weights models do not do well with the Rubik’s Cube test. All right, so it is fully scrambled and it will solve it and not just reverse the set of moves. This will actually use an algorithm to solve it. So, let’s solve it. Here it is turn by turn. So, it actually pre-calculated all the turns it’s going to need and now it’s just playing it out in 3D space. But, there it is. We got a little confetti animation and this is

[00:31] phenomenal. This is an absolute pass. In fact, one of the best.