Notícias de IA: 24 coisas que você precisa saber esta semana
Autoria: Matt Wolfe · Assistir no YouTube
Vídeo de autoria do canal indicado, não da IANIA; todos os direitos pertencem ao criador. Transcrição, resumo e tradução gerados automaticamente; o conteúdo no idioma original é preservado na versão em idioma original.
Idioma original: inglês
Vídeo original: AI News: 24 Things You Need To Know This Week · Canal: Matt Wolfe · 26:37 · Assistir no YouTube
Tópicos: Agentes de IA, Cibersegurança e segurança de software, Modelos de IA, Modelos multimodais, Robótica e sistemas autônomos
Matt Wolfe reúne lançamentos e notícias de IA da semana, com destaque para o assistente proativo Claude Duet e para falhas de segurança que afetaram PHP e Railway. O vídeo também acompanha atualizações do Codex, novos modelos e ferramentas de geração de imagens, áudio e voz, além do avanço de agentes de IA. Wolfe discute a tensão entre empresas que bloqueiam agentes em seus sites e aquelas que os tornam compatíveis. Por fim, comenta ferramentas para detectar deepfakes, pesquisa médica da Microsoft e uma demonstração viral de robô da Unitree.
Pontos-chave
Seção intitulada “Pontos-chave”- O Claude Duet é apresentado como um assistente que pode agir proativamente, usar ferramentas e preparar mensagens, mas ainda está disponível apenas para algumas pessoas na lista de espera.
- Uma vulnerabilidade antiga no PHP foi identificada com ajuda de modelos de IA e passou a ser explorada rapidamente após sua divulgação.
- Um incidente na Railway pode ter exposto variáveis de ambiente e chaves de API, levando empresas a revogar e substituir credenciais.
- Atualizações do Codex incluíram melhorias de cache e a possibilidade de editar mensagens anteriores; o ChatGPT também começou a receber chats protegidos por PIN.
- A Ideogram lançou um modelo para gerar vetores editáveis em SVG, e a Eleven Labs apresentou uma ferramenta de sincronização de áudio com imagens.
- Perplexity lançou dois decision models open source e passou a permitir que seu Perplexity computer seja executado localmente em um Mac.
- Mais empresas estão bloqueando agentes de IA em seus sites, enquanto Shopify aposta em torná-los compatíveis com compras automatizadas.
- Entre outras novidades, Mistral apresentou o agente de voz Voxtrot 3, Canva lançou o modelo de imagem Canva Craft e Zoom anunciou uma ferramenta de detecção de deepfakes.
- Wolfe questiona as alegações e a autonomia exibida em um vídeo viral do robô X2H Kung Fu Legend Guardian, da Unitree.
Capítulos
Seção intitulada “Capítulos”| Início | Capítulo | Resumo |
|---|---|---|
| 00:09 | Claude Duet e o assistente proativo | O vídeo apresenta o assistente da Anthropic, seus recursos, conexões com outros serviços e acesso limitado por lista de espera. |
| 02:48 | Falhas de segurança em PHP e Railway | Wolfe explica a vulnerabilidade no PHP identificada com ajuda de IA e o possível acesso a variáveis de ambiente da Railway. |
| 07:58 | HyperAgent e atualizações da OpenAI | O vídeo aborda o uso de uma assinatura ChatGPT no HyperAgent e atualizações de Codex, cache, chats protegidos e Decisions API. |
| 12:09 | Geração vetorial e sincronização de áudio | Wolfe testa o modelo vetorial da Ideogram e Chimera, ferramenta da Eleven Labs para sincronizar áudio e imagens. |
| 15:46 | Novos modelos e agentes em sites | O bloco reúne os decision models da Perplexity, execução local do Perplexity computer e o debate sobre sites que bloqueiam agentes. |
| 20:26 | Agentes de voz e geração de imagens | O vídeo comenta as chamadas do Yelp, o Voxtrot 3 da Mistral, o Canva Craft e rumores sobre novos modelos de imagem da OpenAI. |
| 23:01 | Detecção de deepfakes, pesquisa médica e robôs | Wolfe apresenta uma ferramenta da Zoom, pesquisa da Microsoft e uma demonstração viral da Unitree, questionando suas alegações de autonomia. |
Citações
Seção intitulada “Citações”Assim que as pessoas souberam que essa vulnerabilidade existia, ela começou a ser explorada como loucura. — 04:20
Agora, em vez de alguém ir à Amazon para comprar algo, vai ao ChatGPT.com ou ao Duet ou ao Muse e pede que compre por ela. — 18:25
Se mais e mais pessoas deixarem seus agentes fazerem compras em seu nome, elas vão perder muitas vendas se continuarem bloqueando agentes. — 19:56
Não acredito nem por um segundo que ele esteja realmente levantando todo o peso deste carro. — 25:35
Conceitos e entidades
Seção intitulada “Conceitos e entidades”- Claude Duet (ferramenta): Assistente da Anthropic apresentado como proativo, capaz de usar ferramentas e realizar tarefas em nome do usuário.
- Anthropic (empresa): Empresa de IA que, segundo o vídeo, está desenvolvendo o Claude Duet.
- PHP (conceito): Linguagem de programação amplamente usada em sites, afetada por uma vulnerabilidade antiga discutida no vídeo.
- OpenAI (empresa): Empresa que, segundo o vídeo, identificou a vulnerabilidade no PHP com ajuda de um modelo de IA e anunciou atualizações para seus produtos.
- Railway (ferramenta): Plataforma de infraestrutura para aplicações cujas variáveis de ambiente podem ter sido acessadas em um incidente de segurança.
- Codex (ferramenta): Produto da OpenAI que recebeu atualizações de uso, cache e edição de mensagens durante a semana.
- Decisions API (ferramenta): API descrita no vídeo como capaz de retornar probabilidades, escolher entre opções ou atribuir pontuações.
- Ideogram (empresa): Empresa que lançou um modelo para gerar gráficos vetoriais editáveis e exportáveis como SVG.
- ElevenLabs (empresa): Empresa que apresentou Chimera, uma ferramenta para sincronizar áudio com imagens.
- Perplexity (empresa): Empresa que lançou decision models open source e anunciou execução local do Perplexity computer em Mac.
- Shopify (empresa): Empresa que, segundo o vídeo, está tornando suas lojas compatíveis com compras realizadas por agentes.
- Mistral (empresa): Empresa que apresentou o agente de voz Voxtrot 3, capaz de acompanhar múltiplos interlocutores e interrupções.
- Canva (empresa): Empresa que lançou Canva Craft, seu modelo de geração de imagens.
- Microsoft (empresa): Empresa que publicou pesquisa sobre um modelo voltado a diagnósticos médicos.
- Unitree (empresa): Empresa responsável pelo vídeo viral de demonstração do robô X2H Kung Fu Legend Guardian.
Tradução completa (pt-BR)
Seção intitulada “Tradução completa (pt-BR)”00:09 [suspira] >> Aqui estão as notícias de IA que você provavelmente perdeu esta semana. Começando com Claude Duet. Parece ser a resposta da Anthropic ao dots do ChatGPT, ao muse da Meta e ao bot Grok da XAI. Este é o assistente pessoal deles, que não só faz coisas por você, mas também é meio proativo ao alertar sobre coisas que talvez você devesse fazer. Então, podemos ver aqui que ele é proativo. Ele diz: “Bom dia, Nicole. Para hoje: autorização sanitária, decisões de contratação, renovação da Northfield.” Então, não parece ser uma resposta a alguém que enviou um prompt, mas sim o próprio agent indo
00:40 e sendo proativo, lembrando você de coisas que estão acontecendo. Podemos ver que, em seguida, ele dá mais detalhes e também sugere algo de que o app pode realmente cuidar por você agora. Como podemos ver, ele pode usar ferramentas. Ele diz: “Buscando dados do ponto de venda, da sua loja online, do CRM, do suporte, da folha de pagamento e do banco.” E ainda apresenta um painel bem organizado. Isso, na verdade, parece melhor do que o que poderíamos obter com o dots ou algo como o muse, porque esse painel aparece integrado à conversa com o agent. E, como mencionei antes, assim como o dots, o muse e
01:12 algumas dessas outras ferramentas, ele entrará em contato com você antes mesmo de você pedir, chegando até a preparar mensagens para você usar. Ele pode ajudar a redigir e-mails. E, sejamos honestos, parece que ele consegue fazer muita coisa que temos visto no dots, no muse, no bot Grok e em ferramentas desse tipo. Eu demonstraria esse aqui para vocês, mas não liberaram o acesso para todo mundo. Se você tem um plano Pro ou Max, pode entrar na lista de espera e eles estão, acho, escolhendo quem sai da lista. Sei que algumas pessoas têm acesso, mas eu
01:44 ainda não fui escolhido para testar, então não posso fazer uma demonstração para vocês. Eles também mencionaram que ele lida bem com informações confidenciais. Disseram que estão lançando o produto com um classificador dedicado e um system prompt de segurança que verifica cada mensagem e protege contra a exposição de informações confidenciais. Então, você não precisa se preocupar em receber uma mensagem que inclua números do seu cartão de crédito, documentos de identidade emitidos pelo governo ou algo do tipo. Quanto aos serviços aos quais ele se conecta, parece que consegue se conectar aos mais comuns: Gmail, mensagens do Slack, QuickBooks, Stripe, Gusto,
02:16 LinkedIn, DocuSign, HubSpot, Canva, Shopify. Ou seja, muitos dos mesmos apps que encontramos em todas as outras plataformas de agent. Gostei muito da aparência do Duet no vídeo de demonstração, especialmente do painel. Está bem organizado. Tenho gostado bastante de usar o dot e o Grokbot até agora, então estou animado para testar o Duet quando finalmente tiver acesso. Infelizmente, ainda não tenho acesso. Estou na lista de espera. Tenho conversado com pessoas da Anthropic, na esperança de conseguir acesso em breve; nesse caso, vou analisá-lo com um pouco mais de profundidade. Agora, embora o Duet
02:48 tenha sido provavelmente o maior lançamento da semana — digo “lançamento” entre aspas, porque a maioria de nós ainda não tem acesso —, a maior notícia da semana provavelmente foram todos os problemas de cibersegurança que aconteceram. E são problemas grandes, que afetaram uma parcela enorme da web. O primeiro foi o problema do PHP. Se você não conhece PHP, é uma linguagem de programação para a web e, segundo algumas estimativas, até 70% dos sites usam PHP de alguma forma. É a linguagem de programação por trás da Wikipedia,
03:18 do WordPress, do Drupal, do DeviantArt e do 4chan. Uma grande parte da internet usa PHP. O The Verge preparou um relato do que vem acontecendo com o PHP. Mas aqui está a ideia principal. A vulnerabilidade foi encontrada pela OpenAI no início desta semana. O GPT 5.6 Soul foi usado para identificar a falha do PHP antes que os invasores o fizessem. Então, eles conseguiram se antecipar e compartilharam uma ferramenta que permite aos desenvolvedores verificar se estão usando uma versão potencialmente vulnerável do PHP que precisa de correção. Agora,
03:49 por causa disso, alguns sites pela internet precisaram ficar fora do ar por um tempo para corrigir essas vulnerabilidades. É interessante notar que a vulnerabilidade não é nova. Ela está presente no PHP há 20 anos. No entanto, explorá-la exigia uma sequência de etapas excepcionalmente complexa, no limite do que pesquisadores humanos conseguiriam realizar na prática. Mas, agora que temos modelos de IA poderosos, é muito mais fácil transformar esse tipo de falha obscura em uma vulnerabilidade realmente perigosa.
04:20 O CEO da Cloudflare, Matthew Prince, disse que, nas 10 horas anteriores ao anúncio público, eles viram milhares de tentativas de explorar essa falha. O número saltou para dezenas de milhares nos 45 minutos após o anúncio de que a vulnerabilidade existia, chegou a centenas de milhares em duas horas e agora está na casa dos milhões. Então, assim que as pessoas souberam da existência dessa vulnerabilidade, ela começou a ser explorada intensamente. Se você não conhece a Cloudflare, ela é como uma camada entre o local onde seu site está hospedado e o nome de domínio, e o tráfego passa por ela, digamos, por motivos de velocidade e segurança
04:52 No fim das contas, isso não causou muitos danos, além de vários sites pela internet terem precisado ficar temporariamente fora do ar para corrigir o problema. No entanto, isso mostra o estrago que a IA pode causar em sites e na internet como um todo: essa falha já existia, mas era difícil demais de explorar. Agora que temos modelos de IA, eles conseguem explorar algumas das falhas mais difíceis que já vimos. A empresa de segurança Wiz classificou essa vulnerabilidade como uma das
05:22 mais graves já descobertas na história dos softwares. Mas esse não foi o único grande problema desta semana. Também nesta semana, a empresa Railway sofreu um ataque, e um terceiro não autorizado pode ter acessado variáveis de ambiente criptografadas; algumas delas tiveram seu conteúdo descriptografado. Se você está assistindo a isso e pensando “não faço ideia do que isso significa”, vamos começar pelo que é a Railway. A Railway é uma espécie de camada de infraestrutura onde quem cria apps da web hospeda o banco de dados do backend e outras informações do app. Quando dizem que
05:54 conseguiram acessar variáveis de ambiente, essas variáveis costumam ser chaves de API. Então, se uma empresa criou um app que usa a OpenAI ou a Anthropic como parte da infraestrutura, ela armazenaria a chave de API da OpenAI nas variáveis de ambiente. Portanto, empresas que criaram seus apps usando a Railway podem ter tido suas variáveis de backend acessadas, e quem as acessou pode ter conseguido obter as chaves de API para usar ferramentas como as da OpenAI
06:25 e da Anthropic. Nesse caso, a pessoa, empresa ou entidade que explorou a falha agora tem acesso às suas chaves de API, o que geraria cobranças para você. Ela poderia usar ferramentas da OpenAI ou da Anthropic, e a cobrança iria para quem é dono da chave de API. Como muitos apps online usam a infraestrutura da Railway, é possível que tenham sido acessadas muitas chaves de API e variáveis de ambiente. Isso significa que muitas empresas que criam apps tiveram que correr nesta semana para substituir
06:56 suas chaves de API e desativar as antigas, que talvez tenham sido comprometidas. E tudo isso está acontecendo porque a IA está ficando cada vez melhor em programação e cibersegurança, e estamos num ponto de virada em que a IA está tão boa que começa a, por assim dizer, quebrar a internet. E, sim, é meio assustador pensar no que vem pela frente. Felizmente, parece que algumas dessas empresas de IA estão tentando se manter um passo à frente e resolver esses problemas um pouco antes que aconteçam, como vimos no caso dos incidentes com o PHP. Mas, no caso dos incidentes com a Railway, o estrago já está feito e muitos desenvolvedores estão correndo para trocar as chaves de API nas variáveis de ambiente. E também é muito assustador estar criando coisas online agora, porque, se isso aconteceu com a Railway, quem garante que não pode acontecer com a Vercel ou com alguma outra plataforma onde seu app ou site está hospedado? Quer dizer, sinceramente, não parece que muita coisa esteja segura agora, e isso é meio que um
07:27 e resolver esses problemas pouco antes de acontecerem, como vimos no caso dos incidentes com PHP. Mas, no caso dos incidentes com a Railway, o estrago já está feito, e muitos desenvolvedores estão correndo para substituir as API keys nas variáveis de ambiente. Além disso, é realmente assustador estar criando coisas online agora, porque, se isso aconteceu com a Railway, quem garante que não pode acontecer com a Vercel ou com alguma outra plataforma onde seu web app ou site está hospedado? Quer dizer, sinceramente, não parece que muita coisa esteja segura agora, e isso é meio que um
07:58 Pensamento assustador. Outra atualização legal desta semana vem da HyperAgent. Se você já paga pelo ChatGPT, agora pode usar essa mesma assinatura para executar uma equipe inteira de agentes de IA dentro da HyperAgent, o que resolve o problema realmente irritante de ter que se inscrever em um milhão de assinaturas em todas essas plataformas diferentes. E, se você não sabe o que é a HyperAgent, basicamente é uma plataforma construída em torno da ideia de contratar agentes de IA que trabalham mais como funcionários. Você pode criar agentes diferentes para tarefas diferentes, como pesquisa e geração de conteúdo, análise, operações, o que for. E eles têm
08:31 vários agentes e várias pessoas trabalhando juntos na mesma sala. Então, agora, em vez de pagar por outro plano de IA separado só para começar, você pode simplesmente entrar com o plano do ChatGPT que já tem. Ou, se quiser usar mais, pode escolher um dos planos pagos da HyperAgent e ganhar US$ 100 em créditos extras. Então, confira no link da descrição, e muito obrigado à HyperAgent por apoiar meu canal e patrocinar este trecho do vídeo de hoje. Como mencionei há algumas semanas, a OpenAI disse que, nos próximos 28 dias, a cada dia eles vão
09:02 lançar uma coisa que seja uma melhoria clara para usuários do Codex ou do Work, ou vão fazer um reset completo. Nas últimas duas semanas, trouxe uma atualização de tudo o que eles lançaram até agora. Então, quero continuar com isso nesta semana e contar o que lançaram nos últimos sete dias. Na maior parte, tivemos mais um conjunto de atualizações relativamente pequenas e mais resets. No dia 12, fizeram melhorias no Codex e no Work que aumentaram o uso efetivo disponível para você. Fizeram isso reutilizando o contexto entre subagents, mantendo o contexto em cache por mais tempo e melhorando o roteamento de solicitações,
09:33 o que permite aumentar os cache hits. No dia 13, não lançaram nada, então fizeram um reset. No dia 14, lançaram uma nova melhoria de qualidade de vida. Agora você pode editar mensagens anteriores dentro de uma conversa no aplicativo para desktop. Não entendi muito bem isso, e acho que James, aqui, disse o que eu estava pensando. Estou genuinamente confuso sobre o que isso significa. Então, posso voltar e mudar um prompt que enviei antes? Isso é registrado como uma orientação? Tibo disse que isso é registrado como viagem no tempo, mas aí VB, que também trabalha na OpenAI, diz:
10:05 “Descartamos todas as saídas do modelo e as chamadas de ferramentas posteriores à mensagem editada. Assim, o modelo não fica confuso por causa de mensagens contraditórias.” Então, acho que é meio que voltar e recomeçar de um ponto específico, mas não entendo muito bem como isso é tão diferente de simplesmente direcioná-lo para outra direção e criar uma ramificação a partir daí. Mas não sei. Essa foi a atualização do dia 14. Se alguém entender melhor o que isso realmente significa, fique à vontade para comentar abaixo do vídeo. Me conte. No dia 15, realmente não houve nada digno de nota. Então, fizeram um
10:36 reset. No dia 16, agora é possível manter o cache por 12 horas na API e, para usuários conectados no Codex e no Work, mantemos o cache para sempre. Você não sofre nenhuma penalidade ao voltar a uma conversa antiga ou retomá-la depois de algumas horas, e agora há garantia de que o cache será usado. E, no dia 17, sabe, o dia em que estou gravando isto, eles nos deram mais um reset. Então, de novo, foram melhorias relativamente pequenas. A do cache, no dia 16, parece bastante significativa. Você vai usar menos tokens com mais frequência nas conversas,
11:07 porque o sistema vai recorrer ao cache com mais frequência. Isso parece bem legal. Tirando isso, tudo parece muito pequeno. A OpenAI lançou um recurso de conversa bloqueada que permite bloquear suas conversas com um PIN. Assim, se alguém abrir seu computador e acessar sua conta do ChatGPT, você pode ter conversas que não ficam facilmente acessíveis sem inserir um PIN. Ainda não tenho esse recurso na minha conta, mas esta notificação diz que as conversas bloqueadas estão sendo disponibilizadas gradualmente. Então, se você não o vê, provavelmente ainda não está disponível na sua conta. Eles também anunciaram uma disponibilidade mais ampla da Decisions API. Eu
11:39 sinto que esta é a terceira vez que anunciam a Decisions API. Anunciaram durante o Dev Day e, cerca de uma semana depois, anunciaram que ela estava disponível para mais pessoas. E, nesta semana, fizeram outro anúncio sobre ela. Mas diz: “Hoje estamos disponibilizando a Decisions API de forma geral. Desenvolvida com GPT-6 Luna, a Decisions API se concentra na inteligência de Luna para perguntas com respostas limitadas.” Então, basicamente, em vez de você fornecer um prompt e receber de volta uma saída com um monte de texto, ela poderia fornecer uma probabilidade estimada
12:09 de alguma coisa, escolher entre uma seleção de opções ou dar uma pontuação para alguma coisa. Algumas semanas atrás, Jeff estava em toda parte. Esta é basicamente a resposta da OpenAI ao Jeff, e, pela terceira vez, anunciaram isso de novo. >> [risos] >> Certo, vamos passar para algumas coisas com as quais podemos brincar agora. A empresa Ideogram, que tem seu próprio modelo proprietário de geração de imagens, lançou um modelo vetorial nesta semana. Agora você pode gerar arquivos SVG limpos e editáveis. Se você acessar
12:40 ideogram.ai/models/vector, pode dar um prompt para gerar o que quiser em formato vetorial. Os vetores podem ser ampliados infinitamente e, além disso, você pode editar elementos dentro deles. Aqui está um vetor que fiz de um lobo uivando para a lua. Tive acesso antecipado por alguns dias, então venho testando o recurso, e você pode ver que consigo selecionar elementos individuais e editar esta imagem aqui. Se eu der um prompt para gerar um macaco de patins, cerca de 30 segundos depois temos alguns gráficos vetoriais com macacos
13:10 de patins aqui. Alguns ficaram meio estranhos, com pernas extras, então talvez a geração vetorial ainda não esteja tão ajustada quanto a geração de imagens. Mas, felizmente, temos quatro opções, e duas das quatro parecem bem boas. E, mais uma vez, como é um vetor, posso selecionar elementos diferentes e editá-los como quisermos, além de poder baixá-lo diretamente como SVG. A empresa Eleven Labs apresentou o Chimera nesta semana, uma ferramenta que combina Seedance 2.5 e Eleven Labs
13:41 V4. Assim, você pode fornecer uma imagem e um arquivo de áudio, e então a ferramenta sincroniza o áudio com a imagem e faz parecer que a pessoa na imagem está falando o que foi dito no arquivo de áudio. Resolvi experimentar aqui. Enviei uma imagem minha e pedi para a Eleven Labs gerar um áudio para mim. Então, não é a minha voz, e foi isto que ela gerou. >> Acalme-se. Você não precisa se forçar a relaxar. Não precisa conseguir relaxar. Você não precisa se livrar de todo sentimento de nervosismo. Simplesmente perceba
14:12 que você está aqui, respirando, ouvindo e se preparando. >> Você entendeu a ideia, mas o engraçado é que dei a ela uma foto minha em pé, e ela não usou essa imagem nenhuma vez. Ela me colocou em um banquinho, fez um close do meu rosto e, em certo momento, me mostrou olhando para mim mesmo no espelho. Então, nunca usou a imagem original que enviei. Você pode fornecer um prompt para orientar, acho eu, a aparência dos visuais. Deixei em branco para ver o que aconteceria, e você viu o resultado. Ela gerou várias tomadas, não foi apenas uma tomada do começo ao fim. Mas acho que a sincronização labial
14:43 é razoavelmente boa. Na semana passada, estava olhando para outra ferramenta de sincronização labial que não parecia nem um pouco próxima, e acho mesmo que estamos chegando cada vez mais perto. Encontrei alguns pequenos bugs e problemas na interface. Por exemplo, quando abro isto e clico em conversão de texto em fala, se eu inserir muito texto aqui, o botão de envio fica fora da tela, então nem consigo enviar daqui de baixo. Quer dizer, consigo passar o cursor por cima e enviar, mas ele fica muito fora da tela e, por algum motivo, a rolagem não funciona, então não consigo rolar para baixo para vê-lo. Se começo a selecionar o texto e arrasto,
15:15 no fim, isso me permite vê-lo arrastando o texto para cá, e agora posso clicar em gerar fala. E, se eu gerar essa fala, ele fará todo o processo de geração, mas, quando clico em usar fala, aparece um erro dizendo que o áudio de referência combinado tem 120 segundos e não pode ultrapassar 30 segundos. Tipo, isso não deveria ser informado quando eu insiro o texto? Colei o texto, e deveria aparecer um aviso: “Isso vai ficar longo demais para o que você está tentando gerar; só pode ter 30 segundos.” Sabe, parece uma falha na interface aqui,
15:46 mas acho que a sincronização da voz é bem impressionante. Embora seja meio estranho não ter usado minha imagem original e me colocado falando a partir daquela posição, mas imagino que isso seja mais um problema do C Dance 2.5. Certo, falei de algumas coisas. Provavelmente já falei das maiores notícias, mas há várias notícias menores que quero explicar para vocês. Então, vamos passar por todas rapidamente. >> [música] >> Vamos começar pela Perplexity. Eles acabaram de lançar dois decision models próprios.
16:18 Acabei de falar sobre decision models. Se você viu alguma coisa sobre Jev ou entende o que está acontecendo com os decision models da OpenAI, agora a Perplexity tem sua própria versão de decision models e acabou de torná-los open source. Eles têm um modelo de 4 bilhões de parâmetros e outro de 27 bilhões de parâmetros e, de acordo com este gráfico de benchmark, o modelo de 4 bilhões de parâmetros está lá na extrema esquerda, indicando que é o melhor no que quer que este benchmark esteja mostrando. Já que estamos falando da Perplexity, o modelo Perplexity Computer agora pode
16:50 rodar totalmente em um Mac. O Perplexity Computer é meio que a versão da Perplexity de um OpenClaw ou de um Hermes, ou o próprio software agentic deles, que pode realizar várias tarefas para você e usar ferramentas e coisas assim. Antes, a parte de computador rodava em computadores na nuvem que pertenciam à Perplexity. Agora, você pode rodar o Perplexity Computer totalmente no seu próprio Mac, se quiser. Parece que ele roda no Qwen 3.6, e eles recomendam 36 GB de memória unificada ou
17:21 mais para conseguir executá-lo. Acho toda essa narrativa muito interessante neste momento. Os sites estão fechando as portas para agents de IA. A OpenAI, a Meta e o Google querem que os agents de IA façam tudo por você. Recentemente, a Amazon parou de permitir que agents fizessem compras em seu nome na Amazon e está começando a bloquear esses agents para que não possam fazer isso por você. Bem, nesta semana, mais empresas estão começando a bloquear agents. Yelp, Delta Airlines, JP Morgan Chase, Charles Schwab, Cars.com, Amtrak, cada vez mais
17:53 sites estão começando a dizer: só queremos humanos operando em nosso site. Não queremos agents entrando e fazendo o trabalho por eles. O motivo de eu achar essa narrativa muito, muito interessante é que as empresas terão que começar a decidir se querem criar seus sites para serem amigáveis a agents ou exclusivos para humanos. E há um problema, porque, à medida que mais e mais humanos começarem a usar agents, obviamente vão querer direcioná-los a sites que sejam amigáveis a agents. No entanto, essas
18:25 empresas estão preocupadas com a possibilidade de agents usarem seus sites porque isso as coloca um nível abaixo na cadeia de compras, certo? Agora, em vez de alguém ir à Amazon para comprar algo, essa pessoa vai ao ChatGPT.com, ao Duet ou ao Muse e pede para comprar algo; o agent dela vai à Amazon e faz a compra por lá. Agora, se um agent pode ir à Amazon e fazer a compra, a preocupação da Amazon é: “Tudo bem, agora que estou mais abaixo nessa cadeia de quem está fazendo as compras, sou mais substituível.”
18:55 No passado, quando alguém queria comprar algo, ia à Amazon, procurava o produto e comprava. Se os agents fizerem as compras agora, você pode dizer: “Compre isto para mim.” E seu agent vai encontrar o site que talvez venda o produto pelo menor preço ou que talvez consiga entregá-lo mais rápido, ou qualquer que seja o seu critério. E agora sua principal opção para comprar o produto não é “Vou direto à Amazon”. É “Vou ao meu
19:25 agent e vou pedir que ele compre o produto para mim”. E a Amazon se torna substituível. A Shopify adotou essa abordagem. A Shopify afirmou: “Todos os nossos sites são amigáveis a agents”. Então, se você pedir ao seu agent para encontrar e comprar determinado produto, é muito mais provável que ele vá a uma loja baseada na Shopify, porque a Shopify permite que os agents façam compras nela. A Amazon, não. Então, vai ser uma dinâmica muito interessante, em que essas grandes empresas terão que decidir: “Queremos priorizar os humanos? Queremos priorizar os agents?
19:56 Se priorizarmos os agents, nos tornaremos substituíveis. Mas, se priorizarmos os humanos, os agents não usarão nosso site em nome das pessoas, então talvez percamos vendas por isso.” E não sei como isso vai se desenrolar. Só acho que é algo muito interessante. Acho que muitos sites acabarão tendo que permitir que os agents façam compras, porque, se cada vez mais pessoas deixarem seus agents comprarem em seu nome, esses sites perderão muitas vendas se continuarem bloqueando os agents. Não sei como isso vai se desenrolar. Eu
20:26 só acho fascinante. Enfim, já que acabei de mencionar o Yelp, vou comentar isto também. Agora, o Yelp pode ligar em seu nome para verificar o tempo de espera em um restaurante. Então, embora o Yelp esteja bloqueando outros agents de usá-lo, ele está tentando ser o agent de restaurantes que você prefere. Ou seja, você não pode usar o Claude para fazer coisas no Yelp por você, mas, se usar o próprio Yelp, agora pode pedir para ele ligar para um restaurante em seu nome, verificar o tempo de espera e perguntar sobre itens do cardápio e coisas assim.
20:57 A empresa Mistral lançou nesta semana um novo agente de voz de IA chamado Voxtrot 3, e ele parece realmente impressionante. >> Somos dois humanos falando com um agente de voz. >> Então, qual de nós está falando agora? >> Arthur, Kayla se apresentou primeiro. >> Legal, então você faz mais do que apenas ouvir e gerar fala. >> Sim, há três etapas acontecendo em streaming ao mesmo tempo. >> E o contexto também molda a forma como falo. >> Posso interromper você? >> Hum, você acabou de fazer isso. >> Legal, então você consegue lidar com uma interrupção
21:27 e ainda está acompanhando a conversa? >> Sim, estou identificando quem está falando em tempo real. O modelo de raciocínio acompanha de perto o que está sendo compartilhado enquanto conversamos. >> Então, vocês entenderam. Ele consegue ouvir várias pessoas falando com ele, saber quem está falando, fazer tool calls em seu nome, você pode interrompê-lo, e parece mesmo um modelo de agente de voz impressionante. Certo, passando aos modelos de geração de imagens: a empresa Canva lançou seu primeiro modelo de geração de imagens. Para deixar tudo claro, tenho um pequeno investimento na Canva, mas isso nunca afeta o que digo editorialmente sobre nenhuma das empresas de que falo.
21:59 Este novo modelo se chama Canva Craft e, se você se lembra, há alguns anos a Canva adquiriu a Leonardo AI, que tinha seus próprios modelos proprietários de geração de imagens. E acontece que, para criar este novo modelo, eles usaram a mesma equipe de pesquisa. Se você usa a Canva, o modelo está disponível tanto na plataforma Canva quanto na API da Canva. Então, dentro da Canva, se quiser usá-lo, clique na aba Dream Lab, e você estará usando o novo modelo de geração
22:29 de imagens deles. Já que estamos falando de modelos de geração de imagens, vamos dar uma olhada nos rumores por um instante. Este site de catálogo de testes parece acreditar que em breve teremos um modelo GPT Image 3. Este modelo Aurora Red Alpha tem aparecido em alguns desses sites de comparação de tabelas de classificação, e nomes como Aurora Red Alpha, Aurora Green Alpha e Aurora Blue Alpha foram encontrados na API da OpenAI. Então, isso não é uma confirmação de que teremos um novo modelo de imagens de IA da OpenAI
23:01 muito em breve. Mas, geralmente, quando temos vazamentos como esse, não demora muito para algo acontecer. Então, não se surpreenda se, nas próximas semanas, a OpenAI lançar um modelo de imagem totalmente novo. Nesta semana, a Zoom apresentou uma ferramenta de IA para dar às empresas mais visibilidade sobre a atividade de IA. Basicamente, ela serve para detectar riscos de deepfakes. Então, se você estiver em uma chamada no Zoom, ela vai ajudar a determinar se você está realmente falando com uma pessoa ou se alguém está usando uma falsificação por IA. Não sei, já faz alguns anos, mas houve muitas histórias de empresas que perderam muito dinheiro em golpes porque
23:31 o CEO de uma empresa, por exemplo, era falsificado por IA e pedia que transferissem dinheiro para determinadas contas. Os funcionários faziam a transferência achando que estavam fazendo isso para o chefe, mas, na verdade, era uma falsificação por IA na transmissão ao vivo com eles. Então, parece que estão surgindo novos conjuntos de ferramentas para ajudar a evitar que isso aconteça. A Microsoft também publicou este artigo nesta semana, chamado “Construindo superinteligência médica”. Eles têm um modelo que, segundo eles, é 1,7 vez mais preciso que médicos. Também afirmam que ele é mais de duas vezes mais
24:02 preciso que médicos usando livros didáticos e a internet, e quase quatro vezes mais preciso quando fazem diagnósticos sem esses recursos. Então, há algumas pesquisas bem interessantes saindo da Microsoft com um modelo que, quem sabe, pode acabar em breve no consultório do seu médico para ajudar a diagnosticar ou, pelo menos, conferir os diagnósticos dos médicos com quem você se consulta. E, por fim, vamos terminar com robôs, porque este vídeo está viralizando. A Unitree publicou este vídeo do X2H Kung Fu
24:32 Legend Guardian. Ao assistir a este vídeo, podemos ver a unidade H2 da Unitree dando cambalhotas por cima de um carro. Podemos vê-la chutando e amassando um carro, batendo no capô dianteiro e saltando de uma altura de 4 m. Eles até colocaram fogos de artifício nos pés do robô e, por algum motivo, fizeram com que ele desse cambalhotas. Aqui, ele está protegendo alguém de um intruso e se colocando entre os dois. E há também alguns trechos interessantes em que o robô vê alguém preso sob um carro e depois levanta o carro. E, no que provavelmente é o mais
25:03 engraçado de todos, este aqui vê um carro vindo na direção de uma criança e então a derruba com força. O mais engraçado disso, para mim, é bem aqui. Você vê o carro vindo, e ele está avançando em câmera superlenta, mas o robô empurra a criança com muito mais força do que o carro teria usado para atingi-la. E, quando você vê isso levantando o carro, muita gente questiona o fato de estarem levantando o para-choque de plástico aqui, porque esse para-choque provavelmente se soltaria do carro. Então, muita gente acha que, como a maior parte do carro está fora do assento aqui, há alguma outra coisa ajudando a levantá-lo. E, para
25:35 ser justo, não acho que nenhuma das coisas mostradas neste vídeo — as cambalhotas, os chutes e tudo mais — seja feita autonomamente. Acho que tem alguém controlando o robô, e que isso é mais uma demonstração das capacidades mecânicas dele. Mas não acredito nem por um segundo que ele esteja realmente levantando todo o peso desse carro. E o fato de ele empurrar essa criança para longe é simplesmente hilário para mim, porque parece muito mais perigoso do que o carro teria sido. Mas, enfim, é um vídeo interessante que está viralizando nesta semana. Mas é isso que tenho para vocês nesta semana. Na verdade,
26:06 foi outra semana meio tranquila. As maiores notícias foram o Duet e muitas daquelas questões de cibersegurança que estavam aparecendo. Mas sempre há coisas para comentar. Provavelmente nunca vou fazer um vídeo em que não haja nada para comentar e eu tenha que simplesmente pulá-lo. Então, se quiser ficar por dentro das últimas notícias de IA, curta este vídeo e inscreva-se neste canal. De novo, vou beber da mangueira de incêndio. Vou acompanhar todas as notícias durante a semana e ficar sobrecarregado por vocês, para depois apresentar um vídeo no fim da semana que vai ajudar a entender tudo o que aconteceu no mundo da IA. De novo, se isso é algo que
26:37 interessa a você, curta este vídeo e inscreva-se neste canal. Eu gravo estes vídeos às quintas-feiras, então, se alguma notícia importante sair bem tarde na quinta à noite ou na sexta-feira, provavelmente ela vai aparecer no vídeo da semana que vem. Mas, de novo, é isso que tenho para vocês hoje. Espero que tenham aprendido alguma coisa. Espero que estejam bem por dentro do que aconteceu no mundo da IA. Mas é isso. Obrigado por ficarem por aqui. Obrigado por nerdarem comigo. Espero ver vocês no próximo vídeo. Tchau, tchau.
Transcrição original
[00:09] [sighs] >> Here’s the AI news you probably missed this week. Starting with Claude Duet. This appears to be Anthropic’s answer to ChatGPT’s dots, Meta’s muse, XAI’s Grok bot. This is their personal assistant that not only does things on your behalf, but is also sort of proactive in alerting you to things maybe you should be doing. So, we can see here that it’s proactive. It says, “Morning Nicole. For today, health permit, hiring decisions, Northfield renewal.” So, this doesn’t appear to be a response to somebody prompting it, but the actual agent going
[00:40] and being proactive and reminding you of things that are happening. We can see it then follows up with more details, as well as suggesting something the app can actually take care of for you on your behalf right now. As we can see, it can use tools. It says, “Pulling from point of sale, your online store, CRM, support, payroll, and bank.” And it even presents like a nice clean dashboard. This actually looks better than like what we might get out of dots or something like muse, cuz it’s got this dashboard right in line with the rest of the agent chat. And like I mentioned earlier, similar to dots and muse and
[01:12] some of these other tools, it will reach out to you before you actually ask it to reach out, even going as far as drafting up messages for you to just go ahead and use for things. It can help draft up emails for you. And let’s be honest, it seems like it can do a lot of the stuff that we’ve been getting out of dots and muse and Grok bot and things like that. Now, I would demo this one for you personally, but they didn’t open it up to everybody. If you’re on a pro or max plan, you can join the waitlist and they’re sort of, I guess, picking and choosing who gets off the waitlist, cuz I do know some people have access, but I
[01:44] haven’t been chosen yet to actually try this out, so I can’t demo it for you. They also mentioned that it does handle sensitive information well. It says they’re releasing it with a dedicated classifier and safety system prompt that checks each message and guards against the of sensitive information. So, you don’t have to worry about getting a message that includes your credit card numbers or government IDs or anything like that. As far as what it’ll connect to, it appears to be able to connect to all of the usual suspects, Gmail, Slack messages, QuickBooks, Stripe, Gusto,
[02:16] LinkedIn, DocuSign, HubSpot, Canva, Shopify. So, a lot of the same apps that we’re getting in all of the other agent platforms. I do really like the way Duet looks in their demo video, especially that dashboard. It looks really clean. I’ve been a big fan of using dot and Grokbot so far, so I’m excited to try Duet when I can finally get my hands on it. Unfortunately, I do not have access to it yet. I am on the waitlist. I have been in communication with people over at Anthropic hoping to get my hands on it soon, in which case I’ll do a bit deeper of a dive on it. Now, while Duet
[02:48] was probably the biggest launch of the week, I say launch in air quotes cuz most of us don’t have access yet, the biggest story of the week was probably all of the cybersecurity issues that have happened. And these are like big issues, things that affected a giant percentage of the web. The first one being, well, the PHP issue. If you’re not familiar with PHP, it’s a programming language for the web, and by some accounts, up to 70% of websites use PHP in some capacity. It’s the programming language behind Wikipedia,
[03:18] WordPress, Drupal, DeviantArt, 4chan. A lot of the internet uses PHP. The Verge here actually put together an account of sort of what’s been going on with PHP. But, here’s kind of the big idea behind it. The vulnerability was actually found by OpenAI earlier this week. GPT 5.6 Soul was used to identify the PHP exploit before attackers did. So, they actually got ahead of this one and shared a tool that lets developers check if they’re using potentially vulnerable version of PHP that needs patching. Now,
[03:49] as a result of this, a handful of websites around the internet had to go down for a little bit to patch these vulnerabilities. Now, it’s interesting to note that the vulnerability isn’t a new vulnerability. It’s actually been present in PHP for 20 years. However, actually exploiting it required an exceptionally complex chain of steps at the edge of what human researchers could practically achieve. However, because we now have powerful AI models, it’s much easier to turn that kind of obscure bug into an actual dangerous vulnerability.
[04:20] The CEO of Cloudflare, Matthew Prince, said that in the 10 hours before it was publicly announced, they saw thousands of attempts to exploit this bug. That jumped to tens of thousands in the 45 minutes post the announcement that this vulnerability existed and to hundreds of thousands within 2 hours and millions now. So, as soon as people were made aware that this vulnerability existed, it was getting exploited like crazy. If you’re not familiar with Cloudflare, it’s sort of this layer that lives between like where your site is hosted and the domain name and sort of traffic
[04:52] gets routed through it for let’s just say speed and security reasons. Now, all said and done, this didn’t do a ton of harm other than a bunch of websites around the internet had to temporarily go down to patch this. However, it does kind of show the amount of havoc that AI can wreak on websites and the internet as a whole because this was a bug that’s been around, but just too difficult to exploit and now that we have AI models, they can exploit some of the most difficult bugs we’ve ever seen. The security firm Wiz called this among the
[05:22] most severe vulnerabilities discovered in software history. But, that wasn’t the only big issue we got this week. Also this week, the company Railway got attacked and an unauthorized third party may have accessed encrypted environment variables and some of them obtained the decrypted contents. So, if you’re watching this going, I have no idea what that means. So, let’s start with what Railway is. Railway is sort of an infrastructure layer where people who build web apps sort of host all of the back-end database and information for their web app. Now, when they say they
[05:54] got access to environment variables, environment variables are often like API keys. So, if a company built an app that uses OpenAI or Anthropic as part of the apps infrastructure, they would store their API key for open AI in the environment variables. So, companies that built their apps on top of Railway have a chance that their back-end variables were accessed, and whoever accessed them was able to get access to their API keys to use tools like open AI
[06:25] and Anthropic. And if that’s the case, people or company or entity that exploited it now has access to use your API keys, which would charge you. So, they could go and use open AI or Anthropic tools, and it would charge whoever owns the API key. And because a large volume of online apps use Railway’s infrastructure, that’s potentially a lot of API keys and environment variables that people got access to, which basically means a ton of companies that build apps had to scramble this week to go rotate out
[06:56] their API keys and deactivate old API keys that might have potentially gotten compromised. And all of this is happening because AI is getting better and better at coding and cybersecurity stuff, and we’re just kind of at this tipping point where AI is so good that it is starting to like break the internet. And yeah, where we go from here is kind of scary. Luckily, it does feel like some of these AI companies are trying to stay right on the edge of it
[07:27] and solve these problems like right before they happen, like we saw in the case of the PHP incidents. But in the case of the Railway incidents, the damage is done and it’s leaving a lot of developers scrambling to go and change out API keys in their environment variables. And also, it’s really scary if you’re building stuff online right now because if this happened to Railway, who’s to say it can’t happen to Vercel or some other platform where your web app or website is hosted on. I mean, honestly, it doesn’t feel like much is safe right now, and that’s kind of a
[07:58] scary thought. Another cool update this week is from HyperAgent. If you’re already paying for ChatGPT, you can now use that same subscription to run a whole team of AI agents inside of HyperAgent, which solves the really annoying problem of having to sign up for a million subscriptions across all these different platforms. And if you don’t know what HyperAgent is, it’s basically a platform built around the idea of hiring AI agents that work more like employees. You can create different agents for different jobs like research and content generation, analysis, operations, like whatever. And they have
[08:31] multiple agents and multiple people all working together inside the same room. So now, instead of paying for another separate AI plan just to get started, you can simply sign in with the ChatGPT plan you already have. Or if you want more usage, you can choose one of HyperAgent’s paid plans and get $100 in bonus credits. So check it out at the link in the description box, and thanks so much to HyperAgent for supporting my channel and sponsoring this portion of today’s video. So like I mentioned a couple weeks ago, OpenAI said that over the next 28 days, each day will either
[09:02] ship one thing that is a clear improvement to Codex or work users, or they’ll ship a full reset. The last 2 weeks I’ve given you an update of everything they’ve shipped so far. So I want to continue that this week and let you know what they’ve shipped in the past 7 days. For the most part, it’s been another set of sort of smaller updates and more resets. So on day 12, they made improvements to Codex and work that increased the effective usage you get. They did it by reusing context across sub-agents, keeping context cached longer, and improved request
[09:33] routing that allows them to increase cash hits. Day 13, they didn’t release anything, so they gave a reset. Day 14, they released a new quality of life improvement. You can now edit previous messages within a thread in the desktop app. I didn’t quite understand this, and I think James here said what I was thinking. I’m genuinely confused as to what this means. So a prompt I’ve sent earlier I can go back and change? Does it register like a steer? Tibo said it registers as time travel, but then VB here, who also works at OpenAI, says,
[10:05] “We discard all model outputs and tool calls post the edited message. This makes it so the model doesn’t get confused overall from confounding messages. So, I guess it’s kind of like going back and starting over from a specific point, which I don’t quite understand how that’s much different from just like steering it in a different direction and like forking it off. But, I don’t know. That was the update from day 14. If somebody has a better understanding of what this actually means, feel free to comment below the video. Let me know. Day 15, really nothing of note. So, they gave a
[10:36] reset. Day 16, you can now cache for 12 hours in the API and for logged-in users across Codex and work, we keep cache forever and you don’t have any penalty for coming back to an old conversation or resuming after a few hours and are now guaranteed to hit the cache. And then day 17, you know, the day I’m actually recording this, uh they gave us another reset. So, again, all fairly minor improvements. The cache one from day 16 seems fairly significant. Like, you’re going to use less tokens more often when you’re having conversations
[11:07] because it’s going to refer to the cache more often. That seems pretty cool. Other than that, everything feels very minor. OpenAI rolled out a locked chat feature where you can actually lock your chats behind a pin. So, somebody opens up your computer and opens up your ChatGPT account, you can have chats that aren’t easily accessible unless a pin is entered. I don’t have it in my account yet, but this notification does say locked chats are rolling out gradually. So, if you don’t see it, then it’s probably not available in your account yet. They also announced broader availability for the Decisions API. I
[11:39] feel like this is like the third time they’ve announced the Decisions API. They announced it during Dev Day, and then like a week later they announced that it’s available for more people, and then this week again they made another announcement about it. But, it does say, “Today we’re making the Decisions API generally available. Built with GPT-6 Luna, the Decisions API focuses on Luna’s intelligence on questions with bounded answers.” So, basically, instead of you giving it a prompt and it giving you an output back with a bunch of text, it could either give you an estimated
[12:09] probability of something, it can pick from a selection of choices, or it can give a score of something. A few weeks ago, Jeff was all the rage. This is basically OpenAI’s response to Jeff, and for the third time, they announced it again. >> [laughter] >> All right, let’s move on to some things that we can actually play with right now. The company Ideogram, which has their own proprietary image generation model, they actually rolled out a vector model this week. So, now you can generate clean, editable SVGs. If you head on over to
[12:40] ideogram.ai/models/vector, you can prompt it to generate whatever you want in vector format. Now, vectors are like infinitely scalable, and also, you can edit elements within the vector. So, here’s a vector I did with a wolf howling at the moon. I did get slightly early access, so I’ve been playing with this for a few days, and you can see that I can select individual elements of this and edit this image here. If I prompt it to generate a monkey on roller skates, and about 30 seconds later, we have some vector graphics with monkeys
[13:10] on roller skates here. We did get a couple wonky ones with some extra legs, so maybe vector generation isn’t quite as dialed in yet as image generation, but luckily, we got four to choose from, and two out of the four look pretty solid. And once again, because it’s a vector, I can select different elements in this and edit it however we want, and I can download it directly as an SVG as well. The company Eleven Labs introduced Chimera this week, which is a tool that combines Seedance 2.5 and Eleven Labs
[13:41] V4, so you can give it an image and an audio file, and then it will sync the audio with the image and make it look like the person in the image was speaking whatever was said in the audio file. I went ahead and gave it a try here. I uploaded an image of myself, and then I had Eleven Labs generate some audio for me, so this does not sound like me, and this is what it generated. >> Just settle. You do not need to force yourself to relax. You do not need to get to relax. You do not need to get rid of every nervous feeling. Simply notice
[14:12] that you are here, breathing, listening, and preparing. >> You get the idea, but the funny thing is I gave it a picture of me standing there, and it didn’t actually use that image even once. It put me on a stool, it did a close-up of my face, and at one point it has me looking at myself in a mirror. So, never actually using the original image I gave. You can give it a prompt to steer, I think what the visuals look like. I left it blank to see what would happen, and you see what it gave. It gave multiple shots, it wasn’t just one shot all the way through. But, I do think that the lip
[14:43] sync is kind of decent. Last week I was looking at a different lip sync tool that didn’t really look that close at all, and I actually think we’re getting closer and closer. I did find like a little bit of like bugginess and issues with the UI. Like, when I open this up and click on text to speech, if I give it a ton of text here, the like submit button goes off the screen, so I can’t even submit down here. I mean, I could kind of hover over it and submit it, but it’s like way off the screen, and for whatever reason the scroll is not working, so I can’t scroll down to see it. If I start selecting text and drag,
[15:15] it eventually lets me see it by like dragging text down here, and now I can click generate speech. And if I do generate this speech, it’ll do the whole process of generating it, but then when I click use speech, it’ll give me an error saying combined reference audio is 120 seconds, and it can’t exceed 30 seconds. Like, isn’t that something that it should tell me when I put in the text? Like, I pasted text and it should warn me, this is going to be too long for what you’re trying to generate, it can only be 30 seconds. know, it seems like a bit of a miss with the UI here,
[15:46] but I do think that the voice syncing is fairly impressive. Although, it is kind of weird that it didn’t use my original image and add me speaking from that position, but I guess that’s more of a C Dance 2.5 issue. All right, I’ve covered a handful of things. I’ve probably talked about the biggest stories already, but there is quite a few smaller stories that I want to break down for you. So, let’s break them all down in a rapid fire. >> [music] >> Let’s start with Perplexity here. They just released two of their own decision
[16:18] models. I just talked about decision models earlier. If you seen anything about Jev or you understand what’s going on with the open AI decision models, well, now Perplexity has their own version of decision models and they just open-sourced them. They have a 4-billion parameter model and a 27-billion parameter model and according to this benchmark chart here, the 4-billion parameter model is all the way to the left telling me that it’s the best at whatever this benchmark is showing here. While we’re on the topic of Perplexity, their Perplexity computer model can now
[16:50] run fully on a Mac. So, Perplexity computer is kind of like Perplexity’s version of like an open claw or a Hermes or their own agentic software that can go and do a bunch of tasks for you and use tools and things like that. And in the past, the computer aspect was on cloud computers that Perplexity owned. Well, now you can fully run Perplexity computer on your own Mac if you want. It looks like it runs quite 3.6 and they recommend 36 GB of unified memory or
[17:21] more to be able to run this. I find this whole narrative to be really interesting right now. Websites are closing their doors to AI agents. So, OpenAI, Meta, and Google want AI agents to go do everything for you. Recently, Amazon stopped letting agents do shopping on your behalf on Amazon and they’re starting to block these agents from being able to do that for you. Well, this week more companies are starting to block agents. Yelp and Delta Airlines and JP Morgan Chase and Charles Schwab, cars.com, Amtrak, like more and more
[17:53] sites are starting to say we only want humans operating on our site. We don’t want agents coming and doing the work for them. Now, the reason I find this narrative to be really, really interesting is because companies are going to have to start to decide whether they want to build their sites to be agent-friendly or to be only for humans. And there’s an issue because as more and more humans start to use agents, they’re going to want to direct their agents to the websites that are friendly to agents, obviously. However, these
[18:25] companies, they’re worried about agents being able to use their website because now it moves them a sort of layer down the shopping stack, right? Now, instead of somebody going to Amazon to buy something, they’re going to ChatGPT.com or Duet or Muse and telling it to go buy something for them, their agent is going over to Amazon and then making the purchase on Amazon. Now, if an agent can go to Amazon and make the purchase, Amazon’s worry is, “Okay, now that I’m
[18:55] further down that stack of who’s doing the shopping, we’re more interchangeable.” In the past, when somebody wants to buy something, they go to Amazon, they look it up, they buy it. If agents are doing the shopping now, you might say, “Go buy me this thing.” And your agent is going to go and find the website that maybe sells it the cheapest or maybe find the website that gets the delivery to you the fastest or whatever your criteria is. And now your number one source to go buy the thing is not “I’m going to go straight to Amazon.” It’s “I’m going to go to my
[19:25] agent and have my agent buy the thing for me.” And Amazon is now interchangeable. Now, Shopify has embraced this. Shopify has gone and said, “All of our sites are agent friendly.” So, now if you tell your agent to go find me this thing and buy it, it’s much more likely to go to a Shopify-based store because Shopify is allowing the agents to go and shop on it. Where Amazon is not. So, it’s just going to be this really interesting dynamic where these big companies are going to have to decide, “Do we want to be human first? Do we want to be agent
[19:56] first? If we do go agent first, then now we’re interchangeable. But if we go human first, then the agents aren’t going to be using our site on people’s behalves, so we might lose sales that way.” And I don’t know how this is going to play out. I just think it’s this really interesting thing. I think a lot of sites are going to have to eventually allow agents to do the shopping cuz if more and more people are allowing their agents to do their shopping on their behalf, they’re going to miss out on a lot of sales if they keep on blocking agents. I don’t know how it plays out. I
[20:26] just think it’s fascinating. Anyway, since I just mentioned Yelp, I’ll mention this right here as well. Yelp can now call on your behalf to check wait times at a restaurant. So, although Yelp is blocking other agents from using it, Yelp is trying to be your restaurant agent of choice. So, you can’t go use dot to do stuff on Yelp for you, but if you go and use Yelp directly, you can now have Yelp call a restaurant for you and check on wait times and ask about menu items and things like that on your
[20:57] behalf. The company Mistral released a new AI voice agent called Voxtrot 3 this week and it actually looks pretty impressive. >> We are two humans speaking with one voice agent. >> So, which one of us is speaking right now? >> Arthur, Kayla introduced herself first. >> Cool, so you’re doing more than just listening and generating speech. >> Yep, there are three stages streaming at once. >> And the context also shapes how I speak. >> May I interrupt you there? >> Um, you just did. >> Cool, so you can handle an interruption
[21:27] and are you still following us? >> Yep, I’m diarizing you in real time. The reasoning model is closely following what’s being shared as we’re talking. >> So, you get the idea. It can listen to multiple people speaking to it, know which one is speaking, it can do tool calls on your behalf, you can interrupt it and it just seems like a really impressive voice agent model. All right, moving on to image generation models, the company Canva released their first image generation model. Now, full disclosure, I do have a small investment in Canva, but that never affects what I
[21:59] say editorially about any of the companies I talk about. This new model is called Canva Craft and if you remember a couple years ago, Canva actually acquired Leonardo AI which had their own proprietary image generation models and it turns out this new model, they used the same research team to help them create this new model. If you’re a user of Canva, it is available inside of the Canva platform as well as inside the Canva API. So, inside of Canva, if you want to use it, click on the Dream Lab tab, and you’ll be using their new image
[22:29] generation model. Since we’re talking about image generation models, let’s jump over to the rumor mill for just a second here. This testing catalog website seems to believe that we’re going to get a GPT image 3 model pretty soon. This Aurora Red Alpha model has been popping up on some of these leaderboard comparison sites, and names like Aurora Red Alpha, Aurora Green Alpha, and Aurora Blue Alpha have been noticed inside of OpenAI’s API. So, this isn’t actually confirmation that we’re getting a new AI image model from OpenAI
[23:01] really soon. But, usually when we get leaks like this, it’s usually not too far behind. So, don’t be surprised within the next couple of weeks we get a brand new image model coming out of OpenAI. This week, Zoom introduced an AI tool to give enterprises greater visibility over AI activity. Basically, it’s for deepfake risk detection. So, if you’re on a Zoom call, it will help you determine if you’re actually talking to a human or being deepfaked. I don’t know, it’s kind of been a couple of years now, but there was a lot of stories where companies were getting scammed out of a lot of money because
[23:31] like a CEO of a company was being deepfaked and was asking for money to get transferred to certain accounts, and the employees did the transfer thinking they were actually doing it for their boss, but it was really a deepfake on the livestream with them. So, it seems like new suites of tools are popping up to help prevent that from happening. Microsoft put out this article this week as well called Building Medical Super Intelligence. They have a model called 1.7 times more accurate than physicians. They also claim it’s more than twice as
[24:02] accurate as physicians using textbooks and the internet, and nearly four times as accurate when they diagnose without those resources. So, some pretty interesting research coming out of Microsoft with a model that, who knows, may end up in your doctor’s office soon to help diagnose, or at least like double-check the diagnoses of the doctors you’re dealing with. And finally, let’s end on robots cuz this video has been going viral. Unitree put out this video for the X2H Kung Fu
[24:32] Legend Guardian. When we watch this video, we can actually see this Unitree H2 unit doing like flips over a car. We can see it actually kicking and sort of denting a car, beating up the front hood of a car, jumping from 4 m high. They even put like fireworks on its feet and made it do flips for some reason. Here it is actually protecting somebody from an intruder and stepping between them. And then there’s some interesting clips here of the robot seeing somebody trapped under a car and then lifting the car up. And then in probably the
[25:03] funniest one of them all, this one sees a car coming at a kid and then thrashes the kid down. The funniest thing about that to me is right here. You see the car coming and the car is going in like ultra slow motion, but then the robot pushes it over way harder than the car would have even hit it. And then when you look at this lifting the car up, a lot of people have issue with them lifting the plastic bumper here because that bumper would most likely pop off of the car. So, a lot of people are thinking because most of the car is off the seat here, there’s something else helping lift the car here. And to be
[25:35] fair, I don’t think any of what this video is showing where it’s doing the flips and the kicking and stuff, I don’t think it’s doing any of it autonomously. I think there’s somebody actually controlling it and it’s more of a demo showing what the robot’s sort of mechanical capabilities are. But I don’t believe for a second that it’s actually lifting all the weight of this car here. And it pushing this kid out of the way to me is just hilarious cuz that looks way more damaging than what the car would have done. But uh yeah, that’s an interesting video that’s been going viral this week. But that’s what I got for you this week. It was actually
[26:06] another kind of slower week this week. The biggest stories were duet and a lot of those cybersecurity issues that were popping up. But there’s always stuff to talk about. I’ll probably never have a video where there’s nothing to talk about this week and I just have to skip it. So, if you want to stay looped in on all the latest AI news, make sure you like this video and subscribe to this channel. Again, I’ll drink from the fire hose. I’ll keep up with all the news all week and stay overwhelmed for you and then give you one video at the end of the week that will help you understand everything that happened in the world of AI. Again, if that’s something that
[26:37] interests you, make sure you like this video, subscribe to this channel. I do record these on Thursday, so if any big news came out really late Thursday night or on Friday, it’ll probably end up in next week’s video. But again, that’s what I got for you today. Hopefully, you learned something. Hopefully, you feel really looped in on what happened in the world of AI. But, that’s what I got. Thanks for hanging out. Thanks for nerding out. Hopefully, I’ll see you in the next one. Bye-bye.