Agente Hermes: novidades que deixaram o app 10x melhor!

Autoria: Julio | Lucrar com IA · Assistir no YouTube

Vídeo de autoria do canal indicado, não da IANIA; todos os direitos pertencem ao criador. Transcrição, resumo e tradução gerados automaticamente; o conteúdo no idioma original é preservado na versão em idioma original.

Idioma original: inglês

Vídeo original: Agente Hermes: NOVIDADES que deixaram o App 10x MELHOR! · Canal: Julio | Lucrar com IA · 11:24 · Assistir no YouTube

Tópicos: Agentes de IA, Aplicações empresariais de IA, Automação de tarefas e workflows, Modelos locais e open source, Modelos multimodais

Resumo

O vídeo apresenta novidades e recursos do app Hermes, começando pelo botscreen, que permite acompanhar ao vivo as ações do agent e assumir o controle quando necessário. Também mostra opções de layout mais simples, uma lista de connectors disponíveis e a configuração de modelos locais com um clique. Por fim, demonstra o recurso de ativação por voz com a wake word “Hey Hermes”.

Pontos-chave

O botscreen permite ver o agent abrir abas, pesquisar e executar comandos no terminal em tempo real.
Durante o botscreen, é possível assumir o controle e depois devolvê-lo ao agent para que ele continue o trabalho.
O app oferece modos de layout simples e avançado, com diferentes posições para chat, sidebar, terminal e preview.
A seção de capabilities apresenta connectors que podem ser instalados para integrar serviços como Airtable, Asana, Notion e Supabase.
O app pode analisar o hardware e recomendar, baixar e configurar modelos locais.
Também é possível procurar modelos disponíveis ou adicionar um arquivo de modelo baixado.
O recurso de voz permite ativar o app com a wake word “Hey Hermes” e conversar usando o microfone.

Capítulos

Início	Capítulo	Resumo
00:00	Acompanhamento ao vivo com botscreen	O vídeo demonstra como visualizar as ações do agent em tempo real, assumir o controle da tela e depois devolver o comando.
04:39	Layouts e connectors	O apresentador mostra os modos simples e avançado de layout e explora os connectors disponíveis no app.
08:15	Configuração de modelos locais	O app pode avaliar o hardware, sugerir modelos locais e permitir que o usuário procure ou adicione modelos.
09:49	Comandos de voz com Hey Hermes	O vídeo demonstra a ativação por voz e uma busca feita após dizer a wake word “Hey Hermes”.

Citações

A capacidade de acompanhar os agents trabalhando. — 00:31

Ele identificou o controle e devolveu para o agent. — 03:06

Ele lê todo o seu hardware, entende sua configuração e escolhe o melhor modelo para sua máquina. — 08:15

Hey Hermes, pesquise quando será a data de lançamento do novo filme dos Vingadores. — 10:21

Conceitos e entidades

Hermes (ferramenta): Agent e aplicativo de desktop apresentados no vídeo, com recursos de acompanhamento visual, connectors e modelos locais.
Nous Research (empresa): Equipe creditada no vídeo pelo lançamento do recurso botscreen.
botscreen (ferramenta): Recurso que exibe ao vivo a tela do agent enquanto ele navega e executa tarefas.
LM Studio (ferramenta): Aplicativo citado como comparação para instalar e usar modelos locais.
Airtable (ferramenta): Serviço listado entre os connectors disponíveis no app Hermes.
Asana (ferramenta): Serviço listado entre os connectors disponíveis no app Hermes.
Notion (ferramenta): Serviço listado entre os connectors disponíveis no app Hermes.
Supabase (ferramenta): Serviço listado entre os connectors disponíveis no app Hermes.

Tradução completa (pt-BR)

00:00 Como vocês gostaram muito do último vídeo em que trouxe as atualizações do app para desktop Hermes, adivinhem o que vamos fazer neste vídeo? Vou trazer as últimas atualizações de novo, porque eles não param de fazer melhorias tanto no agent Hermes quanto no app. Vamos explorar rapidamente as principais mudanças que aconteceram nos últimos dias, nesta última semana. E uma delas, na verdade, vai mudar completamente a forma como vocês lidam e trabalham com seus subagents dentro do Hermes. Começando com a

00:31 primeira atualização, que, na minha opinião, é a maior e melhor de todas, então preparem-se. No dia 23 de setembro, ou seja, dois dias atrás, o pessoal da NOS Research lançou esta nova atualização, que permite assistir aos agents trabalhando. Eu já tinha mostrado aqui no canal uma opção para visualizar o trabalho deles pela caixa ao lado do compositor, onde vocês escrevem mensagens e prompts, para ver o que os subagents estão fazendo e corrigir o rumo ou até interromper o trabalho deles. Vou deixar esse

01:02 vídeo na tela final, mas essa função é limitada em comparação com esta que vamos ver agora, que permite literalmente assistir ao agent abrindo abas, fazendo pesquisas e executando comandos no terminal. Vamos ao app para acessar esta nova função chamada bot screen. Aqui no app Hermes, obviamente, vocês precisam atualizar tanto o aplicativo quanto o Hermes para poder acessar o que vou mostrar agora. No app, vão até a aba Bots. Em Bots, escolham qualquer um deles.

01:34 Clique com o botão direito e clique aqui em Abrir tela. Na primeira vez que clicarem, talvez apareça uma solicitação para instalar um pacote específico. Autorizem e continuem normalmente. Esta é a tela, certo? É a tela do nosso bot aqui, Jarvis. Agora vamos pedir que ele faça uma pesquisa básica e abra nosso canal, só para vocês verem isso funcionando na prática. O prompt que vou pedir é o seguinte: pesquise Team G3 da Tesla e depois abra meu canal do YouTube “Lucrar com faz tudo” usando o novo recurso de bot screen, porque quero assistir ao seu trabalho.

02:04 Vamos enviar esse prompt e, aqui ao lado, já aparece — olha, ele já abre a telinha dele em tempo real para podermos acompanhar. Vamos conferir aqui para ver se vai abrir mesmo. Depois que abrir a aba, vamos para a visualização expandida. Abriu. Olá. Vamos dar uma olhada. Ele já está pesquisando no Google. Ah, acesso negado. De qualquer forma, deixe ele pesquisar. Aqui está, olha. Ele abriu o site Teslaat.com.

02:35 Então, ele está fazendo a pesquisa que pedimos. Podemos acompanhar nesta tela maior ou, se eu voltar, também posso ver nesta tela menor aqui ao lado. Podemos até vir aqui, olha, e assumir o controle. Isso significa que vocês podem assumir o controle se perceberem que ele está fazendo algo meio estranho, certo? Ele acabou de abrir outro site, pesquisando por Optimus Gen 3. Agora está abrindo outro, Humanoid Robotics. Deixe-me ver se consigo assumir o controle, só para testar.

03:06 Ele continua fazendo a pesquisa. Se eu clicar em Assumir o controle agora, tudo fica vermelho, estão vendo? E posso clicar aqui, olha, e excluir coisas e tal. De qualquer forma, vou devolver o controle para ver o que acontece. Opa, deixa eu assumir o controle e fechar isto, já que acabei deixando aberto um anúncio. Agora vamos ver se ele continua depois de eu pausar e interromper aqui; olha, ele identificou o controle e o devolveu ao agent. Legal. Incrível, incrível. Então, ele executa um comando para

03:38 esperar 20 segundos e depois continua verificando se vocês devolveram o controle ou não. Ele está abrindo nosso canal agora. Legal. E, quando confirma que vocês devolveram o controle, ele prossegue. Excelente. Então, ele conseguiu abrir tudo. Conseguimos fazer isso funcionar. Tive que executar isso umas três vezes, pessoal, antes de ele entender o que eu estava dizendo, porque o app para desktop já tem uma prévia interna do navegador, que permite assistir e acompanhar o que ele está fazendo. Então, ele ficava um pouco confuso; não entendia de primeira o que eu queria dizer com a nova tela do bot, esse novo recurso. Até que voltei e forneci o link para este pull request da equipe da NS Research, que explica todo esse novo recurso e como ele funciona. Aí ele entendeu e criou uma skill com base nisso. Agora, sempre que menciono bot screen no meu prompt, ele usa especificamente esse recurso em vez de

04:08 abrir a tela aqui, a prévia do navegador, ou usar outra skill ou navegar nos bastidores sem mostrar nada aqui.

04:39 A segunda atualização é esta aqui. É o modo simples do app para desktop, com uma interface mais limpa, sem tantas abas para quem tem mais conhecimentos técnicos ou trabalha com desenvolvimento. Vamos voltar ao app e ver como funciona. De volta ao app, para ativar esta opção mais simples e limpa,

05:10 basta clicar neste botão aqui, Editor de layout. Ao clicar, aparece um modo simples para a interface. Eu estava usando o modo avançado, mas, na verdade, a versão básica do avançado. Basicamente, era isso que eu estava usando. Com esta configuração, tenho a barra lateral aqui, o chat no meio e a prévia. Quando ele abre o navegador, ele aparece bem aqui. O chat fica nesta área e o terminal fica recolhido aqui embaixo.

05:40 Na opção padrão, o terminal sai daqui e vai para lá, o que, na verdade, acho muito melhor. Eu estava usando a opção básica, mas tudo bem. O foco no terminal fica aqui embaixo, e temos os arquivos aqui e a prévia aqui. Legal. O painel do terminal. O terminal fica aqui embaixo. Os arquivos ficam aqui, junto com a barra lateral e o chat. Por último, temos o quad, que também faz parte do modo avançado: a prévia fica aqui embaixo, junto com o terminal, o chat e a barra lateral. No modo simples, há apenas estas duas

06:11 opções: barra lateral à esquerda, ou seja, a barra lateral aqui com nossa sessão, e o chat. A outra opção coloca a barra lateral deste lado. Esta é a opção mais limpa, se quiserem usá-la. Vou voltar ao modo avançado e talvez manter a opção padrão aqui, que não era a que eu estava usando. Vou clicar em Concluído. Quando confirmamos clicando em Concluído, fica assim, com o terminal aparecendo aqui embaixo. Se eu tiver arquivos ou estiver trabalhando em um projeto, eles vão aparecer aqui. E a prévia também ficará neste canto.

06:42 Ela se expande ou recolhe, dependendo do uso. Para a próxima atualização, vamos conferir juntos diretamente no app, porque, para ser sincero, não vi ninguém falar sobre o que vou mostrar agora. Talvez tenha passado despercebido, talvez não seja tão relevante. Também pode ser que eu não tenha prestado atenção suficiente nesta aba que vou mostrar agora. Mas, de qualquer forma, vamos conferir juntos. Em Recursos, não tínhamos este menu de conectores. O que havia aqui era MCP, que, bem, é praticamente a mesma coisa, certo? Só mudou o nome, mas não me lembro de ter visto isto aqui que vocês estão vendo agora. Vários conectores já estão praticamente prontos, só esperando vocês instalarem. Temos Airtable, Asana e várias opções. Canva, ClickUp, ah, Confluence Cloud, do Confluence, acho que é isso. Cloudinary, Figma, Dropbox, Grafana, GitLab, Hugging Face, Indeed. Monday.com também, certo?

07:13 Como o ClickUp, para gerenciamento de equipes, n8n, Notion, Unreal Engine, Vercel. Cara, tem um monte de coisas aqui, WordPress, que não sei se é isso… Supabase, olha aqui, Stripe, Supabase, Square. Cara, não sei se eu não tinha prestado atenção nisso antes, mas não me lembro de haver todas essas opções praticamente prontas para conectar e instalar. Comentem abaixo se vocês já tinham notado esta aba, se ela realmente já era assim ou se estou imaginando coisas, mas, sinceramente, não me lembro. Isso é novidade para mim. A quarta

07:43 Como o ClickUp para gerenciamento de equipes, o n8n, o Notion, o Unreal Engine, o Vercel. Cara, tem um monte de coisas aqui: WordPress, que eu não sei se é isso… Supabase, olha aqui, Stripe, Supabase, Square. Cara, não sei se eu não tinha prestado atenção nisso antes, mas não me lembro de todas essas opções já estarem meio prontas ali para você conectar e instalar. Comente abaixo se você já tinha notado essa aba, se ela era mesmo assim ou se estou imaginando coisas, mas, sinceramente, não me lembro. Isso é novidade para mim. O quarto

08:15 atualização, que não é tão recente, mas não falei sobre ela aqui no canal para vocês, então vou falar mesmo assim, porque não uso modelos locais no momento. Isso pode mudar, mas, por enquanto, não estou usando nenhum modelo local. Agora temos uma função no aplicativo desktop do Hermes que faz toda a configuração de modelos locais para você com apenas um clique. Como isso funciona? Ele lê todo o seu hardware, entende a sua configuração, escolhe o melhor modelo para a sua máquina e depois baixa e configura tudo para

08:46 você. É parecido com o que você encontra no LM Studio e em outros aplicativos de gerenciamento, instalação e uso de modelos locais. No aplicativo Hermes, você acessa as configurações e clica aqui em providers. Dentro de providers, você terá a opção de executar modelos localmente, ou seja, executar o modelo localmente na sua máquina. Ele já está mostrando as opções disponíveis para mim aqui. Veja só, o que eu teria disponível: todos são grandes demais para a minha máquina.

09:18 Teríamos a opção de procurar modelos aqui, ou seja, pesquisar modelos, e também poderíamos, rolando para baixo, adicionar um arquivo, certo? Você baixa o modelo e o adiciona aqui para usar. Quando clicamos, veja, em procurar modelos ou navegamos para encontrar modelos, temos esta opção aqui, ao rolar para baixo, para pesquisar um modelo. Pesquisei Llama aqui, que é um modelo novo que foi lançado. Ele não é um LLM, é um concorrente do Jeff, e, teoricamente, o Llama funcionaria no meu computador. O próximo que quero compartilhar

09:49 com vocês não é exatamente uma atualização, mas um recurso que fica meio escondido aqui dentro do aplicativo Hermes, que talvez vocês conheçam ou talvez nunca tenham ouvido falar. Sabe quando você diz aquela palavrinha para chamar a Siri e ela começa a escutar você e faz o que pediu? Ou, pelo menos, tenta. Você pode fazer a mesma coisa aqui com o aplicativo Hermes. A função está escondida aqui, olha, neste microfone. Ao lado, temos o ícone do alto-falante, que serve para o Hermes responder em voz alta, isto é, ler as respostas para você. E aqui temos um ícone de orelha,

10:21 que serve justamente para ele poder ouvir e detectar quando você diz a palavra de ativação, certo? Seria “Hey Hermes”. Vamos fazer um teste para ver se funciona. Hey Hermes, pesquise para mim quando será a data de lançamento do novo filme dos Vingadores. Avengers. Legal. Então ele fica rodando. Você viu que eu apertei

10:53 em encerrar, mas ele continua com o microfone aberto, mais ou menos, esperando você falar, porque você pode ter essa conversa com ele. Ele conseguiu entender. Às vezes, quando falo em português, ele não transcreve corretamente. Não sei qual modelo está sendo usado para fazer isso, se é o próprio DeepSeek ou se há algum outro modelo nos bastidores. Mas desta vez, e em algumas outras, ele conseguiu entender o que eu queria em português. Ele transcreve para o inglês, faz a pesquisa e retorna o resultado para você. É isso neste vídeo, pessoal. Contem nos comentários qual dessas

11:24 novas atualizações ou recursos que mostrei vai fazer mais diferença para vocês na rotina diária usando o agent Hermes, certo? Deixem também um like se gostaram do conteúdo. Inscrevam-se no nosso canal para continuar recebendo notificações quando publicarmos vídeos novos e também para nos ajudar, dando aquele impulso para continuarmos produzindo conteúdo para vocês. E vou deixar no card final um link para outro vídeo sobre atualizações que mencionei logo no início deste vídeo, para vocês assistirem caso tenham perdido. Então cliquem aqui e nos vemos por lá. Até mais.

Transcrição original

[00:00] Since you really liked the last video I brought about the Hermes desktop app updates, guess what we’re going to do in this video? I’m bringing the latest updates again, because they won’t stop making improvements to both the Herm agent and the app. Let’s quickly explore the main changes that have happened in these last few days, in this last week. And one of them, in fact, will completely change the way you handle and work with your subagents inside Hermes. Starting here with the

[00:31] first update, which in my opinion is the biggest and best of them all, so hold onto your seat. On September 23rd, that is, two days ago, the folks at NOS Research released this new update, which is the ability to watch the agents working. I had already shown here on the channel an option for you to view it through the box near the composer, where you type messages and prompts, to see what the subagents are doing and make course corrections or even stop their work. I’ll leave that

[01:02] video linked in the end card, but that function is limited compared to this one we’re about to see, which is literally watching the agent opening tabs, doing searches, and executing commands in its terminal. Let’s go to the app to access this new function called botscreen. Here in the Hermes app, obviously you need to update, right, both the application and your Herms to be able to access what I’m going to show you now. And here in the app you go to the bots tab. And here in bots you choose any one of them.

[01:34] Right-click and click here, on open screen. When you click for the first time, it might ask you to install a specific package. You authorize it and go on with your life. This is the screen, right? It’s the screen of our bot here, Jarvis. We are now going to request a basic prompt for it to do a search and open our channel, just so you can see this working in practice. The prompt I will request is the following: search for Tesla’s Team G3 and then open my YouTube channel ’ Lucrar com faz tudo’ using the new bot

[02:04] screen feature because I want to watch you working. Let me know when you’re finished. We’ll fire off this prompt and here on the side it already appears , look, it already opens his little screen in live mode for us to be able to follow along. Let’s look here to verify if it will actually open. And after it opens the tab here, we’ll go to the expanded view. It opened. Hey there. Let’s take a look here. It’s already searching on Google. Oh, access denied. Anyway, let it search. Here it is, look. It opened the Teslaat.com

[02:35] site. So, we’re doing the search we requested of it. We can follow along on this larger screen, or if I go back, I can also view it on this smaller screen here on the side. We can even come here , look, and perform a takeover, meaning you can take control if you notice it doing something a bit strange, right? It just opened another site searching for Optimus Gen 3. Now opening another one, Humanoid Robotics. Let me see if I can perform a takeover, just to test it

[03:06] . It continues doing its research. If I click takeover now, everything turns red, see? And I can click here, look, and delete things and such. Anyway, let me just hand it back to see what happens. Whoops, let me take over and close this, since I ended up leaving it on an ad. Now, let’s see if it continues after I paused and interrupted it here; look, it identified the control and handed it back to the agent. Cool. Awesome, awesome. So it executes a command to

[03:38] sleep for 20 seconds, and then it keeps checking if you’ve returned control to it or not. It’s opening our channel now . Nice. And if it verifies that you’ve returned control to it, it proceeds. Top notch. So it managed to open everything. We were able to execute this successfully. I had to run this about three times, guys, before it understood what I was saying, because the desktop app already has an internal browser preview where it opens up for

[04:08] you to watch and track what it’s doing. So it kept getting a bit confused; it didn’t understand right away what I meant by the new bot screen, that new feature. Until I came back here and provided the link to this pull request from the NS Research team, which explains this whole new feature and how it works. And then it understood and created a skill based on that. Every time I mention bot screen in my prompt now, it uses specifically this instead

[04:39] of opening the screen here, the browser preview, or using another skill or navigating behind the scenes without showing anything here. The second update is this one right here. It’s the simple mode for the desktop app, where you get a cleaner interface, without so many tabs for those who are more technical or work with development. Let’s go back to the app and see how it works. Back in the app, to enable this

[05:10] simpler and cleaner option, just click this button here, layout editor. And when you click, a simple mode for your interface now appears. I was using advanced mode, but actually the basic version of advanced. Basically, that’s what I was using. And with this setup, I have the sidebar here, the chat in the middle, and the preview. When it opens the browser, it will open it right here. And I have the chat in this area and the terminal tucked away down

[05:40] here. In the default option, it removes the terminal from here and moves it over there, which I think is much better, actually. I was using the basic one, but that’s fine. Terminal focus comes down here, and we have files here and the preview here. Nice. Terminal deck. The terminal stays down here. The files are here, sidebar and the chat. Lastly, quad, which is also part of advanced, we have the preview down here , terminal, chat, and the sidebar. In simple mode, there are only these two

[06:11] options, sidebar left, meaning the sidebar here with our session, and the chat. The other option is with the sidebar on this side. This is the cleanest option if you want to use it. I’ll go back to advanced and maybe keep the default option here, which wasn’t what I was using. Let me hit done. And when we confirm with done, it looks like this, with the terminal appearing down here. If I have any files or am working on a project, it will appear here. And the preview will also be in

[06:42] this corner. It obviously expands or retracts according to use. For the next update, we’ll check it out together directly in the app, because to be honest, I haven’t seen them say anything about what I’m going to show now. Maybe because it went unnoticed, maybe because it’s not that relevant. It could also be that I didn’t pay enough attention to this tab I’m going to show you now. But anyway, let’s check it out together. Coming over here to capabilities, we didn’t have this connectors menu. What was here was mp, which, well, is practically the same

[07:13] thing, right? Only the name changed, but I don’t remember having this here that you’re seeing now. Several connectors are already kind of pre-ready there, just for you to install. We have Airtable, we have Asana here, a bunch of options. Canva, ClickUp, oh, Confluence Cloud here from Confluence, I think that’s it. Cloudinary, Figma, Dropbox, Grafana, GitLab, Hugging Face, Indeed. Monday.com, the tool as well, right?

[07:43] Like ClickUp for team management there, n8n, Notion, Unreal Engine, Vercel. Man , there’s a bunch of things here, WordPress, which I don’t know if that’s Supabase, look here, Stripe, Supabase, Square. Man, I don’t know if I hadn’t paid attention to this before, but I don’t remember having all these options kind of pre-ready there for you to connect and install. Comment below if you had already noticed this tab, if it was actually like this, or if I’m imagining things, but I honestly don’t remember. This is new to me. The fourth

[08:15] update, which isn’t that recent, but I didn’t cover it here on the channel for you, so I’ll talk about it anyway because I don’t run local models at the moment; that might change, but right now I’m not running any local models. We now have the function inside the Hermes desktop application for it to do the whole local model setup for you with just one click. How does this work ? It reads all your hardware, understands your setup, chooses the best model for your machine, then downloads and configures everything for

[08:46] you. Similar to what you would have in LM Studio and other management, installation, and usage applications for local models. Here in the Hermes application, you go to settings, click right here on providers. And inside providers, you will have the option run models locally, meaning, run the model locally here on your machine. It’s already giving me the available options here, see, of what I would have and all of them are too large for my machine.

[09:18] We would have the option to browse here , meaning, search for models, and we could also, by scrolling down, add a file, right? You download the model and add it here for you to use. When we click, see, on browse models or navigate, right, to find models, we have it here scrolling down with this option for us to search for a model. I searched here for Llama, which is a new model that came out, it’s not an LLM, it’s a rival to Jeff, and Llama theoretically would work here for my computer. The next one I want to share

[09:49] with you isn’t exactly an update, but a feature that’s kind of hidden here inside the Hermes app, which you might know, or you might have never heard of. You know when you say that little word to call your Siri and she starts listening to you and does it? Isn’t it what you asked her for? Or at least tries to. You can do the same thing here with the Hermes app. The function is hidden here, look, at this little microphone, where we have the speaker icon, which is for Hermes to respond out loud, that is, read the answers to you. And here we have an ear icon,

[10:21] which is precisely for it to be able to hear, to pick up when you say the wake word, right, which would be Hey Hermes. Let’s do a test here to see if it works . Hey Hermes, search for me when the release date for the new Avengers movie will be. Avengers. Cool. So it stays there running. You saw that I pressed

[10:53] end, but it stays kind of with the microphone open waiting for you to speak, because you can have this conversation here with it. It managed to understand. Sometimes when I speak Portuguese, it doesn’t transcribe correctly. I don’t know which model is being used to do this, if it’s DeepSeek itself or if there’s some other model behind the scenes. But this time and a few others it actually managed to understand what I wanted in Portuguese. It transcribes to English, performs the search, and returns the result to you. That’s it for this video, everyone. Tell me in the comments which of these

[11:24] new updates or features I showed will make the most difference for you in your daily routine using the Hermes agent, right? Leave a like as well if you enjoyed the content. Subscribe to our channel to keep receiving notifications when we upload new videos and also to help us out, giving us a boost to keep producing content for you . And I’ll leave linked here in the end card another updates video that I mentioned at the very beginning of this video for you to watch in case you missed it. So click here and I’ll see you there. See you later.