Pular para o conteúdo
Julian Pscheid ·

Arquivos e fotos como contexto na Hedy, com EmbeddingGemma 2

A Hedy 3.15 usa seus documentos e fotos no chat, nos resumos e nas sugestões ao vivo. Os originais nunca saem do dispositivo, e o EmbeddingGemma 2 os indexa ali mesmo.

Vista por cima do ombro de uma mulher que fotografa com seu iPhone um quadro branco com notas de reunião, com o quadro enquadrado na tela, enquanto dois colegas observam da mesa de conferência
Resposta rápida A Hedy 3.15 pode usar seus documentos e fotos como contexto, e seus arquivos originais nunca saem do seu dispositivo. Anexe uma lista de preços, um resumo de projeto ou um currículo a um contexto de sessão, ou fotografe um quadro branco durante uma reunião, e a Hedy usa esse texto nas respostas do chat, nos resumos, nas notas detalhadas e nas sugestões ao vivo. A Hedy lê e indexa cada arquivo no seu telefone ou computador, usando o EmbeddingGemma 2 do Google para encontrar os trechos que se encaixam na conversa. Faz parte do Hedy Pro e do Hedy Team.

Até agora, a Hedy sabia o que ouvia e o que você digitava em um contexto. Todo o resto ficava nos seus arquivos: a lista de preços que você consulta, o resumo que o cliente enviou, o slide para o qual todos estavam apontando. Com a Hedy 3.15, você pode adicionar esses documentos e fotos, e a Hedy os lê junto com a conversa.

Esses arquivos costumam conter algumas das suas informações mais sensíveis, como contratos, preços, currículos e planos internos. Por isso, criamos esse recurso da mesma forma que o reconhecimento de fala da Hedy, com o trabalho acontecendo no seu dispositivo. A Hedy nunca envia o arquivo em si. Ela lê o texto e cria o índice de pesquisa no seu telefone ou computador, e o EmbeddingGemma 2 do Google também roda ali, encontrando as partes dos seus arquivos que se encaixam no que está sendo dito.

O que você pode adicionar

Os arquivos pertencem a um contexto. Abra um contexto de sessão, toque em Anexar ficheiros na seção Ficheiros, e todas as sessões que usam esse contexto poderão recorrer a eles. No computador, você também pode arrastar arquivos para o contexto. A Hedy lê arquivos PDF, Word, PowerPoint, Excel, CSV, de texto e Markdown, além de imagens JPEG, PNG, HEIC e WebP.

As fotos pertencem a uma sessão. No telefone, toque na câmera dentro do campo de chat vazio durante ou depois de uma sessão e tire uma foto ou escolha até dez da sua biblioteca. No Mac e no Windows, arraste uma imagem para uma sessão aberta ou cole uma com Cmd+V ou Ctrl+V. Assim, quando alguém preenche um quadro branco ou distribui uma pauta impressa, você tira uma foto e a Hedy lê o texto dela.

Cada foto tem seu próprio cartão, onde você pode ver o texto que a Hedy leu, tentar novamente se a leitura falhou ou remover a foto.

Como a Hedy usa esses conteúdos

A Hedy trata seus arquivos como material de referência e usa apenas o que importa naquele momento:

  • No chat, pergunte “qual é o nosso preço para o plano anual?”, e a Hedy responde com base na sua lista de preços, em vez de tentar adivinhar.
  • Nos resumos e nas notas detalhadas, trechos relacionados à conversa ajudam a Hedy a registrar nomes, números e detalhes de produtos corretamente.
  • Durante uma sessão ao vivo, as sugestões automáticas podem usar fatos dos seus arquivos e o texto das fotos que você adiciona. Assim, uma sugestão pode citar o valor real do seu resumo de projeto em vez de dar uma dica genérica.

Ela também orienta a IA a não seguir instruções escritas dentro dos seus arquivos.

Seus arquivos ficam no seu dispositivo

Seus arquivos e fotos originais nunca saem do dispositivo a partir do qual você os adicionou. A Hedy os lê ali, usando o reconhecimento de texto do próprio dispositivo para fotos e páginas digitalizadas, e cria o índice de pesquisa ali também. Nenhuma parte dessa etapa precisa de um servidor.

Você escolhe o que acontece com o texto depois disso:

  • Com o Cloud Sync ativado, o texto que a Hedy leu, o nome e o tipo do arquivo e os dados de pesquisa são armazenados na região de dados da sua conta para que seus outros dispositivos possam usá-los. O aplicativo web permite apenas consultar esse texto. Com o Cloud Sync desativado, esses dados ficam no dispositivo.
  • Com a análise de IA na nuvem, a Hedy envia uma seleção do texto dos seus arquivos e fotos, além dos nomes dos arquivos, aos nossos provedores de IA junto com a transcrição e nos mesmos termos. Arquivos curtos podem ser enviados por inteiro.
  • Com o Processamento de IA Local, a análise acontece no seu dispositivo e nenhum texto dos arquivos é enviado aos nossos provedores de IA.

Ative o Processamento de IA Local e desative o Cloud Sync, e seus arquivos, o texto que a Hedy lê deles e o índice ficam todos no seu telefone ou computador. A Hedy continua usando esses conteúdos no chat, nos resumos, nas notas e nas sugestões ao vivo.

Remover um arquivo ou uma foto, ou excluir seu contexto ou sessão, apaga o texto e os dados de pesquisa nesse dispositivo e, com o Cloud Sync ativado, na nuvem e nos seus outros dispositivos quando eles sincronizarem. No aplicativo web, o texto que a Hedy já carregou fica no seu navegador até você sair da conta. O arquivo original em outro lugar do seu computador ou telefone não é alterado. A Visão Geral da Privacidade de Dados explica como a Hedy trata seus dados em geral.

Com EmbeddingGemma 2

O Google DeepMind lançou o EmbeddingGemma 2 em 6 de outubro como um modelo aberto criado para rodar em telefones e laptops. É um modelo de embeddings: ele identifica o assunto de um trecho de texto, de modo que dois trechos sobre o mesmo assunto correspondam mesmo quando não têm palavras em comum. Segundo o Google, ele entende mais de 100 idiomas (documentação do modelo), e nossos usuários fazem reuniões em dezenas deles.

Isso faz diferença nas reuniões porque as pessoas raramente falam como os documentos são escritos. Um cliente pergunta “o que acontece se ultrapassarmos o número de licenças?”, e a resposta está em uma seção do seu contrato chamada “Preços por uso excedente”. Uma pesquisa por palavras-chave não encontra essa relação, e o EmbeddingGemma 2 conecta as duas ideias. A Hedy também continua buscando palavras exatas, para encontrar códigos de produtos ou nomes de pessoas.

O tamanho reduzido do modelo permite manter esse trabalho no seu dispositivo. Ele roda no telefone que está no seu bolso, então a busca pelo trecho certo acontece ali, em vez de em um servidor.

Baixar o EmbeddingGemma 2

Por padrão, a Hedy encontra trechos que usam as mesmas palavras da conversa. Se você quiser que ela também encontre trechos relacionados ao que está sendo discutido mesmo quando as palavras são diferentes, baixe o EmbeddingGemma 2:

  1. Abra Configurações → Fala e IA.
  2. Na seção Processamento de IA, toque em Baixar (310 MB).

Você também pode iniciar o download na seção Ficheiros de qualquer contexto que tenha arquivos. Ele só é baixado quando você toca em Baixar (310 MB), por Wi-Fi ou Ethernet sem limite de dados, e cada dispositivo precisa da própria cópia. Remover apaga o modelo e seus dados de pesquisa desse dispositivo. Seus arquivos permanecem, e a Hedy volta a buscar palavras exatas.

Em quais dispositivos funciona

O EmbeddingGemma 2 roda em Macs com Apple Silicon, PCs com Windows, iPhone, iPad e dispositivos Android de 64 bits. O chat, os resumos e as notas detalhadas usam o modelo em todos eles.

Pesquisar seus arquivos durante uma reunião ao vivo exige mais do dispositivo, porque o modelo precisa acompanhar a conversa enquanto o reconhecimento de fala e as sugestões ao vivo também estão em execução. Isso funciona em Macs com Apple Silicon, iPhone 15 Pro ou mais recente e iPads com um chip M-series ou A17 Pro. Em outros dispositivos, as sugestões ao vivo usam seus arquivos quando eles são curtos o suficiente para serem incluídos por inteiro. O artigo de ajuda traz os detalhes.

Comece a usar

Arquivos e fotos como contexto fazem parte do Hedy Pro, e membros do Hedy Team com uma licença ativa também têm acesso. Atualize para a Hedy 3.15 no Mac, Windows, iPhone, iPad ou Android, abra um contexto e anexe seu primeiro arquivo. Antes de adicionar arquivos antigos .doc, .xls e .ppt, salve-os como .docx, .xlsx ou .pptx, ou exporte-os como PDF. A Hedy não consegue ler arquivos protegidos por senha.

FAQ

O que posso adicionar como contexto na Hedy?

Documentos e fotos. Anexe arquivos PDF, Word, PowerPoint, Excel, CSV, de texto ou Markdown e imagens JPEG, PNG, HEIC ou WebP a um contexto de sessão, e todas as sessões que usam esse contexto poderão recorrer a eles. Você também pode adicionar fotos a uma sessão durante ou depois dela, como um quadro branco, um slide ou um material impresso.

Meus arquivos são enviados?

Não. O arquivo ou a foto em si fica no dispositivo a partir do qual você o adicionou, e a Hedy o lê e indexa ali. Se o Cloud Sync estiver ativado, o texto que a Hedy leu é armazenado na região de dados da sua conta para que seus outros dispositivos possam usá-lo. Com a análise de IA na nuvem, a Hedy envia uma seleção do texto dos seus arquivos e fotos, além dos nomes dos arquivos, aos nossos provedores de IA junto com a transcrição. Arquivos curtos podem ser enviados por inteiro.

Posso manter meus arquivos inteiramente no meu dispositivo?

Sim. Ative o Processamento de IA Local e desative o Cloud Sync, e o texto que a Hedy lê dos seus arquivos fica no seu dispositivo, junto com os próprios arquivos. A Hedy continua usando esse texto no chat, nos resumos, nas notas detalhadas e nas sugestões ao vivo.

O que a Hedy faz com meus arquivos?

A Hedy lê o texto deles no seu dispositivo e seleciona os trechos relevantes para o que você está fazendo. Ela usa esses trechos ao responder às suas perguntas no chat, escrever seu resumo e suas notas detalhadas e sugerir o que dizer durante uma sessão.

O que é EmbeddingGemma 2?

EmbeddingGemma 2 é um modelo aberto de embeddings do Google DeepMind, lançado em 6 de outubro de 2026 e criado para rodar em telefones e laptops. Ele identifica o assunto de um trecho de texto, de modo que trechos sobre o mesmo assunto correspondam mesmo quando usam palavras diferentes. A Hedy o executa no seu dispositivo para encontrar as partes dos seus arquivos que se encaixam na conversa.

Preciso baixar o EmbeddingGemma 2?

Não. Sem ele, a Hedy encontra trechos que usam as mesmas palavras da conversa. O EmbeddingGemma 2 é um download opcional de cerca de 310 MB que também encontra trechos relacionados ao que está sendo discutido mesmo quando as palavras são diferentes. Baixe-o em Configurações → Fala e IA. Ele só é baixado quando você toca em Baixar (310 MB), por Wi-Fi ou Ethernet sem limite de dados, e cada dispositivo precisa da própria cópia.

A Hedy consegue entender gráficos ou diagramas nas minhas fotos?

Ainda não. A Hedy lê o texto de uma foto ou de uma página digitalizada usando o reconhecimento de texto do próprio dispositivo. Ela não interpreta o desenho em si, por isso um quadro branco com texto legível funciona melhor do que um gráfico com poucas legendas.

Quais dispositivos são compatíveis?

Você pode adicionar arquivos e fotos na Hedy no Mac, Windows, iPhone, iPad e Android. O EmbeddingGemma 2 roda em Macs com Apple Silicon, PCs com Windows, iPhone, iPad e dispositivos Android de 64 bits. Durante uma sessão ao vivo, ela roda em Macs com Apple Silicon, iPhone 15 Pro ou mais recente e iPads com um chip M-series ou A17 Pro. O aplicativo web mostra o texto que seus outros dispositivos adicionaram, mas não permite adicionar arquivos.

O recurso está incluído no plano gratuito?

Não. Adicionar arquivos e fotos faz parte do Hedy Pro, e membros do Hedy Team com uma licença ativa também podem usar o recurso.

Leitura relacionada

JP

About the author

Julian Pscheid is the founder and CEO of Hedy AI, a real-time AI meeting coach used by tens of thousands of professionals worldwide. He writes about how AI is changing the way people prepare for, capture, and understand important conversations.

Sua próxima reunião será sua melhor até agora

Comece grátis. Sem cartão de crédito, sem bot entrando nas suas chamadas, sem gravações enviadas para lugar nenhum. Apenas coaching em tempo real no seu dispositivo.