Файлы и фото как контекст в Hedy на базе EmbeddingGemma 2
Hedy 3.15 использует ваши документы и фото в чате, резюме и подсказках в реальном времени. Оригиналы не покидают устройство, а EmbeddingGemma 2 индексирует их прямо на нём.
Раньше Hedy знала то, что слышала, и то, что вы вписали в контекст. Всё остальное лежало в ваших файлах: прайс-лист, по которому вы называете цены, бриф от клиента, слайд, на который все показывали. С Hedy 3.15 вы можете добавлять эти документы и фото, и Hedy читает их вместе с разговором.
Эти файлы часто самое чувствительное, что у вас есть: договоры, цены, резюме, внутренние планы. Поэтому мы сделали это так же, как распознавание речи в Hedy: работа происходит на вашем устройстве. Hedy никогда не загружает сам файл. Она читает текст и строит поисковый индекс на вашем телефоне или компьютере, и там же работает EmbeddingGemma 2 от Google, находя части файлов, подходящие к тому, что сейчас говорят.
Что можно добавить
Файлы добавляются в контекст. Откройте контекст сессии, нажмите Прикрепить файлы в его разделе «Файлы», и каждая сессия с этим контекстом сможет ими пользоваться. На компьютере файлы можно и перетащить. Hedy читает файлы PDF, Word, PowerPoint, Excel, CSV, текстовые файлы и Markdown, а также изображения JPEG, PNG, HEIC и WebP.
Фото добавляются в сессию. На телефоне нажмите на камеру в пустом поле чата во время сессии или после неё, затем сделайте фото или выберите до десяти из медиатеки. На Mac и Windows перетащите изображение на открытую сессию или вставьте его сочетанием Cmd+V или Ctrl+V. Так что, когда кто-то исписывает доску или раздаёт распечатанную повестку, вы делаете снимок, и Hedy читает текст на нём.
У каждого фото своя карточка: в ней виден прочитанный Hedy текст, можно повторить попытку, если чтение не удалось, или удалить фото.
Как Hedy их использует
Hedy воспринимает ваши файлы как справочный материал и подтягивает только то, что важно в данный момент:
- В чате спросите «какая у нас цена на годовой тариф?», и Hedy ответит по вашему прайс-листу, а не будет гадать.
- В резюме и подробных заметках фрагменты, подходящие к разговору, помогают Hedy правильно передавать имена, цифры и сведения о продуктах.
- Во время живой сессии автоматические подсказки могут использовать факты из ваших файлов и текст добавленных фото, так что подсказка может процитировать реальную цифру из вашего брифа вместо общего совета.
Кроме того, ИИ получает указание не выполнять никаких инструкций, написанных внутри ваших файлов.
Ваши файлы остаются на вашем устройстве
Ваши исходные файлы и фото никогда не покидают устройство, с которого вы их добавили. Hedy читает их там, используя собственное распознавание текста устройства для фото и отсканированных страниц, и там же строит поисковый индекс. Для этого шага сервер не нужен.
Что происходит с текстом дальше, решаете вы:
- Если включена синхронизация с облаком, прочитанный Hedy текст, название и тип файла и данные для поиска хранятся в регионе данных вашего аккаунта, чтобы ими могли пользоваться ваши другие устройства. Веб-версия показывает этот текст только для чтения. Если синхронизация с облаком отключена, всё остаётся на устройстве.
- При облачном анализе ИИ Hedy отправляет нашим поставщикам ИИ выбранные фрагменты текста из ваших файлов и фото, а также названия файлов вместе с транскриптом и на тех же условиях. Короткие файлы могут отправляться целиком.
- С Локальным ИИ анализ выполняется на вашем устройстве, и текст файлов не уходит нашим поставщикам ИИ.
Включите «Локальный ИИ» и отключите синхронизацию с облаком, и ваши файлы, текст, который Hedy из них читает, и индекс останутся на вашем телефоне или компьютере. Hedy по-прежнему использует их в чате, резюме, заметках и подсказках в реальном времени.
Удаление файла или фото, а также удаление их контекста или сессии стирает текст и данные для поиска на этом устройстве, а при включённой синхронизации с облаком — и в облаке, и на ваших других устройствах после синхронизации. В веб-версии уже загруженный Hedy текст остаётся в вашем браузере, пока вы не выйдете из аккаунта. Исходный файл в другом месте на вашем компьютере или телефоне не затрагивается. О том, как Hedy обращается с вашими данными в целом, рассказывает обзор конфиденциальности данных.
На базе EmbeddingGemma 2
Google DeepMind 6 октября выпустила EmbeddingGemma 2 — открытую модель, рассчитанную на работу на телефонах и ноутбуках. Это модель эмбеддингов: она улавливает, о чём фрагмент текста, поэтому два фрагмента об одном и том же совпадают, даже если у них нет общих слов. По словам Google, модель понимает более 100 языков (карточка модели), а наши пользователи проводят встречи на десятках из них.
Встречам это нужно, потому что люди редко говорят так, как пишутся документы. Клиент спрашивает «что будет, если мы превысим число мест?», а ответ лежит в разделе вашего договора под названием «Цены при превышении». Поиск по ключевым словам это упустит, а EmbeddingGemma 2 свяжет одно с другим. При этом Hedy по-прежнему сопоставляет и точные слова, так что код продукта или имя человека тоже находятся.
Именно небольшой размер позволяет всему этому оставаться на вашем устройстве. Модель работает на телефоне в вашем кармане, поэтому поиск нужного фрагмента происходит там, а не на сервере.
Включение «Умного контекста файлов»
По умолчанию Hedy использует короткие файлы целиком, а в длинных находит фрагменты с теми же словами, что и в разговоре. Если вы хотите, чтобы она находила и фрагменты, подходящие по смыслу к обсуждаемому, когда слова другие, скачайте EmbeddingGemma 2:
- Откройте Настройки → Речь и ИИ.
- В разделе Умный контекст файлов нажмите Скачать (310 МБ).
Загрузку можно начать и из раздела «Файлы» любого контекста, в котором есть файлы. Она начинается только после нажатия «Скачать», и каждому устройству нужна своя копия. На телефоне загрузка ждёт Wi-Fi, если вы не решите использовать мобильный интернет. Кнопка Удалить стирает модель и её данные для поиска с этого устройства. Ваши файлы остаются, а Hedy возвращается к сопоставлению точных слов.
На каких устройствах работает
EmbeddingGemma 2 работает на Mac с Apple Silicon, компьютерах с Windows, iPhone, iPad и 64-битных устройствах Android, и чат, резюме и подробные заметки используют её на всех из них.
Поиск по файлам во время живой встречи сложнее, потому что модели нужно успевать, пока одновременно работают распознавание речи и подсказки в реальном времени. Это работает на Mac с Apple Silicon, iPhone 15 Pro и новее и iPad с чипом M-series или A17 Pro. Начиная с Hedy 3.15.1 другие устройства, например компьютеры с Windows и телефоны Android, после загрузки проходят короткую проверку скорости и тоже работают, если проверка пройдена. В остальных случаях подсказки в реальном времени используют ваши файлы, если они достаточно коротки, чтобы включить их целиком. Подробности есть в справочной статье.
Как получить
Файлы и фото как контекст входят в Hedy Pro, и участники Hedy Team с активным местом получают их тоже. Обновитесь до Hedy 3.15 на Mac, Windows, iPhone, iPad или Android, откройте контекст и прикрепите первый файл. Старые файлы .doc, .xls и .ppt сначала сохраните как .docx, .xlsx или .pptx либо экспортируйте в PDF. Файлы, защищённые паролем, Hedy прочитать не может.
Вопросы и ответы
Что можно добавить в Hedy как контекст?
Документы и фото. Прикрепляйте к контексту сессии файлы PDF, Word, PowerPoint, Excel, CSV, текстовые файлы и Markdown, а также изображения JPEG, PNG, HEIC и WebP, и каждая сессия с этим контекстом сможет ими пользоваться. Фото можно добавлять и в саму сессию, пока она идёт или после её окончания: доску, слайд, раздаточный материал.
Мои файлы загружаются в облако?
Нет. Сам файл или фото остаётся на устройстве, с которого вы его добавили, и Hedy читает и индексирует его там. Если включена синхронизация с облаком, прочитанный Hedy текст хранится в регионе данных вашего аккаунта, чтобы им могли пользоваться ваши другие устройства. При облачном анализе ИИ Hedy отправляет нашим поставщикам ИИ выбранные фрагменты текста из ваших файлов и фото, а также названия файлов вместе с транскриптом. Короткие файлы могут отправляться целиком.
Можно ли хранить файлы только на устройстве?
Да. Включите «Локальный ИИ» и отключите синхронизацию с облаком, и текст, который Hedy читает из ваших файлов, останется на вашем устройстве вместе с самими файлами. Hedy по-прежнему использует этот текст в чате, резюме, подробных заметках и подсказках в реальном времени.
Что Hedy делает с моими файлами?
Hedy читает текст в них на вашем устройстве и выбирает фрагменты, важные для того, чем вы заняты. Она использует эти фрагменты, когда отвечает на ваши вопросы в чате, пишет резюме и подробные заметки и подсказывает, что сказать во время сессии.
Что такое EmbeddingGemma 2?
EmbeddingGemma 2 — открытая модель эмбеддингов от Google DeepMind, выпущенная 6 октября 2026 года и рассчитанная на работу на телефонах и ноутбуках. Она улавливает, о чём фрагмент текста, поэтому фрагменты об одном и том же совпадают, даже если в них разные слова. Hedy запускает её на вашем устройстве, чтобы находить части файлов, подходящие к разговору.
Нужно ли скачивать EmbeddingGemma 2?
Нет. Без неё Hedy использует короткие файлы целиком, а в длинных находит фрагменты, в которых встречаются те же слова, что и в разговоре. EmbeddingGemma 2 — необязательная загрузка около 310 МБ, в Hedy она называется «Умный контекст файлов» и находит подходящие по смыслу фрагменты, даже когда слова другие. Скачать её можно в Настройки → Речь и ИИ. Загрузка начинается только после нажатия «Скачать», и каждому устройству нужна своя копия. На телефоне загрузка ждёт Wi-Fi, если вы не решите использовать мобильный интернет.
Понимает ли Hedy графики и диаграммы на моих фото?
Пока нет. Hedy читает текст на фото или в отсканированной странице средствами распознавания текста самого устройства. Сам рисунок она не интерпретирует, поэтому доска с чётким текстом работает лучше, чем схема с малым числом подписей.
Какие устройства это поддерживают?
Добавлять файлы и фото можно в Hedy на Mac, Windows, iPhone, iPad и Android. EmbeddingGemma 2 работает на Mac с Apple Silicon, компьютерах с Windows, iPhone, iPad и 64-битных устройствах Android. Во время живой сессии она работает на Mac с Apple Silicon, iPhone 15 Pro и новее и iPad с чипом M-series или A17 Pro, а начиная с Hedy 3.15.1 — и на других устройствах, прошедших короткую проверку скорости после загрузки. Веб-версия показывает текст, добавленный с других устройств, но не позволяет добавлять файлы.
Входит ли это в бесплатный тариф?
Нет. Добавление файлов и фото входит в Hedy Pro, и участники Hedy Team с активным местом тоже могут им пользоваться.
Читайте также
About the author
Julian Pscheid is the founder and CEO of Hedy AI, a real-time AI meeting coach used by tens of thousands of professionals worldwide. He writes about how AI is changing the way people prepare for, capture, and understand important conversations.
