Dateien und Fotos als Kontext in Hedy, mit EmbeddingGemma 2
Hedy 3.15 nutzt Ihre Dokumente und Fotos im Chat, in Zusammenfassungen und Live-Vorschlägen. Die Originale bleiben auf Ihrem Gerät. EmbeddingGemma 2 indexiert sie dort.
Bisher wusste Hedy, was es hörte und was Sie in einen Kontext eingaben. Alles andere lag in Ihren Dateien: die Preisliste, auf die Sie sich beziehen, die Projektbeschreibung Ihres Kunden, die Folie, auf die alle zeigten. Mit Hedy 3.15 können Sie diese Dokumente und Fotos hinzufügen. Hedy liest sie und bezieht sie in das Gespräch ein.
Diese Dateien gehören oft zu Ihren vertraulichsten Unterlagen, etwa Verträge, Preislisten, Lebensläufe und interne Pläne. Deshalb haben wir die Funktion so entwickelt wie die Spracherkennung in Hedy: Die Arbeit findet auf Ihrem Gerät statt. Hedy lädt die Datei selbst niemals hoch. Es liest den Text und erstellt den Suchindex auf Ihrem Telefon oder Computer. Auch Googles EmbeddingGemma 2 läuft dort und findet die Teile Ihrer Dateien, die zum Gespräch passen.
Was Sie hinzufügen können
Dateien gehören zu einem Kontext. Öffnen Sie einen Sitzungskontext und tippen Sie im Abschnitt Dateien auf Dateien anhängen. Jede Sitzung, die diesen Kontext verwendet, kann auf die Dateien zurückgreifen. Auf einem Computer können Sie Dateien auch hineinziehen. Hedy liest PDF-, Word-, PowerPoint-, Excel-, CSV-, Text- und Markdown-Dateien sowie JPEG-, PNG-, HEIC- und WebP-Bilder.
Fotos gehören zu einer Sitzung. Tippen Sie auf dem Telefon während oder nach einer Sitzung auf die Kamera im leeren Chat-Eingabefeld. Nehmen Sie dann ein Foto auf oder wählen Sie bis zu zehn aus Ihrer Mediathek aus. Auf Mac und Windows können Sie ein Bild auf eine geöffnete Sitzung ziehen oder mit Cmd+V bzw. Ctrl+V einfügen. Wenn also jemand ein Whiteboard beschreibt oder eine gedruckte Tagesordnung verteilt, machen Sie ein Foto und Hedy liest den Text darauf.
Jedes Foto erhält eine eigene Karte. Dort können Sie den von Hedy gelesenen Text ansehen, das Lesen erneut versuchen, falls es fehlgeschlagen ist, oder das Foto entfernen.
Wie Hedy die Inhalte nutzt
Hedy behandelt Ihre Dateien als Referenzmaterial und nutzt nur das, was gerade relevant ist:
- Fragen Sie im Chat „Was kostet unser Jahrestarif?“, und Hedy antwortet anhand Ihrer Preisliste, statt zu raten.
- In Zusammenfassungen und detaillierten Notizen helfen zum Gespräch passende Textstellen Hedy, Namen, Zahlen und Produktdetails richtig wiederzugeben.
- Während einer laufenden Sitzung können automatische Vorschläge Fakten aus Ihren Dateien und den Text hinzugefügter Fotos nutzen. So kann ein Vorschlag die tatsächliche Zahl aus Ihrer Projektbeschreibung aufgreifen, statt einen allgemeinen Tipp zu geben.
Außerdem weist Hedy die KI an, keine Anweisungen zu befolgen, die in Ihren Dateien stehen.
Ihre Dateien bleiben auf Ihrem Gerät
Ihre Originaldateien und Fotos verlassen niemals das Gerät, von dem aus Sie sie hinzugefügt haben. Hedy liest sie dort, nutzt für Fotos und gescannte Seiten die Texterkennung Ihres Geräts und erstellt dort den Suchindex. Für diesen Schritt ist kein Server nötig.
Was danach mit dem Text geschieht, entscheiden Sie:
- Wenn Cloud Sync aktiviert ist, werden der von Hedy gelesene Text, der Dateiname und Dateityp sowie die Suchdaten in der Datenregion Ihres Kontos gespeichert, damit Ihre anderen Geräte sie nutzen können. Die Web-App zeigt diesen Text schreibgeschützt an. Wenn Cloud Sync deaktiviert ist, bleiben die Daten auf dem Gerät.
- Bei der Cloud-KI-Analyse sendet Hedy ausgewählten Text aus Ihren Dateien und Fotos sowie die Dateinamen zusammen mit dem Transkript und zu denselben Bedingungen an unsere KI-Anbieter. Kurze Dateien können vollständig gesendet werden.
- Mit Local AI Processing läuft die Analyse auf Ihrem Gerät und kein Dateitext geht an unsere KI-Anbieter.
Aktivieren Sie die lokale KI-Verarbeitung und deaktivieren Sie Cloud Sync. Dann bleiben Ihre Dateien, der daraus gelesene Text und der Index vollständig auf Ihrem Telefon oder Computer. Hedy nutzt sie weiterhin im Chat, in Zusammenfassungen, Notizen und Live-Vorschlägen.
Wenn Sie eine Datei oder ein Foto entfernen oder den zugehörigen Kontext oder die Sitzung löschen, werden der Text und die Suchdaten auf diesem Gerät gelöscht. Wenn Cloud Sync aktiviert ist, werden sie auch in der Cloud und auf Ihren anderen Geräten gelöscht, sobald diese synchronisieren. In der Web-App bleibt der bereits von Hedy geladene Text in Ihrem Browser, bis Sie sich abmelden. Ihre ursprüngliche Datei an anderer Stelle auf Ihrem Computer oder Telefon bleibt unberührt. Die Datenschutzübersicht erklärt, wie Hedy allgemein mit Ihren Daten umgeht.
Mit EmbeddingGemma 2
Google DeepMind hat EmbeddingGemma 2 am 6. Oktober als offenes Modell veröffentlicht, das für den Einsatz auf Telefonen und Laptops entwickelt wurde. Es ist ein Embedding-Modell: Es erfasst, worum es in einer Textstelle geht. So lassen sich zwei Textstellen zum selben Thema zuordnen, selbst wenn sie keine gemeinsamen Wörter haben. Laut Google versteht es mehr als 100 Sprachen (Modelldokumentation). Unsere Nutzer führen Meetings in Dutzenden davon.
In Meetings ist das hilfreich, weil Menschen selten so sprechen, wie Dokumente geschrieben sind. Ein Kunde fragt: „Was passiert, wenn wir mehr Plätze nutzen als gebucht?“ Die Antwort steht in Ihrem Vertrag unter „Preise für zusätzliche Plätze“. Eine Stichwortsuche übersieht diese Verbindung. EmbeddingGemma 2 stellt sie her. Hedy gleicht weiterhin auch exakte Wörter ab, sodass sich Produktcodes oder Namen ebenfalls finden lassen.
Durch seine geringe Größe kann das Modell auf Ihrem Gerät bleiben. Es läuft auf dem Telefon in Ihrer Tasche. Die Suche nach der passenden Textstelle läuft dort und benötigt keinen Server.
EmbeddingGemma 2 herunterladen
Standardmäßig findet Hedy Textstellen, die dieselben Wörter wie das Gespräch verwenden. Wenn es auch Textstellen finden soll, die zum Gesprächsthema passen, obwohl andere Wörter verwendet werden, laden Sie EmbeddingGemma 2 herunter:
- Öffnen Sie Einstellungen → Sprache & KI.
- Tippen Sie im Abschnitt KI-Verarbeitung auf Herunterladen (310 MB).
Sie können den Download auch im Abschnitt Dateien eines Kontexts mit Dateien starten. Das Modell wird erst heruntergeladen, wenn Sie auf Herunterladen (310 MB) tippen, und nur über WLAN oder Ethernet ohne Volumenbegrenzung. Jedes Gerät benötigt eine eigene Kopie. Entfernen löscht das Modell und seine Suchdaten von diesem Gerät. Ihre Dateien bleiben erhalten, und Hedy gleicht wieder exakte Wörter ab.
Auf welchen Geräten die Suche läuft
EmbeddingGemma 2 läuft auf Apple Silicon Macs, Windows-PCs, iPhone, iPad und 64-Bit-Android-Geräten. Chat, Zusammenfassungen und detaillierte Notizen nutzen sie auf all diesen Geräten.
Die Dateisuche während eines laufenden Meetings ist anspruchsvoller. Das Modell muss mit dem Gespräch Schritt halten, während auch Spracherkennung und Live-Vorschläge laufen. Das funktioniert auf Apple Silicon Macs, auf dem iPhone 15 Pro oder neuer sowie auf iPads mit einem M-series- oder A17 Pro-Chip. Auf anderen Geräten nutzen Live-Vorschläge Ihre Dateien, wenn diese kurz genug sind, um sie vollständig einzubeziehen. Einzelheiten finden Sie im Hilfeartikel.
So nutzen Sie die Funktion
Dateien und Fotos als Kontext sind Teil von Hedy Pro. Mitglieder von Hedy Team mit einem aktiven Platz können sie ebenfalls nutzen. Aktualisieren Sie Hedy auf Version 3.15 auf Mac, Windows, iPhone, iPad oder Android. Öffnen Sie einen Kontext und hängen Sie Ihre erste Datei an. Speichern Sie ältere .doc-, .xls- und .ppt-Dateien zuvor als .docx, .xlsx oder .pptx oder exportieren Sie sie als PDF. Hedy kann keine passwortgeschützten Dateien lesen.
FAQ
Was kann ich in Hedy als Kontext hinzufügen?
Dokumente und Fotos. Hängen Sie PDF-, Word-, PowerPoint-, Excel-, CSV-, Text- oder Markdown-Dateien sowie JPEG-, PNG-, HEIC- oder WebP-Bilder an einen Sitzungskontext an. Jede Sitzung, die diesen Kontext verwendet, kann darauf zurückgreifen. Sie können auch während oder nach einer Sitzung Fotos hinzufügen, etwa von einem Whiteboard, einer Folie oder einem Handout.
Werden meine Dateien hochgeladen?
Nein. Die Datei oder das Foto selbst bleibt auf dem Gerät, von dem aus Sie sie hinzugefügt haben. Hedy liest und indexiert sie dort. Wenn Cloud Sync aktiviert ist, wird der von Hedy gelesene Text in der Datenregion Ihres Kontos gespeichert, damit Ihre anderen Geräte ihn nutzen können. Bei der Cloud-KI-Analyse sendet Hedy ausgewählten Text aus Ihren Dateien und Fotos sowie die Dateinamen zusammen mit dem Transkript an unsere KI-Anbieter. Kurze Dateien können vollständig gesendet werden.
Kann ich meine Dateien vollständig auf meinem Gerät behalten?
Ja. Aktivieren Sie Local AI Processing und deaktivieren Sie Cloud Sync. Dann bleibt der Text, den Hedy aus Ihren Dateien liest, zusammen mit den Dateien selbst auf Ihrem Gerät. Hedy nutzt diesen Text weiterhin im Chat, in Zusammenfassungen, detaillierten Notizen und Live-Vorschlägen.
Was macht Hedy mit meinen Dateien?
Hedy liest den Text darin auf Ihrem Gerät und wählt die Textstellen aus, die für Ihre aktuelle Tätigkeit relevant sind. Es nutzt diese Textstellen, wenn es Ihre Fragen im Chat beantwortet, Ihre Zusammenfassung und detaillierten Notizen schreibt und während einer Sitzung vorschlägt, was Sie sagen können.
Was ist EmbeddingGemma 2?
EmbeddingGemma 2 ist ein offenes Embedding-Modell von Google DeepMind, das am 6. Oktober 2026 veröffentlicht wurde und für den Einsatz auf Telefonen und Laptops entwickelt wurde. Es erfasst, worum es in einer Textstelle geht. So lassen sich Textstellen zum selben Thema zuordnen, auch wenn sie unterschiedliche Wörter verwenden. Hedy führt es auf Ihrem Gerät aus, um die Teile Ihrer Dateien zu finden, die zum Gespräch passen.
Muss ich EmbeddingGemma 2 herunterladen?
Nein. Ohne das Modell findet Hedy Textstellen, die dieselben Wörter wie das Gespräch verwenden. EmbeddingGemma 2 ist ein optionaler Download von etwa 310 MB. Es findet auch Textstellen, die zum Gesprächsthema passen, wenn andere Wörter verwendet werden. Sie können es unter Einstellungen → Sprache & KI herunterladen. Es wird erst heruntergeladen, wenn Sie auf Herunterladen (310 MB) tippen, und nur über WLAN oder Ethernet ohne Volumenbegrenzung. Jedes Gerät benötigt eine eigene Kopie.
Kann Hedy Schaubilder oder Diagramme in meinen Fotos verstehen?
Noch nicht. Hedy liest den Text in einem Foto oder auf einer gescannten Seite mit der Texterkennung Ihres Geräts. Es interpretiert die Zeichnung selbst nicht. Deshalb funktioniert ein Whiteboard mit gut lesbarer Schrift besser als ein Diagramm mit wenigen Beschriftungen.
Welche Geräte unterstützen die Funktion?
Sie können Dateien und Fotos in Hedy auf Mac, Windows, iPhone, iPad und Android hinzufügen. EmbeddingGemma 2 läuft auf Apple Silicon Macs, Windows-PCs, iPhone, iPad und 64-Bit-Android-Geräten. Während einer laufenden Sitzung funktioniert sie auf Apple Silicon Macs, auf dem iPhone 15 Pro oder neuer sowie auf iPads mit einem M-series- oder A17 Pro-Chip. Die Web-App zeigt den Text an, den Ihre anderen Geräte hinzugefügt haben. Dateien können Sie dort jedoch nicht hinzufügen.
Ist die Funktion im kostenlosen Tarif enthalten?
Nein. Das Hinzufügen von Dateien und Fotos ist Teil von Hedy Pro. Mitglieder von Hedy Team mit einem aktiven Platz können die Funktion ebenfalls nutzen.
Weiterführende Artikel
About the author
Julian Pscheid is the founder and CEO of Hedy AI, a real-time AI meeting coach used by tens of thousands of professionals worldwide. He writes about how AI is changing the way people prepare for, capture, and understand important conversations.
