Besucher deinen Shop per Foto durchsuchen lassen

Mit Search by photo kann ein Besucher ein Foto senden und fragen: „Habt ihr so etwas?“ Der Agent sieht sich das Foto an, durchsucht deinen verbundenen Shop und zeigt die passendsten Produkte als Produktkarten unter seiner Antwort, mit den eigenen Namen, Preisen, Bildern und Links deines Shops.

Was du brauchst

• Einen verbundenen Shop mit Produktsuche. Verbinde ihn mit Connect your website im Tab Actions; siehe Shop verbinden. Shopify, WooCommerce, Magento, VTEX, WordPress-Websites mit einem Inhaltstyp für einen Katalog und andere Websites mit einer Suchseite funktionieren alle. Eine Website, die nur mit Browse products verbunden ist, hat keine Suche, und die Beiträge und Seiten eines Blogs sind kein Katalog. Beide lassen sich deshalb nicht per Foto durchsuchen.
• Let visitors attach files eingeschaltet, im Tab Aussehen. Besucher senden Fotos über die Büroklammer, ohne sie kann also niemand eines senden.
• Den Starter-Plan oder höher. In Free zeigt die Karte Included from the Starter plan, und der Schalter ist ausgegraut.

Ein- oder ausschalten

1. Öffne deinen Agenten und wechsle zum Tab Actions. Die Karte Search by photo erscheint unter deinen Aktionen, sobald ein Shop verbunden ist.
2. Ab Starter ist der Schalter anfangs an. Schalte ihn aus, wenn der Agent deinen Shop nicht mit Fotos durchsuchen soll. Er wird gespeichert, sobald du ihn umlegst.
3. Probier es im Playground aus: Häng ein Foto von etwas an, das du verkaufst, und frag, ob du es hast.

Die Karte erinnert dich außerdem daran, wenn Anhänge von Besuchern aus sind, und zeigt die Limits deines Plans und, solange die Fotosuche funktioniert, wie viele Suchen der Agent heute ausgeführt hat.

Änderungen am Schalter werden im Einstellungsverlauf festgehalten.

Was passiert, wenn ein Besucher ein Foto sendet

1. Der Agent entscheidet, ob der Besucher genau diesen Artikel oder etwas Ähnliches möchte. Er ist angewiesen, ein Foto einer beschädigten Lieferung oder eine Frage zu einer Bestellung in Ruhe zu lassen. Diese Entscheidung trifft das KI-Modell, deshalb kann es ab und zu suchen, wo du es nicht getan hättest, oder nachfragen, was der Besucher meint.
2. Das Foto wird vom KI-Modell beschrieben: die Art des Produkts, seine Hauptfarben, Material, Stil, ein aufgedruckter Markenname und drei kurze Suchbegriffe. Hat der Besucher geschrieben, welchen Artikel er meint, etwa „die Lampe links“, bezieht sich die Beschreibung auf diesen Artikel.
3. Die eigene Suche deines Shops wird mit diesen Begriffen und der Produktart ausgeführt, bis zu vier Suchen.
4. Jedes gefundene Produkt wird mit der Beschreibung abgeglichen: sein Titel, Produkttyp, Tags, Marke und Beschreibung. Produkte, die nicht gut genug passen, werden weggelassen, auch wenn die Suche deines Shops sie geliefert hat.
5. Bis zu 6 Produkte erscheinen als Karten unter der Antwort, das passendste zuerst, mit einer Überschrift wie „3 Produkte ähnlich wie auf Ihrem Foto“ in der Sprache des Widgets. Der Agent stellt sie in seiner Antwort kurz vor. Nennt die Antwort außerdem andere Produkte aus deinem Shop, folgen sie nach den Treffern zum Foto, und die übliche Produktanzahl ersetzt die Überschrift.

Passt nichts in deinem Shop, sagt der Agent das klar. Er schlägt Kategorienamen vor, die er in den Ergebnissen deines Shops gefunden hat, falls es welche gibt, oder bittet den Besucher zu beschreiben, wonach er sucht. Produkte, die er nicht gefunden hat, nennt er nicht.

Durchsucht wird nur ein Foto, das mit der aktuellen Nachricht gesendet wurde, bei mehreren das erste. Fotos aus früheren Nachrichten werden nicht erneut durchsucht. Eine Antwort führt höchstens eine Fotosuche aus.

Produkte werden nie erfunden

Die Karten entstehen aus dem, was dein Shop geliefert hat: Produktname, Preis und Angebotspreis, Bild, Lagerstatus und Link genau so, wie dein Shop sie gesendet hat. Der Text des Agenten kann kein Produkt hinzufügen, keinen Preis ändern und keinen Link erfinden. Es sind dieselben Produktkarten wie bei jeder anderen Produktsuche, jede Karte öffnet also die Produktseite in einem neuen Tab.

Ohne verbundenen Shop

Kann der Agent keinen Katalog per Foto durchsuchen, weil kein Shop verbunden ist, der Schalter aus ist oder dein Plan es nicht enthält, sieht er das Foto trotzdem. Er sagt, was er sieht, wenn das hilft, und antwortet aus deinem Wissen und deinen Aktionen. Er ist angewiesen, nie Produkte, Preise, Links oder Verfügbarkeit zu erfinden.

Limits

• Das Tageslimit wird um Mitternacht UTC zurückgesetzt und zählt jedes Gespräch des Agenten, Playground-Chats eingeschlossen.
• Ist ein Limit erreicht, sagt der Agent dem Besucher, dass er gerade nicht per Foto suchen kann, und bietet an zu suchen, wenn der Besucher den Artikel in Worten beschreibt.
• Fotos folgen den Limits für Anhänge von Besuchern: Bilder bis 4 MB, nicht in temporären Chats.
• Die Suche per Foto ist keine Aktion und zählt nicht zum Limit von 25 Aktionen.

Kosten

• Eine Fotosuche verbraucht keine zusätzliche Nachricht. Die Nachricht des Besuchers zählt mit oder ohne Suche gleich; siehe Pläne und Limits.
• Jede Suche ist eine zusätzliche Anfrage an das KI-Modell, um das Foto zu beschreiben, plus die Suchen in deinem Shop.
• Eine Antwort mit Fotosuche dauert ein paar Sekunden länger, weil der Agent auf die Ergebnisse wartet, bevor er antwortet.

Datenschutz

• Das Foto wird mit der Nachricht des Besuchers an OpenAI gesendet, wie jeder Anhang von Besuchern, und ein weiteres Mal, um es für die Suche zu beschreiben. Es wird nur genutzt, um diese Nachricht zu beantworten.
• Das Foto bleibt dort, wo Anhänge von Besuchern aufbewahrt werden: privat beim Gespräch, sichtbar in deinem Verlauf und zusammen mit dem Gespräch gelöscht. Es wird nie dem Wissen deines Agenten hinzugefügt.
• Das KI-Modell ist angewiesen, Personen auf dem Foto zu ignorieren: Es beschreibt oder identifiziert nie eine Person und betrachtet nur den Artikel. Es ist außerdem angewiesen, keine lesbaren personenbezogenen Angaben zu übernehmen, etwa Namen oder Nummern auf einem Dokument.
• Die Zahlen auf der Karte speichern nur, dass eine Suche lief und wie sie ausging, nie etwas aus dem Foto.

Klicks und Zahlen

Die Karte Search by photo zeigt die letzten 30 Tage: wie viele Fotosuchen der Agent ausgeführt hat und wie oft Besucher auf eine dabei gefundene Produktkarte geklickt haben. Klicks werden im Chat-Widget gezählt, nicht im Playground und nicht in temporären Chats.

Im Tab Conversations führt Why this answer unter einer Antwort „Search by photo“ unter Actions called auf, mit Succeeded oder Failed. Siehe Gespräche und Statistik.

Wie es weitergeht

• Zuerst deinen Shop verbinden: Shop verbinden.
• Die Büroklammer einschalten: Aussehen.
• Pläne vergleichen: Pläne und Limits.