Schlagwort-Archiv: bilderkennung

Suche nach Texten und Bildern gleichzeitig: Google stellt Multisearch vor

Bislang lässt Google seinen riesigen Datenbestand wahlweise mit Hilfe von Suchbegriffen in Schriftform oder mit Hilfe von Bildern (über die Rückwärtssuchfunktion in der Google-Bildersuche) durchforsten. Google Multisearch kombiniert jetzt die beiden Methoden.

Manches lässt sich besser zeigen als beschreiben. Über die mobile Google-App lässt sich deshalb nicht nur nach eingetippten Wörtern suchen, sondern auch nach gespeicherten oder über die Kamera erfassten Fotos.

In einem nächsten Schritt kombiniert Google diese Suchmöglichkeiten: Auf dem hauseigenen Blog stellt Produktmanagerin Belinda Zeng Google Multisearch vor. Bislang steht die Funktion nur Android- oder iOS-Nutzern in den USA, und auch nur als Beta-Version zur Verfügung, in dem o. g. Blogbeitrag lässt sich aber schon gut erkennen, wie nützlich diese Suchfunktion werden könnte:

In der mobilen Google-App tippt der Nutzer zunächst auf das Bild-Symbol im Suchfeld, und wählt anschließend ein Foto von seinem Smartphone oder richtet seine Kamera auf ein gesuchtes Motiv in seiner Umgebung. Nachdem er ein Bild ausgewählt oder aufgenommen hat, wischt er nach oben, tippt auf eine Schaltfläche “+ Add to your search”, und ergänzt die Aufnahme um eine Texteingabe.

Als Anwendungsbeispiele nennt Zeng unter anderem das Foto eines orangenfarbenen Kleides, begleitet von der Texteingabe “grün”, um ein ähnlich geschnittenes Kleid in grüner Farbe aufzuspüren, oder das Foto einer Zimmerpflanze, ergänzt um die Textsuche “Pflegeanleitung”. Wann die Funktion das Beta-Stadium verlässt und international bereitgestellt wird, war noch nicht in Erfahrung zu bringen.

Facebook entwickelt KI-basierte Bilderkennung

Facebooks Suchfunktion findet jetzt auch Fotos mit entsprechenden Inhalten, wenn die verwendeten Suchbegriffe nicht in Textform in der Bildbeschreibung hinterlegt wurden.

[aesop_image imgwidth=”70%” img=”https://netknowhow.de/wp-content/uploads/2017/02/Bilderkennung_per_KI.jpg” alt=”Facebooks KI kann Bildinhalte erkennen” align=”center” lightbox=”on” captionposition=”left” revealfx=”inplace”]

Möglich macht das eine künstliche Intelligenz, die die tatsächlichen Bildinhalte erkennen kann. Nach Angaben des Unternehmens wurde die KI zunächst mit 130.000 auf Facebook öffentlich geteilten Fotos trainiert, deren Inhalte menschliche Mitarbeiter schriftlich erfasst haben. Nach und nach habe die KI aus diesen Informationen gelernt, die Inhalte weiterer Fotos zu erkennen.

Inzwischen kann die Bilderkennung nicht nur Personen, Tiere und Gegenstände zuordnen, sondern auch Aktivitäten: Wer zum Beispiel in das Suchfeld eintippt “photos of dogs sleeping”, bekommt eine umfangreiche Auswahl an Fotos schlafender Hunde, während “photos of people playing guitar” zu einer Reihe von Fotos Gitarre spielender Menschen führt. Nutzen kann die Suchfunktion jeder (auch außerhalb der USA), der in den Einstellungen die Sprachversion English (US) ausgewählt hat.