Ein Jahr später zeigt das Feature "An diesem Tag", wie A.I. Verändert sich Facebook

Heute vor einem Jahr hat Facebook die Funktion „An diesem Tag“ veröffentlicht. Inverse Manohar Paluri, Leiter der Abteilung für Computer-Vision von Facebook, sprach darüber, wie künstliche Intelligenz, maschinelles Lernen und Computervision diese Funktion bedeutungsvoller machen - und wie diese Bereiche der Forschung und Entwicklung die Facebook-Erfahrung in den kommenden Jahren weiter verbessern werden.

Selbst wenn Sie die Funktion "An diesem Tag" nicht selbst verwendet haben, haben Sie diese Einträge in Ihrem Newsfeed gesehen. Sie haben gesehen, wie ein Freund ein Ereignis aus seiner oder ihrer Facebook-Vergangenheit erneut geteilt hat. Ich kann nicht glauben, dass es drei Jahre her ist, seit dieser Magier ein Kaninchen aus einem Hut gezogen hat! gepaart mit einem Foto des Magiers, der das Kaninchen aus dem Hut zieht. Etwas ähnliches. Und heute teilt Facebook sein eigenes Gedächtnis. An diesem Tag, vor einem Jahr, startete Facebook On This Day. (Now, On This Day verfügt über mehr als 60 Millionen Besucher pro Tag und 155 Millionen abonnieren ihre Benachrichtigungen.)

Für Facebook ist diese Erinnerung jedoch weniger sentimental als ein Meilenstein. Facebook führt ständig neue Funktionen ein, und diese Funktionen werden ständig geprüft und optimiert. Manchmal sind es Menschen, wie Paluri und sein Team, die das Tweaking durchführen. andere Male ist es A.I.s. Meistens ist es jedoch eine Symbiose. Facebook ist wie ein Cyborg, und dieser Cyborg hat einen raison d'être: um Ihre Facebook-Erfahrung als so angenehm wie möglich.

Die Computervision, das Inhaltsverständnis und A.I. Kader bei Facebook könnte man - wenn man so will - als Motherboard des Cyborgs gesehen werden. Und um die Metapher fortzusetzen, ist Paluri sozusagen die zentrale Verarbeitungseinheit für dieses Motherboard. Paluris arbeitet seit über einem Jahrzehnt im Bereich Computer Vision und er ist kein kleiner Bruder: Er begann bei SRI, wechselte dann zu IBM Watson Labs und wechselte von dort zu Google. Und jetzt ist er in Menlo Park bei Facebook. Als er an dem Projekt teilnahm, wurde sein Praktikumsprojekt für visuelle Erkennung zum "Rückgrat" der Bild- und Videoverständnisstechnologie von Facebook. Und diese visuelle Erkennungsmaschine wird für Facebook immer wichtiger.

"Wenn Sie die Nutzung von Facebook im Laufe der Zeit betrachten - und dies ist ein Beispiel, das Mark Zuckerberg auch häufig zitiert - sehen Sie, dass reichere und reichere Medien geteilt werden, und die Leute nutzen das, um sich zu verbinden", sagt Paluri. „Sie beginnen mit Text und gehen zu Fotos. Von Fotos gehen Sie zu Videos, und von Videos gehen wir jetzt zu VR. Da das Kommunikationsmedium immer reicher wird, ist es auch wichtig, dass die Tools aufholen und verstehen, was dieser Inhalt ist. Wenn dies nicht der Fall ist, werden wir im Newsfeed-Ranking nicht besser sein können, wir werden keine bessere Suche beim Abrufen der Suche durchführen können, wir werden es nicht schaffen, Fotos für Blinde besser zu beschreiben, wir werden es nicht bessere Bevölkerungsdichte-Karten erstellen können. “

Beitrag von zuck.

Die relativ neue zentrale Bedeutung von künstlicher Intelligenz, maschinellem Lernen und Computer Vision ist laut Paluri eine Art "strategischer Einsatz" - aber eine Wette, die ihn begeistert. Nirgendwo sonst, wo er gearbeitet hat, gibt es eine so enge Feedback- und Antwortschleife zwischen Forschung und Entwicklung. „Indem wir es zentralisieren, verarbeiten wir mit dem Stand der Technik, wir treiben den Stand der Technik voran, und dann können sich die Produktteams und der Rest des Unternehmens daran festmachen“, sagt er.

Jetzt leitet Paluri das Computer Vision Team. „Das übergeordnete Ziel des Teams besteht darin, Maschinen so zu gestalten, wie Menschen es tun“, erklärt Paluri. „Und darüber hinaus gehen, eigentlich - über das hinausgehen, was Menschen in der Lage sind, wie zum Beispiel feinkörniges Erkennen. Wir veröffentlichen unsere Ergebnisse in Top-Konferenzen, schreiben technische Blogs und sind sehr offen, woran wir arbeiten. Insgesamt ist es unser Hauptziel, die Bildverarbeitungs-Technologie auf Facebook für die restlichen Produktgruppen bereitzustellen. “

Und das erste Produkt, das die Ernte von Paluris Team erntet, ist gerade an diesem Tag.

Hinter dem simplen, unschuldigen Schleier an diesem Tag liegt ein komplexer A.I. und ein Bildverarbeitungssystem, das Ihr Erinnerungserlebnis verfeinert. Paluri, der - wiederum - nur tangential an This This Day gebunden ist, erklärt, warum das Wiedererleben sozialer Netzwerkerinnerungen eine gute Sache sein kann:

„Nostalgie ist ein sehr positives Phänomen. Wenn Sie beispielsweise Ihr Hochzeitsfoto auf eine spontane Weise betrachten - wenn Sie nicht gezielt danach suchen, sondern nur in Ihrem News-Feed angezeigt werden, ist dies eine äußerst erfreuliche Erfahrung. Besonders wenn Sie in der Gegenwart surfen und eine positive Erinnerung aus der Vergangenheit kommt."

"Nostalgie ist ein sehr positives Phänomen."

Es gibt jedoch zweifellos eine Nostalgie, die eher auf die bittere Seite des bittersüßen Spektrums fällt. "Das erste, was mir einfällt", sagt Paluri, ist: "Solltest du all die Erinnerungen an die Oberfläche bringen? Die intuitive Antwort lautet nein, da dies von Ihrem aktuellen Status abhängt und von dem jeweiligen Speicher abhängt. es gibt viele, viele inhärente Dinge. Das ist, wo der A.I. Technologie kommt ins Bild. “

Und es gibt zwei Möglichkeiten, wie der A.I. kommt hier herein: eins: Personalisierung; zwei, inhaltliches Verständnis.

In Bezug auf Letzteres, Inhaltsverständnis: „Diese Erinnerungen sind Textspeicher, Lebensereignisse, hochgeladene Fotos oder hochgeladene Videos. Nun haben Sie also eine Fülle von Inhalten, die unterschiedliche Modalitäten haben, und das Verständnis dessen, was sich darin befindet, ist äußerst wichtig, um lernen zu können und die richtigen Erinnerungen zur Verfügung zu stellen. “

Darüber hinaus - und nicht nur für On This Day - das Inhaltsverständnis und diese A.I. Systeme helfen, durch die überwältigende Menge an Informationen, die täglich auf Facebook verfügbar sind, (Denken Sie darüber nach: Wenn Facebooks News-Feed dem von Instagram ähnelt, werden Sie feststellen, dass könnte sein zwei Prozent aller Beiträge. Stattdessen werden Sie mit Inhalten getroffen, die Ihnen wahrscheinlich gefallen, oder mit Inhalten, die Sie viel Zeit in Anspruch nehmen werden.) Und das hilft, unerwünschte Inhalte wie Pornografie herauszufiltern, mehr als die meisten anderen Websites.

"Auch wenn es ein Verlust ist, bringt es ihnen eine positive Erinnerung."

Und in Bezug auf die erstere führt Paluri aus: „Für Sie ist es vielleicht gut, positive Erinnerungen zu betrachten, und Sie mögen nichts Negatives. Aber für einen anderen möchte er vielleicht daran erinnert werden, dass er an diesem Tag seine Katze verloren hat. Auch wenn es ein Verlust ist, bringt es ihnen ein positives Gedächtnis. “In gewisser Weise hat jeder Facebook-Nutzer ein sehr persönliches Profil hinter den Kulissen, das weiß, worüber er oder sie sich erinnern wird oder nicht. „Wenn Sie mit den Erinnerungen interagieren - während Sie teilen, wie Sie möchten oder wenn Sie sie abweisen - gibt es ein Modell für das maschinelle Lernen, das das Modul zum Verständnis von Inhalten zusammen mit Ihren Präferenzen verwendet und die zukünftigen Erinnerungen personalisiert, die Ihnen serviert werden. ”

Aber machen Sie sich keine Sorgen: Facebook möchte sicherstellen, dass Sie nicht an eine Trennung oder den Tod eines Verwandten erinnert werden. „Egal wie gut das A.I. oder Machine Learning-Technologie ist, wir wollen dem Benutzer immer noch die Kontrolle überlassen, denn letztendlich besteht das Ziel darin, Erinnerungen wiederzuerwecken, die ihm gefallen. “Benutzer erhalten einen Override-Schalter:„ Wenn sie das wissen, dazwischen Dates, eine negative Sache ist passiert - sie haben sich getrennt, oder so etwas - wir möchten ihnen die volle Kontrolle darüber geben, dass diese Erinnerungen nicht aufgetaucht sind. “

Innerhalb der Einstellungen für "An diesem Tag" können Sie dann sagen Zeig mir keine Erinnerungen mit so-and-so weil er ein verabscheuungswürdiger Mensch ist oder … Aus den letzten drei Jahren die miserabel und in keiner Weise bemerkenswert waren.

Mit Blick auf die Zukunft erklärt Paluri, warum er begeistert ist, weiter an der Entwicklung dieser Systeme zu arbeiten und die Qualität des Mainboards von Facebook zu verbessern.

Sie haben bereits andere Anwendungen für Bildverarbeitungssysteme in Facebook erwähnt. Gibt es noch etwas, was noch in Arbeit ist - das diese Systeme einsetzt - das Sie begeistert?

All diese Fähigkeiten in Videos sind sicher etwas, das mich aufregt. Das existiert definitiv schon; Es ist eine fortlaufende Sache, weil Videos auf Facebook ziemlich groß sind. Aber ich denke, wir wollen auf einer gewissen Ebene reicher werden, wenn wir es verstehen. Die derzeitige Computer Vision-Technologie ist immer noch nicht vorhanden, wenn es darum geht, Bilder so zu beschreiben, wie Menschen es tun. Es könnte Ihnen sagen, dass dieses Foto diese Dinge hat, dass dies das Pixel ist, das der Katze gehört, und so weiter - aber es ist begrenzt. Es versteht immer noch nicht die Beziehung zwischen den Dingen und beschreibt es immer noch nicht auf menschliche Weise.

Es gibt einige Arbeiten, die Bilder beschreiben - es wird als Bilduntertitel bezeichnet. In den letzten zwei Jahren gab es eine Reihe von Arbeiten. Wenn Sie sich jedoch die Bildunterschriften ansehen, die diese Systeme generieren, sind sie sehr allgemein. Sie sind nicht beschreibend. Eines, das wir uns wünschen und das in Zukunft von unserer Seite kommen wird, ist es, sie viel reicher zu beschreiben. Sowohl für Bilder als auch für Videos. Wenn Sie ein zweiminütiges Video haben, möchten Sie keine Beschreibung mit einem Satz. Was Sie wollen, ist ein Absatz mit einem zeitlichen Sinn für die Beschreibung, richtig? "Das ist passiert, dann ist es passiert, dann ist es passiert", richtig? Das ist ein gutes Verständnis.

Sie wollen mich also aus meinem Job rausschmeißen, sagen Sie. Zusamenfassend.

Lacht Nein, definitiv nicht. Ich mache deinen Job interessanter.

Haben Sie das Gefühl, Facebook ist ein seltsamer Ort für diese Forschung oder ist es ein perfekter Ort?

Ich denke, es ist ein perfekter Ort, weil das Verständnis von Inhalten in der DNA von Facebook liegt. Wenn Sie sich die Explosion der Nutzung von Facebook anschauen, ist News Feed eine der Säulen, die Facebook zu einem erstaunlichen sozialen Netzwerk gemacht haben, verglichen mit vielen anderen Konkurrenten. Der News-Feed ist immer noch der Hauptvertriebskanal.

Aber wenn Sie zu News Feed kommen, haben Sie keine bestimmte Absicht. Sie kommen dort zur Information. Es ist also wichtig, dass wir Ihnen die richtigen Dinge zeigen und Ihnen sinnvolle Dinge zeigen. Wenn Sie zu anderen Diensten gehen, gehen Sie möglicherweise mit Absicht vor. In diesem Fall muss der Dienst nur die Antwort geben. Es ist, als würde ich Ihnen die Frage stellen und Ich gebe dir die Antwort. Sie müssen also wirklich sehr gut sein, damit jemand wiederkommt.

Deshalb ist A.I. und Inhaltsverständnis ist der Kern von Facebook und warum dies der beste Ort dafür ist. Angesichts der Menge an Medien, die auf Facebook zu finden ist, da es sich bei Facebook um Inhalte und Videos und um mehr Videos und VR handelt, ist dies der beste Ort, um A.I. Forschung, Computer Vision und maschinelles Lernen.

Es ist kein sonderbarer Ort: es ist das Platz.