W jednym roku funkcja „W tym dniu” ilustruje sposób, w jaki A.I. Zmienia Facebooka

Rok temu Facebook opublikował funkcję „On This Day”. Odwrotność rozmawiał z Manoharem Paluri, kierownikiem ds. badań wizyjnych na Facebooku, o tym, jak sztuczna inteligencja, uczenie maszynowe i wizja komputerowa czynią tę funkcję bardziej znaczącą - i jak te obszary badań i rozwoju będą w dalszym ciągu poprawiać wrażenia na Facebooku w nadchodzących latach.

Nawet jeśli sam nie korzystałeś z funkcji „Tego dnia”, widziałeś te posty w swoim kanale informacyjnym; widziałeś, jak znajomy ponownie udostępniał wydarzenie ze swojej przeszłości na Facebooku. Nie mogę uwierzyć, że minęły trzy lata, odkąd magik wyciągnął królika z kapelusza! w połączeniu ze zdjęciem wspomnianego magika wyciągającego królika ze wspomnianego kapelusza. Coś podobnego do tego. A dziś Facebook dzieli się własną pamięcią. Tego dnia, rok temu, Facebook uruchomił W tym dniu. (Teraz, w tym dniu może pochwalić się ponad 60 milionami dziennych odwiedzin, a 155 milionów subskrybuje jego powiadomienia.)

Ale dla Facebooka ta pamięć jest mniej sentymentalna niż kamień milowy. Facebook konsekwentnie rozwija nowe funkcje, a funkcje te są stale analizowane i modyfikowane. Czasami to ludzie, jak Paluri i jego zespół, robią szczypanie; innym razem to A.I.s. Najczęściej jednak jest symbiotyczny. Facebook jest jak cyborg, a ten cyborg ma taki raison d’être: aby Twoje doświadczenia z Facebookiem były jak przyjemny jak to możliwe.

Wizja komputerowa, zrozumienie treści i A.I. oddział na Facebooku można zobaczyć - jeśli tak - jako płytę główną cyborga. A Paluri, aby kontynuować metaforę, jest rodzajem centralnej jednostki przetwarzania dla tej płyty głównej. Paluri pracuje nad wizją komputerową od ponad dziesięciu lat, a on nie jest drobiazgiem: zaczął w SRI, przeniósł się do laboratoriów IBM Watson i stamtąd przeskoczył do Google. A teraz jest w Menlo Park na Facebooku. Kiedy dołączył, jego projekt stażu w zakresie rozpoznawania wizualnego zakończył się jako „kręgosłup”, mówi, technologii obrazowania i rozumienia wideo na Facebooku. I ten silnik rozpoznawania wizualnego staje się coraz bardziej centralny dla Facebooka.

„Jeśli spojrzysz na korzystanie z Facebooka w czasie - i jest to przykład, który Mark Zuckerberg często cytuje - widzisz, że dzielone są bogatsze i bogatsze media, a ludzie używają tego do łączenia się”, mówi Paluri. „Zaczynasz od tekstu, przechodzisz do zdjęć; ze zdjęć, które przechodzisz do filmów, oraz z filmów, które teraz przechodzimy do VR. Ponieważ medium komunikacyjne staje się bogatsze i bogatsze, ważne jest również, aby narzędzia nadrabiały zaległości, aby narzędzia rozumiały, czym jest ta treść. Jeśli tego nie zrobimy, nie będziemy w stanie lepiej radzić sobie w rankingu kanałów informacyjnych, nie będziemy w stanie lepiej wyszukiwać, nie będziemy w stanie lepiej opisywać zdjęć dla osób niewidomych, nie będziemy w stanie zbudować lepsze mapy gęstości zaludnienia. ”

Post przez zuck.

Stosunkowo nowa centralność sztucznej inteligencji, uczenia maszynowego i wizji komputerowej, mówi Paluri, to trochę „zakład strategiczny” - ale zakład, który go podnieca. Nigdzie indziej nie ma tak silnego sprzężenia zwrotnego i pętli reakcji między badaniami a inżynierią. „Dzięki scentralizowaniu przetwarzamy najnowocześniejsze rozwiązania, wykorzystujemy najnowocześniejsze rozwiązania, a następnie zespoły produktowe i reszta firmy mogą się do tego przyczepić”, mówi.

Teraz Paluri zarządza zespołem komputerowym. „Celem zespołu na wysokim poziomie jest sprawienie, aby maszyny zobaczyły sposób, w jaki robią to ludzie” - wyjaśnia Paluri. „A nawet wykroczenie poza to, co jest w stanie wykraczać poza to, na co ludzie są zdolni, na przykład w kierunku drobnoziarnistego rozpoznawania. Publikujemy nasze odkrycia na najlepszych konferencjach, piszemy blogi techniczne i jesteśmy bardzo otwarci na to, nad czym pracujemy. Ogólnie naszym głównym celem jest wprowadzenie technologii wizji komputerowej do pozostałych grup produktów na Facebooku ”.

A najlepszym produktem, który zbiera żniwa zespołu Paluriego, jest właśnie ten dzień.

Za uproszczoną, niewinną zasłoną, która jest Tego Dnia, leży złożony A.I. i komputerowy system wizyjny, który dostosowuje twoje doświadczenie mnemoniczne. Paluri, który - ponownie - jest tylko stycznie związany z „Tego dnia”, wyjaśnia, dlaczego przeżycie wspomnień sieci społecznościowych może być dobrą rzeczą:

„Nostalgia to bardzo pozytywne zjawisko. Widząc na przykład Twoje zdjęcie ślubne, na przykład w sposób improwizowany - kiedy nie przeglądasz go specjalnie, ale po prostu pojawia się w Twoim kanale informacyjnym - jest to niezwykle przyjemne doświadczenie. Zwłaszcza gdy przeglądasz w teraźniejszości, a pozytywna pamięć pochodzi z przeszłości. ”

„Nostalgia to bardzo pozytywne zjawisko”.

Jest jednak niewątpliwie nostalgia, która spada bardziej na gorzką stronę słodko-gorzkiego spektrum. „Pierwsze, co przychodzi mi do głowy”, mówi Paluri: „Czy powinieneś wynurzyć wszystkie wspomnienia? Intuicyjna odpowiedź brzmi: nie, ponieważ zależy to od aktualnego stanu, zależy od konkretnej pamięci; istnieje wiele, wiele rzeczy wewnętrznych. Tam właśnie znajduje się A.I. technologia pojawia się na zdjęciu. ”

I są dwa sposoby, w jakie A.I. wchodzi, tutaj: jeden, personalizacja; dwa, zrozumienie treści.

W odniesieniu do tego ostatniego, zrozumienie treści: „Te wspomnienia to wspomnienia tekstowe, wydarzenia życiowe, zdjęcia, które przesłałeś lub filmy, które przesłałeś. Tak więc teraz masz mnóstwo treści o różnych modalnościach, a zrozumienie tego, co tam jest, jest niezwykle ważne, aby móc się uczyć i zapewnić odpowiedni zestaw wspomnień. ”

Dodatkowo - i nie tylko dla On This Day - zrozumienie treści i tych A.I. systemy pomagają zaradzić przytłaczającej ilości informacji na Facebooku każdego dnia. (Pomyśl o tym: gdyby kanał informacyjny Facebooka przypominał ten z Instagrama, zobaczyłbyś może dwa procent wszystkich postów. Zamiast tego spotykasz się z treścią, która prawdopodobnie Ci się spodoba, lub z treścią, którą poświęcasz dużo czasu.) I pomaga odfiltrować niepożądane treści, takie jak pornografia, bardziej niż większość innych witryn internetowych.

„Nawet jeśli jest to strata, przynosi im pozytywną pamięć”.

W odniesieniu do tego pierwszego Paluri wyjaśnia: „Może dla ciebie, patrzenie na pozytywne wspomnienia jest dobre, a ty nie lubisz niczego negatywnego. Ale dla kogoś innego, może chcą przypomnieć sobie, że tego dnia stracili kota. Mimo że jest to strata, przynosi im pozytywną pamięć. ”I w pewnym sensie każdy użytkownik Facebooka ma wysoce spersonalizowany, zakulisowy profil, który wie, co on lub ona nie będzie chciał wspominać. „Podczas interakcji ze wspomnieniami - w miarę dzielenia się, jak chcesz lub gdy odrzucasz - istnieje model uczenia maszynowego, który wykorzystuje moduł rozumienia treści, wraz z Twoimi preferencjami, i personalizuje przyszłe wspomnienia, które będą Ci podawane. ”

Ale nie martw się: Facebook chce się upewnić, że nie jesteś niegrzecznie przypominany o rozpadzie lub śmierci krewnego. „Bez względu na to, jak dobry jest A.I. lub technologia uczenia maszynowego, nadal będziemy chcieli kontrolować użytkownika, ponieważ pod koniec dnia naszym celem jest ponowne wyeksponowanie wspomnień, które im się podobają. ”Użytkownicy otrzymują przełącznik wymuszający:„ Jeśli to wiedzą, między nimi daty, wydarzyła się negatywna rzecz - rozpadli się, czy coś - chcemy dać im pełną kontrolę nad tym, żeby nie wypłynąć na te wspomnienia. ”

W ramach preferencji dla tego dnia można powiedzieć Nie pokazuj mi wspomnień z takim a takim ponieważ jest podłym człowiekiem lub … Od ostatnich trzech lat które były nieszczęśliwe iw żaden sposób nie warte uwagi.

Patrząc w przyszłość, Paluri wyjaśnia, dlaczego jest zachwycony kontynuowaniem prac nad rozwojem tych systemów i poprawą jakości płyty głównej Facebooka.

Wspomniałeś już o innych aplikacjach na systemy wizyjne i do rozumienia treści na Facebooku. Czy jest jeszcze coś, co wciąż jest w pracy - która wykorzystuje te systemy - która cię ekscytuje?

Wszystkie te funkcje filmów wideo na pewno mnie podniecają. To już na pewno istnieje; to ciągła sprawa, ponieważ wideo na Facebooku jest dość duże. Ale myślę, że na pewnym poziomie chcemy się wzbogacić i wzbogacić w zrozumieniu. Obecna technologia widzenia komputerowego nadal nie istnieje w zakresie opisywania obrazów w sposób, w jaki robią to ludzie. Może ci powiedzieć, że to zdjęcie ma te rzeczy, że jest to piksel, który należy do kota, i tak dalej - ale jest ograniczony. Nadal nie rozumie związku między rzeczami i nadal nie opisuje tego w sposób ludzki.

Jest tam trochę pracy opisującej obrazy - nazywa się to napisami do obrazów. W ciągu ostatnich dwóch lat ukazało się kilka prac. Ale jeśli spojrzysz na napisy generowane przez te systemy, są one bardzo ogólne. Nie są opisowe. Jedną z rzeczy, które chcielibyśmy, a która przyjdzie w przyszłości z naszej strony, jest opisanie ich w znacznie bogatszy sposób. Zarówno dla obrazów, jak i wideo. Jeśli masz dwuminutowy film, nie chcesz opisu jednego zdania; czego potrzebujesz akapit z wyczuciem czasu do opisu, prawda? „To się stało, potem to się stało, a potem tak się stało”, prawda? To dobre zrozumienie.

Tak więc mówisz, że chcesz mnie znokautować. W skrócie.

Śmiech Nie, zdecydowanie nie. Robię twoją pracę bardziej interesującą.

Czy uważasz, że Facebook jest dość dziwnym miejscem do przeprowadzenia tego badania, czy jest to idealne miejsce?

Myślę, że to idealne miejsce, ponieważ zrozumienie treści znajduje się w DNA Facebooka. Jeśli spojrzeć na eksplozję korzystania z Facebooka, News Feed to jeden z filarów, który pozwolił Facebookowi być niesamowitą siecią społecznościową w porównaniu z wieloma innymi konkurentami. Nadal głównym kanałem dystrybucji jest kanał informacyjny.

Ale kiedy przychodzisz do kanału informacyjnego, nie masz określonego zamiaru. Przychodzisz tam po informacje. Jest więc dla nas bardzo ważne, aby pokazać ci właściwe rzeczy, pokazać ci znaczące rzeczy. Jeśli idziesz na inne usługi, może idziesz z zamiarem, w którym to przypadku cała usługa musi dać odpowiedź. To tak, jakbym dawał ci pytanie i Daję ci odpowiedź. Więc musisz być naprawdę dobry, żeby ktoś wracał.

Dlatego właśnie A.I. a zrozumienie treści jest podstawą Facebooka i dlaczego jest to najlepsze miejsce na to. Biorąc pod uwagę, ile mediów jest - biorąc pod uwagę, ile treści na Facebooku dotyczy zdjęć i filmów, a także przejście na coraz więcej wideo i VR - to najlepsze miejsce, aby robić A.I. badania, wizja komputerowa i uczenie maszynowe.

To nie jest dziwne miejsce: to jest miejsce.