Reverse image search is one of the most well-known and easiest Digital investigative techniques, with two-click functionality of choosing „Search Google for image” in many web browsers. Metoda ta znalazła również szerokie zastosowanie w kulturze popularnej, być może przede wszystkim w programie MTV Catfish, który eksponuje ludzi w relacjach online, którzy używają skradzionych zdjęć w swoich mediach społecznościowych.

jednak, jeśli używasz Google tylko do wyszukiwania odwrotnego obrazu, będziesz rozczarowany częściej niż nie. Ograniczenie procesu wyszukiwania do przesłania zdjęcia w oryginalnej formie do images.google.com może dać użyteczne wyniki dla najbardziej oczywiście skradzionych lub popularnych obrazów, ale dla większości wyrafinowanych projektów badawczych potrzebujesz dodatkowych stron do swojej dyspozycji-wraz z dużą kreatywnością.

Ten przewodnik omówi szczegółowe strategie wykorzystania odwrotnego wyszukiwania obrazów w badaniach cyfrowych, z myślą o identyfikacji osób i lokalizacji, wraz z określeniem potomstwa obrazu. Po wyszczególnieniu podstawowych różnic między wyszukiwarkami, Yandex, Bing i Google są testowane na pięciu obrazach testowych pokazujących różne obiekty z różnych regionów świata.

poza Google

pierwsza i najważniejsza rada na ten temat nie może być wystarczająco podkreślona: Google reverse image search nie jest zbyt dobra.

od daty publikacji tego przewodnika niekwestionowanym liderem wyszukiwania odwrotnego obrazu jest rosyjska strona Yandex. Po Yandex, wicemistrzami są Bing i Google Microsoftu. Czwartą usługą, która może być również wykorzystana w dochodzeniach jest TinEye, ale ta strona specjalizuje się w naruszeniach własności intelektualnej i szuka dokładnych duplikatów obrazów.

Yandex

Yandex jest zdecydowanie najlepszą odwróconą wyszukiwarką obrazów, z przerażająco potężną zdolnością rozpoznawania twarzy, krajobrazów i obiektów. Ta rosyjska strona w dużym stopniu korzysta z Treści Generowanych przez użytkowników, takich jak witryny z recenzjami turystycznymi (np. FourSquare i TripAdvisor) i sieci społecznościowe (np. serwisy randkowe), aby uzyskać niezwykle dokładne wyniki z zapytaniami o rozpoznawanie twarzy i krajobrazu.

jej atutami są fotografie wykonane w kontekście europejskim lub byłym Radzieckim. Podczas gdy zdjęcia z Ameryki Północnej, Afryki i innych miejsc mogą nadal zwracać przydatne wyniki na Yandex, możesz być sfrustrowany przewijaniem wyników głównie z Rosji, Ukrainy i Europy Wschodniej, a nie Kraju docelowych obrazów.

aby użyć Yandex, przejdź do images.yandex.com następnie wybierz ikonę aparatu po prawej stronie.

stamtąd możesz przesłać zapisany obraz lub wpisać adres URL jednego hostowanego online.

Jeśli utkniesz z rosyjskim interfejsem użytkownika, zwróć uwagę na Выберите файл (Wybierz plik), Введите адрес картинки (wprowadź adres obrazu) i Найти (Szukaj). Po przeszukaniu zwróć uwagę na Похожие картинки (podobne obrazy) i Ещё похожие (bardziej podobne).

algorytmy rozpoznawania twarzy używane przez Yandex są szokująco dobre. Yandex nie tylko będzie szukał zdjęć, które wyglądają podobnie do tych, które mają w sobie twarz, ale będzie również szukał innych zdjęć tej samej osoby (określonych poprzez dopasowanie podobieństw twarzy) z zupełnie innym oświetleniem, kolorami tła i pozycjami. Podczas gdy Google i Bing mogą po prostu szukać innych zdjęć przedstawiających osobę o podobnych ubraniach i ogólnych rysach twarzy, Yandex będzie wyszukiwać te mecze, a także inne zdjęcia dopasowania twarzy. Poniżej możesz zobaczyć, jak trzy służby przeszukały twarz Siergieja Dubinsky ’ ego, rosyjskiego podejrzanego o strącenie MH17. Yandex znalazł liczne zdjęcia Dubinsky ’ ego z różnych źródeł (tylko dwa z najlepszych wyników miały niepowiązane osoby), przy czym wynik różnił się od oryginalnego obrazu, ale pokazywał tę samą osobę. Google w ogóle nie miał szczęścia, podczas gdy Bing miał pojedynczy wynik (piąty obraz, drugi rząd), który również pokazał Dubinsky.

Yandex jest oczywiście rosyjskim serwisem i istnieją obawy i podejrzenia dotyczące jego powiązań (lub potencjalnych przyszłych powiązań) z Kremlem. Podczas gdy my w Bellingcat stale używamy Yandex do jego możliwości wyszukiwania, możesz być nieco bardziej paranoiczny niż my. Używaj Yandex na własne ryzyko, zwłaszcza jeśli martwisz się również o korzystanie z VK i innych rosyjskich usług. Jeśli nie jesteś szczególnie paranoikiem, spróbuj przeszukać niezindeksowane zdjęcie siebie lub kogoś, kogo znasz w Yandex i sprawdź, czy może znaleźć Ciebie lub Twojego sobowtóra w Internecie.

Bing

w ciągu ostatnich kilku lat Bing dogonił Google w swoich odwróconych możliwościach wyszukiwania obrazów, ale nadal jest ograniczony. „Wyszukiwanie wizualne” Binga, znalezione na images.bing.com, jest bardzo łatwy w użyciu i oferuje kilka ciekawych funkcji, których nie ma gdzie indziej.

w ramach wyszukiwania obrazu, Bing pozwala przyciąć zdjęcie (przycisk pod obrazem źródłowym), aby skupić się na konkretnym elemencie na tym zdjęciu, jak pokazano poniżej. Wyniki z przyciętym obrazem wykluczą elementy obce, koncentrując się na polu zdefiniowanym przez użytkownika. Jeśli jednak wybrana część obrazu jest mała, warto ręcznie przyciąć zdjęcie i zwiększyć rozdzielczość — zdjęcia o niskiej rozdzielczości (poniżej 200×200) przywracają słabe wyniki.

poniżej, zdjęcie Google Street View przedstawiające mężczyznę chodzącego po kilku mopsach zostało przycięte, aby skupić się tylko na psiakach, co doprowadziło do zasugerowania przez Binga rasy psów widocznej na zdjęciu (funkcja „wygląda”), wraz z podobnymi wizualnie wynikami. Wyniki te obejmowały głównie pary psów chodzonych, pasujące do obrazu źródłowego, ale nie zawsze obejmowały tylko mopsy, ponieważ buldogi francuskie, buldogi angielskie, mastify i inne są mieszane.

Google

zdecydowanie najpopularniejsza wyszukiwarka obrazów odwrotnych, na images.google.com, Google jest w porządku dla większości podstawowych wyszukiwania odwrotnego obrazu. Niektóre z tych stosunkowo prostych zapytań obejmują identyfikację znanych osób na zdjęciach, znalezienie źródła obrazów, które zostały udostępnione w Internecie, określenie nazwy i twórcy dzieła sztuki i tak dalej. Jeśli jednak chcesz zlokalizować obrazy, które nie są zbliżone do dokładnej kopii tego, który badasz, możesz być rozczarowany.

na przykład, szukając twarzy mężczyzny, który próbował zaatakować dziennikarza BBC na wiecu Trumpa, Google może znaleźć źródło przyciętego obrazu, ale nie może znaleźć żadnych dodatkowych zdjęć, ani nawet kogoś, kto jest do niego podobny.

chociaż Google nie był zbyt silny w znajdowaniu innych przypadków twarzy tego mężczyzny lub podobnych osób, nadal znalazł oryginalną, nie przyciętą wersję zdjęcia, z którego został zrobiony zrzut ekranu, pokazując pewną użyteczność.

pięć przypadków testowych

do testowania różnych technik i silników wyszukiwania odwrotnego obrazu używana jest garść obrazów reprezentujących różne rodzaje badań, w tym zarówno oryginalne zdjęcia (wcześniej nie przesłane online), jak i pochodzące z recyklingu. Ze względu na fakt, że zdjęcia te są zawarte w tym przewodniku, jest prawdopodobne, że te przypadki testowe nie będą działać zgodnie z przeznaczeniem w przyszłości, ponieważ wyszukiwarki będą indeksować te zdjęcia i integrować je z wynikami. W związku z tym dołączono zrzuty ekranu z wynikami pojawiającymi się podczas pisania tego przewodnika.

te zdjęcia testowe obejmują wiele różnych regionów geograficznych, aby sprawdzić siłę wyszukiwarek dla materiałów źródłowych w Europie Zachodniej, Europie Wschodniej, Ameryce Południowej, Azji Południowo-Wschodniej i Stanach Zjednoczonych. Z każdym z tych zdjęć, mam również podświetlone dyskretne obiekty w obrazie, aby przetestować mocne i słabe strony dla każdej Wyszukiwarki.

możesz pobrać te zdjęcia (każdy obraz w tym przewodniku jest bezpośrednio połączony z plikiem JPEG) i samodzielnie uruchomić je w wyszukiwarkach, aby sprawdzić swoje umiejętności.

Pałac Olisov w Niżnym Nowogrodzie, Rosja (oryginał, wcześniej nie zamieszczony w Internecie)

izolowany: Biały SUV w Niżnym Nowogrodzie

izolowany: Przyczepa w Niżnym Nowogrodzie

cityscape in Cebu, Philippines (original, not previously uploaded online)

izolowany: kompleks kondominium, „the Padgett place”

: „Waterfront Hotel”

studenci z reklamy Bloomberg 2020 (zrzut ekranu z filmu)

Izolacja: Student

AV. do Café w São Paulo, Brazylia (zrzut ekranu z Google Street View)

izolowane: Toca do Açaí

izolowane: Estacionamento (Parking)

Izolacja: czapla siwa

izolowane: flaga Holandii (również obrócona o 90 stopni zgodnie z ruchem wskazówek zegara)

wyniki

każda z tych fotografii została wybrana w celu zademonstrowania możliwości i ograniczeń trzech wyszukiwarek. Podczas gdy w szczególności Yandex może wydawać się, że czasami działa cyfrowa czarna magia, jest daleki od nieomylności i może zmagać się z niektórymi rodzajami wyszukiwań. Aby uzyskać kilka sposobów na przezwyciężenie tych ograniczeń, pod koniec tego przewodnika wyszczególniłem kilka kreatywnych strategii wyszukiwania.

Novgorod ’ s Olisov Palace

Wraz ze zdjęciami pod podobnym kątem do naszej fotografii źródłowej, Yandex znalazł również obrazy z innych perspektyw, w tym 90 stopni w lewo (patrz pierwsze dwa obrazy w trzecim rzędzie) z punktu widzenia obrazu źródłowego.

Yandex również nie miał problemów z identyfikacją białego SUV-a na pierwszym planie zdjęcia jako Nissan Juke.

wreszcie, w najtrudniejszym odosobnionym poszukiwaniu tego obrazu, Yandex nie zdołał zidentyfikować nieopisanej szarej przyczepy przed budynkiem. Wiele wyników wygląda jak ten z obrazu źródłowego, ale żaden nie pasuje.

Bing nie zdołał zidentyfikować tej struktury. Prawie wszystkie jego wyniki pochodzą ze Stanów Zjednoczonych i Europy Zachodniej, pokazując domy z białym/szarym murem lub bocznicą i brązowymi dachami.

podobnie, Bing nie mógł określić, że biały SUV to Nissan Juke, zamiast tego skupiając się na szeregu innych białych SUV-ów i samochodów.

wreszcie, Bing nie zidentyfikował szarej przyczepy, skupiając się bardziej na RV i większych, szarych kamperach.

wyniki Google dla pełnego zdjęcia są komicznie złe, patrząc na serial telewizyjny i zdjęcia z bardzo małym podobieństwem wizualnym.

Google z powodzeniem zidentyfikował białego Suva jako Nissana Juke, nawet zaznaczając go w polu tekstowym. Jak widać w przypadku Yandex, podawanie wyszukiwarce obrazu z podobnej perspektywy, jak popularne materiały referencyjne — widok z boku samochodu, który przypomina widok większości reklam-najlepiej pozwoli algorytmom odwrotnego obrazu działać magicznie.

wreszcie Google rozpoznało, czym jest szary trailer (Trailer podróżny / camper), ale jego „wizualnie podobne obrazy” były dalekie od niego.

karta wyników: Yandex 2/3; Bing 0/3; Google 1/3

Cebu

Yandex był w stanie technicznie zidentyfikować krajobraz miasta jako krajobraz Cebu na Filipinach, ale być może tylko przez przypadek. Czwarty wynik w pierwszym rzędzie i czwarty wynik w drugim rzędzie to Cebu, ale tylko drugie zdjęcie pokazuje jeden z tych samych budynków, co Na zdjęciu źródłowym. Wiele wyników pochodzi również z Azji Południowo-Wschodniej (zwłaszcza Tajlandii, która jest popularnym miejscem dla rosyjskich turystów), zauważając podobne style architektoniczne, ale żaden nie jest z tej samej perspektywy, co źródło.

z dwóch budynków odizolowanych od poszukiwań (Padgett Palace i Waterfront Hotel), Yandex był w stanie zidentyfikować ten drugi, ale nie pierwszy. Budynek Padgett Palace jest stosunkowo nijakim wieżowcem wypełnionym mieszkaniami, podczas gdy Hotel Waterfront ma również kasyno wewnątrz, co prowadzi do szeregu zdjęć turystycznych pokazujących jego bardziej wyraźną architekturę.

Bing nie miał żadnych wyników, które były nawet w Azji Południowo-Wschodniej podczas wyszukiwania panoramy miasta Cebu, wykazując poważne ograniczenie geograficzne do indeksowanych wyników.

podobnie jak Yandex, Bing nie był w stanie zidentyfikować budynku po lewej stronie obrazu źródłowego.

Bing nie był w stanie znaleźć hotelu Waterfront, zarówno podczas korzystania z funkcji kadrowania Binga (przywracanie tylko zdjęć o niskiej rozdzielczości), jak i ręcznego kadrowania i zwiększania rozdzielczości budynku z obrazu źródłowego. Warto zauważyć, że wyniki z tych dwóch wersji obrazu, które były identyczne poza rozdzielczością, przyniosły dramatycznie różne wyniki.

podobnie jak w przypadku Yandex, Google przywróciło zdjęcie Cebu w swoich wynikach, ale bez silnego podobieństwa do obrazu źródłowego. Chociaż Cebu nie było w miniaturach początkowych wyników, przechodząc do „wizualnie podobnych obrazów”, uzyskamy obraz panoramy Cebu jako jedenasty wynik (trzeci obraz w drugim rzędzie poniżej).

podobnie jak w przypadku Yandex i Bing, Google nie było w stanie zidentyfikować wieżowca w lewej części obrazu źródłowego. Google również nie odniósł sukcesu z wizerunkiem hotelu Waterfront.

karta wyników: Yandex 4/6; Bing 0/6; Google 2/6

Bloomberg 2020 Student

Yandex znalazł zdjęcie źródłowe z tej reklamy kampanii Bloomberg — a Zdjęcie stockowe Getty Images. Wraz z tym Yandex znalazł również wersje zdjęcia z zastosowanymi filtrami (drugi wynik, pierwszy rząd) i dodatkowe zdjęcia z tej samej serii zdjęć stockowych. Ponadto, z jakiegoś powodu, porno, jak widać w niewyraźnych wynikach poniżej.

podczas izolowania tylko twarzy modelu ze zdjęciami stockowymi, Yandex przyniósł kilka innych ujęć tego samego faceta (patrz ostatni obraz w pierwszym rzędzie), plus obrazy tego samego zdjęcia stockowego ustawione w klasie (patrz czwarty obraz w pierwszym rzędzie).

Bing miał ciekawy wynik wyszukiwania: znalazł dokładne dopasowanie fotografii stockowej, a następnie przywrócił „podobne obrazy” innych mężczyzn w niebieskich koszulach. Zakładka” strony z tą ” wyników dostarcza poręcznej listy zduplikowanych wersji tego samego obrazu w całej sieci.

skupienie się tylko na twarzy modelu zdjęcia stockowego nie przynosi żadnych użytecznych wyników ani nie zapewnia obrazu źródłowego, z którego zostało zrobione.

Google uznaje, że obraz używany przez kampanię Bloomberg jest zdjęciem stockowym, przywracając dokładny wynik. Google dostarczy również inne zdjęcia stockowe osób w niebieskich koszulach w klasie.

w izolowaniu ucznia Google ponownie zwróci Źródło zdjęcia stockowego, ale jego wizualnie podobne obrazy nie pokazują modelu zdjęcia stockowego, a raczej szereg innych mężczyzn o podobnych zarostach. Policzymy to jako połowę wygranej w znalezieniu oryginalnego obrazu, ale nie pokazując żadnych informacji na temat konkretnego modelu, jak to zrobił Yandex.

karta wyników: Yandex 6/8; Bing 1/8; Google 3.5/8

Brazilian Street View

Yandex nie mógł się domyślić, że ten obraz został nakręcony w Brazylii, zamiast tego skupiając się na miejskich krajobrazach w Rosji.

dla Toca do Açaí, z jakiegoś powodu Yandex głównie przyniósł porno Jako wyniki. Te obrazy były rozmyte i możesz kliknąć tutaj, aby zobaczyć wyniki. Jednak pomimo niewyraźnego porno, dwa wyniki poprawnie zidentyfikowały logo.

dla znaku parkowania, Yandex nawet się nie zbliżył.

…ani Bing nie rozpoznał znaku parkowania…

…ani logo Toca do Açaí.

pomimo faktu, że zdjęcie zostało pobrane bezpośrednio z Google Street View, Google reverse image search nie rozpoznało zdjęcia przesłanego do własnej usługi.

podobnie jak Bing i Yandex, Google nie mógł rozpoznać portugalskiego znaku parkowania.

wreszcie, Google nie zbliżył się do identyfikacji logo Toca do Açaí, zamiast skupić się na różnych rodzajach drewnianych paneli, pokazując, jak koncentruje się na tle obrazu, a nie logo i słowa.

karta wyników: Yandex 7/11; Bing 1/11; Google 3.5/11

kanał Amsterdamski

Yandex wiedział dokładnie, gdzie to zdjęcie zostało zrobione w Amsterdamie, znajdując inne zdjęcia zrobione w centrum Amsterdamu, a nawet te z różnymi rodzajami ptaków w kadrze.

Yandex prawidłowo zidentyfikował ptaka na pierwszym planie zdjęcia jako czaplę siwą (серая цапля), przywracając również szereg obrazów czapli siwych w podobnej pozycji i pozycji jak zdjęcie źródłowe.

jednak Yandex oblał test identyfikacji holenderskiej flagi wiszącej w tle zdjęcia. Podczas obracania obrazu o 90 stopni zgodnie z ruchem wskazówek zegara, aby przedstawić flagę w normalnym wzorze, Yandex był w stanie dowiedzieć się, że jest to flaga, ale nie zwrócił żadnych Holenderskich FLAG w swoich wynikach.