Tersine görsel arama - Reverse image search

Ters görsel arama kullanarak Google görüntüleri.

Tersine görsel arama bir içerik tabanlı görüntü alma (CBIR) sorgu CBIR sistemine, daha sonra araştırmasını temel alacağı bir örnek görüntü sağlamayı içeren teknik; açısından bilgi alma, örnek görüntü, bir arama sorgusunu formüle eden şeydir. Özellikle, tersine görsel arama, arama terimlerinin eksikliği ile karakterize edilir. Bu, bir kullanıcının doğru bir sonuç verebilecek veya vermeyebilecek anahtar kelimeleri veya terimleri tahmin etme ihtiyacını etkili şekilde ortadan kaldırır. Tersine görsel arama, kullanıcıların belirli bir örnek görselle ilgili içeriği keşfetmesine de olanak tanır,[1] bir görüntünün popülerliğini ve değiştirilmiş sürümleri ve türev çalışmalarını keşfedin.[2]

Kullanımlar

Ters görüntü araması şu amaçlarla kullanılabilir:[3]

  • Bir görüntünün kaynağını bulun.
  • Daha yüksek çözünürlüklü sürümleri bulun.
  • Görselin göründüğü web sayfalarını keşfedin.
  • İçerik oluşturucuyu bulun.
  • Bir resim hakkında bilgi alın.

Algoritmalar

Yaygın olarak kullanılan ters görüntü arama algoritmaları şunları içerir:[4]

Popüler arama sistemlerinde uygulama

Google görüntüleri

Google'ın Görselle Ara tersine görsel aramayı kullanan ve kullanıcıların yalnızca bir resim veya görsel URL'si yükleyerek ilgili görselleri aramasına olanak tanıyan bir özelliktir. Google bunu, gönderilen resmi analiz ederek ve gelişmiş algoritmalar kullanarak matematiksel bir modelini oluşturarak gerçekleştirir. Ardından, eşleşen ve benzer sonuçlar döndürülmeden önce Google'ın veritabanlarındaki milyarlarca başka görselle karşılaştırılır. Mevcut olduğunda, Google ayrıca meta veriler açıklama gibi görüntü hakkında.

TinEye

TinEye tersine görsel arama için uzmanlaşmış bir arama motorudur. Bir görüntünün gönderilmesinin ardından TinEye, söz konusu görüntünün "benzersiz ve kompakt bir dijital imzasını veya parmak izini" oluşturur ve onu diğer indekslenmiş görüntülerle eşleştirir.[6] Bu prosedür, gönderilen görüntünün çok düzenlenmiş sürümleriyle bile eşleşebilir, ancak genellikle sonuçlarda benzer görüntüler döndürmez.[7]

Pixsy

Pixsy ters görüntü arama teknolojisi, görüntü eşleşmelerini algılar[8] Pixsy platformuna yüklenen resimler için halka açık internette[9]. Yeni eşleşmeler otomatik olarak algılanır ve kullanıcıya uyarılar gönderilir. Yetkisiz kullanım için Pixsy, tazminat kurtarma hizmeti sunar[10][11] görsel sahiplerinin ticari kullanımı için çalışır. Pixsy, telif hakkı ihlaline çözüm getirmek için dünya çapında 25'ten fazla hukuk firması ve avukatla ortaktır. Pixsy, Flickr platformu ve kullanıcısı için stratejik görüntü izleme hizmetidir[12].

eBay

eBay ShopBot, ürünleri kullanıcı tarafından yüklenen bir fotoğrafa göre bulmak için tersine görsel aramayı kullanır. eBay, kategori tanıma için ResNet-50 ağı kullanır, görüntü karmaları depolanır Google Bigtable; Apache Spark işler tarafından işletiliyor Google Cloud Dataproc görüntü karma çıkarma için; ve görüntü sıralama hizmeti, Kubernetes. [13]

SK Gezegeni

SK Gezegeni e-ticaret web sitesinde ilgili moda ürünlerini bulmak için tersine görsel aramayı kullanır. Görsel kodlayıcı ağını, TensorFlow başlangıç-v3, üretim kullanımı için yakınsama ve genelleme hızı ile. Bir tekrarlayan sinir ağı çok sınıflı sınıflandırma için kullanılır ve moda-ürün ilgi bölgesi tespiti, Daha hızlı R-CNN. SK Planet'in ters görüntü arama sistemi, 100 adam-aydan daha kısa bir sürede inşa edildi.[14]

Alibaba

Alibaba, Pailitao 2014 yılında uygulama. Pailitao (Çince : 拍 立 淘, kelimenin tam anlamıyla bir kamera aracılığıyla alışveriş anlamına gelir), kullanıcıların sorgu nesnesinin bir fotoğrafını çekerek Alibaba'nın E-ticaret platformunda ürün aramasına olanak tanır. Pailitao uygulaması, eklem tespiti için dallara sahip derin bir CNN modeli kullanır ve algılama maskesini ve arka planda bozulma olmadan kesin ayırt edici özelliği keşfetmeyi öğrenmeyi içerir. GoogLeNet V1, kategori tahmini ve özellik öğrenimi için temel model olarak kullanılır.[15][16]

Pinterest

Pinterest başlangıç ​​şirketi satın alındı Görsel Grafik 2014 yılında platformunda görsel aramayı başlattı.[17] Pinterest, 2015 yılında ACM Bilgi Keşfi ve Veri Madenciliği Konferansı konferans ve sistemin mimarisini açıkladı. Boru hattı kullanır Apache Hadoop, açık kaynak Caffe evrişimli sinir ağı çerçeve Basamaklı toplu işleme için, PinLater mesajlaşma için ve Apache HBase depo için. Yerel özellikler, derin özellikler, göze çarpan renk imzaları ve göze çarpan pikseller dahil olmak üzere görüntü özellikleri çıkarılan kullanıcı yüklemelerinden. Sistem tarafından işletilmektedir Amazon EC2 ve Pinterest'e günlük görüntü yüklemelerini işlemek için yalnızca 5 GPU örneğinden oluşan bir küme gerektirir. Tersine görsel aramayı kullanarak Pinterest, moda nesnelerinden (ör. Ayakkabı, elbise, gözlük, çanta, saat, pantolon, şort, bikini, küpeler) görsel özellikler çıkarabilir ve benzer görünen ürün önerileri sunabilir.[18][19]

LykDat

LykDat, moda ürünlerini web'deki çeşitli çevrimiçi mağazalarda bulmak için tersine görsel aramayı kullanır.[20] LykDat ayrıca bir Twitter botu kullanıcıların içinde buldukları fotoğrafların tersine görsel aramalarını gerçekleştirmelerine yardımcı olan Twitter.[21]

Araştırma sistemleri

Microsoft Araştırma Asya Pekin Laboratuvarı, IEEE'nin tutanakları Arista-SS (Benzer Arama) ve Arista-DS (Yinelenen Arama) sistemlerinde. Arista-DS yalnızca aşağıdakiler gibi yinelenen arama algoritmaları gerçekleştirir: temel bileşenler Analizi hesaplama ve bellek maliyetlerini düşürmek için küresel görüntü özelliklerinde. Arista-DS, 10 sunucu ile 2 milyar görüntü üzerinde yinelenen arama gerçekleştirebilir, ancak neredeyse yinelenenleri algılamama ödünleşim verir.[22]

Ters görüntü arama sistemleri üretimi

Ayrıca bakınız: CBIR motorlarının listesi

Ayrıca bakınız

Referanslar

  1. ^ "Görselle nasıl arama yapılır". Alındı 2 Kasım 2013.
  2. ^ "Frompo ile video arama". Frompo.com. Alındı 2 Kasım 2013.
  3. ^ "SSS - TinEye - Neden TinEye kullanmalı?". TinEye.
  4. ^ Büyük Ölçekli Kısmi Yinelenen Web Görsel Arama için Paketleme Özellikleri Microsoft.
  5. ^ SIFT Algoritmasını Kullanan Yeni Bir Web Görsel Arama Motoru computer.org
  6. ^ "SSS - TinEye - TinEye nasıl çalışır?". TinEye.
  7. ^ "SSS - TinEye - TinEye benzer resimleri bulabilir mi ??". TinEye.
  8. ^ "Çalıntı resimleri bulun - Pixsy". Pixsy. Alındı 2017-10-20.
  9. ^ "Pixsy.com incelemesi: Görüntü Hırsızlığını Bul ve Mücadele - Sanatçılar için Çevrimiçi Pazarlama -". Sanatçılar için Çevrimiçi Pazarlama. 2015-07-02. Alındı 2017-10-20.
  10. ^ https://plus.google.com/+SteveSchlackman (2014-10-18). "Pixsy: Görüntü Hırsızlığını Bulun ve Karşılaşın". artlawjournal.com. Alındı 2017-10-20.
  11. ^ "Görüntü hırsızlığını çözme - Pixsy". Pixsy. Alındı 2017-10-20.
  12. ^ "Flickr, Fotoğraflar Çalındığında Size Para Kazandırmak İçin Pixsy ile Birlikte Çalışıyor". petapixel.com. Alındı 2019-12-12.
  13. ^ "EBay'de Görsel Arama". acm.org.
  14. ^ SK Planet'te Görsel Moda-Ürün Arama
  15. ^ Alibaba'da Görsel Arama. acm.org.
  16. ^ "Kameranızla Alışveriş: Görsel Görsel Arama Alibaba'da E-Ticaretle Buluşuyor". Alibaba Tech.
  17. ^ Josh Constine. "Pinterest, Görsel Tanıma ve Görsel Arama Başlangıcı VisualGraph'ı Aldı". TechCrunch. AOL.
  18. ^ "Pinterest'te Görsel Arama". acm.org.
  19. ^ "Ölçeklenebilir bir makine görüşü ardışık düzeni oluşturma". Pinterest Mühendisliği.
  20. ^ "Moda Görsel Arama - LykDat". LykDat. Alındı 2020-09-30.
  21. ^ "LykDat bot - Twitter". Alındı 2020-09-30.
  22. ^ Web Ölçeğindeki Verileri Kullanarak Yinelenen Arama Tabanlı Görüntü Açıklama Microsoft.