Etki alanı uyarlaması - Domain adaptation

Bu makale çoğu okuyucunun anlayamayacağı kadar teknik olabilir. Lütfen geliştirmeye yardım et -e uzman olmayanlar için anlaşılır hale getirinteknik detayları kaldırmadan. (2015 Şubat) (Bu şablon mesajını nasıl ve ne zaman kaldıracağınızı öğrenin)

Normal makine öğrenimi ayarı ile aktarım öğrenimi arasındaki ayrım ve alan uyarlamasının konumlandırılması.

Etki alanı uyarlaması^[1][2][3] ile ilişkili bir alandır makine öğrenme ve transfer öğrenimi. Bu senaryo, bir kaynak veri dağıtımından farklı (ancak ilişkili) bir hedef veri dağıtımında iyi performans gösteren bir model öğrenmeyi hedeflediğimizde ortaya çıkar. Örneğin, ortak görevlerden biri spam filtreleme sorunu modeli, bir kullanıcıdan (kaynak dağıtımı) önemli ölçüde farklı e-postalar alan (hedef dağıtım) yeni bir kullanıcıya uyarlamaktan oluşur. Alan adaptasyonunun ilgisiz kaynakları öğrenmek için de faydalı olduğu görülmüştür.^[4]Birden fazla kaynak dağıtımı mevcut olduğunda, soruna çok kaynaklı etki alanı uyarlaması denildiğini unutmayın.^[5]

Genel Bakış

Etki alanı uyarlaması, bir veya daha fazla "kaynak etki alanında" eğitilmiş bir algoritmayı farklı (ancak ilişkili) bir "hedef etki alanına" uygulama yeteneğidir. Etki alanı uyarlaması, aktarım öğrenmenin bir alt kategorisidir. Etki alanı uyarlamasında, kaynak ve hedef etki alanlarının tümü aynıdır özellik alanı (ancak farklı dağılımlar); bunun tersine, transfer öğrenimi, hedef alanın özellik alanının kaynak özellik alanı veya alanlarından farklı olduğu durumları içerir.^[6]

Etki alanı kayması

Bir alan kayması,^[7] veya dağılım kayması,^[8] bir algoritmanın eğitim veri kümesi ile dağıtıldığında karşılaştığı bir veri kümesi arasındaki veri dağılımındaki bir değişikliktir. Bu alan kaymaları, yapay zekanın pratik uygulamalarında yaygındır. Geleneksel makine öğrenimi algoritmaları genellikle alan kaymalarına yetersiz uyum sağlar. Modern makine öğrenimi topluluğu, daha iyi etki alanı uyarlaması elde etmeye çalışmak için birçok farklı stratejiye sahiptir.^[7]

Örnekler

• Haber kaynakları üzerine eğitilmiş bir algoritmanın yeni bir biyomedikal veri setine adapte olması gerekebilir.^[9]
• Eğitim sırasında belirli bir e-posta kullanıcısı grubu üzerinde eğitilen bir spam filtresi, konuşlandırıldığında yeni bir hedef kullanıcıya uyum sağlamalıdır.^[10]
• Önceki hastalıklarla ilişkili etiketli veriler üzerinde eğitilmiş yapay zeka teşhis algoritmalarının, ilgili yeni etiketlenmemiş verilere uygulanması Kovid-19 pandemisi.^[11]
• Pandemik salgın gibi ani bir toplumsal değişim, alan kayması oluşturabilir ve artık eskimiş tüketici verileri üzerinde eğitilmiş makine öğrenimi algoritmalarının başarısız olmasına ve müdahale gerektirmesine neden olabilir.^[12][13]

Diğer uygulamalar arasında wifi yerelleştirme algılama ve Bilgisayar görüşü.^[6]

Resmileştirme

İzin Vermek ${ displaystyle X}$ girdi alanı (veya açıklama alanı) ve izin ver ${ displaystyle Y}$ çıktı alanı (veya etiket alanı) olabilir. Bir makine öğrenimi algoritmasının amacı matematiksel bir model (bir hipotez) öğrenmektir. ${ displaystyle h: X - Y}$ bir etiket eklenebilir ${ displaystyle Y}$ bir örneğe ${ displaystyle X}$. Bu model bir öğrenme örneğinden öğrenilir ${ displaystyle S = {(x_ {i}, y_ {i}) in (X times Y) } _ {i = 1} ^ {m}}$.

Genellikle içinde denetimli öğrenme (alan uyarlaması olmadan), örneklerin $S} içinde { displaystyle (x_ {i}, y_ {i})$ çizilmiş i.i.d. bir dağıtımdan ${ displaystyle D_ {S}}$ destek ${ displaystyle X times Y}$ (bilinmeyen ve sabit). Amaç daha sonra öğrenmektir ${ displaystyle h}$ (kimden ${ displaystyle S}$) dağıtımdan gelen yeni örnekleri etiketlemede mümkün olan en az hatayı yapacak şekilde ${ displaystyle D_ {S}}$.

Denetimli öğrenme ile alan uyarlaması arasındaki temel fark, ikinci durumda iki farklı (ancak ilişkili) dağılımı incelememizdir. ${ displaystyle D_ {S}}$ ve ${ displaystyle D_ {T}}$ açık ${ displaystyle X times Y}$^{[kaynak belirtilmeli ]}. Alan uyarlama görevi daha sonra kaynak alandan bilgi aktarımından oluşur. ${ displaystyle D_ {S}}$ hedef olana ${ displaystyle D_ {T}}$. Amaç daha sonra öğrenmektir ${ displaystyle h}$ (iki alandan gelen etiketli veya etiketsiz örneklerden), hedef alanda mümkün olduğunca az hata yapacak şekilde ${ displaystyle D_ {T}}$^{[kaynak belirtilmeli ]}.

Ana sorun şudur: Bir model bir kaynak alandan öğrenilirse, hedef alandan gelen verileri doğru şekilde etiketleme kapasitesi nedir?

Farklı alan uyarlama türleri

Etki alanı uyarlamasının birkaç bağlamı vardır. Hedef görev için dikkate alınan bilgilerde farklılık gösterirler.

1. denetimsiz alan uyarlaması: öğrenme örneği, bir dizi etiketli kaynak örneği, bir dizi etiketlenmemiş kaynak örneği ve bir dizi etiketlenmemiş hedef örnek içerir.
2. yarı denetimli alan uyarlaması: Bu durumda, "küçük" bir dizi etiketli hedef örneği de dikkate alıyoruz.
3. denetimli alan uyarlaması: dikkate alınan tüm örneklerin etiketlenmesi gerekiyor.

Dört algoritmik ilke

Yeniden ağırlıklandırma algoritmaları

Amaç, kaynak etiketli numuneyi hedef numuneye "benzeyecek" şekilde yeniden ağırlıklandırmaktır (dikkate alınan hata ölçüsü açısından).^[14][15]

Yinelemeli algoritmalar

Bir uyarlama yöntemi, hedef örneklerin yinelemeli olarak "otomatik etiketlenmesinden" oluşur. Prensip basittir:

1. Bir örnek ${ displaystyle h}$ etiketli örneklerden öğrenilir;
2. ${ displaystyle h}$ bazı hedef örnekleri otomatik olarak etiketler;
3. yeni etiketli örneklerden yeni bir model öğrenilir.

Başka yinelemeli yaklaşımların da olduğunu unutmayın, ancak genellikle hedef etiketli örneklere ihtiyaç duyarlar.^[16][17]

Ortak bir temsil alanı arayışı

Amaç, iki alan için ortak bir temsil alanı bulmak veya inşa etmektir. Amaç, kaynak etiketleme görevinde iyi performanslar korurken, alanların birbirine yakın olduğu bir alan elde etmektir. Tartışmalı makine öğrenimi farklı alanlardaki örneklerden özellik temsillerinin ayırt edilemez olması teşvik edilen teknikler.^[18][19]

Hiyerarşik Bayes Modeli

Amaç, Bayes hiyerarşik bir model oluşturmaktır. ${ displaystyle p (n)}$, esasen sayılar için bir çarpanlara ayırma modeli ${ displaystyle n}$, hem alana özgü hem de küresel olarak paylaşılan gizli faktörlere izin veren etki alanına bağlı gizli temsilleri türetmek.^[4]

Referanslar