Zdá se, že mezi badateli panují určité neshody ohledně toho, jaký je rozdíl mezi „přenosovým učením“ a „přizpůsobením domény“.

Od {0}:

Pojem adaptace domény úzce souvisí s transferovým učením. Přenos učení je obecný termín, který odkazuje na třídu problémů strojového učení, které zahrnují různé úkoly nebo domény. V literatuře zatím neexistuje standardní definice transferového učení. V některých dokumentech je zaměnitelný s doménou adaptace.

Od {1}:

Odkazy:

• {0} Li, Qi. "Průzkum literatury: algoritmy přizpůsobení domény pro zpracování přirozeného jazyka." Department of Computer Science The Graduate Center, The City University of New York (2012): 8-10. https://scholar.google.com/scholar?cluster=2828982016930721315&hl=cs&as_sdt=0,22; https://pdfs.semanticscholar.org/532e/3d5b1b5807771b77cac60fe8594b506fcff9.pdf; http://nlp.cs.rpi.edu/paper/qisurvey.pdf ( zrcadlo)

• {1} Pan, Sinno Jialin a Qiang Yang. „Průzkum o přestupovém učení.“ Transakce IEEE o znalostech a datovém inženýrství 22, č. 10 (2010): 1345-1359. https://scholar.google.com/scholar?cluster=17771403852323259019&hl=cs&as_sdt=0,22; http://citeseerx.ist.psu.edu/viewdoc/download?doi=10.1.1.158.4126&rep=rep1&type=pdf ( zrcadlo) (2,6 tis. citací)

Z článku Hal Daume [1]:

Standardní nastavení klasifikace je vstupní rozdělení p (X) a distribuce štítku p (Y | X).Adaptace domény: když se změní p (X) mezi tréninkem a testem.Přenos učení: když se změní p (Y | X) mezi tréninkem a testem.

Jinými slovy, v DA se mění distribuce vstupu, ale štítky zůstat stejný;v TL zůstává vstupní rozdělení stejné, ale štítky se mění.

1. https://nlpers.blogspot.com/2007/11/domain-adaptation-vs-transfer-learning.html ( zrcadlo)

Myslím si, že „Transfer Learning“ je obecnější pojem a „Domain Adaption“ je scénář „Transfer Learning“.

[1] Přenosná pozornost pro přizpůsobení domény. http://ise.thss.tsinghua.edu.cn/~mlong/doc/transferable-attention-aaai19.pdf

V celé literatuře o přenosovém učení existuje řada terminologických nesrovnalostí. Fráze jako přenosové učení a přizpůsobení domény se používají k označení podobných procesů. Adaptace domény je proces adaptace jedné nebo více zdrojových domén pro prostředky přenosu informací za účelem zlepšení výkonu cílového studenta. Proces adaptace domény se pokouší změnit zdrojovou doménu ve snaze přiblížit distribuci zdroje k cíli. V nastavení Adaptace domény mají zdrojové a cílové domény různá okrajová rozdělení p (X). Podle průzkumu Pan je Transfer Learning širší pojem, který může zahrnovat i případ, kdy existuje rozdíl v podmíněném rozdělení p (Y | X) zdrojové a cílové domény. Naproti tomu Daume rozlišuje dva pojmy [1] s odkazem na to, že adaptace domény nastává, když se p (X) změní mezi zdrojem a cílem, a přenos učení je, když se p (Y | X) změní mezi zdrojovou a cílovou doménou.

1. https://nlpers.blogspot.com/2007/11/domain-adaptation-vs-transfer-learning.html

Podle [1] je adaptace domény přenosové učení v NLP: „Transferové učení v doméně NLP se někdy označuje jako adaptace domény.“

[1] Pan, S. J. a Q. Yang."Průzkum transferového učení."Transakce IEEE na znalostní a datové inženýrství 22, č.10 (říjen 2010): 1345–59. https://doi.org/10.1109/TKDE.2009.191 nebo https://www.cse.ust.hk/~qyang/Docs/2009/tkde_transfer_learning.pdf