Sannadkii 2017, koox cilmi-baarayaal ah oo Google ka tirsan ayaa daabacday warqad cilmiyeed cinwaankeedu yahay "Attention Is All You Need". Warqaddaas waxay soo bandhigtay qaab-dhismeed cusub oo lagu magacaabo Transformer, kaas oo maanta salka u ah inta badan modelada sirdoonka macmalka ah ee luqadda farsameeya, oo ay ka mid yihiin chatbot-yada caanka ah.
Waa maxay Transformer?
Kahor 2017, modelada luqadda waxay inta badan isticmaali jireen shabakado xogta si isku xigxig ah u akhriya. Taasi way gaabis ahayd, waxayna adkeyd in la baro xiriirka u dhexeeya erayo aad u kala fog. Transformer wuxuu keenay hab loo yaqaan attention oo modelku isku mar u eegi karo dhammaan erayada jumladda, isla markaana go aamin karo kuwa ugu muhiimsan macnaha.
Muhiimadda hab-shaqeedkan
Sababtoo ah shaqada waa la kala qeybin karaa, Transformer si fiican ayuu ugu shaqeeyaa chip-yada GPU ee isbarbar dhigga shaqada. Taasi waxay suurtogelisay in la tababaro modelo aad u waaweyn oo xog badan ku baraan wakhti gaaban.
Meesha uu maanta ka muuqdo
Nidaamyada tarjumaadda, kaalmeeyayaasha qoraalka, qalabka koodhka ee AI, iyo xitaa modelada sawirada iyo codka qaarkood waxay ku salaysan yihiin fikradaha Transformer. Aqoonta qaab-dhismeedkan waxay caawisaa in la fahmo waxa modelku sameyn karo iyo waxa uusan sameyn karin.
Xadka
Transformer ma aha xal dhammaystiran. Wuxuu u baahan yahay xog badan iyo awood xisaabeed qaali ah, mararka qaarna wuxuu soo saaraa jawaabo qaldan oo isku kalsooni muuqda leh. Sidaas darteed hubinta bini aadamku weli waa lama huraan.
Xigasho: Warqadda cilmiyeed ee "Attention Is All You Need" (2017).