Entry № 030
Attention Mechanism
အာရုံစိုက်မှု ယန္တရား
Intermediate
Deep Learning
Natural Language Processing
Curriculum progress
#30 / 100
A
Attention Mechanism — Concept plate
အာရုံစိုက်မှု ယန္တရား — Attention ဆိုတာ model က စာကြောင်းထဲက စကားလုံးတစ်လုံးကို ကြည့်တဲ့အခါ ဘယ်စကားလုံးတွေကို ပိုအရေးကြီးတယ်ဆိုတာ ဆုံးဖြတ်တဲ့ နည်း။ 'ဘဏ်ကို သွားတယ်' ဆိုရင် 'ဘဏ်' က ငွေဘဏ်လား မြစ်ကမ်းလား ဆိုတာကို ဘေးပတ်ဝန်းကျင် စကားလုံးတွေကနေ ချိန်ဆကြည့်သလိုပဲ။
Attention ဆိုတာ model က စာကြောင်းထဲက စကားလုံးတစ်လုံးကို ကြည့်တဲ့အခါ ဘယ်စကားလုံးတွေကို ပိုအရေးကြီးတယ်ဆိုတာ ဆုံးဖြတ်တဲ့ နည်း။ 'ဘဏ်ကို သွားတယ်' ဆိုရင် 'ဘဏ်' က ငွေဘဏ်လား မြစ်ကမ်းလား ဆိုတာကို ဘေးပတ်ဝန်းကျင် စကားလုံးတွေကနေ ချိန်ဆကြည့်သလိုပဲ။