AI×製造6/20(土)リー代数アテンション、空間認識AIを刷新行列リー群を直接トークンとする新しいアテンション機構が発表された。製造・物流・ロボティクス分野で空間変換の認識精度を大幅に高め、モデルのパラメータ数を最大80分の1に削減できる可能性がある。
AI×製造6/20(土)数学的変換群でAI注意機構を刷新ポーランドの研究者がリー群を用いた新たなアテンション機構「Lie-Algebra Attention」を発表した。学習パラメータを最大80分の1に削減しつつ同等以上の精度を実現し、製造・物流・医療画像分野のAI導入コストを大幅に圧縮する可能性がある。