大規模言語モデルの基礎

本稿では文章生成AIにおいて中心的な役割を担っている大規模言語モデルの基本的な動作原理，および，ユーザーからの多様な質問や要求に的確に回答できる理由の根源について概説する．付随して，昨今の大規模言語モデルを構成するトランスフォーマー（Transformer）とよばれる深層ニューラルネットワークについてもその計算の本質に触れ，生命科学分野における活用の基盤となる考え方を紹介する．数式や理論に深入りしすぎず，研究者が直感的に理解しやすい視点からその特徴と本質を整理する．