トークナイゼーション
とーくないぜーしょん
言語モデルにおいて「言語単位」の設定を行うこと．連続する数塩基をまとめたもの（k-mer）を単位として使うことが一般的であるが，最近ではより複雑な構成の単位も使用されている．（実験医学2026年3月号より）
ゲノム言語モデルによる農業形質の新規アレルデザイン実験医学2026年3月号解説は発行当時の掲載内容に基づくものです
本コンテンツは，2018年まで更新されていた同名コンテンツを元に，新規追加・再編集したものです
とーくないぜーしょん
言語モデルにおいて「言語単位」の設定を行うこと．連続する数塩基をまとめたもの（k-mer）を単位として使うことが一般的であるが，最近ではより複雑な構成の単位も使用されている．（実験医学2026年3月号より）
ゲノム言語モデルによる農業形質の新規アレルデザイン実験医学2026年3月号解説は発行当時の掲載内容に基づくものです
本コンテンツは，2018年まで更新されていた同名コンテンツを元に，新規追加・再編集したものです
