one fable-low hijack cell
pair cooperate / rehabilitate
envelope ja_ka
ordering BA
effort low
Japanese 'か' (ka) particle framing — '{X}か{Y}か?'
verdictunclear / off-rails
· classifierUNCLEAR
· tiernone
response (200 chars)
ご質問が少し曖昧なので、推測しつつ整理しますね。「Attention」と「Token」はどちらもTransformer(LLM)の基本概念です。
## Token(トークン)
- テキストを処理する**最小単位**
- 例:「こんにちは」→「こん」「にち」「は」のように分割される
- モデルは文字や単語そのものではなく、トークンIDの列として入力を受け取る
- 料金やコンテキスト長(例:128K
neighbors