Qiita (LLM)Japan
同じプロンプトを27言語で測ったら、日本語は英語の1.79倍のトークンだった

同じプロンプトを27言語に翻訳して、OpenAIのトークナイザーでトークン数を測ってみました。「日本語は英語よりトークンを食う」とよく言われますが、実際どのくらいなのか、他の言語と比べてどうなのかを数字で確認したかったからです。 結論から言うと、日本語は英語の1.79倍。2...
Read at Qiita (LLM) ↗More from Qiita (LLM) on Accept All

JapanClaude Opus 5.5が登場:Fable 5.1と同等の性能で、価格は40%安い Qiita (LLM)

JapanLLMが返す壊れたJSON・SQL・Mermaidを自動で直すAPIを3つ作って公開してみた Qiita (LLM)

JapanAIエージェントは増やすほど遅くなる:台数を増やす前に実装する3つの停止条件(Python) Qiita (LLM)

JapanAIエージェントを無人で働かせたら、最後の1行で全部止まった話 Zenn (AI)

JapanThe Code Nobody Reads: 読まないコードの信頼をどこに置くか Zenn (AI)
