Zenn (AI)Japan
evals の次の一歩 ── 評価ツール・練習問題の自動生成・プロンプトの自動改善を、公式文書と論文で調べた

前回の記事 では、AI の出力を測る仕組み(evals)の基本を書きました。問題集を自分で作る、使い道ごとに分ける、採点する AI には癖がある、という話です。 評価ができるようになると、次に知りたくなることが 3 つあります。
Read at Zenn (AI) ↗Related

JapanElasticsearch の Autoscaling を改善する: scale-out の高速化と HPA tolerance の調整 Mercari Engineering

JapanBuilding a large-scale iOS configuration system with the AttributedString architecture LINE Yahoo / LY Tech

JapanFlava DBaaS deep dive: From architecture to migration and beyond LINE Yahoo / LY Tech

JapanCloud infrastructure transformation at LY Corporation: introducing the architecture of Flava, the next-generation platform integrating two massive clouds LINE Engineering

Japan「指示どおりにやりました」と言うのに従っていないClaude。原因は、AI自身が指示ファイルやメモリに書き残していた昔の仕様 Zenn (AI)
