Zenn (AI)Japan
AI をどう評価するか ── 自分のシステムのための evals 入門
AI を使ったアプリを作ると、必ずぶつかる問いがあります。「このモデルで十分なのか」「プロンプトを直したら良くなったのか、悪くなったのか」。 ここで言うモデルは、ChatGPT や Claude の中身にあたる AI 本体のことです。同じ会社のものでも、賢いが高くて遅いもの、少し劣るが安くて速いものなど、何種類も用意されています。プロンプトは、AI に渡す指示文のことです。
Read at Zenn (AI) ↗Related
JapanAIの回答評価にDecisionモデルが使える。速いと0.5秒、理由文は出ない Zenn (AI)
JapanElasticsearch の Autoscaling を改善する: scale-out の高速化と HPA tolerance の調整 Mercari Engineering
JapanBuilding a large-scale iOS configuration system with the AttributedString architecture LINE Yahoo / LY Tech
JapanFlava DBaaS deep dive: From architecture to migration and beyond LINE Yahoo / LY Tech
JapanCloud infrastructure transformation at LY Corporation: introducing the architecture of Flava, the next-generation platform integrating two massive clouds LINE Engineering
