#モデル評価
「モデル評価」タグの記事1本
タグの記事
「モデル評価」タグが付いた記事を新しい順に表示します。

AI性能
高性能モデルほど文章が硬くなる理由と、本番トレース再現によるモデル交代の検証法
重いRLHFでフロンティアモデルの文章は硬くなるとRaindropのCTOが指摘。性能向上でエージェントの障害はむしろ見つけにくくなるとの見方。メモリ保存のバグは判明まで3から6か月かかる場合も。モデル交代前に本番トレースを再現し文章の質と拒否挙動も別に確認。安価なモデルへの移行は記録済みトレースでタスク完了率を検証してから。
新しい記事をRSSとポッドキャストで受け取る
RSSリーダーにはRSSのURLを、ポッドキャストアプリにはポッドキャストのURLを登録すると、新しい記事が公開されるたびに受け取れます。ポッドキャストでは見出しと要点を音声で聞けます。
購読方法を見る