2025年5月9日
RAG システムの精度を評価するためのフレームワークとして2023年に RAGAS が提案されてから、RAGAS は進化を続けていて2025年5月時点では RAG において8つの指標が定義されています。[^1] ^1]: 論文に登場する3つの指標のうち Context Relevancy は既に廃止されています。Nvidia metrics の中にある [Context Relevance は計算方法が異なるため、別物です。 RAGAS を利用するメリットとして、一番大きな点は人間が作った正解のデータ
2024年3月19日
『入門 監視』（Mike Julian 著、松浦隼人訳）を読んだのでまとめ。 エンジニアになって3年、開発も運用も、そして障害やビジネスの変化も経験したので身に沁みる点もあり、明日からのサービス改善に活かしていきたいと思いました。素晴らしい本を執筆・翻訳くださった方々へ、その努力に敬意を表するとともに感謝申し上げます。 ## 第Ⅰ部 監視の原則 ### 1章 監視のアンチパターン > 1.1 アンチパターン1：ツール依存 > 1.1.1 監視とは複雑な問題をひとくくりにしたもの > 1.1
