Arize

Arize とは

Arize は AI とエージェントの開発基盤である。統合された LLM の可観測性とエージェントの評価を掲げ、開発、追跡、評価器、実験、プロンプト、監視、注釈を扱う。Arize AX というエンタープライズ製品と Phoenix というオープンソース版がある。

できること

• エージェントと RAG の要求を端から端まで追跡する
• 出力の品質について評価を実行する
• 実験やプロンプトの版を比較する
• 本番の挙動を監視する

向いている人

• AI と ML のエンジニア
• LLMOps とプラットフォームのチーム
• 本番の品質に責任を持つチーム

注意点

• 可観測性は成功を定義しない。評価、しきい値、是正は自分で設計する
• 追跡情報とプロンプトに利用者のデータが含まれる場合がある。何を記録し保持するかを確認する
• サイトの件数の数字はベンダーの統計である
• 本番の通信がないチームは、まずオープンソース版から始めた方がよい