資料の 英語版 に戻る

圧縮評価指標

最終更新: 2025年2月07日
圧縮評価指標

圧縮率は、元のテキストの単語数と foundation model 出力の単語数の比率を計算することで、入力テキストと比較した際に生成された要約がどの程度短くなるかを測定します。

メトリックの詳細

圧縮は、生成型AIの品質評価のためのコンテンツ分析指標であり、モデル出力とモデル入力または文脈を比較評価するものです。 この評価指標は 、 Python SDK を使用して評価指標を計算する場合にのみ利用可能です。

範囲

圧縮メトリックは、生成型AI 資産のみを評価します。

  • AI 資産の種類: テンプレートを即座に作成
  • 生成型AIのタスク :テキスト要約
  • 対応言語 :英語

スコアと価値

圧縮率スコアは、生成された要約が元のテキストの長さをどれだけ簡潔に短縮しているかを示します。 スコアが高いほど、原文と比較して要約が簡潔であることを示します。

値の範囲 : 0.0-1.0

  • 比率:
    • 0.2: 重要な詳細が省略される可能性があるほど、高度に圧縮された要約
    • 0.5: バランスよく圧縮する
    • 0.9: オリジナルのテキストをほぼそのまま保持する最小限の圧縮

設定

  • しきい値 :下限:0

親トピック: 評価基準