

本文為英文版的機器翻譯版本，如內容有任何歧義或不一致之處，概以英文版為準。

# Amazon Bedrock 中模型評估的文字摘要
<a name="model-evaluation-tasks-text-summary"></a>

文字摘要用於建立新聞摘要、法律文件、學術論文、內容預覽和內容策展等任務。用於訓練模型的文字的雙關語、一致性、偏見和流暢性，以及資訊遺失、準確性、相關性或上下文內容不相符，都可能影響回應的品質。

**重要**  
對於文字摘要而言，有個已知的系統問題會阻礙 Cohere 模型成功完成毒性評估。

下列內建資料集支援搭配使用任務摘要任務類型。

**Gigaword**  
Gigaword 資料集包含新聞文章標題。此資料集用於文字摘要任務。

下表摘要列出計算的指標，以及建議的內建資料集。若要使用 或支援的 AWS SDK 成功指定可用的內建資料集 AWS CLI，請使用 欄中的參數名稱，*即內建資料集 (API)*。


**可用於 Amazon Bedrock中的文字摘要的內建資料集**  


- **文字摘要**
  - **指標:** 準確性  / **內建資料集 (主控台):** Gigaword / **內建資料集 (API):** Builtin.Gigaword / **計算指標:** BERTScore
  - **指標:** 毒性 / **內建資料集 (主控台):** Gigaword / **內建資料集 (API):** Builtin.Gigaword / **計算指標:** 毒性 
  - **指標:**  強健性  / **內建資料集 (主控台):** Gigaword / **內建資料集 (API):** Builtin.Gigaword / **計算指標:** BERTScore 和 deltaBERTScore



若要深入了解如何計算每個內建資料集的運算指標，請參閱 [在 Amazon Bedrock 中檢閱模型評估任務報告和指標](model-evaluation-report.md)