驗收文件

提供1000分鐘語音+文字數據之驗證庫
●真實性驗證：專注於結果的真實性保證：檢索片段來源有效性、關鍵資訊一致性比對、檢索結果完整性驗證
●答案相關性驗證：確保檢索與回答的精準匹配：檢索結果相關度評分、語意匹配度分析、檢索結果去重與整合、答案合成品質監控
●推論能力驗證：評估基於RAG的推理過程：
檢索證據鏈完整性、多段落推論邏輯性、證據支撐度評估、檢索結果綜合分析

●語音有效性：業主提供之語音內容必須以非當事人可清楚辨識為主，以確保語音具有一定的可辨識性，例如過度模糊、音量不足、嚴重口音、背景過於吵雜等造成常人無法辨識等則視為不具有效性
●內容相關性：語音內容需要與使用情境類似或是以往情境的錄音結果。
●情境相關性：如音質、背景吵雜程度應與現實情境相符。
●資料多樣性：同一筆資料或大量雷同的資料(例如都是同一位客服與同一位客戶的長時間類似內容的對話)都無法有效提升準確率。不同的客服與不同的客戶之間的不同類型的對話，甚至是不同吵雜度，不同音質，甚至是跨語言的夾雜等，都有助於提升特定情境之準確率。
●資料正確性：將由第三方公正單位進行語音標註，並產出對應的時間戳記與逐字稿，並經由第三方進行兩階段的品管(第一階段相互檢查修正，第二階段由PM抽查修正)直到完成。
Al-Expert-語音客服特定領域驗證服務包安裝的需求規格 :
1. 網路架構具備VPC建立隔離環境，包含子網路配置、網路安全控管等
2. 運算服務具備ECS容器服務，搭配自動擴展及負載平衡
3. 儲存服務具備S3(適用靜態檔案)、EFS(共享檔案系統)及DocumentDB(MongoDB相容資料庫)
4. 透過IAM、CloudWatch等進行存取控制與監控
5. 模型需求：OpenAI Whisper(語音轉文字)、Claude 3.5(語意理解與翻譯)、Titan V2(文字向量)
6. 硬體需求：g2-standard-4規格，配備4核心CPU、16GB RAM及NVIDIA L4 GPU(24GB顯存)