Section 6: การวัดและปรับคุณภาพ RAG
- ทำไม RAG ถึงตอบผิด: ค้นคืนไม่เจอ, เจอไม่ตรง หรือโมเดลไม่ใช้บริบทที่ให้
- การวัดคุณภาพ 2 ระดับ: Retrieval Quality และ Answer Faithfulness
- การสร้างชุดคำถามทดสอบ (Evaluation Set) จากงานจริง
- แนวทางไล่หาสาเหตุและปรับปรุงทีละจุดใน Pipeline
Section 7: Advanced Retrieval
- Hybrid Search: ผสาน Keyword กับ Semantic เพื่อครอบคลุมทั้งคำตรงและความหมาย
- Reranking: การจัดอันดับผลการค้นคืนซ้ำให้ตรงคำถามยิ่งขึ้น
- Query Rewriting และ Multi-query สำหรับคำถามที่กำกวมหรือกว้าง
- Metadata Filtering และการค้นแบบจำกัดขอบเขต เช่น เฉพาะแผนกหรือช่วงเวลา
Section 8: สร้าง RAG Application และ Chatbot
- การประกอบบริบทที่ค้นคืนเข้ากับ Prompt และการออกแบบ System Prompt สำหรับ RAG
- การบังคับให้ AI ตอบพร้อมอ้างอิงแหล่งที่มา (Citation) และตอบ ไม่พบข้อมูล เมื่อไม่มีในฐานความรู้
- การจัดการบทสนทนาต่อเนื่องและการค้นคืนตามบริบทการสนทนา
- Workshop: สร้าง RAG Chatbot ที่ตอบคำถามจาก Knowledge Base พร้อมแสดงแหล่งอ้างอิง
Section 9: เชื่อม RAG เข้ากับระบบงานจริง
- การเชื่อมแหล่งข้อมูลจริงผ่าน MCP (Model Context Protocol): Google Drive, SharePoint, Notion และฐานข้อมูล
- การวาง Workflow นำเข้าเอกสารและอัปเดต Knowledge Base อัตโนมัติด้วย n8n
- การรักษา Knowledge Base ให้ทันสมัย: การเพิ่ม แก้ไข และลบข้อมูล (Re-indexing) และการนำ RAG ไปใช้ผ่านช่องทางจริง เช่น เว็บ, LINE หรือ Microsoft Teams
- Workshop: ตั้ง Workflow นำเข้าเอกสารใหม่เข้าสู่ Knowledge Base โดยอัตโนมัติ
Section 10: Security, Access Control และ PDPA
- การควบคุมสิทธิ์การเข้าถึงข้อมูลใน Knowledge Base (ใครเห็นเอกสารใดได้บ้าง)
- การจำแนกระดับชั้นความลับของเอกสารและการป้องกันข้อมูลรั่วผ่านคำตอบของ AI
- ข้อมูลส่วนบุคคลตาม PDPA และการจัดการก่อนนำเอกสารเข้าสู่ RAG
- ความแตกต่างของ Cloud กับ On-premise / Self-hosted สำหรับข้อมูลอ่อนไหว และการทำ Audit Trail
Section 11: Capstone Project และการนำไปใช้จริง
- โจทย์: สร้างผู้ช่วย AI ที่รู้จักองค์กรจากชุดเอกสารจริงหรือของหน่วยงานตนเองแบบครบวงจร
- เตรียมเอกสาร ทำ Index ปรับคุณภาพการค้นคืน และให้ตอบพร้อมอ้างอิง แล้วทดสอบด้วยชุดคำถามจริง วัดคุณภาพและปรับปรุงจนใช้งานได้
- นำเสนอผลงานและรับ Feedback แนวทางการนำไปใช้จริงใน 30 วันแรก และการต่อยอดสู่ระบบ Enterprise Knowledge และ AI Agent ที่ใช้ RAG เป็นฐานความรู้