SQL Server Integration Services (SSIS) for ETL

Section 1: SSIS ในงาน ETL ปี 2026

• ETL กับ ELT และบทบาทของ SSIS ในงาน Data Integration
• SSIS เหมาะกับงานแบบใดเมื่อเทียบกับ Azure Data Factory และ Microsoft Fabric
• สิ่งที่เปลี่ยนใน SQL Server 2025: รองรับ Microsoft SqlClient ใน ADO.NET และโหมด 32-bit ที่เลิกสนับสนุน
• Component ที่ถูกนำออก เช่น CDC by Attunity และ Microsoft Connector for Oracle
• สถาปัตยกรรมของ SSIS: Package, Project, Runtime และ Catalog

Section 2: Lab: เตรียมเครื่องมือและ SSIS Project แรก

• ติดตั้ง SQL Server 2025 Developer Edition พร้อม Integration Services
• ติดตั้ง Visual Studio และ SQL Server Integration Services Projects 2022+
• สร้าง SSIS Project แบบ Project Deployment Model และรู้จักหน้าจอออกแบบ
• เตรียมฐานข้อมูลต้นทางและ Data Warehouse ปลายทางสำหรับทุก Lab
• Lab: Package แรกที่คัดลอกข้อมูลจากไฟล์ CSV เข้าตาราง SQL Server

Section 3: Lab: Control Flow และ Connection Manager

• Task ที่ใช้บ่อย: Execute SQL Task, Data Flow Task และ File System Task
• Precedence Constraint แบบ Success, Failure, Completion และแบบมีเงื่อนไข
• จัดกลุ่มงานด้วย Sequence Container และวนซ้ำด้วย For Loop Container
• Connection Manager แบบ OLE DB, ADO.NET, Flat File และ Excel ระดับ Project
• Lab: Package ที่ล้างตาราง Staging โหลดข้อมูล และบันทึกผลการทำงาน

Section 4: Data Flow: Source, Destination และชนิดข้อมูล

• Data Flow Pipeline และ Buffer ทำงานอย่างไร
• อ่านข้อมูลจาก OLE DB Source, Flat File Source และ Excel Source
• ชนิดข้อมูลของ SSIS กับ SQL Server และการแปลงด้วย Data Conversion
• ปัญหาภาษาไทย Code Page และ Unicode ในไฟล์ข้อความ
• Lab: ใช้ Data Viewer ตรวจข้อมูลระหว่างทางและแก้ปัญหาชนิดข้อมูล

Section 5: Lab: Transformation ที่ใช้บ่อย

• Derived Column สำหรับคำนวณและทำความสะอาดข้อมูลด้วย Expression
• Conditional Split แยกข้อมูลตามเงื่อนไข และ Multicast ส่งข้อมูลหลายทาง
• Union All, Sort และ Aggregate สำหรับรวมและสรุปข้อมูล
• Row Count เพื่อนับจำนวนแถวไว้ใช้ตรวจสอบ
• Lab: ทำความสะอาดข้อมูลลูกค้าและแยกแถวที่ไม่ผ่านเกณฑ์ไปตารางตรวจสอบ

Section 6: Lab: Lookup และ Merge Join

• Lookup Transformation แบบ Full Cache, Partial Cache และ No Cache
• จัดการแถวที่หาไม่พบด้วย No Match Output
• Cache Transform และ Cache Connection Manager สำหรับ Lookup ซ้ำหลายครั้ง
• Merge Join เทียบกับ Lookup และเมื่อไรควรทำ Join ใน SQL แทน
• Lab: เติม Surrogate Key ของสินค้าและลูกค้าให้ข้อมูลยอดขาย

Section 7: Variable, Parameter และ Expression

• Variable ระดับ Package และขอบเขตของ Variable
• Project Parameter และ Package Parameter สำหรับค่าที่ต่างกันในแต่ละ Environment
• SSIS Expression Language และ Property Expression
• Connection String แบบเปลี่ยนตามค่า Parameter
• Lab: ทำ Package ให้เปลี่ยนเซิร์ฟเวอร์และโฟลเดอร์ได้โดยไม่ต้องแก้ Package

Section 8: Lab: ประมวลผลไฟล์หลายไฟล์ด้วย Foreach Loop

• Foreach Loop Container แบบ File Enumerator และ ADO Enumerator
• อ่านไฟล์ทุกไฟล์ในโฟลเดอร์ แล้วย้ายไฟล์ที่ประมวลผลแล้วไปเก็บ
• บันทึกชื่อไฟล์และเวลาที่โหลดไว้ในข้อมูลเพื่อตรวจสอบย้อนหลัง
• ภาพรวม Script Task และ Script Component สำหรับงานที่ Component มาตรฐานทำไม่ได้
• Lab: โหลดไฟล์ยอดขายรายสาขาทุกไฟล์จากโฟลเดอร์รับข้อมูล

Section 9: Lab: Incremental Load

• Full Load เทียบกับ Incremental Load และผลต่อเวลาและทรัพยากร
• Watermark จากคอลัมน์วันที่แก้ไขหรือค่า ID ล่าสุด
• ตรวจแถวที่เปลี่ยนด้วยการเปรียบเทียบหรือค่า Hash
• โหลดเข้า Staging แล้วใช้ MERGE ผ่าน Execute SQL Task
• ภาพรวม Change Data Capture และ Change Tracking ของ SQL Server

Section 10: Lab: Slowly Changing Dimension

• SCD Type 1 และ Type 2 และการเลือกให้เหมาะกับธุรกิจ
• ใช้ Slowly Changing Dimension Wizard และข้อจำกัดด้านประสิทธิภาพ
• ทำ SCD Type 2 แบบ Set-based ด้วย Staging และ MERGE
• จัดการ Effective Date, Expiry Date และ Current Flag
• Lab: โหลด Dimension ลูกค้าที่เก็บประวัติการย้ายสาขา

Section 11: Lab: Error Handling และ Logging

• Error Output ของ Component: Fail, Ignore และ Redirect Row
• Event Handler แบบ OnError และ OnPostExecute
• เก็บแถวที่ผิดพลาดไว้ตรวจสอบ พร้อมรหัสและคอลัมน์ที่ผิด
• Logging Level ใน SSISDB และตารางบันทึกการทำงานที่ออกแบบเอง
• Lab: Package ที่ทำงานต่อได้เมื่อเจอข้อมูลผิด และแจ้งสรุปผลทุกครั้ง

Section 12: Lab: Deploy ขึ้น SSIS Catalog (SSISDB)

• สร้าง SSIS Catalog และโครงสร้าง Folder, Project และ Package
• Deploy Project จาก Visual Studio และด้วยไฟล์ .ispac
• Environment และ Environment Variable สำหรับ Dev, Test และ Production
• สั่งรัน Package ผ่าน SSMS และผ่านคำสั่ง T-SQL
• Lab: Deploy โปรเจกต์และผูก Environment ให้เปลี่ยนค่าตามเซิร์ฟเวอร์

Section 13: Lab: ตั้งเวลาและติดตามด้วย SQL Server Agent

• สร้าง SQL Server Agent Job ที่รัน Package จาก SSISDB
• Schedule, Job Step หลายขั้น และการแจ้งเตือนเมื่อทำงานล้มเหลว
• Credential และ Proxy Account สำหรับสิทธิ์ที่เหมาะสม
• ติดตามผลด้วยรายงานของ SSISDB และ Catalog View
• Lab: ตั้ง Job โหลดข้อมูลทุกคืนพร้อมแจ้งเตือนเมื่อผิดพลาด

Section 14: ปรับประสิทธิภาพ Data Flow

• หาคอขวดด้วยการวัดเวลาและข้อมูลประสิทธิภาพใน SSISDB
• Transformation แบบ Blocking และ Non-blocking และผลต่อหน่วยความจำ
• ปรับ DefaultBufferMaxRows, DefaultBufferSize และ AutoAdjustBufferSize
• Fast Load, Batch Size และการจัดการ Index ระหว่างโหลดข้อมูลจำนวนมาก
• Lab: วัดเวลาโหลดก่อนและหลังปรับจูนด้วยข้อมูลหลายล้านแถว

Section 15: Capstone: โหลด Data Warehouse แบบ Star Schema

• ออกแบบลำดับงาน: Staging, Dimension แล้วจึง Fact
• สร้าง Master Package เรียก Child Package ด้วย Execute Package Task
• โหลด Fact Table พร้อม Lookup Surrogate Key และตรวจจำนวนแถว
• Deploy ตั้งเวลา และนำเสนอผลงานพร้อม Checklist ก่อนขึ้น Production