รวมกระแสข้อมูล Gen2 และไปป์ไลน์ใน Microsoft Fabric
กระแสข้อมูล Gen2 มีตัวเลือกที่ยอดเยี่ยมสําหรับการแปลงข้อมูลใน Microsoft Fabric การรวมกันของกระแสข้อมูลและไปป์ไลน์จะมีประโยชน์เมื่อคุณต้องการดําเนินการเพิ่มเติมในข้อมูลที่แปลงแล้ว
ไปป์ไลน์ข้อมูลเป็นแนวคิดทั่วไปในวิศวกรรมข้อมูลและนําเสนอกิจกรรมที่หลากหลายเพื่อจัดลําดับ กิจกรรมทั่วไปบางอย่างได้แก่:
- คัดลอกข้อมูล
- รวมกระแสข้อมูลเข้าด้วยกัน
- เพิ่มสมุดบันทึก
- รับเมตาดาต้า
- ใช้สคริปต์หรือกระบวนงานที่เก็บไว้
ไปป์ไลน์ให้วิธีการแสดงวิชวลในการทํากิจกรรมให้แล้วเสร็จตามลําดับที่เฉพาะเจาะจง คุณสามารถใช้กระแสข้อมูลสําหรับการนําเข้าข้อมูล การแปลง และการเข้าสู่ที่เก็บข้อมูล Fabric ได้ จากนั้นรวมกระแสข้อมูลลงในไปป์ไลน์เพื่อปรับกิจกรรมพิเศษ เช่น ใช้สคริปต์หรือขั้นตอนการจัดเก็บหลังจากกระแสข้อมูลเสร็จสมบูรณ์แล้ว
ไปป์ไลน์ยังสามารถกําหนดตารางเวลาหรือเปิดใช้งานโดยทริกเกอร์เพื่อเรียกใช้กระแสข้อมูลของคุณ ด้วยการใช้ไปป์ไลน์เพื่อเรียกใช้กระแสข้อมูลของคุณ คุณสามารถมีการรีเฟรชข้อมูลเมื่อคุณต้องการแทนที่จะต้องเรียกใช้กระแสข้อมูลด้วยตนเอง เมื่อคุณจัดการกับข้อมูลระดับองค์กรหรือที่มีการเปลี่ยนแปลงบ่อย ระบบอัตโนมัติช่วยให้คุณสามารถมุ่งเน้นไปที่ความรับผิดชอบอื่น ๆ ได้
