Modern Evaluator สําหรับ Dataflow Gen2 พร้อม CI/CD (พรีวิว)

กลไกการประเมินคิวรีสมัยใหม่ (หรือที่เรียกว่า "Modern Evaluator") เป็นคุณลักษณะการแสดงตัวอย่างใหม่สําหรับ Dataflow Gen2 (พร้อมการสนับสนุน CI/CD) ใน Microsoft Fabric มีกลไกการดําเนินการคิวรีใหม่ที่ทํางานบน .NET core เวอร์ชัน 8 ซึ่งสามารถปรับปรุงประสิทธิภาพของการเรียกใช้กระแสข้อมูลได้อย่างมีนัยสําคัญในบางสถานการณ์

กระแสข้อมูลที่เรียกใช้ตัวประเมินสมัยใหม่อาจเห็นประโยชน์หลักบางประการเหล่านี้:

• การดําเนินการกระแสข้อมูลที่เร็วขึ้น: กลไกจัดการที่ทันสมัยสามารถลดเวลาในการประเมินคิวรีได้อย่างมาก กระแสข้อมูลจํานวนมากทํางานเร็วขึ้นอย่างเห็นได้ชัด ทําให้คุณสามารถรีเฟรชข้อมูลได้บ่อยขึ้นหรือตอบสนองกรอบเวลาการรีเฟรชที่แน่นหนา

• การประมวลผลที่มีประสิทธิภาพมากขึ้น: เอ็นจิ้นได้รับการปรับให้เหมาะสมเพื่อประสิทธิภาพ โดยใช้อัลกอริทึมที่ได้รับการปรับปรุงและรันไทม์ที่ทันสมัย ซึ่งหมายความว่าสามารถจัดการการแปลงที่ซับซ้อนโดยมีค่าใช้จ่ายน้อยลง ซึ่งช่วยรักษาประสิทธิภาพเมื่อปริมาณข้อมูลของคุณเพิ่มขึ้น

• ความสามารถในการปรับขนาดและความน่าเชื่อถือ: ด้วยการเร่งการดําเนินการและลดปัญหาคอขวด Modern Evaluator ช่วยให้กระแสข้อมูลปรับขนาดเป็นปริมาณที่มากขึ้นและมีเสถียรภาพมากขึ้น ลูกค้าสามารถคาดหวังระยะเวลาการรีเฟรชที่สอดคล้องกันมากขึ้นและปัญหาการหมดเวลาน้อยลงในกระแสข้อมูลขนาดใหญ่เมื่อใช้กลไกจัดการใหม่

วิธีเปิดใช้งาน Modern Evaluator

ทําตามขั้นตอนเหล่านี้เพื่อเปิดกลไกการประเมินคิวรีสมัยใหม่สําหรับกระแสข้อมูล:

1. เปิดกระแสข้อมูลของคุณเพื่อแก้ไข: ใน Fabric Data Factory ให้นําทางไปยังรายการ Dataflow Gen2 (CI/CD) ของคุณและเปิดในตัวแก้ไข Power Query

2. ไปที่ ตัวเลือก (การตั้งค่ามาตราส่วน): ในตัวแก้ไขกระแสข้อมูล ให้เลือกเมนู ตัวเลือก ในกล่องโต้ตอบ ตัวเลือก ให้เลือกบนแท็บ มาตราส่วน

3. เปิดใช้งาน Modern Evaluator: ค้นหาการตั้งค่าสําหรับกลไกการประเมินแบบสอบถามสมัยใหม่ (พรีวิว) เปิดตัวเลือกนี้ (เลือกหรือสลับ)

   

4. บันทึกและเรียกใช้: บันทึกการตั้งค่ากระแสข้อมูล ครั้งต่อไปที่คุณเรียกใช้กระแสข้อมูล จะใช้ Modern Evaluator สําหรับตัวเชื่อมต่อที่รองรับ

ตัวเชื่อมต่อที่รองรับ

กลไกจัดการการประเมินคิวรีสมัยใหม่สนับสนุนชุดตัวเชื่อมต่อข้อมูลที่จํากัด ตรวจสอบให้แน่ใจว่าแหล่งข้อมูลของกระแสข้อมูลของคุณเป็นหนึ่งในชนิดที่ได้รับการสนับสนุนเพื่อใช้ประโยชน์จากกลไกจัดการใหม่ ตัวเชื่อมต่อที่รองรับในปัจจุบัน ได้แก่ :

• ที่เก็บข้อมูล Azure Blob
• Azure Data Lake Storage รุ่น2
• ผ้าเลคเฮาส์
• คลังสินค้าผ้า
• OData
• กระแสข้อมูล Power Platform
• รายการ SharePoint Online
• โฟลเดอร์ SharePoint
• เว็บ

ถ้ากระแสข้อมูลใช้ตัวเชื่อมต่อที่ไม่อยู่ในรายการนี้ คิวรีเหล่านั้นจะยังคงทํางานด้วยกลไกจัดการมาตรฐาน (ดั้งเดิม) การสนับสนุนสําหรับตัวเชื่อมต่อเพิ่มเติมจะขยายเมื่อเวลาผ่านไปเมื่อคุณลักษณะนี้เคลื่อนไปสู่ความพร้อมใช้งานทั่วไป

ข้อควรพิจารณาเกี่ยวกับประสิทธิภาพการทำงาน

เมื่อเปลี่ยนไปใช้กลไกการประเมินที่ทันสมัย คุณควรสังเกตเวลารีเฟรชที่เร็วขึ้น โดยเฉพาะอย่างยิ่งสําหรับโฟลว์ที่เน้นข้อมูล ตัวอย่างเช่น การแปลงข้อมูลที่ก่อนหน้านี้ใช้เวลาหนึ่งชั่วโมงอาจเสร็จสมบูรณ์ในเวลาประมาณครึ่งหนึ่งเมื่อเปิดใช้งาน Modern Evaluator (ผลลัพธ์จริงจะแตกต่างกันไปตามสถานการณ์ของคุณ) การเพิ่มประสิทธิภาพนี้ช่วยในสถานการณ์ต่างๆ เช่น:

• ปริมาณข้อมูลขนาดใหญ่: เมื่อต้องจัดการกับแถวนับล้านหรือไฟล์ขนาดใหญ่ การเพิ่มประสิทธิภาพของกลไกใหม่สามารถลดระยะเวลาในการประมวลผลและลดการใช้หน่วยความจําได้

• การแปลงที่ซับซ้อน: กระแสข้อมูลที่มีขั้นตอนการแปลงจํานวนมากหรือการดําเนินการที่หนักหน่วง (เช่น การรวมในตารางขนาดใหญ่) ได้รับประโยชน์จากแผนการดําเนินการที่ได้รับการปรับปรุงของกลไกจัดการ ซึ่งนําไปสู่การดําเนินการที่ราบรื่นและรวดเร็วยิ่งขึ้น

• กําหนดการเรียกใช้บ่อย: หากกระแสข้อมูลของคุณทํางานหลายครั้งต่อวัน การประหยัดเวลาต่อการรีเฟรชจะสะสม ซึ่งช่วยให้คุณสามารถส่งข้อมูลวันที่ up-toไปยังผู้ใช้ได้รวดเร็วยิ่งขึ้น