تكوين تدفق بيانات للمعالجة التزايدية

يلزم تنفيذ معالجة تزايدية في تدفق بيانات لتحميل السجلات الجديدة أو المحدثة فقط من قاعدة بيانات.

تطبيق المعالجة التزايدية في تدفق بيانات يتيح لك تحميل البيانات الجديدة بدلاً من تنفيذ تحميل كامل كل مرة وهذا يمثل تكاليف وعدم كفاءة التشغيل. بعبارة أخرى، في كل مرة تقوم بتحميل البيانات باستخدام تدفق بيانات، تقوم بمعالجة البيانات الجديدة فقط التي تمت إضافتها منذ التشغيل الأخير.
قبل البدء، قم بتكوين اتصال بواحدة من قواعد البيانات المدعومة، على سبيل المثال، أوراكل أو Oracle Autonomous Data Warehouse أو Apache Hive أو Hortonworks Hive أو Map R Hive. ثم، قم بتكوين مؤشر بيانات جديد لقاعدة البيانات هذه. يرجى الاطلاع على تحديد مؤشر بيانات جديد لمصدر بيانات.
  1. قم بتكوين أو فتح تدفق البيانات حيث تريد تطبيق المعالجة التزايدية.
  2. في محرر تدفق البيانات حدد خطوة حفظ البيانات لعرض لوحة خطوة المحرر.
  3. في حقل مجموعة البيانات، حدد اسم مجموعة بيانات المدخلات المحددة في خطوة إضافة بيانات.
  4. في خيار حفظ البيانات في، حدد اتصال قاعدة البيانات.
  5. انقر على تحديد اتصال وحدد اتصالاً لإحدى قواعد البيانات الهدف المدعومة.
  6. في حقل الجدول، حدد اسم الجدول الهدف الذي تكتب فيه.
  7. في خيار عند التشغيل، حدد إضافة بيانات جديدة إلى البيانات الحالية.
  8. انقر على حفظ.