أدلة
اختيار تنسيق لتحليل البيانات وتبادلها
ميّز وفق المنصة وأنواع البيانات بين التحليل العمودي وتبادل السجلات ذات المخطط والجداول المقروءة.
أي تنسيق يجب أن تختار؟
اختر وفق دور كل ملف في سير عملك.
- التحليل العمودي وبحيرات البيانات → Parquet
- تبادل السجلات ذات المخطط → Avro
- تحليل عمودي ضمن منظومة Hadoop → ORC
- الفحص والتبادل البسيط → CSV
اختر تنسيقًا عموديًا للتحليل
يُستخدم Parquet وORC في التحليلات التي تقرأ أعمدة محددة. اختر وفق محرك الاستعلام ومنصة البيانات القائمة.
تحقق من المخططات ونتائج التحويل
يُستخدم Avro لتبادل السجلات ذات المخطط. عند التحويل، تحقق من الأنواع والقيم الفارغة والطوابع الزمنية والكسور وأسماء الحقول والتوافق.
تنسيقات مقترحة
تحقق قبل التصدير
- تحقق من الأنواع والقيم الفارغة والتواريخ وترميز الأحرف.
- راجع صلاحيات الوصول ونطاق المشاركة للأعمدة الشخصية أو السرية.
- اختبر الأداء والتوافق باستخدام بيانات ممثلة.