Format Atlas

Bandingkan

netCDF vs Zarr

netCDF menyediakan model data ilmiah dengan dimensi, variabel, dan atribut dalam beberapa format berkas. Zarr menetapkan larik multidimensi berpotongan yang disimpan pada sistem key-value. Pilihan bergantung pada alat, penyimpanan, dan pola akses.

Format mana yang sebaiknya dipilih?

Utamakan netCDF untuk data yang sudah ada dan perangkat lunak ilmiah yang kompatibel; pertimbangkan Zarr untuk akses per potongan pada alur terdistribusi atau penyimpanan objek. Periksa konvensi metadata dan dukungan implementasi.

Cocok untuk netCDF

Menyimpan dan bertukar data larik untuk iklim, cuaca, dan ilmu kebumian

  • Menggambarkan data multidimensi dengan dimensi, variabel, dan atribut
  • Alur kerja ilmiah portabel dengan alat netCDF

Cocok untuk Zarr

Menyimpan dan bertukar larik multidimensi besar dalam potongan · Mengolah data ilmiah di penyimpanan objek cloud

  • Membaca bagian tertentu dari larik secara efisien
  • Berbagi data terpecah antaralat yang kompatibel

Informasi dasar

ItemnetCDFZarr
Ekstensi.nc, .nc4, .cdf.zarr
Tipe MIME
Penggunaan umumMenyimpan dan bertukar data larik untuk iklim, cuaca, dan ilmu kebumianMenyimpan dan bertukar larik multidimensi besar dalam potongan · Mengolah data ilmiah di penyimpanan objek cloud
Cara membukaGunakan perangkat lunak analisis atau pustaka yang mendukung netCDF. Periksa variabel, dimensi, atribut, dan varian berkas; cocokkan koordinat, satuan, kalender, nilai hilang, dan konvensi CF.Gunakan pustaka atau alat analisis yang mendukung Zarr. Periksa versi, bentuk larik, grid potongan, codec, dan atribut. Simpan seluruh direktori atau kunci objek yang diperlukan dan rujuk dokumentasi pembuat.
Ekspor atau konversiSaat mengonversi ke CSV, HDF5, atau Zarr, pastikan dimensi, tipe variabel, atribut, koordinat, dan kalender waktu tetap terjaga. Model classic dapat kehilangan fitur lanjutan; CSV tidak mewakili hierarki, tipe, dan atribut sepenuhnya.Saat mengonversi dari netCDF atau HDF5, periksa dimensi, tipe, potongan, atribut, dan koordinat. Simpan sumber dan validasi nilai setelah konversi.

Pilih menurut penggunaan

Menggambarkan data multidimensi dengan dimensi, variabel, dan atribut

Menyimpan dan bertukar data larik untuk iklim, cuaca, dan ilmu kebumian

netCDF

Alur kerja ilmiah portabel dengan alat netCDF

Menyimpan dan bertukar data larik untuk iklim, cuaca, dan ilmu kebumian

netCDF

Membaca bagian tertentu dari larik secara efisien

Menyimpan dan bertukar larik multidimensi besar dalam potongan · Mengolah data ilmiah di penyimpanan objek cloud

Zarr

Berbagi data terpecah antaralat yang kompatibel

Menyimpan dan bertukar larik multidimensi besar dalam potongan · Mengolah data ilmiah di penyimpanan objek cloud

Zarr

Poin utama 1

netCDF klasik biasanya satu berkas; netCDF-4 berbasis HDF5. Zarr memisahkan potongan larik dan metadata untuk direktori atau penyimpanan objek.

Perbedaan lebih lanjut

Poin utama 2

netCDF berfokus pada model dataset ilmiah; Zarr pada larik berpotongan dan penyimpanan. Interoperabilitas koordinat, unit, dan konvensi perlu diperiksa.

Perbedaan lebih lanjut

Perbedaan lebih lanjut

Pilih netCDF jika berkas mapan dan kompatibilitas perangkat lunak menjadi prioritas. Pertimbangkan Zarr untuk baca-tulis per potongan di penyimpanan objek. Uji pustaka, versi, dan codec yang tepat.

  • Berkas keluarga netCDF klasik umumnya tunggal, sedangkan netCDF-4 memakai HDF5. Zarr menyimpan potongan larik dan metadata sebagai key atau objek terpisah.
  • netCDF mendefinisikan dimensi, variabel, dan atribut; Zarr menetapkan struktur larik dan penyimpanan. Konvensi koordinat dan unit mungkin memerlukan alat tambahan.
  • Saat konversi, validasi bentuk potongan, codec, tipe data, nilai hilang, waktu, dan metadata koordinat. Dukungan versi dan codec berbeda menurut implementasi dan penyimpanan.

Pertanyaan umum

Apakah konversi netCDF ke Zarr otomatis mempertahankan semua metadata?

Belum tentu. Validasi dimensi, koordinat, unit, nilai hilang, konvensi, dan dukungan codec dengan alat tujuan.

Pelajari lebih lanjut

Kegunaan dan pemeriksaan terkait

Pemeriksaan sebelum menyerahkan array ilmiah

Referensi dan spesifikasi