Comparar
netCDF frente a Parquet
netCDF describe datos científicos con dimensiones, variables y atributos con nombre para relacionar coordenadas y tiempo. Parquet es un formato columnar con grupos de filas y bloques de columnas, adecuado para seleccionar columnas en consultas analíticas.
¿Qué formato deberías elegir?
Elige netCDF para matrices científicas con tiempo, niveles, coordenadas y variables relacionadas. Considera Parquet para registros tabulares consultados por columnas.
Adecuado para netCDF
Almacenar e intercambiar datos en matrices de clima, meteorología y ciencias de la Tierra
- Describir datos multidimensionales mediante dimensiones, variables y atributos
- Flujos científicos portables con herramientas compatibles con netCDF
Adecuado para Parquet
Guardar tablas estructuradas para análisis
- Grandes conjuntos leídos por columnas seleccionadas
Información básica
| Campo | netCDF | Parquet |
|---|---|---|
| Extensión | .nc, .nc4, .cdf | .parquet |
| Tipo MIME | application/vnd.apache.parquet | |
| Usos habituales | Almacenar e intercambiar datos en matrices de clima, meteorología y ciencias de la Tierra | Guardar tablas estructuradas para análisis |
| Cómo abrir | Usa un programa de visualización o análisis o una biblioteca compatible con netCDF. Revisa variables, dimensiones, atributos y variante del archivo. Comprueba coordenadas, unidades, calendario, valores ausentes y convenciones CF según el lector. | Use una herramienta Parquet para revisar esquema, tipos, número de filas y valores. |
| Exportar o convertir | Al convertir a CSV, HDF5, Zarr u otro formato, comprueba si se conservan dimensiones, tipos, atributos, coordenadas y calendarios. Convertir al modelo classic puede perder funciones ampliadas; CSV no representa por completo jerarquías, tipos y atributos. | Desde CSV u otros formatos, compruebe tipos, nulos, fechas, codificación, particiones y filas. |
Elegir según el uso
Describir datos multidimensionales mediante dimensiones, variables y atributos
Almacenar e intercambiar datos en matrices de clima, meteorología y ciencias de la Tierra
netCDFFlujos científicos portables con herramientas compatibles con netCDF
Almacenar e intercambiar datos en matrices de clima, meteorología y ciencias de la Tierra
netCDFGrandes conjuntos leídos por columnas seleccionadas
Guardar tablas estructuradas para análisis
ParquetPunto clave 1
Las variables netCDF son matrices asociadas a dimensiones con nombre y pueden tener variables de coordenadas y atributos; Parquet ubica bloques de columnas en grupos de filas mediante metadatos.
Más sobre las diferenciasPunto clave 2
netCDF tiene modelos Classic y enhanced; netCDF-4 añade grupos y tipos. Parquet codifica columnas tabulares en páginas y grupos de filas.
Más sobre las diferenciasMás sobre las diferencias
Usa netCDF si el significado científico depende de dimensiones, coordenadas, tiempo y unidades. Usa Parquet para análisis tabular. Al convertir, asigna explícitamente ambos modelos.
- netCDF asocia variables N-dimensionales con dimensiones, coordenadas y atributos. Parquet organiza datos tabulares en bloques de columnas dentro de grupos de filas.
- netCDF-4 puede admitir grupos y tipos no disponibles en lectores Classic. Los metadatos Parquet localizan columnas para omitir las que no se necesitan.
- Valida correspondencia variable-columna, dimensiones, unidades, coordenadas y CRS, tiempo, valores ausentes, tipos, grupos y tipos anidados. Ajusta compresión y grupos al patrón de lectura.
Preguntas frecuentes
¿Parquet conserva un conjunto científico netCDF sin asignaciones?
No. Define cómo se asignan dimensiones, coordenadas, unidades, tiempo, valores ausentes y variables a filas y columnas; después valida los datos.