mirror of
https://github.com/catdevnull/preciazo.git
synced 2025-02-21 11:16:28 +00:00
.. | ||
ckan | ||
dataset-validator | ||
db | ||
drizzle | ||
index-gen | ||
scripts | ||
sitio2 | ||
visualizacion-datos-curso | ||
.dockerignore | ||
.gitignore | ||
archiver.ts | ||
bun.lockb | ||
Dockerfile | ||
drizzle.config.ts | ||
duckdb.sql | ||
importer.js | ||
package.json | ||
README.md | ||
tsconfig.json |
sepa
sepa-precios-importer
Importador de datasets de precios de SEPA a una base de datos PostgreSQL.
Vease Errores en el formato de los datos SEPA
bun install
bun run importer.ts ~/carpeta-con-datasets-descomprimidos
sepa-precios-archiver
Archivador del dataset de precios de Precios Claros - Base SEPA. Recomprime para utilizar ~8 veces menos espacio, y resube a un bucket mio de Backblaze B2.
bun install
bun run archiver.ts
sepa-dataset-validator
un script para validar los datasets de SEPA automaticamente
basado en la lista de problemas que encontramos
para ejecutar, necesitas Bun
bun install
bun run dataset-validator/index.ts [ruta/al/dataset]
podes descargar un dump de nuestro index para analizar (la descarga pesa mucho menos que los oficiales :). para descomprimir, necesitas tener zstd
y tar
. después solo tenes que ejecutar tar xvf ARCHIVO.tar.zst
y listo.