preciazo/sepa
2025-01-30 20:43:39 -03:00
..
ckan juntar todo en un package 2024-09-12 18:17:10 -03:00
dataset-validator juntar todo en un package 2024-09-12 18:17:10 -03:00
db WIP: metadata scrapped 2024-11-13 09:48:37 -03:00
drizzle pagina para ver precios historicos 2024-09-22 16:39:04 -03:00
index-gen always use same timezone 2025-01-27 10:15:59 -03:00
scripts WIP: metadata scrapped 2024-11-13 09:48:37 -03:00
sitio2 mejorar colores 2024-12-17 00:25:29 -03:00
visualizacion-datos-curso visualizacion curso 2024-12-01 16:57:54 -03:00
.dockerignore deploy 2024-09-14 12:48:45 -03:00
.gitignore juntar todo en un package 2024-09-12 18:17:10 -03:00
archiver.ts use socks proxy instead 2025-01-30 20:43:39 -03:00
bun.lockb chore: shadcn dialog 2024-12-17 00:17:08 -03:00
Dockerfile oops 2024-09-16 11:12:17 -03:00
drizzle.config.ts sitio2 v0.0 2024-09-14 10:34:36 -03:00
duckdb.sql improve 2024-12-01 16:58:14 -03:00
importer.js moar concurrency 2024-12-01 23:09:44 -03:00
package.json readcsv, duckdb neo 2024-11-24 10:50:50 -03:00
README.md juntar todo en un package 2024-09-12 18:17:10 -03:00
tsconfig.json juntar todo en un package 2024-09-12 18:17:10 -03:00

sepa

sepa-precios-importer

Importador de datasets de precios de SEPA a una base de datos PostgreSQL.

Vease Errores en el formato de los datos SEPA

bun install
bun run importer.ts ~/carpeta-con-datasets-descomprimidos

sepa-precios-archiver

Archivador del dataset de precios de Precios Claros - Base SEPA. Recomprime para utilizar ~8 veces menos espacio, y resube a un bucket mio de Backblaze B2.

bun install
bun run archiver.ts

sepa-dataset-validator

un script para validar los datasets de SEPA automaticamente

basado en la lista de problemas que encontramos

para ejecutar, necesitas Bun

bun install
bun run dataset-validator/index.ts [ruta/al/dataset]

podes descargar un dump de nuestro index para analizar (la descarga pesa mucho menos que los oficiales :). para descomprimir, necesitas tener zstd y tar. después solo tenes que ejecutar tar xvf ARCHIVO.tar.zst y listo.