Shardear por 64 en vez de 16
This commit is contained in:
parent
ad1268a685
commit
f2184e25eb
2 changed files with 2 additions and 2 deletions
|
@ -26,7 +26,7 @@ if test -f lista-paginas.zst; then
|
|||
echo "Son $(cat lista-paginas | wc -l) páginas."
|
||||
echo "> Separando en varias listas..."
|
||||
rm -f TMP-lista-shard-*
|
||||
lua otros-scripts/shard.lua < ./lista-paginas
|
||||
lua otros-scripts/shard.lua 64 < ./lista-paginas
|
||||
echo "> Empezando a descargar..."
|
||||
for lista in TMP-lista-shard-*; do
|
||||
wget --header='accept-encoding: br' --no-verbose --no-clobber --input-file="$lista" --restrict-file-names=nocontrol &
|
||||
|
|
|
@ -8,7 +8,7 @@ for line in (list):gmatch('[^\r\n]+') do
|
|||
lineas = lineas + 1
|
||||
end
|
||||
|
||||
local cantidad_de_listas = 16
|
||||
local cantidad_de_listas = tonumber(arg[1])
|
||||
local cada_lista = lineas / cantidad_de_listas
|
||||
|
||||
local listas = {}
|
||||
|
|
Loading…
Reference in a new issue