Script to download the Base modells tensor files

#59
by gariandamo - opened

#This script is provided by gariandamo under MIT license in honor of the good work of the DeepSeek team
#create a file like deepseek3-1_download.sh
#copy this code inside and safe
#replace the dummy token with your token that you created within your huggingface
#make the file runable with right click onfile - properties - rights -allow to run as programm ->save
#-> Execute in the folder you like to have the download
#Enjoy a robust scripted download especially on sides that have low internet connection for the safetensor files, rest to download manually

#!/bin/bash

Konfiguration

BASE_URL="https://huggingface.co/deepseek-ai/DeepSeek-V3.1-Base/resolve/main"
TOKEN="insert_your_huggingface_token_here"
LOGFILE="download.log"
START=00001
END=00163

Sicherstellen, dass das Log existiert

touch "$LOGFILE"

Hauptloop

for i in $(seq -w $START $END); do
FILE="model-${i}-of-000163.safetensors"

Überspringen, wenn bereits im Logfile steht

if grep -q "$FILE" "$LOGFILE"; then
echo "✅ $FILE bereits abgeschlossen – überspringe."
continue
fi

echo "⬇️ Starte Download: $FILE"
echo "🔗 URL: ${BASE_URL}/${FILE}?download=true"

Direktdownload mit wget

wget -c "${BASE_URL}/${FILE}?download=true"
--header="Authorization: Bearer $TOKEN"
-O "$FILE"

Erfolgsprüfung

if [ $? -eq 0 ]; then
echo "$FILE" >> "$LOGFILE"
echo "✔️ $FILE erfolgreich abgeschlossen."
else
echo "⚠️ $FILE möglicherweise unvollständig – wird später fortgesetzt."
fi

Zufällige Wartezeit (50–180 Sekunden)

DELAY=$((RANDOM % 131 + 50))
echo "⏳ Warte $DELAY Sekunden vor nächstem Download..."
sleep "$DELAY"
done

echo "🟢 Downloadvorgang abgeschlossen oder pausiert. Du kannst das Skript jederzeit neu starten."

Sign up or log in to comment