Debmirror: creiamo un mirror Debian
Introduzione
Molto spesso ci si trova nella necessità di avere un mirror completo di una distribuzione Debian per uno o più computer che non sono connessi ad internet (o lo sono tramite una connessione troppo lenta). Debmirror ci viene in aiuto, dando la possibilità di creare un mirror locale.
Installazione
Per installare debmirror è sufficiente un
# apt-get install debmirror
Un consiglio, nel caso in cui venga creato un mirror per effettuare una installazione od un aggiornamento per un computer non connesso in rete: usate un disco fisso esterno (nel caso in cui il mirror debba essere trasportato su un altro computer) o di un DVD-RW (nel caso in cui il mirror sia parziale).
Configurazione
Il programma non richiede configurazione, in quanto tutti gli eventuali parametri devono essere passati tramite riga di comando.
Opzione e Parametri
La 'sintassi' del comando è la seguente:
$ debmirror [OPZIONI] mirrordir
con i seguenti parametri:
- mirrordir
- Questo parametro obbligatorio indica dove deve essere creato il mirror. Attenzione alla directory indicata in quanto, come opzione di default, vengono rimosse quelle directory e file che non appaiono nel repository di cui si effettua il mirroring
- --debug
- Abilita il Debug
- --progress -p
- Visualizza una barra di avanzamento per monitorare lo stato del mirroring
- --verbose -v
- Visualizza una barra di avanzamento tra i download dei file
- --source
- Include i pacchetti dei sorgenti nel mirror [Default]
- --nosource
- Non include i sorgenti dei programmi nel mirror
- --md5sums -m
- Utilizza l'md5 per verificare quali file nel mirror locale sono corretti ed aggiornati, è disabilitato di default in quanto lento e 'paranoico'
- --passive
- Esegui il download in modalità 'passiva'
- --host=remotehost -h
- Indica qualche host utilizzare, si invita a controllare il mirror più vicino a questo indirizzo: http://www.debian.org/mirror/list , consentendo così una migior ripartizione del traffico sui mirror presenti. (Default: ftp.debian.org)
- --user=remoteusername -u
- Sperifica l'utente remoto per accedere all'host remoto (normalmente va benissimo il valore di default) [Default: anonymous]
- --method=ftp|hftp|http|rsync -e
- Specifica quale metodo utilizzare per effettuare il download dei file. Sono supportati: ftp, http, hftp (ftp over http) rsync (per questo protocollo bisogna preporre ':' alla root directory dell'host remoto, ad esempio ":debian")
- --proxy=http://user:pass@url:port/
Specifica i parametri per la connessione tramite proxy
- --timeout=seconds -t
- Specifica l'intervallo prima che il download di un file vada in timeout [Default: 300 secondi]
- --root=directory -r directory
- Specifica la root directory dell'host remoto. Normalmente è "/debian". In questa directory è contenuta la directory "dists". [Default: /debian]
- --dist=foo[,bar,..] -d foo
- Specifica la distribuzione (woody, sarge, sid). Possono essere indicate tutte e tre (-dist=woody,sarge,sid oppure -d woody -d sarge -d sid); i link (stable, unstable, testing) potrebbero non funzionare, quindi si invita ad utilizzare il nome della release). [Default: sid]
- --section=foo[,bar,..] -s foo
- Specifica la sezione (o le sezioni) di Debian di cui effettuare il mirroring. [Default: main,contrib,non-free,main/debian-installer]
- --arch=foo[,bar,..] -a foo
- Specifica la architettura (o le architetture) di cui effettuare il mirroring. (Default: i386)
- --cleanup
- Esegue una pulizia della directory in cui verrà creato il mirror. [Default: on]
- --nocleanup
- Non esegue la pulizia del mirror al termine della creazione dello stesso
- --postcleanup
- Esegue la pulizia del mirror locale solo quando il mirroring è terminato senza errori
- --ignore=regex
- Non elimina i file che rispondono l'espressione regolare [regexp] (può essere usato più volte)
- --exclude=regex
- Non esegue il download dei file che soddisfano l'espressione regolare (può essere usato più volte)
- --exclude-deb-section=regex
- Non esegue il download dei file contenuti nella sezione che soddisfa l'espressione regolare [regexp] (può essere usato più volte)
- --limit-priority=regex
- Limita il download ai file che soddisfano l'espressione regolare per quanto riguarda la priorità del pacchetto (reguired, extra, optional, ...); (può essere usato più volte)
- --include=regex
- Vengono inclusi i file che soddisfano l'espressione regolare [regexp] (può essere usato più volte)
- --skippackages
- Non scarica i file Packages e Sources (utile se questi file sono già aggiornati)
- --getcontents
- Scarica il file Contents.arch.gz
- --ignore-missing-release
- Non lancia un errore se il file Release non è presente nel mirror
- --ignore-release-gpg
- Non lancia un errore se non è presente il file Release.gpg (consigliato)
- --dry-run
- Esegue una simulazione, senza scaricare i file e pulire il mirror.
- --rsync-options=options
- Specifica le opzioni da passare a rsync. [Default: -aIL --partial]
Utile è anche l'opzione "--bwlimit=x" che consente di impostare la larghezza di banda massima da usare per il download
- --ignore-small-errors
- Ignora degli errori 'piccoli' o 'poco sognificanti' come il non aver trovato un file al 'primo colpo' e il dover procedere ad un altro tentativo... Consigliato
- --help
- Visualizza un help.
Utilizzo
L'utilizzo è semplice: basta indicare solo quello necessario e lui provvederà a scaricare tutti i file necessari. Verrà creata una struttura uguale a quella di un mirror Debian ed eventualmente (se già presente) verranno controllati ed aggiornati i pacchetti vecchi.
Ecco alcuni esempi di utilizzo:
- Mirror completo di sarge:
$ debmirror -p -d sarge --ignore-small-errors --ignore-release-gpg /path/to/dir
(--ignore-small-errors --ignore-release-gpg le includo sempre, in quanto potrebbero dare dei problemi; eventualmente si può provare a lanciare il processo senza gli 'ignore' per controllare eventuali errori nel caso il processo non vada a buon fine.
- Mirror dei file che non appartengono alla sezione 'games', escludendo anche i sorgenti sorgenti:
$ debmirror -p -d sarge --ignore-small-errors --ignore-release-gpg --exclude="games" --nosources /path/to/dir
- Mirror di tutta Sarge (Sorgenti esclusi):
$ debmirror -p -d sarge --ignore-small-errors --ignore-release-gpg --nosources /path/to/dir
Come potete vedere da questi 3 esempi, l'utilizzo è molto semplice ed immediato.
Debmirror e Cron
Può essere utile, per manterene aggiornato il mirror, lanciare debmirror ad intervalli regolari (magari ogni giorno)... Così, aggiungengo una semplice riga a /etc/crontab è possibile programmare l'esecuzione di debmirror. Ecco un esempio, che programma l'esecuzione del mirroring alle 00.00 di ogni giorno:
0 0 * * * maxer /usr/bin/debmirror -d sarge --ignore-small-errors --ignore-release-gpg --arch=none --nosource /store3/deb/
così il mirror verrà aggiornato di notte, evitando eventuali problemi di banda o di carico eccessivo del sistema!
Considerazioni sull'Utilizzo
Prima di utilizzare questo strumento per installare o aggiornare Debian su un computer sprovvisto di connessione ad internet e/o con una connessione lenta, vorrei porre in luce alcune questioni:
- L'utilizzo smodato di questo strumento genera un aumento di banda utilizzata (da parte dei mirror) considerevole (nell'ordine di Gbyte), uno spreco per un solo computer.
- Spesso si scaricano più programmi di quelli necessari (anzi, spesso quelli non utilizzati sono più del doppio di quelli utilizzati); consiglio quindi il download della prima e della seconda ISO di Sarge, o il primo DVD, in quanto su questi è presente il 90% dei pacchetti più utilizzati in ambito 'domestico'.
- Apt-zip è spesso molto più comodo da utilizzare, ed anche più veloce...
Non dimentichiamoci che le risorse dei mirror sono 'donate' al progetto Debian, ed un aumento esponenziale o troppo sostenuto delle risorse richieste potrebbe compromettere la disponibilità dell'hoster...
Inoltre debmirror non è designato propriamente per generare 'mirror di installazione', ma per creare mirror locali in LAN di medie dimensioni (anche se oramai può venir tranquillamente sostituito da apt-cache o simili).
Dopo queste piccole considerazioni, happy Debian!
Lettura Consigliata: Apt-Proxy: un proxy per i pacchetti Debian