Convertire XZ in TAR

Rimuovere la compressione sembra la direzione sbagliata e ci sono diversi posti dove è l’unica direzione. docker load legge un’immagine da un tarball. Diversi importatori di apparecchi, firmware e strumenti prendono un .tar perché il loader è stato scritto per percorrere intestazioni TAR e nulla è stato aggiunto dopo.

C’è un secondo lettore con una ragione diversa: qualcuno che vuole semplicemente guardare. Un tarball può essere ispezionato, confrontato, percorso da uno script e dato a tar --to-command senza un passo di decompressione davanti a ogni operazione.

XZ è arrivato nel 2009 e comprime un singolo stream con LZMA2. Non ha campo per un nome file, nessuna nozione di cartella, e nessun modo di registrare dove finisce un membro e inizia il successivo.

TAR, dal 1979 e standardizzato come POSIX.1-2001 ustar, è il complemento esatto: un’intestazione da 512 byte davanti a ogni membro che registra nome, percorso, dimensione, proprietario, gruppo, modalità e marche temporali, e nessuna compressione affatto. Tra i due fanno l’intero lavoro.

Ogni altra conversione di archivio su questo sito ha un argomento di dimensione da qualche parte. Questa ha l’opposto, e va pianificata piuttosto che scoperta. Un XZ di codice sorgente, log o documenti può espandersi diverse volte; il registro dà a XZ un dizionario fino a 64 MB.

Le conseguenze pratiche riguardano dove il file deve andare dopo. Non entrerà più in un limite di allegato che l’XZ superava comodamente. Impiegherà proporzionalmente più tempo a copiare su rete.

Questa è la frase più importante della pagina per chiunque converta un rilascio pubblicato. La conversione non stacca semplicemente il livello xz dal vostro file — estrae completamente l’archivio e scrive un nuovo TAR dai contenuti. I file dentro sono identici byte per byte.

Quindi lo SHA-256 nelle note di rilascio, l’hash in una ricetta di pacchetto, la firma sul tarball: nessuno di essi verificherà contro ciò che scaricate qui. Se la verifica fa parte del lavoro, fate la decompressione localmente con xz -d archive.tar.xz.

Un’intestazione TAR ha campi per proprietario, gruppo, bit di permesso e ora di modifica, e per molti tarball sono portanti: un rilascio con uno script di installazione dipende dal fatto che lo script arrivi eseguibile.

Poiché l’archivio viene scompattato in una directory temporanea e ri-archiviato, le modalità e i tempi sono qualunque cosa sia sopravvissuta a quel viaggio. Se il tarball andrà a docker load o in qualcosa che esegue ciò che scompatta, controllate i campi intestazione con tar tvf.

Non ogni .xz è un tarball compresso. Un singolo file grande — un dump di database, un’immagine disco — è spesso compresso da solo, senza alcun tarball dentro. Il convertitore gestisce entrambi i casi: decomprime lo stream, prova a scompattare un TAR interno, e quando fallisce tiene il singolo file trovato.

Ciò che ottenete in quel caso è un TAR contenente esattamente un membro, un oggetto leggermente strano ma perfettamente valido e di solito ancora ciò che vuole lo strumento a valle.

Decomprimere uno stream xz richiede un buffer scalato al dizionario con cui il file è stato scritto — fino a 64 MB secondo la cifra del registro. Sulla macchina che converte il file è irrilevante, motivo per cui questo raramente emerge.

Emerge dall’altra parte: se la ragione per cui rimuovete la compressione è che un piccolo dispositivo non poteva aprire l’XZ, questa conversione è un modo legittimo di consegnargli qualcosa che può leggere, al costo di un trasferimento molto più grande.

Sul nostro server, non nel vostro browser. La maggior parte degli strumenti su questo sito tiene il file sul vostro dispositivo; gli archivi sono una delle eccezioni, perché il lavoro richiede 7-Zip e xz come programmi reali.

Ogni lavoro ottiene una directory temporanea su un filesystem in memoria, cancellata al termine del lavoro indipendentemente dall’esito, e terminata a sessanta secondi. Prima che qualcosa venga scritto, l’archivio viene interrogato su cosa dichiara di espandere, e un totale dichiarato sopra 2 GB viene rifiutato.

tar tvf archive.tar elenca ogni membro con la sua modalità, proprietario, dimensione e marca temporale, e non costa nulla. Due cose vale la pena guardare. La prima è il livello superiore: un archivio impacchettato da dentro una cartella e uno impacchettato dal suo genitore differiscono per una cartella iniziale su ogni percorso.

La seconda è la colonna permessi, particolarmente se qualcosa nell’archivio deve essere eseguito. Un TAR è uno dei pochi formati che può portare un bit di modalità, quindi se arriva sbagliato potete correggerlo — estrarre, chmod, ri-archiviare — piuttosto che scoprirlo su una macchina che non controllate.