Convertire ARW in PNG

PNG memorizza valori esatti di pixel, quindi un file scritto oggi decodifica allo stesso array dello stesso file scritto il mese prossimo, e salvarlo di nuovo non cambia nulla. Per qualsiasi cosa misuri, confronti, faccia hash o si addestri sulle immagini, questa proprietà vale più della dimensione del file — un formato che ricomprime silenziosamente a ogni scrittura trasforma un problema di riproducibilità in un mistero.

Questa conversione è deterministica nello stesso senso. Lo stesso ARW produce lo stesso PNG ogni volta : l’anteprima è individuata dalla stessa scansione, decodificata dallo stesso decoder e codificato dallo stesso encoder, senza alcun passaggio casuale in nessuna parte.

I JPEG delle fotocamere quasi sempre sottocampionano la crominanza : la luminosità è memorizzata per pixel, il colore a metà risoluzione orizzontalmente e verticalmente. Funziona perché la visione umana è molto più sensibile al dettaglio di luminanza che al dettaglio di colore, ed è invisibile in una fotografia guardata da una persona.

Non è invisibile a un algoritmo. Il dettaglio di colore fine — una linea rossa su sfondo bianco, il confine tra due aree sature — è stato interpolato piuttosto che misurato. Il PNG memorizzerà un valore di colore pieno per ogni pixel, ma un quarto di quei valori sono stati ricostruiti dal decoder JPEG piuttosto che registrati dalla fotocamera. Se la pipeline misura bordi di colore, quella è la limitazione da conoscere, e l’unico modo per superarla è fare il demosaic dell’ARW correttamente.

Un ARW è un contenitore derivato da TIFF che Sony scrive dalla Alpha DSLR-A100 del 2006, che contiene letture del sensore a 12 bit sui corpi iniziali e a 14 bit su quelli più recenti. Accanto ad esse la fotocamera scrive un JPEG finito al momento dello scatto, alle dimensioni in pixel complete del sensore sui corpi moderni.

Il convertitore cerca quel JPEG, mantiene il più grande sopra 640×480, lo decodifica e lo ricodifica come PNG. I dati del sensore non vengono mai toccati, ed è per questo che la conversione è veloce e perché non può dare nulla che la fotocamera non avesse già reso.

Due casi in particolare. La fotogrammetria e l’unione di panorami vogliono coerenza attraverso l’insieme, e la fotocamera applica bilanciamento del bianco automatico e la propria curva di tono per frame ; se la fotocamera era su qualsiasi automatico, l’insieme deriva e lo strumento deve lavorare di più. Scattare con bilanciamento del bianco fisso e un profilo neutro va bene ; se la fotocamera era su automatico, aspettarsi deriva da frame a frame.

Anche qualsiasi cosa misuri luminanza assoluta, faccia lavoro radiometrico, o si basi su una risposta lineare ha bisogno dei dati del sensore. La curva di tono della fotocamera è un rendering deliberatamente non lineare inteso a sembrare appropriato, e distrugge la relazione tra valore di pixel e luce da cui tale lavoro dipende.

PNG supporta 16 bit per canale e i sensori Sony registrano 14, ma l’anteprima estratta è un JPEG a 8 bit, quindi l’output è a 8 bit. In 8 bit un canale ha 256 livelli, e qualsiasi operazione che stira un intervallo stretto — normalizzare un frame scuro, estrarre contrasto da uno piatto — produrrà banding.

Se la pipeline fa quel tipo di stiramento, questa è la sorgente sbagliata. Sviluppare l’ARW in Imaging Edge, Lightroom, Capture One o darktable ed esportare un TIFF a 16 bit, che è l’input standard esattamente per questa ragione.

L’aritmetica è spietata alle risoluzioni più alte di Sony. Un frame A7 III da 24 megapixel è circa 72 MB di pixel grezzi ; un frame A7R IV da 61 megapixel è circa 180 MB. PNG porta una fotografia a circa la metà o i tre quarti di ciò, quindi un insieme di mille immagini da un A7R IV può facilmente superare i cento gigabyte.

Impostare una larghezza massima è la leva. Molte pipeline ridimensionano comunque il proprio input come primo passo, e farlo durante la conversione significa non memorizzare mai la versione a dimensione piena. Controllare cosa consuma effettivamente lo strumento prima di generare qualcosa che ridurrà immediatamente.

La ricodifica scarta l’EXIF, quindi non c’è lente, nessuna focale, nessun dato di esposizione e nessuna coordinata GPS nel PNG. Qualsiasi cosa ne abbia bisogno — uno strumento di fotogrammetria che legga la focale, un dataset che registri le condizioni di cattura — deve prenderli dall’ARW separatamente e portarli in un sidecar o in un manifest.

Di solito è il design migliore indipendentemente. Una pipeline che legge i propri parametri da un manifest è riproducibile ; una che li legge da qualsiasi file derivato si trovi sul disco non lo è.

I lotti funzionano e la coerenza è il punto : lasciar cadere l’intero insieme, lasciare che ogni file attraversi le stesse impostazioni, prendere il risultato come ZIP. Convertire in più sessioni è come un set di dati finisce con due larghezze massime diverse dentro e una settimana persa a scoprire perché.

Codificare PNG a questi conteggi di pixel è un lavoro vero, quindi un grande insieme richiede tempo — molto più a lungo del percorso JPG, dove l’anteprima viene copiata fuori senza ricodifica. I file di input sono accettati fino a 100 MB ciascuno, il che copre ARW compressi e lossless compressi comodamente ; un frame non compresso da 61 megapixel a circa 120 MB è oltre il limite.

La conversione gira nel browser, quindi i file ARW non vengono mai trasmessi. Per dati di immagine riservati, identificativi personalmente, o soggetti all’approvazione di un comitato etico di ricerca, non è un optional — caricare un dataset in un convertitore trovato in un risultato di ricerca è il tipo di passo che invalida l’approvazione.

È verificabile piuttosto che promesso : aprire gli strumenti di sviluppo, guardare la scheda Rete durante una conversione, e notare che nulla che porti le immagini esce.

Il PNG prodotto qui non porta con sé un profilo ICC, perché la pipeline di ricodifica scarta i profili dell’anteprima JPEG insieme a tutti gli altri metadati. Un lettore che non ha ricevuto un profilo presume sRGB, e una fotocamera Sony impostata su Adobe RGB scrive un’anteprima Adobe RGB i cui numeri verranno quindi interpretati come sRGB, con colori saturi che tornano più tenui di quanto dovrebbero.

Per un dataset questa è un’informazione che merita di essere registrata a parte, in un manifest accanto ai file, perché un PNG senza profilo è ambiguo per costruzione e l’unico modo per risolverlo è sapere come la fotocamera era configurata al momento dello scatto. Una pipeline di elaborazione che si basi sul profilo può correggerlo al momento del caricamento, iniettando il profilo atteso nel PNG ; una che presume sRGB si troverà una deriva di colore che sembra un bug dello strumento e non lo è.