L'archiviazione web è il processo di raccolta di porzioni del World Wide Web al fine di preservarle in un archivio a uso di futuri ricercatori, storici e pubblico generico^[1]. A causa dell'enorme quantità di informazioni che si possono trovare sul web, gli archivisti utilizzano in molti casi dei web crawler per registrare automaticamente le pagine. La più grande organizzazione di archiviazione web, che si basa su un approccio di crawling di massa, è Internet Archive, che, con la sua Wayback Machine, aspira a tenere un archivio dell'intero web.

Una delle prime pratiche di archiviazione web era, nei primi anni novanta, la creazione di liste di link professionali (come ad esempio la lista dei gruppi per i diritti umani di Amnesty International o la Yahoo! directory e l'Open Directory Project). In assenza di motori di ricerca questi siti compilavano liste continuamente aggiornate di indirizzi web utili, organizzandoli per categorie di argomento. La richiesta, la valutazione e la categorizzazione di siti web, insieme alla raccolta su larga scala, l'ordinamento manuale e la messa in mostra di siti web, possono essere considerati una forma primordiale di analisi dei siti web. La comparsa dei motori di ricerca algoritmici ha contribuito alla scomparsa quasi completa di questi metodi manuali.

L'International Web Archiving Workshop (IWAW), iniziato nel 2001, ha creato una piattaforma per la condivisione di esperienze e per lo scambio di idee. La successiva fondazione dell'International Internet Preservation Consortium (IIPC), nel 2003, ha facilitato enormemente la collaborazione internazionale nello sviluppo di standard e strumenti open source per la creazione di archivi web. Questi sviluppi, e la crescente porzione di cultura umana che ogni giorno viene creata e registrata sul web, si intrecciano rendendo inevitabile che un numero sempre maggiore di biblioteche e archivi debbano affrontare le sfide dell'archiviazione web. Le biblioteche statali, gli archivi di stato e varie organizzazioni sono coinvolte nell'archiviazione di contenuti culturalmente rilevanti sul web.^[2][3]

I software e i servizi commerciali di archiviazione web sono oggi fruibili anche dalle organizzazioni private che hanno bisogno di archiviare i propri contenuti web per motivi di registrazione delle attività o per motivi normativi e legali. Archive-it, un servizio a pagamento offerto da Internet Archive, permette per esempio a privati e istituzioni il salvataggio di interi siti e collezioni di siti.^[4]

Generalmente gli archivisti web archiviano diversi tipi di contenuti web tra cui pagine web HTML, style sheets, JavaScript, immagini e video. Inoltre gli archivisti raccolgono metadati riguardo alle risorse archiviate come ad esempio l'orario di accesso, il MIME type e la lunghezza del contenuto. Questi metadati sono utili per stabilire l'autenticità, la provenienza e la collocazione cronologica della collezione archivistica.^[2]

Il metodo più comune di archiviazione del web fa uso di web crawler per rendere automatico il processo di collezione delle pagine web. Tipicamente i crawler accedono ai siti nello stesso modo in cui lo fa un utente per tramite di un browser e ne esplorano i link interni a una profondità determinata dall'archivista, salvando i loro contenuti in un archivio separato dal web "live".

Esempi di web crawler usati per l'archiviazione comprendono Heritrix, HTTrack, Wget.

L'archiviazione su database si riferisce ai metodi di archiviazione che riguardano siti basati su database. Questo tipo di archiviazione richiede la conversione del contenuto della base dati in uno schema standard, spesso usando XML. Una volta immagazzinati nel formato standard, il contenuto dei diversi database che è stato archiviato può essere quindi reso accessibile attraverso un sistema di accesso singolo. Questo approccio è esemplificato dagli strumenti DeepArc e Xinq sviluppati rispettivamente dalla Bibliotèque Nationale de France e dalla National Library of Australia. DeepArc permette di mappare la struttura di un database relazionale in uno schema XML e di esportare i suoi contenuti in un documento XML.^[5] Xinq permette di pubblicare il contenuto così ottenuto online.^[6]

L'archiviazione transazionale registra lo scambio di dati tra un web server e un web browser. Questo approccio è perlopiù usato per registrare nel dettaglio ciò che è effettivamente visto da un utente in un determinato momento e in un determinato sito internet. Il software di registrazione generalmente intercetta ogni richiesta HTTP e ogni risposta dal server, filtrando ogni risposta per eliminare i duplicati.

Esistono diversi servizi che permettono a chiunque di salvare singole pagine web in archivi già esistenti, per permettere la consultazione futura, facilitare la citazione di pagine web in un formato stabile e in un determinato momento nel tempo o consegnare la pagina ai futuri ricercatori. Il servizio probabilmente più diffuso è quello offerto dalla Wayback Machine di Internet Archive,^[7] ma esistono alternative quali WebCite (pensato appositamente per la citazione di pagine web da parte di accademici)^[8] e Archive.is.^[9]

Fino agli anni '90, prima dell'affermazione di Internet, le biblioteche pubbliche comunali e universitarie conservavano una collezione aggiornata di tutti i numeri di una o più testate giornalistiche a diffusione nazionale o locale.

A seguito della diffusione dei quotidiani online gli archivi cartacei sono stati progressivamente sostituiti da quelli digitali o digitalizzati, che forniscono anche l'evidenza della copia cartacea pubblicata ed effettivamente distribuita.
Alcune riviste condividono gratuitamente tutto il loro archivio storico, mentre altre rendono liberamente consultabili solamente una selezione di articoli, in base alla data di pubblicazione, all'autore o a un determinato soggetto tematico.

I periodici si avvalgono di uno o più dei metodi precedentemente descritti: archiviazione automatica in un sito dedicato, separazione del database relazionale dal software di accesso, filtro e personalizzazione delle transazioni (cosiddetta "archiviazione transazionale").

Delpher.nl^[10] ed E-periodica.ch^[11] sono gli archivi gratuiti e digitalizzati dei periodici in lingua olandese e pubblicati in Svizzera.

Alcuni server web sono configurati in modo da ritornare diverse pagine alle richieste dell'archivista web piuttosto che come se stessero rispondendo alle richieste di un browser^[12]. Solitamente questo viene fatto per ingannare i motori di ricerca indirizzando un maggiore numero traffico di utenti verso un sito web. Ciò è fatto spesso per evitare responsabilità o per dare contenuti avanzati solo a quei browser che possono mostrarli. In molti casi i gestori di siti web possono impedire l'accesso ai crawler e richiedere la cancellazione del materiale già archiviato attraverso dei file robot.txt. Il deep web e tutto il materiale protetto da login (come ad esempio buona parte dei post su social network) sono perlopiù esclusi dalla raccolta automatica.^[13]

La velocità con la quale il web evolve fa sì che sia molto difficile archiviare un sito esattamente come è: nel caso di raccolte ampie è probabile che i siti siano mutati prima ancora che il crawl sia terminato. Elementi quali immagini e banner possono essere esclusi dalla raccolta (o registrati in un momento successivo) in quanto contenuto dinamico che è solo riprodotto dalla pagina ma non fa parte del suo codice HTML.^[2]

Gli archivisti web non devono aver a che fare solo con le sfide dell'archiviazione web, ma devono anche confrontarsi con le leggi di proprietà intellettuale. Peter Lyman sostiene per esempio che "benché il web sia popolarmente ritenuta una risorsa di pubblico dominio, esso è protetto da copyright; dunque, gli archivisti non hanno alcun diritto legale di copiare il web".^[14] Nonostante ciò, in molti paesi le biblioteche nazionali hanno la possibilità legale di copiare parti del web grazie a un'estensione delle leggi sul deposito legale.^[2]

• (EN) Adrian Brown, Archiving Websites: a practical guide for information management professionals, London, Facet Publishing, 2006, ISBN 978-1-85604-553-7.
• (EN) Niels Brügger, Archiving Websites. General Considerations and Strategies, Aarhus, The Centre for Internet Research, 2005, ISBN 978-87-990507-0-3.
• (EN) Micheal Day, Preserving the Fabric of Our Lives: A Survey of Web Preservation Initiatives, in Lecture Notes in Computer Science, vol. 2769, Berlin, Heidelberg, Springer, 2003, pp. 461-472, DOI:10.1007/978-3-540-45175-4_42.
• (EN) Mathieu Trudel e Gunther Eysenbach, Going, Going, Still There: Using the WebCite Service to Permanently Archive Cited Web Pages, in J Med Internet Res, vol. 7, n. 5, 2005, DOI:10.2196/jmir.7.5.e60.

• Internet Archive
• Preservazione digitale
• WebCite
• Memoria digitale
• Artstor