<?xml version="1.0" encoding="UTF-8"?><rss xmlns:dc="http://purl.org/dc/elements/1.1/" xmlns:content="http://purl.org/rss/1.0/modules/content/" xmlns:atom="http://www.w3.org/2005/Atom" version="2.0" xmlns:cc="http://cyber.law.harvard.edu/rss/creativeCommonsRssModule.html">
    <channel>
        <title><![CDATA[Stories by Giovanni Pirrotta on Medium]]></title>
        <description><![CDATA[Stories by Giovanni Pirrotta on Medium]]></description>
        <link>https://medium.com/@gpirrotta?source=rss-8f9654a9875------2</link>
        <image>
            <url>https://cdn-images-1.medium.com/fit/c/150/150/1*Sf1b5qBZByEV8VC2xDh07A.jpeg</url>
            <title>Stories by Giovanni Pirrotta on Medium</title>
            <link>https://medium.com/@gpirrotta?source=rss-8f9654a9875------2</link>
        </image>
        <generator>Medium</generator>
        <lastBuildDate>Tue, 17 Nov 2026 16:50:56 GMT</lastBuildDate>
        <atom:link href="https://medium.com/@gpirrotta/feed" rel="self" type="application/rss+xml"/>
        <webMaster><![CDATA[yourfriends@medium.com]]></webMaster>
        <atom:link href="http://medium.superfeedr.com/" rel="hub"/>
        <item>
            <title><![CDATA[Di intelligenze artificiali, atenei e servizi digitali]]></title>
            <link>https://medium.com/@gpirrotta/di-intelligenze-artificiali-atenei-e-servizi-digitali-0e9b679dc65a?source=rss-8f9654a9875------2</link>
            <guid isPermaLink="false">https://medium.com/p/0e9b679dc65a</guid>
            <category><![CDATA[ai]]></category>
            <category><![CDATA[rags]]></category>
            <category><![CDATA[chatbots]]></category>
            <category><![CDATA[gpt]]></category>
            <category><![CDATA[llm]]></category>
            <dc:creator><![CDATA[Giovanni Pirrotta]]></dc:creator>
            <pubDate>Thu, 01 Aug 2024 13:55:21 GMT</pubDate>
            <atom:updated>2024-08-03T04:45:15.655Z</atom:updated>
            <content:encoded><![CDATA[<figure><img alt="" src="https://cdn-images-1.medium.com/max/1024/1*JpSAml40IOG58SIyzDLJsg.jpeg" /><figcaption>Image by <a href="https://pixabay.com/users/flutie8211-17475707/?utm_source=link-attribution&amp;utm_medium=referral&amp;utm_campaign=image&amp;utm_content=7772914">Vicki Hamilton</a> from <a href="https://pixabay.com//?utm_source=link-attribution&amp;utm_medium=referral&amp;utm_campaign=image&amp;utm_content=7772914">Pixabay</a></figcaption></figure><p>Può l’intelligenza artificiale migliorare la gestione e l’erogazione dei servizi digitali universitari, ottimizzando l’interazione con gli studenti? E in generale, può l’intelligenza artificiale migliorare l’efficienza, la trasparenza e l’efficacia delle pubbliche amministrazioni? <strong>Proviamo a capirlo! (cit)</strong></p><blockquote>Intelligenza artificiale? Ma veramente esistono macchine intelligenti?</blockquote><p>Negli ultimi tempi sempre più spesso si sente parlare di <strong>intelligenza artificiale</strong>, soprattutto in relazione a strumenti come <a href="https://chatgpt.com/"><strong>ChatGPT</strong></a>. Questi sistemi hanno attirato molta attenzione grazie alla loro abilità nel simulare la produzione di linguaggio umano ma, <strong>sia chiaro</strong>, non possiedono una comprensione profonda dei contenuti che generano, né hanno coscienza o consapevolezza del mondo che li circonda. Pertanto, quando ci riferiamo a questi strumenti come <strong>intelligenza artificiale</strong>, dobbiamo ricordare che si tratta di un’IA nella sua accezione <strong>debole</strong>, limitata a compiti specifici e priva di una comprensione generale. Il motivo per cui a questi modelli ci si riferisce con IA è una questione di <strong>marketing </strong>e <strong>comunicazione</strong>: è un termine attraente, facilmente comprensibile e in grado di comunicare meglio le potenzialità delle nuove tecnologie al pubblico generale e agli investitori.</p><p><em>Nel post quindi, quando mi riferirò a intelligenza artificiale, lo farò sempre nella sua </em><strong><em>accezione debole. </em></strong><em>Il termine tecnico di queste modelli intelligenti è </em><strong><em>LLM</em></strong><em>, che sta per </em><a href="https://it.wikipedia.org/wiki/Modello_linguistico_di_grandi_dimensioni"><strong><em>Large Language Models</em></strong></a><strong><em>.</em></strong></p><p><strong>LLM </strong>e in particolar modo <strong>GPT </strong>(un tipo di LLM) sono tecnologie di intelligenza artificiale strettamente correlate, che stanno rivoluzionando il modo in cui interagiamo con il linguaggio e l’informazione. Hanno una capacità impressionante di svolgere task linguistici di alta qualità, sono applicabili in molti campi, dalla <strong>scrittura </strong>al <strong>coding</strong>, dalla <strong>traduzione </strong>all’<strong>analisi dei dati</strong>. Stanno cambiando il modo in cui lavoriamo, <strong>comunichiamo </strong>e accediamo all’informazione e ogni nuova versione mostra miglioramenti significativi, alimentando da un lato l’interesse e le aspettative, dall’altro sollevando anche importanti questioni su <strong>privacy</strong>, <strong>copyright</strong>, <strong>disinformazione </strong>e il <strong>futuro </strong>del lavoro umano</p><p>Nella prima parte di questo post verrà descritto il funzionamento che sottende il modello <strong>GPT, </strong>saranno illustrati sia i punti di forza sia i limiti tecnologici, saranno esposte soluzioni architetturali in grado di superare certi ostacoli funzionali, come ad esempio il pattern <a href="https://en.wikipedia.org/wiki/Retrieval-augmented_generation"><strong>RAG </strong></a><strong>(Retrieval-Augmented Generation)</strong>. Per dimostrare come qualsiasi università (e più in generale, qualsiasi ente pubblico o organizzazione privata) possa trarre vantaggio dall’utilizzo di questi modelli nella propria organizzazione, nella seconda parte del post sarà sviluppato un prototipo di servizio digitale rivolto agli studenti universitari, che utilizza l’AI.</p><p>Cominciamo quindi.</p><p>Chi di noi ricorda quando, da alunni delle scuole elementari, la maestra ci lasciava come compiti per casa l’esercizio “<strong>Completa la frase</strong>? I compiti consistevano nel dover completare frasi del tipo: <strong><em>“</em></strong><em>La penna è sul …..</em><strong><em>”</em></strong>, oppure “<em>Cenerentola perde la …..</em>”, e così via. Anche se eravamo bambini, ricorderemo tutti quando, dopo aver svolto i compiti a casa il pomeriggio, consegnavamo il giorno dopo soddisfatti gli esercizi svolti alla maestra.</p><figure><img alt="" src="https://cdn-images-1.medium.com/max/270/0*utcyCK4ciLicMHLl" /><figcaption>Image created by AI</figcaption></figure><p>Ma come ci riuscivamo? Dal punto di vista cognitivo, attingevamo dalla nostra giovane mente tutte le <strong>possibili </strong>parole che avrebbero dato senso a ciascuna frase e sceglievamo quella più <strong>probabile</strong>. Così, ad esempio, avremmo scritto <em>libro</em> come risposta alla prima frase e <em>scarpetta </em>alla seconda.</p><blockquote>Ma perché ho voluto ricordare quest’esperienza scolastica molto comune?</blockquote><p>Ho menzionato questo ricordo scolastico per introdurre il modello di linguaggio <a href="https://it.wikipedia.org/wiki/GPT-3"><strong>GPT </strong></a><strong>(Generative Pre-trained Transformer)</strong>, una tipologia di <a href="https://en.wikipedia.org/wiki/Large_language_model"><strong>LLM </strong></a><strong>(Large Language Model)</strong>, progettata per imitare il linguaggio naturale. Il GPT, infatti, adotta un approccio generativo simile a quello che utilizzavamo per svolgere i compiti da bambini, utilizza una combinazione di tecniche avanzate di <a href="https://it.wikipedia.org/wiki/Apprendimento_profondo"><strong>deep learning</strong></a> per generare testo che sembri scritto da un essere umano.</p><blockquote>Il modello GPT è una <strong>calcolatrice probabilistica</strong> in grado di selezionare la parola più probabile che dovrebbe seguire un determinato input testuale, procedendo parola per parola, fino al raggiungimento di una frase o di un paragrafo.</blockquote><p>GPT è addestrato attraverso un processo chiamato <strong>autoregressive language modeling</strong>. L’obiettivo principale di questo addestramento è predire la parola successiva in una sequenza di testo e, per raggiungere questo scopo, il modello viene alimentato con grandi quantità di testo non etichettato, provenienti da varie fonti come libri, articoli Web e altri contenuti online.</p><p>Il processo di addestramento funziona in questo modo: il modello riceve una sequenza di parole come input e cerca di predire la parola successiva basandosi solo sulle parole precedenti. Poi confronta la sua predizione con la parola effettiva e aggiorna i suoi parametri per migliorare la predizione. Questo approccio è unidirezionale, il che significa che GPT legge il testo da sinistra a destra, considerando solo il contesto precedente per fare previsioni.</p><p>La domanda (o richiesta) che un utente inserisce prende il nome di <a href="https://en.wikipedia.org/wiki/Prompt_engineering"><strong>prompt</strong></a>, e GPT utilizza questo input come punto di partenza per generare una risposta. Il modello predice la parola successiva basandosi sul contesto fornito dal prompt e dal testo generato fino a quel momento. Questo processo di previsione continua, parola per parola, fino al completamento di una frase o un paragrafo. Durante la generazione del testo, GPT mantiene coerenza e fluidità grazie alla sua capacità di ricordare e di utilizzare il contesto precedente.</p><p>GPT è in grado di sostenere conversazioni coerenti e naturali su una vasta gamma di argomenti, rispondendo in modo pertinente alle domande dell’utente. Può generare storie, articoli e altri contenuti creativi che imitano lo stile e il tono di veri scrittori. Utilizzando un linguaggio chiaro e ben strutturato, GPT fornisce spiegazioni dettagliate e informative su argomenti tecnici o complessi.</p><p>Tuttavia, anche se GPT imita il linguaggio naturale, la sua conoscenza è <strong>limitata</strong>. I modelli GPT sono addestrati su un insieme di dati fisso e non possono accedere a informazioni recenti o specializzate. Pertanto, GPT non ha accesso a informazioni proprietarie o specifiche di un’organizzazione perché gli manca un contesto specifico.</p><p>Per colmare questa lacuna, potremmo pensare di <strong>riaddestrare </strong>il modello includendo il contesto desiderato, ma questo richiederebbe enormi risorse computazionali, come <a href="https://it.wikipedia.org/wiki/Processore_grafico">GPU</a> ad alte prestazioni e molta memoria. Inoltre, riaddestrare un modello richiederebbe una grande quantità di dati di alta qualità e selezionare, pulire e preparare questi dati è un compito complesso e spesso costoso.</p><p>Tuttavia, per superare questa limitazione, una delle architetture più conosciute è il pattern <a href="https://en.wikipedia.org/wiki/Retrieval-augmented_generation"><strong>RAG </strong></a><strong>(Retrieval-Augmented Generation)</strong>.</p><blockquote>Ma come funziona?</blockquote><p>Il pattern RAG è composto essenzialmente da due attività principali:</p><ol><li><strong>Selezione e caricamento dei dati</strong>: questa attività comprende la selezione e l’inserimento dei dati in uno storage (ad esempio un database vettoriale). Questa fase è necessaria per aumentare <em>fittiziamente</em> il contesto del nostro modello GPT, al fine di ottenere delle risposte più pertinenti su un particolare dominio. In genere, questa operazione viene eseguita una sola volta, a meno che non si voglia aggiornare o ampliare la base di conoscenza della nostra realtà di interesse.</li><li><strong>Interrogazione e generazione di risposte</strong>: questa è l’attività standard del sistema, in cui l’utente interagisce con il sistema per porre domande e ricevere risposte generate.</li></ol><p>Di seguito verranno descritti in dettaglio i vari passaggi di ciascuna attività. Nella seguente immagine sono illustrate tutte le attività dell’architettura RAG.</p><figure><img alt="" src="https://cdn-images-1.medium.com/max/1024/1*lIEZaIUFnbJm-Z63N84x1g.png" /><figcaption>Pattern RAG — <strong>Retrieval-Augmented Generation</strong></figcaption></figure><ol><li>In questo step vengono selezionati tutti i dati rilevanti del dominio su cui vogliamo specializzare il nostro <a href="https://it.wikipedia.org/wiki/GPT-3">GPT</a>: pagine Web, PDF, XLS, CSV, database, e altre fonti di informazione. Per ottimizzare il recupero dati, i documenti vengono suddivisi in frammenti, chiamati <strong>chunk</strong>: questa suddivisione può avvenire in base a frasi, paragrafi o altre unità logiche, per garantire che ciascun chunk sia sufficientemente breve da rientrare nei limiti del modello;</li><li>utilizzando un apposito modello di embedding (come ad esempio <a href="https://openai.com/index/new-and-improved-embedding-model/"><strong>ADA </strong></a>o <a href="https://huggingface.co/spaces/mteb/leaderboard">altri</a>), ogni chunk viene convertito in un vettore numerico, chiamato <a href="https://en.wikipedia.org/wiki/Word_embedding"><strong>embedding</strong></a>. Ciascuno di essi cattura il significato semantico del testo in uno spazio vettoriale multidimensionale, in modo tale che chunk semanticamente simili siano più vicini tra loro;</li><li>dopo aver <em>vettorizzato </em>tutti i documenti della nostra nuova base di conoscenza, gli <strong>embedding </strong>vengono memorizzati in un database vettoriale (<a href="https://en.wikipedia.org/wiki/Vector_database"><strong>vector store</strong></a>), un software ottimizzato per ricerche rapide basate sulla similarità. Insieme ai dati embeddati, vengono memorizzati anche alcuni metadati associati, come la fonte del documento e la data. Una volta completata questa fase di indicizzazione — che avviene una sola volta e coinvolge tutta la nostra base di conoscenza — possiamo passare alla fase di recupero delle informazioni;</li><li>l’attività principale del sistema RAG ha inizio quando l’utente invia una domanda o una richiesta al sistema;</li><li>la query viene convertita in <strong>embedding</strong>, utilizzando lo stesso modello usato per <strong>embeddare</strong> i documenti della base di conoscenza, ad esempio <a href="https://openai.com/index/new-and-improved-embedding-model/">ADA</a>;</li><li>il sistema cerca nel database vettoriale i <strong>chunk</strong> più simili all’<strong>embedding </strong>della query. Questa ricerca è basata tipicamente sulla <a href="https://it.wikipedia.org/wiki/Coseno_di_similitudine">similarità del coseno</a> tra i vettori;</li><li>i <strong>chunk </strong>più simili alla query di input, cioè le informazioni più rilevanti, vengono recuperati dal database. In questa fase il sistema può applicare filtri aggiuntivi basati ad esempio su metadati o punteggi di rilevanza;</li><li>viene creato il <strong>prompt</strong> da inviare al modello GPT, che includerà:<br>• la <strong>query</strong> originale dell’utente<br>• i <strong>chunk </strong>di contesto recuperati dal database vettoriale<br>• eventuali <strong>istruzioni</strong> specifiche per il LLM</li><li>il prompt completo viene inviato a un modello di linguaggio avanzato, come <strong>GPT</strong>;</li><li>il modello <strong>GPT </strong>genera una risposta basandosi sia sulla query dell’utente sia sul contesto prelevato dal database vettoriale. La risposta generata da <strong>GPT </strong>può essere ulteriormente arricchita con citazioni o riferimenti ai documenti originali. È possibile inoltre applicare filtri per rimuovere contenuti inappropriati e formattare la risposta in modo coerente. La risposta finale viene quindi presentata all’utente, che spesso ha la possibilità di fare domande di approfondimento.</li></ol><p>Una delle caratteristiche più importanti dell’architettura <strong>RAG </strong>è che, in qualsiasi momento, possono essere aggiunte al database vettoriale nuove informazioni, permettendo al sistema di rimanere aggiornato senza necessità di ri-addestrare il modello linguistico. Questo processo permette al sistema di combinare la potenza generativa di GPT con l’accuratezza e l’aggiornabilità di una base di conoscenza esterna, superando così molti dei limiti dei tradizionali sistemi basati solo su GPT.</p><figure><img alt="" src="https://cdn-images-1.medium.com/max/640/1*GQMP9y_qQvs6bOUJA5H69g.jpeg" /><figcaption>Image by <a href="https://pixabay.com/users/alexandra_koch-621802/">Alexandra Koch</a> from <a href="https://pixabay.com/photos/ai-generated-robot-future-chatgpt-7770055/">Pixabay</a></figcaption></figure><h4>UNIMEBOT AI</h4><p>Proviamo ora a mettere in pratica quanto detto con un esempio concreto: svilupperemo un <a href="https://it.wikipedia.org/wiki/Chatbot">chatbot </a>AI per aiutare gli studenti universitari. Ci concentreremo specificamente sugli studenti dell’Università di Messina, ma lo stesso approccio può essere applicato a qualsiasi ateneo, così come a qualsiasi altra pubblica amministrazione.</p><blockquote>Disclaimer: questo è un progetto personale e non è collegato in nessun modo ai servizi digitali presenti all’Università di Messina. L’obiettivo del progetto è descrivere uno scenario di utilizzo dell’AI in un contesto universitario.</blockquote><p>Gli ingredienti del chatbot saranno i seguenti:</p><ul><li><strong>Dati UNIME</strong>: sezione immatricolazioni/iscrizioni del sito dell’Università di Messina;</li><li><strong>GPT-4:</strong> useremo il Large Language Model di OpenAI, ma i concetti discussi sono applicabili a tutti gli altri LLM, sia proprietari sia opensource;</li><li><strong>pattern RAG (Retrieval Augmented Generation):</strong> utilizzeremo questa architettura per estendere la base di conoscenza di GPT-4;</li><li><strong>prompt</strong>: da configurare opportunamente con query, dati di contesto e istruzioni specifiche per GPT;</li><li><a href="https://github.com/facebookresearch/faiss"><strong>FAISS</strong></a><strong>:</strong> database vettoriale utilizzato per memorizzare gli <strong>embedding </strong>dei dati del dominio e per recuperare il contesto in base alla query di input;</li><li><a href="https://www.langchain.com/"><strong>LangChain</strong></a><strong>:</strong> libreria <strong>python </strong>utilizzata per collegare tutte le componenti del sistema;</li><li><a href="https://streamlit.io/"><strong>Streamlit</strong></a>: libreria python utilizzate per il frontend.</li></ul><h4>Dominio di riferimento</h4><p>Così come già anticipato, il chatbot che intendiamo sviluppare dovrà rispondere a domande inerenti immatricolazioni e iscrizioni universitarie. Iniziamo quindi ad individuare i dati di interesse per il nostro contesto specifico. Abbiamo scelto di prendere come università di riferimento quella di Messina, per cui la fonte dati ufficiale da cui partire è sicuramente il <a href="https://www.unime.it/">sito Web ufficiale</a>.</p><figure><img alt="" src="https://cdn-images-1.medium.com/max/1024/1*VCPSGcC27dWDVF_LBBtRFA.png" /><figcaption><a href="https://www.unime.it/">Homepage Università di Messina</a></figcaption></figure><p>Il sito istituzionale è molto ricco di informazioni sull’ateneo, sulla didattica, sulla ricerca, etc. Noi siamo interessati alle informazioni relative alle immatricolazioni e alle iscrizioni degli studenti e focalizzeremo l’attenzione principalmente sulla relativa <a href="https://www.unime.it/didattica/immatricolazioni-e-iscrizioni">sezione Web</a>. Dal punto di vista della struttura del contenuto della sezione sono presenti due tipologie di pagine: pagina FAQ e pagina standard.</p><p>Nella pagina FAQ (vedi immagine sopra) sono elencate le domande sulle procedure relative alle immatricolazioni.</p><figure><img alt="" src="https://cdn-images-1.medium.com/max/997/1*fELUgWDJL24jtZAegVKzNg.png" /><figcaption><a href="https://www.unime.it/didattica/immatricolazioni-e-iscrizioni/faq-immatricolazioni">Pagina FAQ</a></figcaption></figure><p>Nella pagina standard abbiamo invece l’argomento nel titolo e le informazioni relative nel resto della pagina.</p><figure><img alt="" src="https://cdn-images-1.medium.com/max/1016/1*fGrnjAbZPvKdk1fd1JQkmg.png" /><figcaption><a href="https://www.unime.it/didattica/immatricolazioni-e-iscrizioni/tempo-parziale">Pagina standard</a></figcaption></figure><p>La struttura dati di partenza è formata da unità informative così composte:</p><ul><li><strong>url</strong>: indirizzo della pagina;</li><li><strong>title</strong>: nella pagina FAQ, il titolo è estratto da ciascuna domanda mentre nelle pagine standard il titolo corrisponde a quello della pagina stessa;</li><li><strong>body</strong>: nella pagina FAQ, il corpo è estratto da ciascuna risposta mentre nelle pagine standard il corpo corrisponde a quello della pagina stessa.</li></ul><p>Procediamo quindi ad effettuare lo <a href="https://it.wikipedia.org/wiki/Web_scraping"><em>scraping </em></a>della pagina FAQ.</p><p><em>Disclaimer: prima di procedere con lo scraping dei dati è fondamentale controllare i termini di utilizzo indicati sul sito Web. Sebbene nel nostro caso i dati non siano </em><a href="https://it.wikipedia.org/wiki/Dati_aperti"><em>aperti</em></a><em>, e richiedono un’autorizzazione per essere utilizzati, l’obiettivo di questo post non è incoraggiare l’uso indiscriminato di dati, ma piuttosto incoraggiare le pubbliche amministrazioni a esplorare nuovi servizi digitali resi possibili dall’intelligenza artificiale. Nel nostro esempio, prenderemo in esame le informazioni di alcune pagine Web, faremo un’estrazione </em><strong><em>leggera, </em></strong><em>che durerà in tutto meno di un minuto, una tantum e senza mai appesantire il server.</em></p><p>Dalla pagina FAQ estrarremo tante unità informative quante sono le domande rappresentante nella pagina. Di seguito il codice:</p><pre>PREFIX = &#39;https://www.unime.it&#39;<br>dataset = []<br><br>url = &#39;https://www.unime.it/didattica/immatricolazioni-e-iscrizioni/faq-immatricolazioni&#39;<br>page = requests.get(url)<br>soup = BeautifulSoup(page.text)<br>title = soup.find(&#39;h2&#39;, {&#39;class&#39; : &#39;title-page__title&#39;}).text.strip()<br>for item in soup.find_all(&#39;div&#39;, {&#39;class&#39; : &#39;accordion-item&#39;}):<br>    question =  item.find(&#39;button&#39;, {&#39;class&#39; : &#39;accordion-button&#39;}).text.strip()<br>    answer = item.find(&#39;div&#39;, {&#39;class&#39;:&#39;field--name-field-testo-paragrafo&#39;}).text.strip()<br>    body =  question + &#39;\n&#39; + answer<br>    attachments = item.find(&#39;div&#39;, {&#39;class&#39;:&#39;paragraph__allegati&#39;})<br>    if attachments:<br>        body = body + &#39;\nLink relativi:\n&#39; <br>        for a in attachments.find_all(&#39;a&#39;):<br>            body = body + a.text + f&quot; ({PREFIX}{a.get(&#39;href&#39;)})\n&quot;<br>    dataset.append({&#39;url&#39;:url, &#39;title&#39;: title, &#39;body&#39;:body})</pre><p>Dalle pagine standard estrarremo una unità informativa per ogni pagina. Di seguito il codice:</p><pre>page_links = [&#39;https://www.unime.it/didattica/immatricolazioni-e-iscrizioni/corsi-liberi-aa-202324-modalita-e-termini&#39;,&#39;https://www.unime.it/didattica/immatricolazioni-e-iscrizioni/contemporanea-iscrizione-due-corsi-di-istruzione-superiore&#39;,&#39;https://www.unime.it/didattica/immatricolazioni-e-iscrizioni/corsi-numero-chiuso&#39;,&#39;https://www.unime.it/didattica/immatricolazioni-e-iscrizioni/corsi-singoli&#39;,&#39;https://www.unime.it/didattica/immatricolazioni-e-iscrizioni/i-documenti-necessari&#39;,&#39;https://www.unime.it/didattica/immatricolazioni-e-iscrizioni/i-vari-tipi-di-corsi-di-laurea&#39;,&#39;https://www.unime.it/didattica/immatricolazioni-e-iscrizioni/il-sistema-pago-par&#39;,&#39;https://www.unime.it/didattica/immatricolazioni-e-iscrizioni/immatricolazioni-personale-pa&#39;,&#39;https://www.unime.it/didattica/immatricolazioni-e-iscrizioni/info-point&#39;,&#39;https://www.unime.it/didattica/immatricolazioni-e-iscrizioni/live-chat-studenti&#39;,&#39;https://www.unime.it/didattica/immatricolazioni-e-iscrizioni/ricongiunzione-eo-ripresa-carriera-ex-studenti&#39;,&#39;https://www.unime.it/didattica/immatricolazioni-e-iscrizioni/sedi-didattiche-distaccate&#39;,&#39;https://www.unime.it/didattica/immatricolazioni-e-iscrizioni/tasse-ed-esenzioni&#39;,&#39;https://www.unime.it/didattica/immatricolazioni-e-iscrizioni/tempo-parziale&#39;,&#39;https://www.unime.it/didattica/immatricolazioni-e-iscrizioni/trasferimenti&#39;]<br><br>for url in page_links:<br>    page = requests.get(url)<br><br>    soup = BeautifulSoup(page.text)<br>    title = soup.find(&#39;h2&#39;, {&#39;class&#39; : &#39;title-page__title&#39;}).text.strip()<br>    print(f&quot;Parsing page: {title}&quot;)<br>    body = soup.find(&#39;div&#39;, {&#39;class&#39; : &#39;block-field-blocknodepagefield-contenuto&#39;}).get_text(separator = &#39;\n&#39;, strip = True)<br>    for attachments in soup.find_all(&#39;div&#39;, {&#39;class&#39;:&#39;paragraph__allegati&#39;}):<br>        if attachments:<br>            body = body + &#39;\nLink relativi:\n&#39; <br>            for a in attachments.find_all(&#39;a&#39;):<br>                body = body + a.text + f&quot; ({PREFIX}{a.get(&#39;href&#39;)})\n&quot;<br>    dataset.append({&#39;url&#39;:url, &#39;title&#39;: title, &#39;body&#39;:body})<br>    time.sleep(3)</pre><p>A questo punto possiamo creare il nostro <strong>DataFrame</strong>.</p><pre>df= pd.DataFrame(dataset)<br>df[&#39;body&#39;] = df[&#39;body&#39;].str.replace(&#39;Document&#39;, &#39; &#39;)<br>df[&#39;body&#39;] = df[&#39;body&#39;].str.replace(&quot;\n&quot;,&#39; &#39;).str.replace(&#39;  &#39;,&#39; &#39;).str.strip()</pre><p>Il passo successivo è suddividere il testo in frammenti più piccoli chiamati <strong>chunk</strong>. Dividendo il testo in chunk, il sistema potrà effettuare un recupero più mirato delle informazioni. Quando si effettua una query, è importante processare solo i chunk rilevanti e non l’intero corpus. I modelli LLM, infatti, hanno un limite sulla quantità di testo che possono elaborare in una singola sessione (chiamato <strong>context window</strong>) e suddividere il testo in chunk, insieme a ulteriori strategie di ottimizzazione, assicura che ogni porzione di testo recuperata rientri nel contesto massimo gestibile dal modello.</p><blockquote><em>In realtà, gli ultimi LLM rilasciati dispongono di una </em><strong><em>context window</em></strong><em> molto grande e consentono l’elaborazione contemporanea di un gran numero di token, ad esempio in </em><a href="https://openai.com/index/hello-gpt-4o/"><em>GPT4o </em></a><em>la </em><strong><em>context windows</em></strong><em> è di 128.000 token. Tuttavia, nei sistemi di Retrieval-Augmented Generation (RAG), è sempre una buona pratica suddividere il testo in chunk più piccoli. Questa strategia non solo facilita il lavoro del modello, migliorando l’efficienza del sistema di recupero e generazione, permettendo di focalizzarsi su porzioni di testo rilevanti e riducendo il carico computazionale, ma riduce anche significativamente i costi dei token associati, quando ad esempio si utilizzano LLM a pagamento, come GPT4 di OpenAI.</em></blockquote><p>Di seguito il codice per creare i chunk:</p><pre>chunks = DataFrameLoader(<br>        df, page_content_column=&quot;body&quot;<br>    ).load_and_split(<br>        text_splitter=RecursiveCharacterTextSplitter(<br>            chunk_size=1000, chunk_overlap=0, length_function=len<br>        )<br>    )</pre><p>Per facilitare il lavoro di recupero, nel contenuto di ogni chunk aggiungiamo anche i metadati <strong>titolo </strong>e <strong>URL.</strong></p><pre>for doc in chunks:<br>    title = doc.metadata[&quot;title&quot;]<br>    content = doc.page_content<br>    url = doc.metadata[&quot;url&quot;]<br>    final_content = f&quot;TITLE: {title}\BODY: {content}\nURL: {url}&quot;<br>    doc.page_content = final_content</pre><p>Prima di caricare i <strong>chunk</strong> nel database vettoriale FAISS è necessario trasformarli in <strong>embeddings</strong>. Per fare questo utilizzeremo le <a href="https://openai.com/index/openai-api/">API </a>di OpenAI ma dovremo prima registrarci sul loro sito e ottenere una chiave di accesso. Tale chiave andrà poi indicata in un file specifico del progetto, nel nostro caso chiamato .env.</p><pre>OPENAI_API_KEY=sk-xxxxxxxxxxxxxxx</pre><p>Utilizzando la libreria <a href="https://pypi.org/project/python-dotenv/">load_dotenv</a>, il sistema recupererà automaticamente la chiave API dall&#39;ambiente, permettendoci di utilizzare i servizi senza ulteriori configurazioni manuali. Per ottenere gli <strong>embeddings </strong>utilizzamo il modello di default di OpenAI, cioè text-emdedding-ada-002</p><pre>from langchain.embeddings import OpenAIEmbeddings<br>from langchain.vectorstores import FAISS<br>from dotenv import load_dotenv<br><br>load_dotenv()<br>embeddings = OpenAIEmbeddings(model=&#39;text-embedding-ada-002&#39;) <br><br>vectorstore = FAISS.from_documents(chunks, embeddings)<br>vectorstore.save_local(&quot;./db&quot;)</pre><p>A questo punto i dati sono stati vettorizzati e caricati nel database. Per poter interagire con GPT utilizzeremo la libreria <strong>Streamlit</strong>, con la quale svilupperemo un frontend interattivo minimale e facilmente usabile.</p><p>Prima di fare questo però cerchiamo di capire meglio la logica che sottende il funzionamento dell’intero sistema.</p><p>Per ogni richiesta da parte dell’utente il sistema dovrà interrogare il modello e ottenere così una risposta che sia la più accurata, corretta e precisa possibile. La richiesta dell’utente dovrà essere inserita all’interno del <strong>prompt</strong>, che costituisce la parte fondamentale dell’interazione con GPT. Banalmente il prompt è una sequenza di testo che viene fornita al modello per ottenere la risposta desiderata, una guida che indirizza il modello verso la produzione di risposte accurate e pertinenti. Il formato del prompt può variare a seconda dell’applicazione specifica, ma generalmente include i seguenti elementi:</p><ol><li><strong>Input</strong>: la query dell’utente a cui il modello deve dare risposta;</li><li><strong>Istruzioni</strong>: una descrizione chiara e concisa del compito a cui si vuole che il modello risponda. Ad esempio: “Scrivi un riassunto di questo articolo”, “Parafrasa questo testo”, “Genera una storia basata su queste parole chiave”.</li><li><strong>Contesto</strong>: informazioni aggiuntive che possono aiutare il modello a comprendere meglio la richiesta. Questo può includere esempi precedenti, spiegazioni dettagliate, o qualsiasi informazione rilevante.</li><li><strong>Formato della risposta</strong>: l’indicazione di come dovrebbe essere strutturata la risposta. Ad esempio, si potrebbe specificare che la risposta deve essere in formato elenco, in paragrafi, o seguire una determinata lunghezza.</li></ol><p>Non sempre nel prompt sono presenti tutti gli elementi. Nel nostro progetto il prompt sarà strutturato nel seguente modo:</p><ol><li><strong>Input: </strong>query dell’utente, ad esempio: “<em>Quanto costa iscrivermi all’Università?</em>”</li><li><strong>Istruzioni: </strong>le indicazioni a cui il modello LLM dovrà attenersi nel processo di generazione della risposta. Per il nostro chatbot le istruzioni saranno le seguenti: <br>“<em>Sei un chatbot e il tuo compito è rispondere a domande sull’immatricolazione e iscrizione dei corsi di laurea all’Università di Messina. Ad ogni domanda devi sempre rispondere con la risposta più rilevante e più accurata. Non rispondere mai con una nuova domanda. Non rispondere a domande non inerenti l’Università di Messina. Se la domanda è in italiano rispondi in italiano. Se la domanda è in inglese rispondi in inglese. Data una domanda dovresti rispondere con le informazioni più rilevanti in base al seguente contesto:”</em></li><li><strong>Contesto: </strong>i chunk più pertinenti alla query dell’utente, recuperati dal database vettoriale FAISS</li></ol><p>Vediamo adesso come combinare insieme tutte le parti attraverso l’utilizzo della libreria <strong>LangChain:</strong></p><pre>from dotenv import load_dotenv<br>import pandas as pd<br>from langchain.embeddings import OpenAIEmbeddings <br>from langchain.vectorstores import FAISS<br>from langchain.chat_models import ChatOpenAI<br>from langchain.memory import ConversationBufferMemory<br>from langchain.chains import ConversationalRetrievalChain<br>from langchain.prompts import (<br>    ChatPromptTemplate,<br>    HumanMessagePromptTemplate,<br>    SystemMessagePromptTemplate,<br>    PromptTemplate,<br>)<br>import streamlit as st<br><br>load_dotenv()<br><br><br>def get_conversation_chain(vector_store:FAISS, system_message:str, human_message:str) -&gt; ConversationalRetrievalChain:<br>     # questo è il cuore del sistema. Qui viene invocato il modello di linguaggio GPT<br>    llm = ChatOpenAI(model=&quot;gpt-4&quot;, temperature=0)<br>    # Qui è dove LangChain svolge il ruolo di direttore d&#39;orchestra, collegando tutte le strumenti del sistema<br>    conversation_chain = ConversationalRetrievalChain.from_llm(<br>        llm=llm, # questo è il modello GPT<br>        retriever=st.session_state.vector_store.as_retriever(), # quà viene definito il database vettoriale<br>        return_source_documents=True,<br>        verbose=True,<br>        memory=st.session_state.memory,<br>        get_chat_history=lambda h : h,<br>        condense_question_prompt=PromptTemplate.from_template(<br>            (&#39;Questa è la precedente domanda {question}), questa è la precedente risposta ({chat_history}).&#39;)<br>        ),<br>        combine_docs_chain_kwargs={ # qui viene specificato il prompt come unione di più parti tenute insieme tramite un template<br>            &quot;prompt&quot;: ChatPromptTemplate.from_messages(<br>                [<br>                    system_message,<br>                    human_message,<br>                ]<br>                ),<br>            },<br>        )<br>    <br>    return conversation_chain<br><br><br>def setup_chat_header():<br>    st.set_page_config(<br>        page_title=&quot;Documentation Chatbot&quot;,<br>        page_icon=&quot;:school:&quot;,<br>    )<br><br>    st.image(&quot;https://archivio.unime.it/sites/default/files/7f7ebabb21b60312954b1d1ecc3e1eeddab2926e/409x205xloco,P20unime,P20orizzontale.jpg.pagespeed.ic.nIu0lfMiM1.webp&quot;) <br>    st.title(&quot;UNIME Chatbot&quot;)<br>    st.subheader(&quot;Quando l&#39;AI entra in Ateneo&quot;)<br>    st.markdown(<br>        &quot;&quot;&quot;<br>        Questo chatbot è stato creato per rispondere alle domande riguardanti l&#39;immatricolazione<br>        e l&#39;iscrizione all&#39;Università di Messina.<br>        Poni una domanda e il chatbot ti risponderà nel migliore dei modi.<br>        &quot;&quot;&quot;<br>    )<br><br>def main():<br>    if &#39;vector_store&#39; not in st.session_state:<br>        vector_store = FAISS.load_local(&quot;./db&quot;, OpenAIEmbeddings(), allow_dangerous_deserialization=True)<br>        st.session_state.vector_store = vector_store<br>    if &quot;memory&quot; not in st.session_state:<br>        memory = ConversationBufferMemory(memory_key=&quot;chat_history&quot;, return_messages=True, output_key=&#39;answer&#39;)<br>        st.session_state.memory = memory<br>    if &quot;conversation&quot; not in st.session_state:<br>        st.session_state.conversation = None<br>        <br>        <br>    if &quot;chat_history&quot; not in st.session_state:<br>        st.session_state.chat_history = None  <br><br>    # ISTRUZIONI PROMPT<br>    system_message_prompt = SystemMessagePromptTemplate.from_template(<br>        &quot;&quot;&quot;<br>        Sei un chatbot e il tuo compito è rispondere a domande sull&#39;immatricolazione e iscrizione<br>        dei corsi di laurea all&#39;Università di Messina.<br>        Ad ogni domanda devi sempre rispondere con la risposta più rilevante e più accurata.<br>        Non rispondere mai con una nuova domanda.<br>        Non rispondere a domande non inerenti l&#39;Università di Messina. <br>        Se la domanda è in italiano rispondi in italiano. Se la domanda è in inglese rispondi in inglese.<br>        Data una domanda dovresti rispondere con le informazioni più rilevanti in base al seguente contesto: \n<br>        {context}<br>        &quot;&quot;&quot;<br>    )<br>    <br>    human_message_prompt = HumanMessagePromptTemplate.from_template(&quot;{question}&quot;)<br>    <br><br>    # SETUP STREAMLIT<br>    setup_chat_header()     <br>    user_question = st.text_input(&quot;Cosa vuoi chiedere?&quot;)<br>    with st.spinner(&quot;Sto elaborando la risposta...&quot;):<br>        if user_question:<br>            response = st.session_state.conversation({&quot;question&quot;: user_question })<br>            st.session_state.chat_history = response[&quot;chat_history&quot;]<br><br>            human_style = &quot;background-color: #e6f7ff; border-radius: 10px; padding: 10px;&quot;<br>            chatbot_style = &quot;background-color: #f9f9f9; border-radius: 10px; padding: 10px;&quot;<br>            <br>            for i, message in enumerate(st.session_state.chat_history):<br>                if i % 2 == 0:<br>                    st.markdown(<br>                        f&quot;&lt;p style=&#39;text-align: right;&#39;&gt;&lt;b&gt;Utente&lt;/b&gt;&lt;/p&gt;&lt;p style=&#39;text-align: right;{human_style}&#39;&gt; &lt;i&gt;{message.content}&lt;/i&gt; &lt;/p&gt;&quot;,<br>                        unsafe_allow_html=True,<br>                    )<br>                else:<br>                    st.markdown(<br>                        f&quot;&lt;p style=&#39;text-align: left;&#39;&gt;&lt;b&gt;Chatbot&lt;/b&gt;&lt;/p&gt; &lt;p style=&#39;text-align: left;{chatbot_style}&#39;&gt; &lt;i&gt;{message.content}&lt;/i&gt; &lt;/p&gt;&quot;,<br>                        unsafe_allow_html=True,<br>                    )<br>            st.session_state.input = &quot;&quot;  <br>    <br>    st.session_state.conversation = get_conversation_chain(st.session_state.vector_store, system_message_prompt, human_message_prompt)<br>    <br>    <br>if __name__ == &quot;__main__&quot;:<br>    main()</pre><p>A questo punto basterà lanciare il seguente comando</p><p>streamlit run start.py</p><p>e l’applicazione partirà nel nostro browser. Vediamo il risultato.</p><figure><img alt="" src="https://cdn-images-1.medium.com/max/767/1*07Cn0yhGOhvOV_QSxAidxg.png" /></figure><p>Iniziamo a dialogare con il <strong>BOT </strong>allora.</p><figure><img alt="" src="https://cdn-images-1.medium.com/max/736/1*vQxKC7WFQXhqFzAnz7fe7g.png" /></figure><p>Bene. Abbiamo dato istruzioni al BOT di dare informazioni solo sull’Università di Messina, vediamo se cade nel tranello.</p><figure><img alt="" src="https://cdn-images-1.medium.com/max/716/1*GGcEH1psuhIfEcPg-92B-A.png" /></figure><p>Il chatbot ha seguito le istruzioni impartite e si è rifiutato di rispondere. Andiamo avanti con una richiesta un po’ più articolata. Immaginiamo di essere uno studente lavoratore e di voler conoscere se esiste qualche agevolazione.</p><figure><img alt="" src="https://cdn-images-1.medium.com/max/728/1*nkV0AemjBOwe5fHpcl-1HA.png" /></figure><p>La risposta è sintetica e spiega a grandi linee quali possono essere le possibilità di studio per uno studente lavoratore che vuole beneficiare di agevolazioni. Quasi alla fine della risposta si legge l’acronimo <strong>COA. </strong>Ma di cosa si tratta? Proviamo a continuare la conversazione chiedendo al BOT:</p><figure><img alt="" src="https://cdn-images-1.medium.com/max/725/1*93WPjcXFpkWh2fKw4DtKiQ.png" /></figure><p>Continuando la conversazione l’utente potrebbe adesso chiedere:</p><figure><img alt="" src="https://cdn-images-1.medium.com/max/719/1*yJdU5_ppfX9Hk8yUMptfww.png" /></figure><p>Se invece volessimo frequentare e sostenere l’esame di un corso singolo da esterni potremmo fare la seguente domanda.</p><figure><img alt="" src="https://cdn-images-1.medium.com/max/740/1*03bFmp7lHfU0TOPHNftFVQ.png" /></figure><p>Chiedo quindi al BOT cosa devo fare (per frequentare un corso singolo). Da notare come il sistema tiene in <strong>memoria </strong>l’argomento della conversazione.</p><figure><img alt="" src="https://cdn-images-1.medium.com/max/906/1*zF-NZzBeLwyOVTuupysjzQ.png" /></figure><p>E se fossi una persona straniera con disabilità, e volessi conoscere le eventuali agevolazioni che l’Università riserva in questi casi?</p><figure><img alt="" src="https://cdn-images-1.medium.com/max/718/1*Mn2Kn0Z5vrzcnQ9ZSZY-KQ.png" /></figure><p>In questo scenario, il BOT <strong>riconosce </strong>che la domanda è in inglese e si adatta generando una risposta in inglese, nonostante il testo originale sia in italiano.</p><p>I dati caricati nello store e prelevati dal sito UNIME corrispondono solo ad una piccola parte del patrimonio informativo presente sul sito universitario. Tuttavia, dopo aver stressato l’applicazione mettendolo a dura prova con ripetute interrogazioni, posso concludere che:</p><ul><li>con domande dirette e generali il <strong>chatbot </strong>riesce a generare risposte abbastanza pertinenti alle domande poste;</li><li>con domande più dettagliate il <strong>chatbot </strong>non riesce sempre a fornire risposte adeguate e tende a diventare autoreferenziale, ripetendo sempre la stessa risposta. Questo accade perché i dati caricati sono <strong>pochi </strong>e il BOT non possiede la conoscenza necessaria per rispondere in modo specifico. Tuttavia, è positivo che non tenti di inventare risposte errate, non ha, in gergo LLM, <strong>allucinazioni.</strong></li></ul><p>Per superare questo limite, potremmo arricchire il repository con altri documenti come guide PDF, file excel, altre pagine Web e informazioni di altra natura, in modo da avere una rappresentazione più completa del dominio di riferimento. Tuttavia, lo scopo del progetto non è sviluppare un <strong>chatbot</strong> completo e pronto per andare in produzione, ma dare una visione concreta di ciò che sia possibile realizzare applicando un modello LLM nello sviluppo di servizi digitali in generale, non solo per l’Università di Messina. Gli stessi principi infatti possono essere applicati in qualsiasi ambito in cui si debba interagire con le persone, sia pubblico che privato, per offrire servizi digitali e migliorare la qualità e la tempestività nell’erogazione dei servizi.</p><h4>Conclusioni</h4><p>Realizzare un <strong>chatbot</strong>, utilizzando la potenza degli Large Language Models (<strong>LLM</strong>) e l’architettura Retrieval-Augmented Generation (<strong>RAG</strong>), rappresenta un significativo passo avanti nell’automazione e ottimizzazione dei servizi digitali nella pubblica amministrazione. Utilizzando l’architettura RAG in contesti universitari, il chatbot sarebbe in grado di fornire risposte precise e contestualizzate, attingendo a un vasto corpus di documenti universitari, come piani di studio, regolamenti, FAQ e altro ancora. Questo consentirebbe agli studenti e al personale interessato di ricevere informazioni aggiornate e pertinenti in tempo reale. Inoltre, la capacità del chatbot di comprendere e generare linguaggio naturale renderebbe l’interazione più fluida e naturale per gli utenti. E questo aumenterebbe la soddisfazione degli utenti riducendo il carico di lavoro del personale amministrativo, che può dedicarsi a compiti più complessi e strategici.</p><p>Tuttavia non sono tutte rose e fiori. La qualità delle risposte dipende fortemente dai dati disponibili nel sistema. Per evitare risposte imprecise o obsolete è essenziale mantenere aggiornato il repository di documenti e questo richiede un processo continuo di revisione e aggiornamento delle fonti di dati. Inoltre, nonostante i progressi degli LLM, la comprensione del contesto può ancora rappresentare una sfida. In questi casi è necessario implementare strategie di <strong>fallback </strong>efficaci per gestire i casi in cui il chatbot non può fornire una risposta soddisfacente.</p><p>In conclusione, l’integrazione di modelli di linguaggio avanzati come GPT nelle pubbliche amministrazioni rappresenta una svolta significativa nel modo in cui possono essere gestiti i servizi digitali e non solo. Tuttavia, per sfruttare appieno il potenziale di questi strumenti, è essenziale adottare un approccio consapevole che bilanci innovazione e responsabilità, assicurando che la trasformazione digitale avvenga nel rispetto delle normative sulla privacy e dell’equità. Guardando al futuro, le pubbliche amministrazioni che sapranno abbracciare queste tecnologie, non solo si posizioneranno all’avanguardia nel saper interpretare sin da subito il cambiamento tecnologico, ma saranno anche in grado di offrire servizi più efficaci e su misura per le esigenze dei cittadini. Solo così avranno l’opportunità di definirsi come modelli di riferimento nella moderna era digitale.</p><p>Il codice sorgente è disponibile al seguente <a href="https://github.com/gpirrotta/unime-ai-chatbot">repo</a>.</p><h4><strong>Riferimenti</strong></h4><ul><li><a href="https://dev.to/jamesbmour/building-an-advanced-streamlit-chatbot-with-openai-integration-a-comprehensive-guide-part-3-59d6">https://dev.to/jamesbmour/building-an-advanced-streamlit-chatbot-with-openai-integration-a-comprehensive-guide-part-3-59d6</a></li><li><a href="https://pub.towardsai.net/create-a-chatbot-in-python-with-langchain-and-rag-85bfba8c62d2">https://pub.towardsai.net/create-a-chatbot-in-python-with-langchain-and-rag-85bfba8c62d2</a></li></ul><img src="https://medium.com/_/stat?event=post.clientViewed&referrerSource=full_rss&postId=0e9b679dc65a" width="1" height="1" alt="">]]></content:encoded>
        </item>
        <item>
            <title><![CDATA[OpenDataZen, il Codice dell’Amministrazione Digitale come non l’avete mai…sentito]]></title>
            <link>https://medium.com/@gpirrotta/opendatazen-il-codice-dellamministrazione-digitale-come-non-l-avete-mai-sentito-6576fd863485?source=rss-8f9654a9875------2</link>
            <guid isPermaLink="false">https://medium.com/p/6576fd863485</guid>
            <category><![CDATA[cad]]></category>
            <category><![CDATA[data-sonification]]></category>
            <category><![CDATA[python]]></category>
            <category><![CDATA[meditation]]></category>
            <category><![CDATA[open-data]]></category>
            <dc:creator><![CDATA[Giovanni Pirrotta]]></dc:creator>
            <pubDate>Sun, 23 Oct 2022 08:28:27 GMT</pubDate>
            <atom:updated>2022-10-23T08:30:46.356Z</atom:updated>
            <content:encoded><![CDATA[<h3>OpenDataZen, il Codice dell’Amministrazione Digitale come non l’avete mai… sentito!</h3><p>Il documento normativo più importante in Italia sul tema della digitalizzazione della pubblica amministrazione è il <a href="https://www.normattiva.it/uri-res/N2Ls?urn:nir:stato:decreto.legislativo:2005-03-07;82!vig=2022-10-19">decreto legislativo n.82 del 2005</a>, ovvero il <em>Codice dell’Amministrazione Digitale</em>, conosciuto con l’acronimo <strong>CAD</strong>. Per consultare il testo del decreto aggiornato con tutti gli interventi normativi che si sono succeduti negli anni — <em>c.d. testo coordinato </em>— la piattaforma di riferimento è senz’altro <a href="https://www.normattiva.it/">normattiva.it</a>, strumento online che offre un servizio gratuito e completo di informazione sulle leggi italiane.</p><figure><img alt="" src="https://cdn-images-1.medium.com/max/1024/0*ozlPQ5YRtVrDayNw" /><figcaption>Photo by <a href="https://www.normattiva.it/">normattiva.it</a></figcaption></figure><p>Diversi anni fa il <a href="https://teamdigitale.governo.it/">team per la trasformazione digitale</a> (con a capo <a href="https://twitter.com/diegopia">Diego Piacentini</a>) ha migliorato di molto l’esperienza di leggibilità del testo pubblicando l’intero CAD su <a href="https://docs.italia.it/italia/piano-triennale-ict/codice-amministrazione-digitale-docs/it/v2021-07-30/index.html">Docs Italia</a>, il servizio di documentazione online disponibile per le pubbliche amministrazioni. Ma la vera novità è stata il rilascio di tutte le versioni CAD in un <a href="https://github.com/italia/codice-amministrazione-digitale-docs">repository github</a>, grazie al quale è possibile confrontare le differenze testuali di tutte le sezioni, articoli e commi del testo normativo.</p><figure><img alt="" src="https://cdn-images-1.medium.com/max/1024/1*4bJ3Q8Xz3xrauo6cUjvQGA.png" /><figcaption>Photo by <a href="https://github.com/italia/codice-amministrazione-digitale-docs">github/italia</a></figcaption></figure><p>Per migliorare ulteriormente la leggibilità di tutte le versioni del testo normativo che si sono succedute lungo il corso degli anni, così come racconto nel mio vecchio <a href="https://giovanni.pirrotta.it/blog/2018/02/09/visualcad-la-mappa-interattiva-della-storia-del-cad/">post</a>, ho creato <a href="https://www.visualcad.it/">visualcad.it</a>, un tool online, navigabile e interattivo in grado di visualizzare a colpo d’occhio tutta la storia del codice attraverso una mappa colorata, dinamica ed interamente esplorabile.</p><figure><img alt="" src="https://cdn-images-1.medium.com/max/1024/0*xfx7bgNaQPDLkhuQ" /><figcaption>Photo by <a href="https://www.visualcad.it/">visualcad.it</a></figcaption></figure><p>Ciascuna colonna corrisponde ad una versione del CAD modificata dalla normativa indicata in alto alla colonna stessa. Ogni quadratino rappresenta un articolo del CAD; modifiche, aggiunte o abrogazioni sono evidenziati da un apposito colore, come riportato in legenda. È possibile visualizzare l’iter completo degli articoli selezionando il numero di articolo nella tendina, mentre è possibile isolare gli articoli di competenza di un determinato argomento inserendo del testo libero nel form.</p><p>Alcune considerazioni dopo più di quattro anni dalla nascita di <strong>visualcad.it</strong>.</p><ul><li>Su normattiva.it è stata implementata l’esportazione delle leggi in formato <a href="http://www.akomantoso.org/">Akomantoso</a>, un miglioramento non di poco conto che finalmente pone la giusta attenzione agli aspetti di interoperabilità del patrimonio informativo pubblico. Tuttavia alcune criticità rimangono, come racconto in un mio lungo <a href="https://twitter.com/gpirrotta/status/1500110780062220291">thread</a> su twitter;</li><li>il codice dell’amministrazione digitale viene sempre pubblicato su Docs Italia ma il suo aggiornamento è indietro di <strong>6 interventi normativi</strong> purtroppo;</li><li>proprio per il punto precedente, visualcad.it si è sganciato dal repository di github rilasciato dal team per la trasformazione digitale e attinge i dati direttamente da <strong>normattiva.it</strong>, rimanendo quindi allineato alla normativa vigente senza alcun ritardo.</li></ul><h4>I numeri del CAD</h4><p>Il CAD è nato il 7 marzo 2005 e in origine era formato da <strong>76 articoli</strong>. In più di <strong>17 anni</strong> di vita si sono succeduti <strong>45 interventi</strong> normativi. La sua ultima versione è composta da <strong>86 articoli</strong> e ha raggiunto il <strong>numero massimo di 104 articoli</strong> nel periodo <strong>tra il 2013 e il 2015</strong>. Dalla sua nascita al suo ultimo aggiornamento (legge n.79 del 29/06/22) sono <strong>trascorsi 6323 giorni</strong> e ha subito una <strong>modifica in media ogni 140,5 giorni</strong>. Nel corso di questi ultimi 17 anni sono stati <strong>aggiunti 44 nuovi articoli</strong>, ne sono stati <strong>abrogati 34</strong> e ne sono stati <strong>modificati 318</strong>. L’intero corpus del CAD e dei suoi aggiornamenti è c<strong>omposto da più di 7 milioni di caratteri</strong>.</p><figure><img alt="" src="https://cdn-images-1.medium.com/max/841/1*nt9jw7eRtcynRYcwOqYCcw.png" /><figcaption><strong>CAD in cifre</strong></figcaption></figure><blockquote>Ma il CAD è solo questo?</blockquote><p>E se il CAD ci potesse dire qualcos’altro? La rappresentazione testuale e visuale esaurisce tutte le espressioni possibili del testo normativo? E se ci volesse comunicare esperienze nuove, inesplorate, creative, che si rivolgono anche ad altri sensi?</p><p>Sono partito da queste domande per interrogarmi su questa possibilità e ho iniziato a documentarmi sulla <a href="https://en.wikipedia.org/wiki/Data_sonification"><strong>data sonification</strong></a> cioè sulla ricerca di nuove forme di comunicazione che, a partire dall’enorme quantità di dati in cui siamo quotidianamente immersi, cercano di andare <strong>al di là del visuale</strong> per spiegare diversamente la complessità dei dati.</p><blockquote>Da dove partire? Come approcciarsi al problema?</blockquote><p>Rispolverando vecchie reminescenze musicali di quando da giovane studiavo pianoforte, una prima e banale applicazione che mi viene in mente è quella di considerare gli articoli colorati presenti in visualcad.it come <strong>note musicali</strong> a cui poter dare una <strong>posizione</strong> e una <strong>durata</strong> sul <strong>pentagramma</strong> a seconda del numero dell’articolo e della sua lunghezza in caratteri.</p><figure><img alt="" src="https://cdn-images-1.medium.com/max/779/1*m0saPJCJ1-4WpuhePU47sA.png" /></figure><p>Prima di scrivere la partitura del brano focalizziamo l’attenzione sui <a href="https://www.visualcad.it/data/data_cad.json">dati sorgente</a> del progetto visualcad.it.</p><figure><img alt="" src="https://cdn-images-1.medium.com/max/1024/1*NBS1QJov0pcMobJXcCkhOg.png" /></figure><p>In questo file, in formato JSON, ogni articolo viene descritto nella sua interezza secondo una struttura definita. Le informazioni relative alle differenze tra gli articoli nei diversi aggiornamenti non sono codificate nei dati ma avviene lato software, motivo per cui è necessario estrarre tali informazioni e rappresentarle in modo che tengano conto sia della tipologia di modifica avvenuta su ciascun articolo rispetto alla versione precedente del CAD, sia del tempo che scorre. Il file generato contiene in qualche modo il <strong>ritmo</strong> del brano da comporre.</p><iframe src="" width="0" height="0" frameborder="0" scrolling="no"><a href="https://medium.com/media/8ea4f9384ca12e6e2a888da70bb15a00/href">https://medium.com/media/8ea4f9384ca12e6e2a888da70bb15a00/href</a></iframe><p>Inizialmente ho considerato la versione originale del CAD (76 articoli) e ho immaginato di suonare ogni articolo come note di un <strong>pianoforte</strong>; i primi 36 articoli con la <strong>mano sinistra</strong> e i secondi 36 articoli con la <strong>mano destra</strong>. Non volendo utilizzare le ottave più gravi e più acute del piano ho considerato solo le 4 ottave centrali. Per semplicità ho considerato solo i tasti bianchi del pianoforte lasciando le alterazioni per ora da parte.</p><blockquote>Come fare a far corrispondere per ciascuna mano 36 articoli su 14 note?</blockquote><p>Per ottenere un numero tra 0 e 13 ho considerato il numero dell’articolo modulo 14.</p><blockquote>Quanto dura ogni nota?</blockquote><p>Dipende dalla lunghezza dell’articolo. Ogni carattere corrisponde a una durata di un millisecondo. Quindi se l’articolo è lungo 3300 caratteri la nota sarà premuta per 3300 millisecondi, cioè poco più di 3 secondi. Di seguito il codice sorgente relativo a questo primo esempio di <strong>data sonification</strong> del CAD.</p><iframe src="" width="0" height="0" frameborder="0" scrolling="no"><a href="https://medium.com/media/d0506e34eea47c0274926d27fbfd32af/href">https://medium.com/media/d0506e34eea47c0274926d27fbfd32af/href</a></iframe><blockquote>Tonalità di DO Maggiore… musica maestro.</blockquote><iframe src="https://cdn.embedly.com/widgets/media.html?src=https%3A%2F%2Fanchor.fm%2Fgpirrotta%2Fembed%2Fepisodes%2FPiano---Data-Sonification-del-Codice-dellAmministrazione-Digitale-e1paud7&amp;display_name=Anchor+FM+Inc.&amp;url=https%3A%2F%2Fanchor.fm%2Fgpirrotta%2Fepisodes%2FPiano---Data-Sonification-del-Codice-dellAmministrazione-Digitale-e1paud7&amp;image=https%3A%2F%2Fd3t3ozftmdmh3i.cloudfront.net%2Fproduction%2Fpodcast_uploaded%2F32402143%2F32402143-1665896845807-e4cdf25d2457f.jpg&amp;key=a19fcc184b9711e1b4764040d3dc5c07&amp;type=text%2Fhtml&amp;schema=anchor" width="400" height="102" frameborder="0" scrolling="no"><a href="https://medium.com/media/7243f982963938e918d2e553edb4948a/href">https://medium.com/media/7243f982963938e918d2e553edb4948a/href</a></iframe><p>Beh, siamo lontani dall’ottenere qualcosa di apprezzabile musicalmente. Proviamo ad addolcire il suono usando un violino invece del pianoforte…vediamo se le cose migliorano.</p><iframe src="" width="0" height="0" frameborder="0" scrolling="no"><a href="https://medium.com/media/8d6ef2f1cbc5eb8b8e87b24acf6ed2b3/href">https://medium.com/media/8d6ef2f1cbc5eb8b8e87b24acf6ed2b3/href</a></iframe><iframe src="https://cdn.embedly.com/widgets/media.html?src=https%3A%2F%2Fanchor.fm%2Fgpirrotta%2Fembed%2Fepisodes%2FViolino---Data-Sonification-del-Codice-dellAmministrazione-Digitale-e1pauf7&amp;display_name=Anchor+FM+Inc.&amp;url=https%3A%2F%2Fanchor.fm%2Fgpirrotta%2Fepisodes%2FViolino---Data-Sonification-del-Codice-dellAmministrazione-Digitale-e1pauf7&amp;image=https%3A%2F%2Fd3t3ozftmdmh3i.cloudfront.net%2Fproduction%2Fpodcast_uploaded%2F32402143%2F32402143-1665896845807-e4cdf25d2457f.jpg&amp;key=a19fcc184b9711e1b4764040d3dc5c07&amp;type=text%2Fhtml&amp;schema=anchor" width="400" height="102" frameborder="0" scrolling="no"><a href="https://medium.com/media/0d607510d484a13a96d8a727a30b1a03/href">https://medium.com/media/0d607510d484a13a96d8a727a30b1a03/href</a></iframe><p>Niente da fare. Non è la strada giusta da percorrere. D’altronde questo era solo un tentativo esplorativo-didattico per capire cosa (e se) poter fare con i dati e come generare qualcosa di vagamente musicale.</p><blockquote>Non solo non ne è uscito nulla di apprezzabile ma, cosa più importante, manca uno scopo, manca una motivazione.</blockquote><figure><img alt="" src="https://cdn-images-1.medium.com/max/462/1*v-zrjoDUVZPEnzq7bZ5iew.png" /><figcaption>Photo by <a href="https://juniapharma.it/mal-di-orecchie-bambini-rimedi/">Juniapharma</a></figcaption></figure><p>Forse sarebbe meglio andare alla <strong>radice</strong>, scoprire se esistono delle regolarità nella struttura dei dati, nella sua evoluzione temporale, nella sua dinamica.</p><blockquote>È possibile partire da questi aspetti e sviluppare un’espressività compiuta, che sia utile a qualcosa e a qualcuno?</blockquote><p>Non ne trovo nell’immediato. Il motore generativo dei dati del CAD è caotico, ed è normale che sia così, non è una partitura musicale composta dalle mani di un direttore d’orchestra e non si presta a nessuno schema ordinato di regole armoniche.</p><p>Tuttavia non voglio arrendermi e rimango a riflettere sul CAD. Da più di 17 anni viene bistrattato da leggi e decreti, come un vestito rattoppato a suon di taglia e cuci, a discapito delle pubbliche amministrazioni che hanno l’ingrato compito di attuare, spesso con difficoltà, le disposizioni normative.</p><p>Se potessimo generare dal caos del CAD un’armonia che possa restituire un po’ di calma a chi il CAD lo usa quotidianamente e spende tempo e fatica nella sua attuazione spesso di difficile realizzazione! <br>Se il CAD potesse restituire un angolo di ristoro a tutti gli operatori di settore che si confrontano quotidianamente nell’arduo processo di digitalizzazione delle pubbliche amministrazioni! <br>Se dal moto casuale della sua genesi potesse nascere un flusso di emozioni in grado di generare istanti di pace!</p><blockquote>Sarebbe una bella motivazione e sarebbe una buona cosa.</blockquote><p>Allora via note e pentagramma, abbiamo bisogno di una dimensione emozionale che riesca a governare un moto aleatorio. Andiamo di immaginazione e di metafore.</p><p>Consideriamo gli articoli del CAD. Non tutti però, solo quelli che non cambiano negli anni, quelli che rimangono sempre uguali. Paragoniamoli a <em>una distesa di pioggia</em>, <strong>calma</strong>, <strong>battente</strong> e <strong>costante</strong>. Sempre <strong>uguale</strong> a se stessa, <strong>permanente</strong> e <strong>immutevole</strong>.</p><figure><img alt="" src="https://cdn-images-1.medium.com/max/540/1*1Rf1PbOi_sJs7A-0MLPddQ.png" /><figcaption>Photo by <a href="https://unsplash.com/photos/OKlo0r3gBcQ">Pan Xiaozhen</a> at <a href="http://unsplash.com/">Unsplash</a></figcaption></figure><p>Consideriamo adesso gli articoli modificati lungo il corso degli anni. Per ciascuno di essi immaginiamo un <em>vento impetuoso</em> <strong>spazzare via</strong> il testo da un articolo e <strong>metterne di nuovo</strong> nello stesso articolo.</p><figure><img alt="" src="https://cdn-images-1.medium.com/max/478/1*_-WnJXGdbkwKsOxeAW8DVA.png" /><figcaption>Photo by <a href="https://unsplash.com/photos/WtwSsqwYlA0">Khamkéo Vilaysing</a> at <a href="http://unsplash.com/">Unsplash</a></figcaption></figure><p>Tocca adesso agli articoli abrogati. Immaginiamo <em>fulmini</em> repentini che si <strong>infrangono</strong> sugli articoli rimossi dal CAD <strong>eliminando</strong> tutto ciò che trovano.</p><figure><img alt="" src="https://cdn-images-1.medium.com/max/470/1*8S7V3VL7vUp5Id-5Grl4Ag.png" /><figcaption>Photo by <a href="https://unsplash.com/photos/nlU1cUjlgZ0">Idan Gil</a> at <a href="http://unsplash.com/">Unsplash</a></figcaption></figure><p>E infine ad ogni nuovo articolo, immaginiamo un <em>uccello cinguettare</em> presso il nido, che veglia <strong>nuove vite</strong> e <strong>nuovi inizi</strong>.</p><figure><img alt="" src="https://cdn-images-1.medium.com/max/461/1*g8U3eB6-Ctspv5OR_5yQeg.png" /><figcaption>Photo by <a href="https://wagwalking.com/bird/condition/egg-binding">wagwalking.com</a></figcaption></figure><p>Immaginiamo tutto ciò e usiamo il CAD come motore generativo che dal caos normativo genera nuove forme di <em>percezioni</em>, <em>sensazioni</em>, <em>pensieri</em> ed <em>emozioni</em> che possano aiutarci a <strong>fermarci</strong>, <strong>riflettere</strong> e <strong>focalizzare l’attenzione </strong>su noi stessi. Facciamoci restituire dalla norma un nuovo artefatto e chiamiamolo <strong>opendatazen</strong>, una meditazione aleatoria <strong>data-driven</strong>, <strong>opendata, generata dal CAD</strong>.</p><figure><img alt="" src="https://cdn-images-1.medium.com/max/1024/0*ueCdgwnkq38zL-kM" /><figcaption>Photo by <a href="https://unsplash.com/@sagefriedman">Sage Friedman</a> at <a href="http://unsplash.com/">Unsplash</a></figcaption></figure><p>E questo è il risultato</p><iframe src="https://cdn.embedly.com/widgets/media.html?src=https%3A%2F%2Fanchor.fm%2Fgpirrotta%2Fembed%2Fepisodes%2FOpenDataZen--il-Codice-dellAmministrazione-Digitale-come-non-lavete-mai---sentito-e1pau6u&amp;display_name=Anchor+FM+Inc.&amp;url=https%3A%2F%2Fanchor.fm%2Fgpirrotta%2Fepisodes%2FOpenDataZen--il-Codice-dellAmministrazione-Digitale-come-non-lavete-mai---sentito-e1pau6u&amp;image=https%3A%2F%2Fd3t3ozftmdmh3i.cloudfront.net%2Fproduction%2Fpodcast_uploaded%2F32402143%2F32402143-1665896845807-e4cdf25d2457f.jpg&amp;key=a19fcc184b9711e1b4764040d3dc5c07&amp;type=text%2Fhtml&amp;schema=anchor" width="400" height="102" frameborder="0" scrolling="no"><a href="https://medium.com/media/f6a51dbe7d9e522e22dd531686fdaf3b/href">https://medium.com/media/f6a51dbe7d9e522e22dd531686fdaf3b/href</a></iframe><p>Vediamo brevemente il codice utilizzato per generare la meditazione. Il file <em>gitdiff.csv</em> contiene il ritmo da seguire. A seconda della tipologia di articolo incontrato lungo il ritmo viene inserito un suono di <strong>vento</strong>, se rispetto alla versione precedente il numero dell’articolo è stato aggiornato, un suono di <strong>tuono</strong> se l’articolo è stato abrogato e un suono di <strong>cinguettio</strong> per ogni nuovo articolo. Tutto questo su un sottofondo di <strong>pioggia</strong> costante, ogni volta che l’articolo non è stato modificato. Come un <strong>metronomo</strong> che scandisce il tempo ogni suono interviene nel giusto ordine secondo la sequenza temporale di ogni articolo, uno dopo l’altro, aggiornamento dopo aggiornamento, anno dopo anno, partendo dal documento originale del CAD fino all’ultima versione. La durata di ciascun suono dipende dalla lunghezza in caratteri di ciascun articolo, un secondo di suono corrisponde a 10.000 caratteri dell’articolo. Di default i suoni degli articoli abrogati durano 5 secondi, non essendoci più testo da contare negli articoli eliminati. Ecco il codice.</p><iframe src="" width="0" height="0" frameborder="0" scrolling="no"><a href="https://medium.com/media/7cc3a90d100fac750bbd85c10f4c3217/href">https://medium.com/media/7cc3a90d100fac750bbd85c10f4c3217/href</a></iframe><p>Siamo giunti alla fine di questo esperimento di <strong>data sonification</strong> del Codice dell’Amministrazione Digitale. Forse questa nuova forma assunta dal CAD non aiuterà a spiegare meglio la complessità della norma e non potrà essere utilizzata dagli operatori di settore per migliorare la sua attuazione. Mi piace pensare, però, che durante la vita lavorativa di ognuno di noi, spesso caotica e nervosa, riusciamo ogni tanto a fermarci, a ritagliarci due minuti durante la pausa caffè e, ascoltando la meditazione e respirando profondamente, a ritrovare un po’ di calma dentro di noi, ad assaporare istanti di serenità, a raggranellare briciole di quiete 😇. Nessuna pretesa, solo l’illusione che questi brevi momenti di lucida consapevolezza possano contribuire a portare un po’ di luce nelle vite buie e negli sguardi smarriti che si scorge a volte sui visi della gente. <a href="https://emojipedia.org/folded-hands/#:~:text=%F0%9F%99%8F%20Folded%20Hands&amp;text=Two%20hands%20placed%20firmly%20together,same%20gesture%20as%20praying%20hands.">🙏</a></p><p>Qui il <a href="https://www.pirrotta.info/opendatazen/opendatazen.mp3">link</a> diretto della meditazione. <a href="https://emojiterra.com/it/perona-nella-posizione-del-loto/">🧘</a>️ <a href="https://emojiterra.com/it/uomo-nella-posizione-del-loto/">🧘‍♂️</a></p><p>Dedico questo lavoro alla comunità Open Data Sicilia con cui, dopo il lungo periodo di assenza dovuto alla pandemia, siamo tornati a incontrarci <strong>dal vivo </strong>in occasione del raduno <a href="https://ods2022.opendatasicilia.it/">ODS2022</a>, avvenuto il 30 settembre 2022 a Catania.</p><p>Se questo progetto ti è piaciuto, mi aiuti a farlo conoscere con un <a href="http://twitter.com/share?url=https%3A%2F%2Fmedium.com%2F%40gpirrotta%2Fopendatazen-il-codice-dellamministrazione-digitale-come-non-l-avete-mai-sentito-6576fd863485&amp;text=OpenDataZen%3A%20il%20Codice%20dell%27Amministrazione%20Digitale%20come%20non%20l%27avete%20mai...sentito.%20Meditazione%20%23opendata%2C%20data-driven%2C%20generata%20dal%20CAD%20%23datasonification%20%23cad%20%23python%20%5Cby%20%40gpirrotta">tweet</a>? Grazie!</p><img src="https://medium.com/_/stat?event=post.clientViewed&referrerSource=full_rss&postId=6576fd863485" width="1" height="1" alt="">]]></content:encoded>
        </item>
        <item>
            <title><![CDATA[Di ecologia digitale, emissioni di carbonio e pubbliche amministrazioni (parte 3)]]></title>
            <link>https://medium.com/@gpirrotta/di-ecologia-digitale-emissioni-di-carbonio-e-pubbliche-amministrazioni-parte-3-86aec561e303?source=rss-8f9654a9875------2</link>
            <guid isPermaLink="false">https://medium.com/p/86aec561e303</guid>
            <category><![CDATA[emissioni]]></category>
            <category><![CDATA[ecologia]]></category>
            <category><![CDATA[pubbliche-amministrazioni]]></category>
            <category><![CDATA[ambiente]]></category>
            <category><![CDATA[co2]]></category>
            <dc:creator><![CDATA[Giovanni Pirrotta]]></dc:creator>
            <pubDate>Tue, 01 Feb 2022 14:15:49 GMT</pubDate>
            <atom:updated>2022-02-27T16:41:13.318Z</atom:updated>
            <content:encoded><![CDATA[<figure><img alt="" src="https://cdn-images-1.medium.com/max/1024/1*rIm46vL_ciuE24aRcxrO-A.jpeg" /><figcaption>Credits foto: <a href="https://it.freepik.com/foto/affari">DCStudio</a></figcaption></figure><p>Finalmente siamo giunti alla terza e ultima parte di questa storia che ha come obiettivo quello di analizzare i siti istituzionali delle pubbliche amministrazioni italiane e valutarne l’impatto ambientale. Nel <a href="https://medium.com/@gpirrotta/di-ecologia-digitale-emissioni-di-carbonio-e-pubbliche-amministrazioni-parte-1-5ec5cd58a52">primo articolo</a> ho introdotto il problema della sostenibilità ambientale legata all’utilizzo di Internet, di come il consumo energetico dovuto al funzionamento della rete contribuisca all’emissione di <strong>CO2</strong> e di come questo aumenti l’effetto serra. Nello stesso articolo ho parlato di un tool chiamato <a href="https://www.websitecarbon.com/">Carbon Calculator</a>, sviluppato da un’agenzia londinese, in grado di calcolare la <em>carbon footprint</em>, cioè l’impronta di carbonio di ciascun sito Web.</p><p>Tuttavia, per monitorare l’impatto ambientale di tutti i siti istituzionali delle pubbliche amministrazioni italiane (decine di migliaia), il tool online si è mostrato poco flessibile perché non adatto all’utilizzo massivo su un numero così grande di siti. Pertanto, partendo dalle euristiche del tool londinese, ho deciso di implementare in <strong>python</strong> un nuovo tool molto più flessibile e veloce, disponibile in <em>opensource</em> al seguente <a href="https://github.com/gpirrotta/carbon-calculator">repo</a>. Ne ho parlato nel <a href="https://medium.com/@gpirrotta/di-ecologia-digitale-emissioni-di-carbonio-e-pubbliche-amministrazioni-parte-2-70ff56fcf51c">secondo articolo</a>.</p><blockquote>Avendo tutto l’occorrente possiamo quindi iniziare a scandagliare i siti istituzionali italiani.</blockquote><p>Il nostro punto di partenza è l’indice ufficiale delle pubbliche amministrazioni italiane, cioè l’indice <strong>IPA</strong>, un <a href="https://indicepa.gov.it/ipa-dati/dataset/enti">dataset</a> aperto di libera consultazione in cui è possibile trovare i riferimenti per comunicare con le pubbliche amministrazioni e i gestori di pubblici servizi.</p><p>Al momento sono censiti <strong>22845</strong> enti con informazioni di varia natura: codici, informazioni territoriali, contatti istituzionali, social media, etc. Per il nostro monitoraggio, l’informazione più significativa è ovviamente l’<strong>URL</strong> del sito Web istituzionale dell’ente.</p><p>Dopo aver escluso tutti gli enti senza URL, corretto tutti gli indirizzi senza protocollo, eliminati tutti gli URL non validi e cercato di pulire/sanare tutti gli indirizzi che presentavano stranezze, diamo il via alle danze:</p><blockquote>“…che il monitoraggio abbia inizio”</blockquote><blockquote><strong>Disclaimer</strong>: attenzione, l’obiettivo di questo monitoraggio non è quello di puntare il dito contro le pubbliche amministrazione italiane. Lo scopo di questa analisi è prendere consapevolezza di un problema il più delle volte sconosciuto, quello della sostenibilità digitale, evidenziare in modo costruttivo alcune criticità esistenti, sollevare riflessioni e soprattutto fornire indicazioni, senza alcuna pretesa, per migliorare alcuni aspetti dei siti Web istituzionali delle pubbliche amministrazioni.</blockquote><p>Da un totale di <strong>22845</strong> siti istituzionali ottengo risposta positiva per <strong>18570</strong> siti Web. Ad un successivo raffinamento decido di effettuare il <em>pruning</em> dei siti la cui dimensione totale è inferiore a <strong>1 MB</strong>. Il motivo di questo <em>cutoff</em> è che alcune pagine Web “<em>scrapate”</em> rappresentano falsi positivi perché rappresentano informazioni di errore, motivo per cui <strong>pesano</strong> poco. Dopo il <em>pruning</em> rimangono <strong>16609</strong> siti Web istituzionali su cui possiamo iniziare a fare le nostre analisi. La seguente tabella, realizzata con Google Data Studio, mostra l’elenco di tutti i siti istituzionali monitorati, con indicazioni della data e ora del monitoraggio e con la possibilità di effettuare ricerche per singola PA.</p><figure><img alt="" src="https://cdn-images-1.medium.com/max/981/1*4EVGbX-9FzI9BSFX-iEuXQ.png" /><figcaption>Elenco siti pubbliche amministrazioni monitorati —<a href="https://datastudio.google.com/reporting/caaddde7-c0e6-4e9e-bdf7-7a31b1a784a2/page/p_kof44i0spc?s=o8UjqqbJRD8"> vai alla dashboard</a></figcaption></figure><p>Andiamo sin da subito a vedere quali sono le pubbliche amministrazioni <em>green, </em>cioè gli enti che hanno il proprio sito istituzionale su hosting alimentato da fonti di energia rinnovabili.</p><figure><img alt="" src="https://cdn-images-1.medium.com/max/983/1*ry_yuyKO4ZuCEs-IBpJG7w.png" /><figcaption>Elenco pubbliche amministrazioni Green —<a href="https://datastudio.google.com/s/l9DcZZQrHAc"> vai alla dashboard</a></figcaption></figure><blockquote>In tutto sono stati rilevati <strong>248</strong> siti green, pari all’ <strong>1,08% </strong>del totale.</blockquote><p>Dall’elenco possiamo selezionare tutti gli enti appartenenti ad una particolare categoria, ad esempio <strong>Comuni</strong> o <strong>Istituti scolastici</strong>.</p><p>Esplorando notiamo la presenza di alcuni ministeri <strong>green</strong>. Tra gli enti che hanno il sito istituzionale su un <em>hosting</em> <strong>green</strong> rileviamo la <em>Presidenza del Consiglio dei Ministri, il Ministero della Giustizia, il Ministero della Salute e il Ministero dell’Interno</em>.</p><figure><img alt="" src="https://cdn-images-1.medium.com/max/947/1*bWt49c4pZrreQHWvWUHGKQ.png" /><figcaption>Elenco Ministero Green</figcaption></figure><p>Ci saremmo augurati che il <em>Ministero per la Transizione Digitale e l’Agenzia per l’Italia Digitale (AGID)</em> fossero stati presenti in questo elenco ma così non è purtroppo.</p><blockquote>In realtà esiste un sottodominio di AGID presente nel dataset della <a href="https://www.thegreenwebfoundation.org/">Green Web Foundation</a> ma successive analisi ci hanno consentito di verificare che il sito principale AGID non è su hosting green.</blockquote><p>Entriamo adesso più nel vivo della questione e cominciamo a vedere quali sono gli enti più inquinanti a livello nazionale. Al primo posto in classifica troviamo <a href="http://www.etabtodi.it/"><em>La Consolazione Etab di Todi</em></a>, con <strong>129,15 grammi</strong> di emissioni di <strong>CO2</strong> per ciascuna visita dell’homepage. Al secondo e terzo posto troviamo invece il comune di <a href="http://www.comun.roncadelle.bs.it/"><em>Roncadelle</em></a> e il comune di <a href="http://www.comune.pazzano.rc.it/"><em>Pazzano</em></a>.</p><figure><img alt="" src="https://cdn-images-1.medium.com/max/968/1*rfR1KJRZ355kGtwBkkO0iA.png" /><figcaption>Classifica pubbliche amministrazioni più inquinanti per emissioni di CO2 — <a href="https://datastudio.google.com/s/gYrojhr5EU4">vai alla dashboard</a></figcaption></figure><p>Dalla dashboard è possibile esplorare per <strong>categoria ente</strong> tutte le pubbliche amministrazioni italiane. Se volessimo ad esempio selezionare solo le scuole potremmo utilizzare il menù a tendina sopra la tabella per spuntare la categoria ente di nostro interesse.</p><figure><img alt="" src="https://cdn-images-1.medium.com/max/1024/1*w0x-9PB8CMmay9eBF6PciQ.png" /></figure><p>Di seguito l’elenco delle scuole pubbliche più inquinanti.</p><figure><img alt="" src="https://cdn-images-1.medium.com/max/949/1*8LVE87bfnp4y17GgvM4P_Q.png" /><figcaption>Classifica siti Istituti di Istruzione Statale di ogni ordine e grado più inquinanti per emissioni di CO2</figcaption></figure><p>Le emissioni di CO2 sono direttamente proporzionali al peso di ciascuna pagina Web, considerando nel computo non solo la pagina HTML ma anche tutte le risorse ad essa collegate: immagini, fogli di stile, script, audio, video, font, etc.</p><blockquote>Uno dei problemi principali dei siti più inquinanti è che spesso in homepage vengono inserite immagini molto pesanti, senza nessun tipo di ottimizzazione di ridimensionamento o compressione.</blockquote><p>Il sito della <em>Consolazione Etab di Todi</em>, (numero 1 in classifica), ad esempio, contiene in homepage diverse immagini piuttosto pesanti, ciascuna di <strong>10 MB </strong>in media<strong>. </strong>Ancora più emblematico il caso del <em>Comune di Roncadelle </em>(numero 2 in classifica) nella cui homepage troviamo immagini superiori anche a <strong>50MB.</strong></p><p>Per capire meglio come sono distribuite e prendere contezza del peso in homepage di ciascuna tipologia di risorsa diamo uno sguardo alla seguente tabella.</p><figure><img alt="" src="https://cdn-images-1.medium.com/max/948/1*9kuPi6CsP1WyCTOYv8gyTA.png" /><figcaption>Risorse Web caricate per sito istituzionale — <a href="https://datastudio.google.com/s/rNg4x24QTUw">vai alla dashboard</a></figcaption></figure><p>Come si evince il <strong>grosso</strong> sta nelle immagini, colonna arancione.</p><blockquote>Se vogliamo incidere veramente sul totale emissioni CO2 dei siti Web istituzionali italiani sappiamo quindi cosa andrebbe ottimizzato.</blockquote><p>Rappresentiamo adesso su mappa solo le regioni italiane. I relativi siti Web istituzionali appaiono in questo modo: tra le regioni più inquinanti troviamo la Lombardia, il Friuli-Venezia Giulia e la Toscana.</p><figure><img alt="" src="https://cdn-images-1.medium.com/max/607/1*VnPruxj6H8bIcqat_B2mAQ.png" /><figcaption>Emissione di CO2 siti web regionali — <a href="https://www.datawrapper.de/_/80RrI/">vai alla mappa</a></figcaption></figure><p>Considerando ad esempio una singola regione, la Sicilia, i siti Web comunali più inquinanti appaiono così:</p><figure><img alt="" src="https://cdn-images-1.medium.com/max/860/1*AIIGPrX7DmmxqSeLl3-Syg.png" /><figcaption>Emissione di CO2 comuni regione Sicilia— <a href="https://www.datawrapper.de/_/MCkyD/">vai alla mappa</a></figcaption></figure><p>Tra i comuni siciliani spicca quello di <a href="http://www.comune.bivona.ag.it/hh/index.php">Bivona (AG)</a>, la cui homepage pesa più di 100MB.</p><p>La seguente dashboard elenca invece ciascun sito istituzionale con l’indicazione della CO2 emessa in un anno (con media 10.000 visite mensili), dell’energia consumata in kWh e dei litri d’acqua da bollire per consumare tanto da equiparare le emissioni di CO2 del sito.</p><figure><img alt="" src="https://cdn-images-1.medium.com/max/982/1*bNHg7Eq-cgFfQ9Rxja1rsQ.png" /><figcaption>Consumo elettrico annuale calcolato su 10000 visite mensili in media — <a href="https://datastudio.google.com/s/kSBOm7TbPbM">vai alla dashboard</a></figcaption></figure><h4>Considerazioni finali</h4><p>Nel <a href="https://medium.com/@gpirrotta/di-ecologia-digitale-emissioni-di-carbonio-e-pubbliche-amministrazioni-parte-1-5ec5cd58a52#:~:text=Ecco%20ad%20esempio%20alcuni%20consigli%20per%20limitare%20gli%20sprechi%20di%20connessione%20elettrica/digitale%20e%20di%20traffico%20dati%20%5B1%5D%3A">primo post</a> ho riportato alla fine una serie di azioni che possiamo fare nostre per limitare lo spreco di energia elettrica e di traffico dati. Nel <a href="https://medium.com/@gpirrotta/di-ecologia-digitale-emissioni-di-carbonio-e-pubbliche-amministrazioni-parte-2-70ff56fcf51c">secondo post</a> ho proposto una soluzione software per monitorare il consumo di ciascun sito Web. In quest’ultimo post ho focalizzato l’attenzione sull’ecologia digitale dei siti Web delle pubbliche amministrazioni italiane, evidenziando e mettendo sotto i riflettori importanti criticità. In questa serie di post spero di esser riuscito a portare l’attenzione sulla sostenibilità digitale del Web, un problema che il più delle volte non viene neanche percepito come tale, un qualcosa che ci sembra così lontano dalla vita di tutti i giorni ma che dobbiamo sempre più imparare a conoscere, a gestire e a considerare, se vogliamo veramente salvaguardare il pianeta.</p><p>Alcuni consigli per poter continuare ad utilizzare i mezzi digitali senza compromettere ulteriormente il nostro ecosistema sono [1]:</p><ul><li>utilizzare il più possibile energia proveniente da fonti rinnovabili, se possibile da fornitori locali o regionali;</li><li>scegliere server su cui pubblicare le proprie pagine Web che utilizzino hardware moderni e metodi di raffreddamento nei data center efficienti, in modo da ridurre il consumo energetico;</li><li>utilizzare il più possibile sistemi di videoconferenza per riunioni in modo da evitare soprattutto l’utilizzo di mezzi di locomozione fortemente inquinanti come l’aereo;</li><li>sostituire i propri server con sistemi cloud in modo da ridurre il consumo energetico.</li></ul><p>Sono convinto che la pubblica amministrazione italiana possa e debba fare tanto in questo contesto considerando che è direttamente coinvolta nella sfida degli obiettivi per lo sviluppo sostenibile prevista dall’ <a href="https://www.agenziacoesione.gov.it/comunicazione/agenda-2030-per-lo-sviluppo-sostenibile/">Agenda 2030</a>, cioè quei traguardi che, in accordo con tutti i paesi delle Nazioni Uniti, è chiamata a raggiungere in ambito ambientale, economico, sociale e istituzionale <strong>entro il 2030.</strong></p><p>Gli obiettivi dell’agenda</p><blockquote>“prendono in considerazione in maniera equilibrata le <strong>tre dimensioni dello sviluppo sostenibile</strong> — economica, sociale ed ecologica — e mirano a porre fine alla <strong>povertà</strong>, a lottare contro l<strong>‘ineguaglianza</strong>, ad affrontare i <strong>cambiamenti climatici</strong>, a costruire società pacifiche che rispettino i <strong>diritti umani</strong>.”</blockquote><p>La sostenibilità digitale del Web può sembrare una piccola cosa per le azioni che lo Stato è chiamato ad attuare ma in realtà non lo è. D’altronde il <strong>Goal 13</strong> dell’Agenda 2030 è intitolato “<em>Lotta contro il cambiamento climatico</em>” e definisce come target e strumenti di attuazione i seguenti punti</p><blockquote>13.2 Integrare nelle politiche, nelle strategie e nei piani nazionali le misure di contrasto ai cambiamenti climatici; <br>13.3 Migliorare l’istruzione, la sensibilizzazione e la capacità umana e istituzionale riguardo ai cambiamenti climatici in materia di mitigazione, adattamento, riduzione dell’impatto e di allerta precoce.</blockquote><p>Milioni di cittadini ogni giorno consultano i siti istituzionali pubblici per connettersi a servizi digitali, consultare avvisi, accedere a informazioni. Le pubbliche amministrazioni dovrebbero partire dalle seguenti azioni:</p><ul><li>progettare il proprio sito Web istituzionale secondo<a href="https://designers.italia.it/"> i modelli, i Kit di design e le linee guida</a> del Dipartimento per la Trasformazione Digitale, punto di riferimento per la progettazione di servizi pubblici digitali semplici, accessibili, equi e inclusivi; un insieme di regole per la progettazione dei siti Web istituzionali secondo precisi standard di accessibilità, architettura dell’informazione, <strong>ottimizzazione dei contenuti</strong> per offrire un’esperienza d’uso efficace per il cittadino;</li><li>formazione del personale: possiamo avere il sito più bello del mondo ma se poi il dipendente preposto a caricare le immagini sulle pagine Web non è opportunamente formato, non c’è sito che tenga: ci ritroveremo sempre ad avere immagini enormi che vanificheranno tutte le azioni intraprese; formazione e consapevolezza dovrebbe essere un <em>mantra </em>per ciascun dipendente della PA;</li><li>favorire sempre infrastrutture di rete che attingano energia elettrica solo da fonti rinnovabili e certificate, che abbiano data center in grado di ridurre al massimo le emissioni di gas nocivi per l’ambiente, che siano in possesso della certificazione <a href="https://it.wikipedia.org/wiki/ISO_14001"><strong>ISO14001</strong></a>, con la quale si definiscono i requisiti di un sistema di gestione ambientale di una qualsiasi organizzazione in modo da creare una partecipazione attiva alla difesa dell’ambiente.</li></ul><p>Tonnellate di emissioni di CO2 potrebbero essere quindi limitate se lo Stato avesse un po’ più di accortezza nella gestione delle proprie azioni, se avesse una maggiore consapevolezza del ruolo che è chiamato a ricoprire su tematiche ambientali. Lo Stato può e deve intervenire a partire da questo ma è giusto ricordare che siamo tutti coinvolti, siamo tutti responsabili con le nostre azioni quotidiane e ciò che ci riserverà il futuro del pianeta dipenderà solamente dal coraggio che saremo in grado di mettere in campo nel nostro vissuto quotidiano. Saremo costretti a farlo e dovremo riuscire a prendere sulle nostre spalle responsabilità per una profonda e radicale transizione ecologica.</p><p><strong>Dovremo farlo per il nostro futuro, dovremo farlo per il futuro del pianeta!</strong></p><p><a href="https://github.com/gpirrotta/green-pa">Repo dei dati</a> (Github)<br><a href="https://datastudio.google.com/reporting/caaddde7-c0e6-4e9e-bdf7-7a31b1a784a2/page/p_kof44i0spc?s=o8UjqqbJRD8">Dashboard</a> (Google Data Studio)<br>Mappa <a href="https://www.datawrapper.de/_/80RrI/">1</a> e <a href="https://www.datawrapper.de/_/MCkyD/">2</a> (Datawrapper)</p><p>[1] <a href="https://greenreport.it/news/comunicazione/limpatto-ambientale-del-digitale-un-web-sostenibile-e-possibile/">L’Impatto ambientale del digitale, un web sostenibile è possibile.</a></p><img src="https://medium.com/_/stat?event=post.clientViewed&referrerSource=full_rss&postId=86aec561e303" width="1" height="1" alt="">]]></content:encoded>
        </item>
        <item>
            <title><![CDATA[Di ecologia digitale, emissioni di carbonio e pubbliche amministrazioni (parte 2)]]></title>
            <link>https://medium.com/@gpirrotta/di-ecologia-digitale-emissioni-di-carbonio-e-pubbliche-amministrazioni-parte-2-70ff56fcf51c?source=rss-8f9654a9875------2</link>
            <guid isPermaLink="false">https://medium.com/p/70ff56fcf51c</guid>
            <category><![CDATA[effetto-serra]]></category>
            <category><![CDATA[emissioni-co2]]></category>
            <category><![CDATA[inquinamento]]></category>
            <category><![CDATA[python]]></category>
            <category><![CDATA[ambiente]]></category>
            <dc:creator><![CDATA[Giovanni Pirrotta]]></dc:creator>
            <pubDate>Mon, 27 Dec 2021 10:28:58 GMT</pubDate>
            <atom:updated>2021-12-27T10:28:58.118Z</atom:updated>
            <content:encoded><![CDATA[<figure><img alt="" src="https://cdn-images-1.medium.com/max/1024/1*NkBeUp98IGxrg_m3GlAW0Q.png" /><figcaption><a href="http://www.freepik.com/">Designed by rawpixel.com / Freepik</a></figcaption></figure><p>Nel <a href="https://medium.com/@gpirrotta/di-ecologia-digitale-emissioni-di-carbonio-e-pubbliche-amministrazioni-parte-1-5ec5cd58a52">precedente</a> articolo ho introdotto il problema della sostenibilità ambientale legata all’utilizzo di Internet, di come l’utilizzo di smartphone e computer contribuisca all’emissione di <strong>CO2</strong> nell’ambiente e come questo aumenti l’effetto serra, gas nocivo per il pianeta e causa del riscaldamento globale. Nello stesso articolo ho presentato un tool, il <a href="https://www.websitecarbon.com/"><strong>Carbon Calculator</strong></a>, sviluppato dall’agenzia londinese <a href="https://www.wholegraindigital.com/">WholeGrain Digital</a>, in grado di calcolare il <a href="https://it.wikipedia.org/wiki/Carbon_footprint">carbon footprint</a> generato durante la navigazione di qualunque sito Web. Abbiamo quindi visto come trovare una stima precisa di quanto inquini il Web sia un’operazione molto complessa. L’articolo, tuttavia, si chiudeva con una domanda:</p><blockquote>Qual è la situazione dei siti Web istituzionali delle pubbliche amministrazioni italiane?</blockquote><p>Quanto inquinano? Chi inquina di più? E le scuole? Esiste una sensibilità ecologica digitale nel mondo scolastico oppure è un problema del tutto sconosciuto?</p><p>Prima di analizzare tutti i siti delle pubbliche amministrazioni soffermiamoci sul tool <strong>Carbon Calculator, </strong>ampiamente discusso nel precedente articolo e rilasciato in opensource su questo <a href="https://gitlab.com/wholegrain/carbon-api-2-0">repository</a>.</p><p>La libreria ci fornisce principalmente statistiche e metriche del sito Web relative a:</p><ul><li>la dimensione totale dei dati trasferiti in rete durante la navigazione di una pagina Web;</li><li>la dimensione ponderata dei dati trasferiti considerando gli utenti che ritornano sulla stessa pagina;</li><li>se l’hosting su cui risiede la pagina Web è alimentato da fonti energetiche rinnovabili;</li><li>la quantità di CO2 emessa in grammi per ogni visita, tenendo conto anche della tipologia di hosting;</li><li>la quantità di energia elettrica consumata in kWh per ogni visita;</li><li>la quantità di acqua da bollire per uguagliare l’emissione di CO2 prodotta della navigazione Web.</li></ul><p>Il servizio Web offerto dall’agenzia londinese calcola queste informazioni e le mette a disposizione degli utenti sia tramite interfaccia <strong>Web</strong> sia tramite <strong>API</strong>, con una classica risposta <a href="https://it.wikipedia.org/wiki/JavaScript_Object_Notation"><strong>JSON</strong></a>.</p><figure><img alt="" src="https://cdn-images-1.medium.com/max/915/1*100ygBIQ93xYNEk5icH9hw.png" /></figure><p>Per poter calcolare le emissioni di <strong>CO2</strong> dei siti Web istituzionali degli enti italiani il mio punto di partenza è l’<a href="https://indicepa.gov.it/ipa-portale/">indice IPA</a>, un dataset <em>aperto</em> di libera consultazione in cui è possibile trovare i riferimenti per comunicare con le pubbliche amministrazioni e i gestori di pubblici servizi.</p><p>Al momento sono censiti <strong>22845 enti </strong>con informazioni di varia natura: codici, informazioni territoriali, contatti istituzionali, social media, etc. Per il nostro monitoraggio l’informazione più significativa è l’<strong>URL</strong> del sito Web istituzionale dell’ente.</p><blockquote>Posso utilizzare il tool Carbon Calculator dell’agenzia londinese per calcolare il carbon footprint di ciascun sito istituzionale?</blockquote><p>In realtà sì ma mi accorgo subito che questa scelta non è tra le migliori perché rischierei sia di intasare il servizio con una richiesta massiva di siti (<strong>più di 20.000</strong>), sia di essere <em>bannato</em> dal server a causa delle numerosi interrogazioni. Potrei anche fare interrogazioni distanziate con una certa latenza in secondi ma ci vorrebbe troppo tempo.</p><p>Per fortuna il tool è <em>opensource</em> e inizio a vedere se il software è ottimizzabile.</p><p>Esplorando il codice scopro che il tool dell’agenzia londinese, per il suo corretto funzionamento, utilizza due API esterne e rispettivamente:</p><ul><li><a href="https://admin.thegreenwebfoundation.org/api-docs/"><strong>l’API</strong></a> del progetto <em>Green Web Foundation</em>, per verificare se il sito da analizzare è <strong>green</strong>, cioè in <em>hosting</em> presso server alimentati con fonti di energia rinnovabili;</li><li><a href="https://developers.google.com/speed/docs/insights/v5/get-started"><strong>l’API</strong></a> del servizio <em>Google PageInsight</em>, con il quale è possibile ottenere metriche di performance, benchmarking e audit di qualsiasi sito Web.</li></ul><p>Il funzionamento del tool è raffigurato nella seguente immagine.</p><figure><img alt="" src="https://cdn-images-1.medium.com/max/824/1*PF3WnfLaj-aVgp4l4bBp0A.png" /><figcaption>Schema di funzionamento in locale del tool Carbon Calculator dell’agenzia WholeGrain Digital</figcaption></figure><p>Se volessimo mandare in esecuzione il Carbon Calculator<strong> in locale</strong>, non ce ne avvantaggeremmo perché per ciascun sito dovremmo attendere in ogni caso il tempo di risposta dei due servizi API esterni. Per il primo servizio API, il progetto <em>GreenWebFoundation</em>, correremmo il rischio di intasare il server, con rischio <em>ban;</em> per il servizio Google è invece previsto un rate limit, oltre alla necessità di registrarsi per ottenere una API KEY necessaria per un certo numero di richieste.</p><p><em>Bisognerebbe trovare un modo per mandare in esecuzione il codice </em><strong><em>bypassando</em></strong><em> i tempi di latenza delle API, ad esempio cercando di fare </em><strong><em>tutto</em></strong><em> in locale.</em></p><p>Per quanto riguarda il servizio offerto dal progetto <em>Green Web Foundation</em>, l’API interroga un grande dataset di circa <strong>2,5 milioni</strong> di siti <em>green</em>, rispondendo vero/falso a seconda se il sito è presente o meno nel dataset. La cosa molto interessante è che il dataset è pubblicato <strong>online</strong>, aggiornato con frequenza quasi giornaliera e <strong>rilasciato in open data</strong> (<a href="https://opendatacommons.org/licenses/odbl/summary/index.html">licenza oDB</a>), per cui è possibile il riutilizzo in contesti diversi da quello originale, con obbligo di citazione della fonte.</p><blockquote>Bingo, possiamo fare a meno della prima API.</blockquote><figure><img alt="" src="https://cdn-images-1.medium.com/max/926/0*lHImykIY6dqKgcUQ" /></figure><p>Vediamo adesso la seconda API, quella relativa a <a href="https://pagespeed.web.dev/?utm_source=psi&amp;utm_medium=redirect&amp;hl=it">Google PageInsight</a>. Nella pagina del servizio scopriamo che l’API di Google, che effettua audit su aspetti del sito, come la velocità, la user experience e la SEO, si appoggia alla libreria javascript <strong>Lighthouse</strong>. Quest’ultima è in realtà un progetto autonomo, una suite di strumenti utilizzata per migliorare le prestazioni di un sito, disponibile anche come <a href="https://chrome.google.com/webstore/detail/lighthouse/blipmdconlkpinefehnmjammfjpmpbjk?hl=it">estensione</a> per chrome/firefox. Il tool è rilasciato in opensource (<a href="https://www.apache.org/licenses/LICENSE-2.0">Apache License 2.0</a>) ed è <a href="https://github.com/GoogleChrome/lighthouse">presente</a> anche una versione <strong>a riga di comando</strong>, implementata per NodeJS.</p><blockquote>La chiave di volta è che le metriche necessarie al funzionamento di Carbon Calculator sono generate proprio da Lighthouse, motivo per cui possiamo installare in locale Lighthouse e bypassare del tutto il servizio Google.</blockquote><p>A questo punto, piuttosto che modificare il codice sorgente dell’agenzia londinese, scritto in PHP, decido di fare il <em>porting</em> del tool in linguaggio <strong>python</strong>, in modo da avere una libreria nativa nello stesso linguaggio di programmazione che utilizzerò per fare le analisi dei siti delle pubbliche amministrazioni. Lo schema di funzionamento del nuovo tool è raffigurato nella seguente immagine.</p><figure><img alt="" src="https://cdn-images-1.medium.com/max/843/1*SijkSP7kb766_VhC8GdLXQ.png" /><figcaption>Schema di funzionamento del nuovo Carbon Calculator</figcaption></figure><h4>Come funziona</h4><p>La nuova libreria Carbon Calculator è basata sulle <a href="https://www.websitecarbon.com/how-does-it-work/">euristiche</a> utilizzate dalla libreria sviluppata dall’agenzia WholeGrain Digital e considera le seguenti assunzioni:</p><ul><li>il traffico dati prodotto da ogni pagina Web viene ponderato considerando il <strong>75%</strong> del peso dati proveniente da nuovi visitatori e il <strong>25%</strong> proveniente da utenti che ritornano sul sito; questa ottimizzazione incide sulla dimensione finale del traffico perché tiene conto delle varie <em>cache</em> presenti lungo il tragitto;</li><li>la stima di energia elettrica consumata per ogni <strong>gigabyte</strong> di traffico dati è pari a <strong>1.805 kWh</strong>, come dettagliatamente spiegato nel <a href="https://medium.com/@gpirrotta/di-ecologia-digitale-emissioni-di-carbonio-e-pubbliche-amministrazioni-parte-1-5ec5cd58a52">precedente</a> articolo;</li><li>la stima di emissioni <strong>CO2</strong> per ogni <strong>kWh</strong> di energia elettrica è pari a <strong>475 grammi </strong>(<a href="https://www.iea.org/reports/global-energy-co2-status-report-2019/emissions">International Energy Agency</a>); se il server su cui risiede la pagina Web è alimentato da fonti di energia rinnovabili allora il consumo di energia elettrica dei data center, stimato all’incirca il <strong>10%</strong> sul totale, viene calcolato considerando una stima di emissioni <strong>CO2</strong> pari a <strong>33.4</strong> grammi per <strong>kWh </strong>(<a href="https://ecotricity.co.nz/">Ecotricity</a>);</li><li>la stima di quantità di acqua da bollire per eguagliare la produzione di CO2 è pari a <strong>0.55 litri</strong> per ciascun grammo di CO2 emesso.</li></ul><blockquote>Passiamo adesso all’installazione della libreria e vediamo come usarla.</blockquote><h4>Installazione</h4><p>Prima di procedere all’installazione della nuova libreria <strong>Carbon Calculator</strong> è necessario scaricare il dataset dei siti green della <em>Green Web Foundation</em> in formato SQLite. Per fare questo bisogna andare sul <a href="https://admin.thegreenwebfoundation.org/admin/green-urls">sito</a> della fondazione e individuare il dataset più aggiornato, solitamente alla fine dell’elenco, quindi copiarne l’URL.</p><figure><img alt="" src="https://cdn-images-1.medium.com/max/653/1*j0R9dJ6U6Lx3YNPlRV9fwg.png" /></figure><p>A questo punto è possibile lanciare il seguente comando.</p><pre>mkdir data &amp;&amp; cd data<br>curl https://tgwf-green-domains-live.s3.nl-ams.scw.cloud/green_urls_2021-12-11.db.gz | gunzip -c &gt; green_urls.db</pre><p>Dopo aver scaricato il <em>database GreenWeb</em>, passiamo adesso all’installazione del tool <strong>Lighhouse</strong>. Disponibile su <a href="https://github.com/GoogleChrome/lighthouse">Github</a> si installa semplicemente digitando i seguenti comandi.</p><pre>npm install -g lighthouse</pre><p>Il comando installa il tool di Google a livello globale, per cui digitando <em>lighthouse </em>in qualunque punto vi troviate dovreste vedere il seguente output.</p><pre>lighthouse<br> Please provide a url</pre><pre>Specify --help for available options</pre><p>A questo punto installiamo la libreria Carbon Calculator, già presente in <a href="https://pypi.org/project/carbon-calculator">PyPi</a>.</p><pre>pip install carbon-calculator</pre><p>La libreria è adesso installata sul nostro computer. Vediamo come utilizzarla.</p><h4>Utilizzo di Carbon Calculator</h4><ul><li><strong>Come libreria nativa</strong></li></ul><p>Se <em>lighthouse </em>è installato a livello globale non è necessario creare l’oggetto a <strong>riga</strong> <strong>5. </strong>Il codice è di per sé autoesplicativo.</p><iframe src="" width="0" height="0" frameborder="0" scrolling="no"><a href="https://medium.com/media/48f0a5f7231456d97efacd371bfb74b7/href">https://medium.com/media/48f0a5f7231456d97efacd371bfb74b7/href</a></iframe><p>Richiamando la proprietà <strong>co2_grams</strong><em> </em>è possibile conoscere i grammi di CO2 emessi nell’ambiente per ogni visita ad esempio del sito dell’Università di Messina.</p><ul><li><strong>Come libreria nativa da file INI</strong></li></ul><iframe src="" width="0" height="0" frameborder="0" scrolling="no"><a href="https://medium.com/media/ef71283c793f11de003073137c2a7f24/href">https://medium.com/media/ef71283c793f11de003073137c2a7f24/href</a></iframe><iframe src="" width="0" height="0" frameborder="0" scrolling="no"><a href="https://medium.com/media/de65dc36deb12d07ffeddd599313332c/href">https://medium.com/media/de65dc36deb12d07ffeddd599313332c/href</a></iframe><p>Anche in questo caso, se <em>lighthouse</em> è installato a livello globale è possibile lasciare vuoto <strong>LIGHTHOUSE_PATH.</strong></p><ul><li><strong>A riga di comando</strong></li></ul><iframe src="" width="0" height="0" frameborder="0" scrolling="no"><a href="https://medium.com/media/b8ed62761427f59573764050a3e63710/href">https://medium.com/media/b8ed62761427f59573764050a3e63710/href</a></iframe><p><strong>Esempio:</strong></p><pre>carbon-cli --greenweb=/Users/giovanni/projects/carbon-calculator/data/green_urls_2021-12-01.db  --lighthouse=/Users/giovanni/.nvm/versions/node/v14.17.6/bin/lighthouse <a href="https://www.unime.it/">https://www.unime.it</a></pre><p><strong>Output:</strong></p><iframe src="" width="0" height="0" frameborder="0" scrolling="no"><a href="https://medium.com/media/b8f6cf778307ec461e5d813b5560b905/href">https://medium.com/media/b8f6cf778307ec461e5d813b5560b905/href</a></iframe><p>Per la semantica dell’output vi rimando al <a href="https://github.com/gpirrotta/carbon-calculator/blob/main/README.md"><strong>README</strong></a> del progetto.</p><h4>Considerazioni finali</h4><p>Ho ritenuto necessario implementare ex-novo il tool <strong>Carbon Calculator</strong> in <em>python</em> perché avevo bisogno di una libreria in grado di superare gli ostacoli riscontrati nel codice originale. La nuova libreria ha il vantaggio di non dipendere più dalle API esterne ed è per questo molto più veloce di quella dell’agenzia londinese. Nel <em>porting</em> in python sono state effettuate lievi correzioni e aggiunte più informazioni all’output finale. La nuova Carbon Calculator può essere utilizzata nativamente in progetti di analisi dati, è flessibile, modulare ed è adatta anche per essere integrata in contesti di esecuzione parallela. Il progetto è stato rilasciato in opensource, il repository di riferimento è disponibile <a href="https://github.com/gpirrotta/carbon-calculator/">qui</a> ed è anche presente nel <a href="https://pypi.org/project/carbon-calculator/">Python Package Index</a> (PyPI).</p><p>Siamo adesso pronti ad affrontare la scansione di decine di migliaia di siti Web della pubblica amministrazione senza paura. Nessun server potrà bannarci e nessun rate limit potrà ostacolarci. Possiamo quindi iniziare a scandagliare i siti Web degli enti italiani e capire se e quanto inquinano…ma per tutto questo vi rimando al prossimo articolo, la terza e ultima parte di questo viaggio sulla sostenibilità digitale del Web dei siti istituzionali italiani.</p><p>Stay tuned!</p><img src="https://medium.com/_/stat?event=post.clientViewed&referrerSource=full_rss&postId=70ff56fcf51c" width="1" height="1" alt="">]]></content:encoded>
        </item>
        <item>
            <title><![CDATA[Di ecologia digitale, emissioni di carbonio e pubbliche amministrazioni (parte 1)]]></title>
            <link>https://medium.com/@gpirrotta/di-ecologia-digitale-emissioni-di-carbonio-e-pubbliche-amministrazioni-parte-1-5ec5cd58a52?source=rss-8f9654a9875------2</link>
            <guid isPermaLink="false">https://medium.com/p/5ec5cd58a52</guid>
            <category><![CDATA[carbon-footprint]]></category>
            <category><![CDATA[ecologia]]></category>
            <category><![CDATA[inquinamento]]></category>
            <category><![CDATA[co2]]></category>
            <dc:creator><![CDATA[Giovanni Pirrotta]]></dc:creator>
            <pubDate>Fri, 17 Dec 2021 15:52:45 GMT</pubDate>
            <atom:updated>2021-12-18T08:28:30.298Z</atom:updated>
            <content:encoded><![CDATA[<figure><img alt="" src="https://cdn-images-1.medium.com/max/600/1*GDBrFXa4Ov6qrzMti7sUfQ.png" /><figcaption>Foto by <a href="https://dmb-shanghai.com/business/the-impact-of-digital-pollution/">DMB</a></figcaption></figure><p>Nel digitale tutto <em>sembra</em> immateriale; spesso non ci si rende conto però che dietro ogni schermo di computer, smartphone, tablet e qualsiasi altro dispositivo connesso alla rete è presente un’enorme infrastruttura tecnologica costituita da dispositivi elettronici, apparati di rete, cavi sottomarini, data center, pompe di raffreddamento e tantissimi altri marchingegni elettronici e tecnologici. Per consentire a ciascuno di noi di inviare ogni mattina il buongiorno al gruppo famiglia su WhatsApp, questa infrastruttura consuma un’enorme quantità di energia elettrica prodotta maggiormente dalla combustione di carbone, petrolio e gas naturale, con la conseguente emissione di anidride carbonica nell’ambiente.</p><blockquote>Prendiamone atto: navigare sul Web inquina e anche molto!</blockquote><p>Viviamo ormai immersi in un mondo digitale. Ogni singola storia sui social, video su YouTube, messaggio su WhatsApp o anche semplice email, contribuisce ad aumentare le <strong>emissioni di CO2</strong> nell’ambiente aggiungendo enormi quantità di <strong>gas serra</strong> a quelli già presenti nell’atmosfera.</p><p>Quando le radiazioni emesse dalla Terra e dirette verso lo spazio provano ad <em>uscire</em> dall’atmosfera, vengono bloccate dai gas serra che, fungendo da barriera, costringono le stesse a ritornare sulla terra causando l’aumento della temperatura terrestre, con tutte le conseguenze che ciò comporta: scioglimento dei ghiacciai, innalzamento del livello del mare, desertificazione di intere aree, alluvioni, inondazioni, etc.</p><figure><img alt="" src="https://cdn-images-1.medium.com/max/800/0*aOFpfkvQ6ehXQmQS.png" /><figcaption>Effetto serra — foto by <a href="https://commons.wikimedia.org/wiki/File:Greenhouse-effect-t2.svg">Wikimedia Commons</a></figcaption></figure><p>Il problema è ben noto su scala mondiale e i grandi della terra nel 2015, durante la conferenza ONU <a href="https://it.wikipedia.org/wiki/XXI_Conferenza_delle_Parti_dell%27UNFCCC">COP21</a>, hanno accettato di collaborare per contenere l’aumento della temperatura globale puntando a limitarlo a 1,5 gradi. Da quello storico accordo sono passati 6 anni e nell’ultima importantissima conferenza ONU terminata il mese scorso, la <a href="https://ukcop26.org/it/gli-obiettivi-della-cop26/">COP26</a>, i Paesi membri si sono riuniti nuovamente per fare il punto della situazione sullo stato di avanzamento degli accordi pattuiti e per aggiornare eventualmente i piani per i prossimi anni. Non entro nel merito dei traguardi raggiunti dalla COP26 perché addentrarsi su questioni di tale complessità implica competenze che non ho, tuttavia la consapevolezza che emerge è che si è in ritardo con gli obiettivi prefissati, che su alcuni punti strategici non si riesce a raggiungere la piena unanimità di visione e che a pagare il conto più salato siano sempre i paesi più poveri.</p><p>Ritornando al nocciolo della questione su cui questo articolo vuole soffermarsi, poniamoci la seguente domanda: ma è proprio vero che navigare su Internet inquina? E se sì, quanto?</p><blockquote>Se Internet fosse una nazione si piazzerebbe al settimo posto nella classifica mondiale degli stati più inquinanti.</blockquote><p>Qualcuno potrebbe domandarsi: ma in che modo inquina? In maniera semplicistica possiamo dire che quando ci colleghiamo sui nostri social preferiti, giochiamo con le nostre app o inviamo un’email consumiamo una certa quantità di energia elettrica. Quest’ultima viene prodotta principalmente (più dell’80%) dalla combustione di combustibili fossili, come ad esempio carbone, petrolio e gas naturali, all’interno di centrali termoelettriche, con conseguente rilascio di anidride carbonica (<strong>CO2</strong>) nell’ambiente.</p><p>Quando ci connettiamo alla rete utilizziamo, in modo inconsapevole, un’infrastruttura di dimensioni enormi costituita da tante componenti ciascuna delle quali contribuisce al corretto funzionamento delle nostre ricerche sul Web, ad esempio.</p><p>Quando navighiamo ciascun bit di informazione compie un lungo viaggio su più livelli dell’infrastruttura, di seguito dettagliati:</p><ul><li><strong>User device</strong>: i nostri PC, smartphone, tablet, smart-tv, wearable, monitor, stampanti, game console, smart-watch, ogni dispositivo connesso, etc;</li><li><strong>Home/on-site networking equipment: </strong>tutte le apparecchiature che ci consentono di collegarci ad Internet, all’interno delle nostre case/aziende: modem WiFi, router, access-point, UPS, etc;</li><li><strong>Access networks: </strong>tutto ciò che serve a collegarci dalle nostre case al nostro Internet Service Provider (<strong>ISP</strong>): cabine telefoniche, dispositivi di rete, router, cavi, apparecchi di switching e di trasmissione, etc;</li><li><strong>IP Core Network: </strong>ciascun ISP che opera a livello regionale, nazionale e globale; per funzionare correttamente utilizza apparati di rete, router, fibra ottica, ponti radio, pompe di raffreddamento, etc<strong>;</strong></li><li><strong>Cavi sottomarini: </strong>utilizzati per portare la connessione da una parte all’altra del mondo;</li><li><strong>Data center: </strong>quando ci colleghiamo su Internet solitamente richiediamo dal nostro browser o dalle nostre app delle risorse (<em>pagine HTML, immagini, video, dati</em>, etc.) che risiedono su computer, chiamati server. Questi sistemi sono collocati in data center dislocati in tutto il mondo e, per funzionare correttamente, necessitano di un’enorme quantità di energia elettrica sia per i server stessi, sia per tutti i dispositivi presenti e indispensabili per il corretto funzionamento del data center: router, switch, firewall, UPS, sistemi di raffreddamento, infrastruttura per il distaster-recovery, etc.</li></ul><p>Come fare quindi a stimare quanto inquina Internet? Diciamo subito che calcolare la quantità di energia elettrica consumata quando navighiamo in rete non è una procedura affatto semplice.</p><p>Nel <a href="https://www.wholegraindigital.com/blog/website-energy-consumption/">blog</a> di Tom Greenwood, cofondatore della Web agency londinese <a href="https://www.wholegraindigital.com/">Wholegrain Digital</a>, pioniere dello sviluppo di servizi digitali sostenibili, viene sottolineata l’elevata complessità della stima del consumo di energia elettrica in base al traffico Web; secondo la letteratura esistente il <em>range</em> stimato del consumo di energia elettrica per Gigabyte varia da un minimo di <strong>0.004 kWh/GB</strong> (chilowattora per GigaByte) ad un massimo di <strong>136 kWh/GB</strong>. È una differenza abissale e rimaniamo un po’ straniti di quanto possano differire i due estremi. Ovviamente bisogna capire che cosa viene misurato esattamente. A far un po’ più luce su questo aspetto viene in aiuto un <a href="https://onlinelibrary.wiley.com/doi/epdf/10.1111/jiec.12630">articolo</a>, dal titolo “<em>Electricity Intensity of Internet Data Transmission: Untangling the Estimates”</em> che analizza 14 paper esistenti sull’argomento e che rivede la stima portandola a <strong>0.06 kWh/GB</strong> <strong>per l’anno 2015</strong>. Anche in questo caso però bisogna capire bene il livello di granularità del calcolo.</p><figure><img alt="" src="https://cdn-images-1.medium.com/max/873/0*6R-uzmU4BkoE3CK7" /><figcaption>Infrastruttura di Internet — Foto by <a href="https://www.wholegraindigital.com/blog/website-energy-consumption/">Wholegrain Digital</a></figcaption></figure><p>Andando più nello specifico si scopre che l’analisi è stata effettuata prendendo in considerazione l’energia elettrica consumata per l’<strong>accesso alla rete </strong>e per l’<strong>Internet Service Provider </strong>(il riquadro tratteggiato dell’immagine). Tutto ciò che è fuori, dai dispositivi utente alle apparecchiature casalinghe per l’accesso a Internet, dai data center ai cavi sottomarini, non è stato preso in considerazione.</p><p>Per poter ottenere una stima più precisa si dovrebbe invece considerare l’intero quadro tenendo conto di tutte le variabili che entrano in gioco, proprio ciò che ha fatto l’agenzia inglese <strong>Wholegrain Digital</strong>.</p><p>A questo scopo, l’agenzia ha realizzato un servizio Web online, gratuito e rilasciato in <a href="https://gitlab.com/wholegrain/carbon-api-2-0">opensource</a>, chiamato <a href="https://www.websitecarbon.com/"><strong>Carbon Calculator</strong></a><strong>, </strong>in grado di calcolare le emissioni di <strong>CO2</strong> di ciascuna pagina Web. Il servizio inoltre informa l’utente se il sito analizzato è in <em>hosting</em> su server la cui fonte di alimentazione energetica è basata su energie rinnovabili e non su combustibili fossili.</p><blockquote>“Carbon Calculator è un servizio gratuito in grado di calcolare le emissioni di carbonio di qualsiasi pagina Web”</blockquote><p>Volendo ad esempio calcolare le emissioni di CO2 causate dall’apertura dell’<a href="https://www.google.com/">homepage</a> di Google, otterremmo la seguente schermata:</p><figure><img alt="" src="https://cdn-images-1.medium.com/max/987/0*chZeCb1EbKFnFhD8" /><figcaption><a href="https://www.websitecarbon.com/website/google-com-gws_rdssl/">Carbon footprint dell’homepage di Google</a></figcaption></figure><p>Il tool ci informa che, in termini di <strong>emissioni di CO2, </strong>l’homepage di Google è <em>92% meno inquinante </em>fra tutte le pagine finora analizzate dal tool, che <em>causa l’emissione di 0.09 grammi di CO2</em>, chiamata in gergo <strong>carbon footprint</strong><em>,</em> cioè impronta di carbonio e che i server sono alimentati da fonti di energia rinnovabili, considerati quindi <em>green</em>. Nella rimanente parte della pagina, raggiungibile a questo <a href="https://www.websitecarbon.com/website/google-com-gws_rdssl/">link</a>, vengono fornite ulteriori informazioni, anche curiose, sull’impatto ambientale che comporta navigare sul motore di ricerca. In un anno, stimando circa 10.000 visualizzazioni al mese (pura utopia ovviamente per Google), navigare sul motore di ricerca comporterebbe l’emissione di <em>10,69 Kg di </em><a href="https://it.wikipedia.org/wiki/CO2_equivalente"><em>CO2e</em></a> (<strong>CO2 equivalente</strong>), la stessa quantità di anidride carbonica emessa necessaria a far bollire l’acqua per riempire <em>1448 tazze di tè</em>; il consumo di energia elettrica è pari a <em>25 kWh</em>, l’elettricità necessaria per guidare una macchina elettrica per <em>159 Km</em>. Sempre in un anno, navigare la pagina Web, causerebbe l’emissione di anidride carbonica che un<em> albero potrebbe assorbire in un anno</em>.</p><blockquote>Per realizzare il tool, e calcolare il carbon footprint di ogni pagina Web, l’agenzia stima un consumo di energia elettrica pari a 1.8 kWh/GB.</blockquote><p>Ma da dove salta fuori questa stima???</p><p>In una <a href="https://www.websitecarbon.com/how-does-it-work/">pagina</a> specifica del sito dell’agenzia londinese viene sinteticamente riportata la metodologia utilizzata con gli articoli scientifici di riferimento a supporto. La procedura descritta sul sito non scende però troppo nel dettaglio, bisogna quindi <em>fidarsi </em>della stima da loro calcolata e utilizzata nel servizio Carbon Calculator.</p><blockquote>Proviamo invece a vedere come nasce la stima utilizzata dall’agenzia, partiamo dagli articoli scientifici citati e rifacciamo lo stesso percorso di analisi e calcolo effettuato da WholeGrain Digital, in modo da verificare, confermare ed effettivamente <em>fidarci</em> dei numeri <strong>sfornati </strong>dal loro servizio.</blockquote><p>L’agenzia cita l’articolo, <em>On Global Electricity Usage of Communication Technology: Trends to 2030, </em><a href="https://www.mdpi.com/2078-1547/6/1/117#abstract">disponibile</a> in Open Access, a cura dei ricercatori svedesi <a href="https://www.itu.int/en/ITU-T/Workshops-and-Seminars/gsw/201309/Pages/ANDRAEAnders.aspx"><strong>Anders Andrae</strong></a> e <a href="https://se.linkedin.com/in/tomas-edler-b4062913/it?trk=people-guest_people_search-card"><strong>Tomas Edler</strong></a>. In questa ricerca viene presentata una stima sull’utilizzo del consumo di energia elettrica globale, relativa al reparto ICT e con riferimento temporale <strong>dal 2010 al 2030</strong>. Nell’articolo vengono delineate tre possibili stime: nel migliore dei casi, nel peggiore dei casi e nel caso più probabile.</p><p>La <strong>WholeGrain Digital</strong> parte dai dati dell’articolo svedese e considera il <em>totale </em><strong><em>più probabile</em></strong><em> dell’energia elettrica consumata nel 2017</em> da data center, reti wireless, wired, provider e dispositivi utente. Nel totale non viene però considerata l’energia elettrica della produzione industriale ICT.</p><figure><img alt="" src="https://cdn-images-1.medium.com/max/861/0*sFOqPmR9PJ4RS_AD" /><figcaption>Totale energia elettrica consumata negli anni 2010–2017 nel comparto ICT (TWh) — fonte: <a href="https://www.mdpi.com/2078-1547/6/1/117/s1">file excel allegato all’articolo</a></figcaption></figure><p>Il totale di energia elettrica ICT consumata nel 2017, facendo la somma dei valori nel rettangolo rosso ed escludendo la produzione ICT, ammonta a <strong>1985 terawattora (TWh).</strong></p><p>Per calcolare l’ammontare del traffico dati avvenuto nel relativo anno, l’agenzia londinese fa riferimento all’articolo pubblicato su <a href="https://www.nature.com/articles/d41586-018-06610-y">Nature</a> intitolato <em>How to stop data centres gobbling up the world’s electricity</em>.</p><figure><img alt="" src="https://cdn-images-1.medium.com/max/743/0*auInRfJaBMmG_wkU" /><figcaption>Internet traffic — fonte <a href="https://www.nature.com/articles/d41586-018-06610-y">Nature</a></figcaption></figure><p>Nell’articolo si evince il totale traffico Internet, calcolato secondo il <a href="https://it.wikipedia.org/wiki/Sistema_internazionale_di_unit%C3%A0_di_misura">sistema internazionale di unità di misura</a> e pari a</p><blockquote>1.1 Zettabyte (1 ZB = 10²¹ bytes)</blockquote><p>Ricordando che</p><ul><li><strong>1 TWh</strong> = 10⁹ kWh</li><li><strong>1 GB</strong> = 10⁹ bytes</li><li><strong>1 ZB</strong> = 10²¹ bytes</li><li><strong>1 ZB</strong> = 10¹² GB</li></ul><p>e dividendo il totale di energia consumata in ambito ICT nel 2017 con l’ammontare del traffico dati dello stesso anno, otteniamo quindi</p><figure><img alt="" src="https://cdn-images-1.medium.com/max/587/1*FNE0XY05RlrMUlfCK1aW2w.png" /><figcaption>Calcolo finale della stima</figcaption></figure><blockquote>Esattamente la stima calcolata dall’agenzia!</blockquote><p>Considerando che le emissioni di anidride carbonica dovuta al consumo di energia elettrica sono pari a <em>475 grammi di CO2e</em> (<strong>CO2 equivalente</strong>) <em>per</em> <em>kWh</em> (<a href="https://www.iea.org/reports/global-energy-co2-status-report-2019/emissions">International Energy Agency</a>), otteniamo una formula diretta per calcolare le emissioni di CO2e in funzione del traffico dati.</p><p><em>Per calcolare l’energia elettrica totale consumata in modo più realistico possibile, l’agenzia londinese effettua inoltre opportune ponderazioni di seguito descritte.</em></p><p>Se la pagina di cui si vuole calcolare il totale emissioni <strong>CO2e</strong> è in <em>hosting</em> su un server <strong>green</strong>, alimentato quindi con fonti di energia rinnovabili, allora sul <em>10%</em> dell’energia elettrica consumata totale (quella relativa al consumo dei data center) viene calcolato il totale emissioni di <em>CO2e</em> basato su energia eolica, pari a <em>33.4 grammi di CO2e per kWh</em> (<a href="https://ecotricity.co.nz/news/carbon-knowledge">Ecotriciy</a>). <em>Ad onor del vero non sono riuscito a trovare conferma di quest’ultimo dato sul sito indicato, che riporta invece un livello di emissione da fonte eolica pari a 7 grammi di CO2e per kWh, molto probabilmente giustificato dal fatto che negli anni possa essere avvenuto un miglioramento in termini di impatto ambientale.</em></p><p>Per sapere se il sito è in hosting su un server <em>green</em>, il tool utilizza un servizio API esterno, fornito dal progetto <a href="https://www.thegreenwebfoundation.org/"><em>The Green Web Foundation</em></a>, attraverso il quale è possibile conoscere se un qualsiasi dominio è in hosting su server alimentati da fonti di energia rinnovabili.</p><p>Il tool <strong>Carbon Calculator</strong> restituisce quindi una stima annuale del totale delle emissioni di CO2e in funzione del traffico dati consumato quando si naviga su un sito Web, considerando una media di <em>10.000 visitatori al mese</em> su un intero anno. L’euristica applicata considera che il <em>75%</em> dei visitatori naviga per la prima volta sul sito da analizzare mentre il <em>25%</em> sono utenti che ritornano di nuovo a visitare il sito. L’obiettivo di questa distinzione è ponderare il peso dei dati di un sito Web, considerando le ottimizzazioni relative alle varie <em>cache</em> che si possono trovare lungo il tragitto dei dati.</p><blockquote>Ma come fa il tool a calcolare il peso totale di ogni pagina Web?</blockquote><p>Per fare questo si avvale di un servizio Google chiamato <a href="https://pagespeed.web.dev/?utm_source=psi&amp;utm_medium=redirect"><strong>PageSpeed Insights</strong></a>, in grado di analizzare le pagine Web e generare un’infinità di metriche di benchmarking, diagnosi e performance su ciascuna pagina. Tra i tanti <em>audit</em> effettuati il servizio Google restituisce anche informazioni sul <strong>peso</strong> delle risorse Web quando <em>transitano</em> in rete durante la visita di un sito Web: la pagina <em>HTML</em>, le varie <em>immagini</em> contenute, i file <em>CSS</em> per lo stile grafico, i file <em>Javascript</em> per il corretto funzionamento del sito stesso, etc.</p><p>Il tool è in grado quindi di calcolare la quantità totale di CO2e emessa ogni qual volta si visita una pagina Web, fornendo inoltre informazioni anche molto curiose; ad esempio, con in media 10000 visitatori al mese, il tool restituisce il numero di <em>tazze da tè</em> che si potrebbero riempire in un anno bollendo una tale quantità di acqua da causare la stessa quantità di emissioni di CO2, o il numero di lottatori di <em>sumo</em> ottenuto confrontando il loro peso ai chilogrammi di CO2e immesso nell’ambiente in un anno di navigazione Web; dal <em>numero di alberi</em> necessari per assorbire l’anidride carbonica emessa dal sito al numero di palloncini che si potrebbero gonfiare con il gas emesso.</p><p>L’euristica utilizzata dall’agenzia londinese è il migliore metodo possibile per calcolare la quantità totale di emissione di anidride carbonica nell’ambiente quando si naviga nel Web?</p><blockquote>Assolutamente no!</blockquote><p>Le variabili in gioco sono davvero tante e internet è un enorme sistema complesso impossibile da misurare in modo accurato. Ne parla lo stesso co-fondatore dell’agenzia in questo <a href="https://www.wholegraindigital.com/blog/website-energy-consumption/">post</a>. Anche l’agenzia londinese è dovuta scendere a compromessi per riuscire a trovare un metodo, il più semplice possibile, in grado di calcolare in modo immediato, a partire da un sito Web, la stima di anidride carbonica emessa nell’ambiente. Come già detto, il range considerato può cambiare considerevolmente a seconda di cosa si stia misurando. In rete, infatti, esistono anche altri studi che riportano stime diverse di quella calcolata dall’agenzia; tuttavia ho scelto la loro perché ho trovato nella loro metodologia riferimenti precisi, verificabili e convincenti, scelte basate soprattutto su principi di onestà intellettuale e trasparenza.</p><figure><img alt="" src="https://cdn-images-1.medium.com/max/550/1*0dnHEE4Vozb_lMiSgRYxGg.png" /><figcaption><a href="https://www.sustainablewebmanifesto.com/">The Sustainable Web Manifesto</a></figcaption></figure><p>Da rilevare, inoltre, che la stessa agenzia nel 2019 è stata promotrice dell’iniziativa <a href="https://www.sustainablewebmanifesto.com/">Sustainable Web Manifesto</a>, un progetto collaborativo portato avanti insieme ad altri partner, con l’obiettivo di condividere l’impegno per la creazione di un internet sostenibile, con la consapevolezza che Internet è allo stesso tempo parte del problema ma anche parte della soluzione. La società londinese invita a firmare il manifesto e ad abbracciare l’idea di un nuovo tipo di Web, non solo utile per l’uomo ma anche pulito, aperto ed efficiente per il pianeta.</p><h4>Cosa fare quindi?</h4><p>Forse dovremmo disconnetterci tutti in massa dalla rete e provare a comunicare spedendoci lettere scritte su papiri egizi? :-D</p><figure><img alt="" src="https://cdn-images-1.medium.com/max/1024/1*VTiKkvG55xiWJ1BLCGsrZg.png" /><figcaption><a href="https://it.freepik.com/vettori-gratuito/illustrazione-del-concetto-offline_16790503.htm#page=1&amp;query=disconnected&amp;position=12&amp;from_view=search">Foto by it.freepik.com</a></figcaption></figure><p>Beh, no, ovviamente, ma in <em>medio stat virtus</em>. Il problema dell’inquinamento digitale esiste e tutti dovremmo prenderne consapevolezza iniziando a cambiare alcune abitudini digitali <em>distorte</em> ma ben radicate in noi.</p><p>Ecco ad esempio alcuni consigli per limitare gli sprechi di connessione elettrica/digitale e di traffico dati [1]:</p><ul><li><strong>chiudere i tab non utilizzati del browser</strong>: spesso le nostre ricerche ci portano ad aprire innumerevoli tab che rimangono, per tutto il tempo della navigazione nascosti e in stand-by. Purtroppo però, i siti web collegati ai vari tab non visibili continuano a ricevere aggiornamenti dai server e questo comporta la generazione di nuovo traffico dati durante l’aggiornamento non richiesto. Al termine dell’utilizzo di ciascuna finestra aperta del browser si consiglia di chiuderla subito;</li><li><strong>cancellarsi dalle newsletter</strong> che non interessano più mediante i link <em>Disiscrivimi</em> (Unsubscribe), o altra procedura indicata, in modo da ridurre sensibilmente il numero di email inviate;</li><li><strong>privilegiare piattaforme di collaborazione</strong>: piuttosto che utilizzare l’email per la comunicazione è sempre meglio preferire piattaforme di collaborazione, come ad esempio Microsoft Teams, Zoom, Google Meet; in modo da evitare il proliferare di email in copia a tutti i partecipanti della riunione;</li><li><strong>utilizzare motori di ricerca ecologici come ad esempio </strong><a href="https://www.ecosia.org/"><strong>Ecosia</strong></a><strong>, </strong><a href="https://ecogine.org/"><strong>Ecogine</strong></a><strong>, </strong><a href="https://www.qwant.com/?l=it"><strong>Qwant</strong></a><strong> o </strong><a href="https://www.lilo.org/"><strong>Lilo</strong></a>: per ridurre l’impatto sull’emissione di carbonio esistono dei motori di ricerca etici che consentono agli utenti di partecipare e contribuire, per ogni ricerca effettuata, a piantare alberi. Con il ricavo ottenuto dall’utilizzo del motore di ricerca, infatti, questi servizi provvedono a piantare degli alberi nei posti più adatti, in modo tale da compensare le emissioni artificiali di carbonio con le funzioni naturali delle piante di assorbimento di anidride carbonica;</li><li><strong>quando si conosce a memoria l’URL di un dominio digitarlo direttamente nella barra degli indirizzi</strong> e non all’interno di un motore di ricerca. Questo ridurrebbe di molto la quantità di traffico Web necessario per aprire il sito interessato. Si eviterebbe infatti di aprire l’homepage del motore di ricerca, inserire l’URL nel form, avviare la ricerca stessa e infine, dopo aver visualizzato la pagina dei risultati, aprire la pagina di nostro interesse.</li><li><strong>disabilitare le notifiche quando non sono realmente necessarie</strong>: questo ridurrebbe di molto l’utilizzo del dispositivo e quindi, limitando ogni tipo di interazione, si ridurrebbe il livello di CO2 emesso;</li><li><strong>scollegare il caricabatteria del telefonino/tablet/laptop quando è carico:</strong> è un gesto banale e poco preso in considerazione. Quando il dispositivo è carico e non viene scollegato dalla rete, l’alimentatore continuerà a consumare energia senza alcun beneficio per il dispositivo;</li><li><strong>cancellare con regolarità le applicazioni che non si usano più</strong> perché, in quanto app installate, continuano a sfruttare le risorse del dispositivo. Inoltre non si correrebbe il rischio che vengano aggiornate automaticamente anche se non si utilizzano.</li></ul><figure><img alt="" src="https://cdn-images-1.medium.com/max/1024/1*KTezWuly1wo3NH0hpVCScg.png" /><figcaption><a href="https://it.freepik.com/foto-gratuito/ricarica-usb-per-gadget-su-uno-sfondo-sfocato-della-stanza-primo-piano-il-concetto-di-tecnologia-nella-vita-di-tutti-i-giorni_20080185.htm#page=1&amp;query=connection%20power%20energy%20electric&amp;position=42&amp;from_view=search">Foto by pvproductions — it.freepik.com</a></figcaption></figure><h4>E in Italia a che punto siamo?</h4><p>In questo articolo ho raccontato del problema della sostenibilità ambientale nell’utilizzo di Internet. Ho descritto come l’utilizzo di smartphone e computer contribuisca all’emissione di CO2 nell’ambiente e come questo aumenti l’effetto serra, che è nocivo per il pianeta e causa del riscaldamento globale. Infine ho introdotto un tool, il Carbon Calculator, sviluppato dall’agenzia londinese Whole Grain Digital, in grado di calcolare il <em>carbon footprint</em> di ciascun sito Web e renderci consapevoli dell’inquinamento causato dalla navigazione Web. Abbiamo quindi visto come sia non così immediato calcolarne una stima precisa.</p><p>Prima di chiudere questo articolo vorrei però spostare lo sguardo dentro i nostri confini nazionali. A livello governativo è stato costituito il <a href="https://mite.gov.it/"><strong>Ministero per la Transizione Ecologica</strong></a><strong> </strong>(MITE), a cui sono state attribuite competenze di tutela del territorio e del mare in materia di ambiente, ecosistema del patrimonio marino, atmosferico, etc. Inoltre al dicastero è stata attribuita competenza in materia energetica, precedentemente assegnata al Ministero dello Sviluppo economico.</p><p>Al Ministero spetta quindi supportare l’adozione di pratiche, comportamenti, azioni che possano contribuire a rispettare il più possibile il pianeta in cui viviamo, ad utilizzare il più possibile fonti di energia rinnovabili, a inquinare sempre meno e, soprattutto, a sensibilizzare il Paese portando sempre più all’attenzione di tutti il problema della sostenibilità energetica.</p><p>Ma quanto è <em>ecologico</em> dal punto di vista digitale il sito istituzionale del Ministero della Transizione <strong>Ecologica</strong>?</p><figure><img alt="" src="https://cdn-images-1.medium.com/max/971/0*fEobk0sSprcmKV54" /><figcaption><a href="https://www.websitecarbon.com/website/mite-gov-it/">Carbon footprint del Ministero della Transizione Ecologica (MITE)</a></figcaption></figure><p>Secondo il <a href="https://www.websitecarbon.com/website/mite-gov-it/">Carbon Calculator</a> il sito istituzionale del MITE risiede su server <strong>non</strong> alimentati da fonti di energia rinnovabile, purtroppo.</p><blockquote>E di tutti gli altri siti istituzionali italiani che possiamo dire?</blockquote><p>I siti dei comuni, delle regioni, delle università, che vengono consultati ogni giorno da milioni di italiani, quanto sposano la causa <em>green</em>? Sono energeticamente sostenibili? Quanta consapevolezza c’è in materia?</p><figure><img alt="" src="https://cdn-images-1.medium.com/max/570/1*hgLqeGjovd2o0fW508a0IQ.png" /><figcaption>Foto by <a href="https://commons.wikimedia.org/wiki/File:FridaysForFuture_protest_Berlin_2021-09-24_demonstration_127.jpg">Wikimedia Commons</a></figcaption></figure><p>E le scuole? È risaputo che da qualche anno molti studenti partecipano, a livello internazionale, agli scioperi scolastici per il clima, in sostegno delle cause portate avanti dai movimenti ambientalisti internazionali di protesta, come <a href="https://fridaysforfuture.org/">Fridays for Future</a>, decidendo di non frequentare lezioni scolastiche per partecipare a manifestazioni in cui chiedono e rivendicano azioni atte a prevenire il riscaldamento globale e il cambiamento climatico.</p><p>Quanta consapevolezza del problema c’è nelle nostre scuole? Come sono coinvolte nel processo di transizione ecologica? Quanto inquinano i loro siti istituzionali?</p><p>Potremmo pensare di scansire tutti i siti delle pubbliche amministrazioni utilizzando il tool dell’agenzia londinese ma questa potrebbe non essere la scelta migliore, sia perché il tool è abbastanza lento, anche installando la versione opensource in locale, sia perché non si presta al monitoraggio massivo di decine di migliaia di siti. E allora cosa fare? Ci arrendiamo così senza neanche lottare?</p><p>Beh, forse qualcosa si può fare ma questa è tutta un’altra storia. Per saperne di più vi rimando al prossimo articolo, la seconda parte di questo viaggio sulla sostenibilità digitale del Web e dei siti istituzionali italiani.</p><p>Stay tuned! ;-)</p><p>[1]: Kassandra Haari (2021/01/20), <em>The impact of digital pollution : Digital Ecology,</em> <a href="https://dmb-shanghai.com/business/the-impact-of-digital-pollution/">https://dmb-shanghai.com/business/the-impact-of-digital-pollution/</a></p><img src="https://medium.com/_/stat?event=post.clientViewed&referrerSource=full_rss&postId=5ec5cd58a52" width="1" height="1" alt="">]]></content:encoded>
        </item>
        <item>
            <title><![CDATA[Di Gender-Bias, Wikidata e Storture Discriminanti]]></title>
            <link>https://medium.com/@gpirrotta/di-gender-bias-wikidata-e-storture-discriminanti-98827b8fd49f?source=rss-8f9654a9875------2</link>
            <guid isPermaLink="false">https://medium.com/p/98827b8fd49f</guid>
            <category><![CDATA[gender-bias]]></category>
            <category><![CDATA[sparql]]></category>
            <category><![CDATA[gender-inequality]]></category>
            <category><![CDATA[wikidata]]></category>
            <dc:creator><![CDATA[Giovanni Pirrotta]]></dc:creator>
            <pubDate>Tue, 01 Sep 2020 06:18:19 GMT</pubDate>
            <atom:updated>2020-09-01T06:18:19.779Z</atom:updated>
            <content:encoded><![CDATA[<figure><img alt="" src="https://cdn-images-1.medium.com/max/1024/1*epH6cy-09hLOA4eTJNT44w.png" /><figcaption><a href="https://www.freepik.com/vectors/people">Created by pch.vector — www.freepik.com</a></figcaption></figure><p>La prima volta che ho sentito parlare di <a href="https://it.wikipedia.org/wiki/Caroline_Criado-Perez">Caroline Criado Perez</a> è stata a novembre dello scorso anno quando la giornalista, scrittrice e attivista britannica ha partecipato all’<a href="https://theodi.org/person/caroline-criado-perez/">ODI Summit 2019</a> presentando il talk dal titolo “<strong>Invisible women: exposing data bias in a world designed for men”</strong> ispirato dall’omonimo libro con cui ha vinto il <a href="https://ig.ft.com/sites/business-book-award/books/2019/winner/invisible-women-by-caroline-criado-perez/"><em>McKinsey Business Book of the Year Award 2019</em></a>.</p><p>Ricordo che rimasi colpito da questa frase:</p><blockquote><em>Imagine a world where your phone is too big for your hand, where your doctor prescribes a drug that is wrong for your body, where in a car accident you are </em><strong><em>47%</em></strong><em> more likely to be seriously injured, where every week the countless hours of work you do are not recognised or valued.</em> <strong><em>If any of this sounds familiar, chances are that you’re a woman.</em></strong></blockquote><p>Il libro descrive scenari di vita comune in cui emergono stereotipi e pregiudizi maschili (<strong>bias</strong>), che mettono in luce una netta discriminazione delle donne. E purtroppo il problema riguarda qualsiasi ambito: dalla politica alla ricerca scientifica, dalla tecnologia ai luoghi di lavoro, dall’urbanistica ai media; il libro smaschera modi nascosti in cui le donne vengono <em>dimenticate</em> e mostra l’impatto che tutto ciò ha sulla loro salute e il loro benessere.</p><p>Questi squilibri, purtroppo, si ritrovano anche nel mondo digitale, specchio della società, e specialmente nel Web. Non è un caso che, come riportato nell’articolo di <a href="https://wikimediafoundation.org/news/2018/10/18/wikipedia-mirror-world-gender-biases/">Katherine Maher</a>, direttrice esecutiva della Wikimedia Foundation, alla fisica <a href="https://it.wikipedia.org/wiki/Donna_Strickland"><strong>Donna Strickland</strong></a>, nonostante la sua ricerca pionieristica sulla generazione di impulsi ultracorti con raggi laser, non sia mai stata dedicata una pagina su Wikipedia fino a quando non ha vinto il premio Nobel in fisica, terza donna nella storia. Ancora più sconcertante il fatto che la pagina su Wikipedia della Strickland era stata già creata in precedenza, rimanendo in stato di <em>bozza</em> per circa due mesi prima di essere rigettata con la seguente motivazione:</p><blockquote><em>There wasn’t enough coverage of Strickland’s work in independent secondary sources to establish her notability. Her achievements simply weren’t documented in enough news articles that Wikipedia editors could cite.</em></blockquote><figure><img alt="" src="https://cdn-images-1.medium.com/max/220/0*Yt0L_uPgpn-DhoeS.jpg" /><figcaption>Donna Strickland</figcaption></figure><p>Se Donna Strickland, affermata fisica, è considerata <em>degna</em> di apparire su Wikipedia solo quando riceve il massimo riconoscimento possibile nel suo campo, allora Wikipedia ha un problema.</p><p>L’articolo della Maher punta il dito sui seguenti fatti:</p><ul><li>nel <strong>2014</strong> gli editori/valutatori di biografie di Wikipedia (inglese) sono stati per l’85% di sesso maschile;</li><li>nel <strong>2015</strong> uno studio ha rilevato che la parola <em>divorzio</em> è apparsa 4 volte più spesso nelle biografie di donne rispetto a quelle degli uomini; forse a voler descrivere maggiormente la vita delle donne attraverso le loro relazioni con gli uomini?</li><li>nel <strong>2020</strong>, su un totale di 1,6 milioni di biografie presenti in Wikipedia poco meno del 20% sono biografie di donne.</li></ul><p>Questo sbilanciamento è purtroppo ancora più evidente in altri gruppi ingiustamente sotto-rappresentati, come ad esempio persone di colore, con disabilità, LGBTQ e comunità indigene.</p><p>Per cercare di intervenire sui <strong>bias</strong> presenti in Wikipedia e correggere lo sbilanciamento, sono nati gruppi di volontari con l’obiettivo di inserire in Wikipedia biografie di donne mancanti e argomenti correlati, come ad esempio opere e storia delle donne, movimenti femministi, sport femminili, pregiudizi di genere, violenza sulle donne, etc. Fra i gruppi più famosi ricordiamo <a href="https://en.wikipedia.org/wiki/Wikipedia:WikiProject_Women_scientists">WikiProject Women Scientists</a>, <a href="https://en.wikipedia.org/wiki/Wikipedia:WikiProject_Women_in_Red">WikiProject Women in Red</a> e l’italiano <a href="https://it.wikipedia.org/wiki/Progetto:WikiDonne">WikiDonne</a>.</p><figure><img alt="" src="https://cdn-images-1.medium.com/max/1024/1*ftovBei9_aWQvqH3eJHLsw.png" /><figcaption><a href="https://it.wikipedia.org/wiki/Progetto:WikiDonne">Wikidonne</a></figcaption></figure><p>A questo punto fermiamoci un attimo, iniziamo a riflettere e chiediamoci:<br>Può la tecnologia aiutare a risolvere questo tipo di problema? Può la tecnologia dare un contributo nell’identificazione di questi squilibri e contestualmente fornire delle soluzioni per cercare di ristabilire il principio di equità di genere?</p><p>La tecnologia non solo può ma <strong>deve </strong>essere utilizzata con tutta la sua potenza per contenere, monitorare ed eventualmente normalizzare la presenza di storture discriminanti che riflettono stereotipi e pregiudizi maschili.</p><p>Ma come far emergere questi bias? Come approcciare il problema dal punto di vista tecnologico? Come monitorare questi squilibri e intervenire in tempo correggendone il tiro?</p><p>Non posseggo la bacchetta magica però posso provare a fare un piccolo esperimento grazie all’ispirazione avuta da <a href="https://twitter.com/@ErikaMarconato">Erika Markonato</a>, giovane veneta appassionata di scrittura, libri e letteratura, nonché di cultura libera e contenuti aperti. Erika, sul suo profilo Twitter, cura una rubrica quotidiana chiamata <strong>#unadonnaalgiorno,</strong> in cui in un Tweet racconta ogni giorno la storia di una donna.</p><p>Il primo luglio di quest’anno Erika pubblica però il seguente <a href="https://twitter.com/ErikaMarconato/status/1278323537758097409">tweet</a>:</p><figure><img alt="" src="https://cdn-images-1.medium.com/max/1024/1*hVhgidfn-w9yny7I27p1NQ.png" /></figure><figure><img alt="" src="https://cdn-images-1.medium.com/max/857/1*3F9iLWU-PYBKWiFJNdfxRg.png" /></figure><figure><img alt="" src="https://cdn-images-1.medium.com/max/706/1*6l_whmW-v2CE_tDiK4_fNQ.png" /></figure><p>In effetti, mentre nell’introduzione della pagina di Wikipedia (il testo che precede l’indice) di <a href="https://it.wikipedia.org/wiki/Harriet_Taylor_Mill">Harriet Taylor Mill</a> viene riportato sia il nome del marito sia il link alla pagina Wikipedia, nella rispettiva introduzione della pagina Wikipedia del marito, <a href="https://it.wikipedia.org/wiki/John_Stuart_Mill">John Stuart Mill</a>, non viene citato né il nome né tantomeno il link della moglie. Il nome della moglie apparirà invece più in basso, nel corpo della pagina del marito.</p><p>Questo sbilanciamento tra marito e moglie è forse un’eccezione o è indicativo di una stortura di fondo collegata ai bias degli editori che, come sappiamo, sono maggiormente di sesso maschile? O magari c’è dell’altro? È possibile indagare meglio questo fenomeno in modo sistematico? È possibile monitorare queste differenze e segnalarle ai gruppi di volontari sopra menzionati in modo che possano intervenire bilanciando, se opportuno, il gap?</p><p>Bisognerebbe interrogare Wikipedia e chiedere tutte le biografie di coppie sposate, verificando per ciascuna la presenza o meno del nome del marito nell’introduzione della moglie e viceversa? È fattibile una cosa del genere?</p><figure><img alt="" src="https://cdn-images-1.medium.com/max/256/0*IdKu13DaAoKzfvTy.png" /></figure><p>Beh, qualcosa si può fare, e si può farla grazie al progetto <a href="https://www.wikidata.org/wiki/Wikidata:Main_Page"><strong>Wikidata</strong></a>.</p><p>Wikidata è un database libero, collaborativo, multilingue che raccoglie dati strutturati per fornire supporto a <a href="https://it.wikipedia.org/wiki/Pagina_principale">Wikipedia</a> per chiunque nel mondo. Le risorse presenti in Wikidata non sono altro che le pagine Wikipedia modellate con un’<a href="https://it.wikipedia.org/wiki/Ontologia_(informatica)">ontologi</a>a: per ogni concetto e relazione estraibile dalle pagine di Wikipedia, tramite l’utilizzo di un modello semantico, viene assegnato un significato formale, comprensibile dalle macchine e interrogabile utilizzando le tecnologie del Web Semantico.</p><p>Per fare un esempio, con Wikidata, è possibile utilizzare il linguaggio di interrogazione <a href="https://it.wikipedia.org/wiki/SPARQL">SPARQL</a> per ottenere l’elenco di tutti i <a href="https://w.wiki/3Hx">gatti</a> presenti in archivio, attraverso l’<a href="https://query.wikidata.org/">endpoint</a> che Wikidata mette a disposizione.</p><figure><img alt="" src="https://cdn-images-1.medium.com/max/1024/1*UHBZc8JMQfS1GAxuJD5wtQ.png" /></figure><p>Wikidata offre la possibilità di interagire con i dati di Wikipedia in innumerevoli modi. Attivando opportune funzionalità è possibile ottenere non solo l’elenco dei gatti ma anche le <a href="https://w.wiki/amt">immagini</a>.</p><figure><img alt="" src="https://cdn-images-1.medium.com/max/1024/1*jTQYlfxR4dcGN8Sn25RfzQ.png" /></figure><p>Torniamo però adesso al nostro obiettivo iniziale: ottenere tutte le biografie di coppie sposate e/o conviventi presenti in Wikidata.</p><p>Il primo passo da compiere è interrogare Wikidata chiedendo di restituirci tutte le coppie sposate. In termini di linguaggio e di interrogazione SPARQL dobbiamo identificare tutti quei concetti e quelle proprietà in grado di estrarre le informazioni utili al nostro scopo. La query sarà la seguente:</p><figure><img alt="" src="https://cdn-images-1.medium.com/max/789/1*fRav7vsg9vjSV-NK1TBuqw.png" /></figure><p>Analizziamo alcuni elementi presenti nella query:</p><ul><li><strong>wikidata_husband_uri </strong>— variabile che conterrà gli identificativi dei mariti presenti in archivio;</li><li><strong>wikipedia_husband_url </strong>— variabile che conterrà le pagine Wikipedia dei mariti;</li><li><strong>wikidata_wife_uri </strong>— variabile che conterrà gli identificativi delle mogli presenti in archivio;</li><li><strong>wikipedia_wife_url </strong>— variabile che conterrà le pagine Wikipedia delle mogli;</li><li><strong>wdt:P31</strong> — è la proprietà che identifica <strong>essere un’istanza di</strong>, viene utilizzata quando vogliamo specificare la tipologia o classe di risorse che vogliamo la query restituisca;</li><li><strong>wd:Q5</strong> — identifica la specie a cui appartiene la risorsa che vogliamo ottenere, in questo caso <strong>genere umano</strong>. In pratica, in questa prima riga delle condizioni, stiamo chiedendo tutte le risorse appartenenti al genere umano, quindi tutti gli uomini e/o le donne.</li><li><strong>wdt:P21</strong> — proprietà che identifica <strong>sesso o genere</strong>;</li><li><strong>wd:Q6581097</strong> — concetto che definisce un essere umano di<strong> sesso maschile</strong>. In questo modo stiamo restringendo il campo di ricerca per ottenere solo gli uomini;</li><li><strong>wdt:P26</strong> — coniuge, persona con cui è <strong>sposato</strong> il soggetto;</li></ul><p>A questo punto la query restituisce nelle variabili <strong>wikidata_husband_uri</strong> e<strong> wikidata_wife_uri</strong> gli identificativi univoci delle risorse di persone sposate.</p><p>Wikidata è un progetto parallelo a Wikipedia e gode di vita autonoma. Ciò significa che i due progetti non sono esattamente uno la copia dell’altro, proprio per questo non è detto che tutte le risorse presenti in Wikidata abbiano una corrispondente pagina in Wikipedia.</p><p>La presenza della pagina Wikipedia, per la nostra analisi, è un elemento imprescindibile, motivo per cui nella query SPARQL sono presenti delle istruzioni che restringono il campo di ricerca alle solo coppie sposate che hanno una corrispondente pagina su Wikipedia (versione inglese). <br>Di seguito il <a href="https://w.wiki/amx">risultato</a>.</p><figure><img alt="" src="https://cdn-images-1.medium.com/max/1024/1*ZqwBy_GUjhI1-IS6pcDRUQ.png" /></figure><p>La query ci restituisce poco meno di 30.000 coppie. Per ciascuna coppia abbiamo sia l’identificativo Wikidata sia, cosa più importante, il link della pagina Wikipedia. Abbiamo ottenuto quindi l’elenco delle biografie delle coppie di coniugi esistenti in Wikidata che hanno una corrispondente pagina in Wikipedia.</p><p>Già da questa prima ricerca possiamo scoprire simpatiche curiosità, ad esempio sapere quale uomo ha avuto più mogli oppure quale donna ha avuto più mariti.</p><p>Da una banale ricerca scopriamo che a contendersi il trono sono <a href="https://www.wikidata.org/wiki/Q174772">Abdülmecid I</a>, sultano dell’impero ottomano della prima metà dell’ottocento e l’imperatore <a href="https://www.wikidata.org/wiki/Q19133">Qianlong</a>, imperatore della Cina dal 1735 al 1796. Dai nostri dati ricaviamo che entrambi hanno avuto — tra mogli e concubine — 17 donne, ma in realtà ne hanno avute molte di più. L’imperatore ha avuto, ad esempio, 27 mogli/concubine e il motivo per cui a noi risultano 17 mogli è che nella nostra ricerca stiamo considerando non tutte le mogli ma solo quelle che hanno anche una pagina Wikipedia correlata.</p><p>E le donne? Dalla nostra ricerca è <a href="https://www.wikidata.org/wiki/Q34851">Elizabeth Taylor</a> a piazzarsi al primo posto con ben 7 mariti (in realtà sono 8).</p><p>A questo punto procediamo con la nostra ricerca e aggiungiamo un ulteriore elemento.</p><p>Con Wikidata siamo in grado di interrogare i dati in modo programmatico, ma adesso il focus si sposta su Wikipedia. Sappiamo quali sono le pagine delle coppie sposate, ma è impensabile considerare di navigare singolarmente le pagine di 30.000 coppie, cioè 60.000 biografie di pagine su Wikipedia da esplorare e controllare a una a una. Dobbiamo trovare un altro modo.</p><p>Wikipedia è una enciclopedia con licenza aperta, cioè è possibile riutilizzare i dati secondo la licenza <a href="https://en.wikipedia.org/wiki/Wikipedia:Text_of_Creative_Commons_Attribution-ShareAlike_3.0_Unported_License">CC-BY-SA 3.0</a>. Inoltre è possibile scaricare l’intera enciclopedia in locale in modo da effettuare le ricerche direttamente offline. A seconda della versione di Wikipedia scaricata, quest’ultima operazione può diventare molto onerosa; inoltre il download, in formato non compresso, può raggiungere anche svariati TB di dati: decido di non proseguire per questa strada.</p><p>In realtà, dei più di 6 milioni di articoli presenti in Wikipedia (agosto 2020), a me interessano solo le quasi 60.000 pagine di biografie ottenute tramite Wikidata. Piuttosto che scaricare la versione Web di ciascuna pagina, decido di utilizzare le <strong>API</strong> (Application Programming Interface) messe a disposizione dall’estensione <a href="https://www.mediawiki.org/wiki/Extension:CirrusSearch">CirrusSearch</a>, implementata da Wikipedia per la ricerca con <a href="https://it.wikipedia.org/wiki/Elasticsearch">ElasticSearch</a>.</p><p>Aggiungendo all’URL di ciascuna pagina il parametro <em>?action=cirrusdump</em> è possibile ottenere dati strutturati delle informazioni presenti nella pagina Wikipedia in formato JSON.</p><p>Ad esempio, considerando la pagina Web del presidente della Repubblica Sergio Mattarella:</p><p>URL = <a href="https://it.wikipedia.org/wiki/Sergio_Mattarella">https://it.wikipedia.org/wiki/Sergio_Mattarella</a></p><figure><img alt="" src="https://cdn-images-1.medium.com/max/1024/1*lU983fPU3bkfXZSJq-eoKA.png" /></figure><p>il corrispettivo file JSON sarà il seguente:</p><p><a href="https://it.wikipedia.org/wiki/Sergio_Mattarella?action=cirrusdump">https://it.wikipedia.org/wiki/Sergio_Mattarella?action=cirrusdump</a></p><figure><img alt="" src="https://cdn-images-1.medium.com/max/1024/1*xkAYTyUcpT4OZFSYPiCP2Q.png" /></figure><p>che restituisce le informazioni, in modo strutturato, contenute all’interno del <em>template</em> utilizzato per la pagina Wiki del presidente della Repubblica.</p><p>Fra i numerosi campi del file JSON ne troviamo uno molto interessante chiamato <strong>opening_text,</strong> che contiene proprio il testo <strong>in chiaro</strong> di apertura di ciascuna pagina in Wikipedia, il testo cioè che precede l’indice.</p><p>È quello che cercavamo, possiamo iniziare quindi la nostra analisi?</p><blockquote>In realtà no! 😞</blockquote><p>Infatti, per ciascun uomo e donna, possono essere presenti degli <strong>alias, </strong>per cui la stessa persona può avere più di un nome associato, che significa più URL distinte. Tipico esempio è il caso della moglie che viene identificata sia con l’URL contenente il proprio cognome sia con l’URL contenente il cognome e/o il titolo del marito.</p><p>Prendiamo ad esempio, <a href="https://en.wikipedia.org/wiki/Sarah_Churchill,_Duchess_of_Marlborough">Sarah Churchill, duchessa di Marlborough</a>.</p><p>La sua pagina Wikipedia è la seguente:</p><figure><img alt="" src="https://cdn-images-1.medium.com/max/1024/1*60GP1grUraPdqK8zkVkuAA.png" /></figure><p>Il suo URL principale è:<br><a href="https://en.wikipedia.org/wiki/Sarah_Churchill,_Duchess_of_Marlborough">https://en.wikipedia.org/wiki/Sarah_Churchill,_Duchess_of_Marlborough</a></p><p>ma a lei ci si può riferire anche con il seguente URL (alias):<br><a href="https://en.wikipedia.org/wiki/Sarah%20Jennings">https://en.wikipedia.org/wiki/Sarah_Jennings</a></p><p>che reindirizza alla prima URL.</p><p>Dal file JSON della pagina principale della moglie riesco a ricavare il nome <strong>Sarah Churchill</strong> mentre purtroppo nella pagina del marito mi ritrovo il nome della moglie da nubile Sarah Jennings.</p><figure><img alt="" src="https://cdn-images-1.medium.com/max/1024/1*5De-0VAyBU12gIKJehk9yQ.png" /></figure><p>Motivo per cui devo trovare un’altra strategia per migliorare la ricerca dei nomi degli sposi nelle rispettive pagine dei consorti.</p><p>Torno di nuovo nel file JSON, questa volta prendo in considerazione il campo <strong>source_text,</strong> che contiene il codice sorgente della pagina Wikipedia in sintassi Wiki. È la chiave di volta. <br>Il nome della moglie e tutti i suoi alias sono racchiusi all’interno di parentesi quadre annidate. In questo modo posso migliorare la mia euristica cercando i nomi direttamente nel testo del codice sorgente dell’introduzione della pagina Web e cercare anche dentro le parentesi.</p><figure><img alt="" src="https://cdn-images-1.medium.com/max/1024/1*_2QD3LsVKy1pz7Lesy9VlA.png" /></figure><p>Bene, iniziamo a tirare un po’ di somme.</p><p>Da Wikidata abbiamo ottenuto <strong>29916</strong> coppie di sposi.</p><p>Eliminando tutte le biografie con testo breve, cioè biografie che non presentano una introduzione iniziale, un indice e un corpo, arriviamo a <strong>24568</strong> coppie, rispettivamente <strong>22473</strong> uomini e <strong>22551</strong> donne.</p><p>Nel <strong>7.3%</strong> delle coppie il nome del marito è presente nell’introduzione della moglie e contemporaneamente il nome della moglie è presente nell’introduzione del marito. Nel <strong>30%</strong> delle coppie il nome del marito è presente nell’introduzione della moglie mentre il nome della moglie <strong>NON</strong> è presente nel nell’introduzione del marito. Nel <strong>9%</strong> delle coppie il nome del marito <strong>NON</strong> è presente nell’introduzione della moglie mentre il nome della moglie è presente nell’introduzione del marito. Nel <strong>53.7%</strong> delle coppie il nome del marito <strong>non</strong> è presente nell’introduzione della moglie e contemporaneamente il nome della moglie <strong>non</strong> è presente nell’introduzione del marito.</p><p>Secondo i risultati quindi, su 100 pagine del nostro campione, in <strong>37</strong> pagine di biografie di donne in cui compare il nome del marito nell’introduzione, solo in <strong>16</strong>, meno della metà, compare anche il nome della moglie nell’introduzione del marito.</p><p>Qualcuno però potrebbe storcere il naso e dire:</p><blockquote><em>Sì, aspetta un attimo, sappiamo tutti però che la donna nella storia è stata sempre marginalizzata e per questo non ha potuto ricoprire spesso ruoli determinanti dal punto di vista sociale, scientifico, politico, economico. Può questo giustificare la più numerosa presenza del marito nell’introduzione della biografia delle mogli?</em></blockquote><p>Per migliorare la nostra analisi dovremmo conoscere il grado di importanza di ogni soggetto della coppia e capire se è più importante il marito o la moglie e valutare, caso per caso, le introduzioni delle biografie.</p><p>Per fare questo potremmo riferirci alle statistiche relative alle <em>PageView</em> di Wikipedia e associare il livello di importanza di una persona al numero di visite ricevute in un lasso di tempo. I dati statistici di Wikipedia sono liberamente scaricabili dal Web ma, a causa delle enormi dimensioni del file da scaricare, gestire e analizzare, sono costretto a tentare un altro approccio.</p><p>In aiuto mi viene ancora una volta il file JSON Wikipedia: esplorandolo in profondità, scorgo un parametro interessante, chiamato <em>popularity_score. </em>Nelle note tecniche leggo la seguente descrizione.</p><figure><img alt="" src="https://cdn-images-1.medium.com/max/1024/1*-1tK3qiQ3iuQkNGp5gpZCQ.png" /></figure><p>Ottimo, può fare al caso nostro, decido quindi di associare l’ ”<em>importanza</em>” ad una persona in base allo <strong>score </strong>riportato nel parametro.</p><p>Rifacendo quindi tutti i nostri calcoli, otteniamo infine i seguenti risultati:</p><figure><img alt="" src="https://cdn-images-1.medium.com/max/1024/1*x_mAPQGTJerPIkH65RMcjA.png" /></figure><p>In generale, nelle coppie del nostro campione le donne risultano essere più importanti (o per meglio dire, più cercate nel Web) dei mariti. Questa cifra, vedremo, è indicativa della stortura di fondo che caratterizza il fenomeno analizzato: il divario esistente, infatti, è sempre a favore del marito, anche quando è la moglie ad essere più <em>importante</em>. Tra le percentuali più interessanti possiamo mettere a confronto le ultime due righe, cioè i casi in cui il marito è presente nell’ introduzione della moglie mentre la moglie è assente nell’introduzione del marito e il caso opposto, cioè è la moglie a comparire nell’introduzione del marito mentre il marito è assente nell’introduzione della moglie. Nel primo caso, il marito è più importante e compare con un <strong>25,3%</strong> nell’introduzione della biografia della moglie mentre nel secondo caso, la moglie è più importante e compare solo nel <strong>6%</strong> dei casi in quella del marito.</p><p>Questi dati, messi a confronto, denotano un divario evidente tra la presenza del nome del marito nella biografia della moglie e la presenza del nome della moglie nella biografia del marito; ciò può dipendere dal ben noto “<a href="https://en.wikipedia.org/wiki/Gender_bias_on_Wikipedia#:~:text=Gender%20bias%20on%20Wikipedia%2C%20also,women%20are%20less%20well%2Dcovered">Wikipedia gender gap</a>”, dovuto sia alla presenza numericamente prevalente di contributori di sesso maschile su Wikipedia, sia al fatto che il mondo femminile ha una copertura di rappresentanza fortemente più piccola rispetto al mondo maschile.</p><p>Questo lavoro si presta anche ad ulteriori sviluppi, ad esempio indagare questo o eventuali altri <em>divari </em>considerando altre dimensioni, come quella spaziale (collegando le coppie al loro Paese) e temporale (collegandole al loro periodo storico), per capire se esistono correlazioni e/o associazioni più o meno evidenti.</p><p>Questo lavoro giunge al termine, spero di aver dato qualche spunto sull’uso della tecnologia per contrastare la <em>gender-inequality</em> e aiutare, nel mio piccolo, a prendere ancor più consapevolezza del <em>divario di genere </em>esistente su Wikipedia, dovuto a stereotipi e pregiudizi maschili.</p><p>In questo <a href="https://github.com/gpirrotta/wikiwife">repo</a> ho pubblicato il dataset dei risultati ottenuti, in modo da poter costituire un punto di partenza utile per eventuali bilanciamenti in Wikipedia, e per correggere il tiro alle troppo storture esistenti.</p><p>Quanto all’intuizione dell’amica Erika, le risponderò quindi dicendo:</p><figure><img alt="" src="https://cdn-images-1.medium.com/max/598/1*o6eVnv1qsVvqIH-FBENUKQ.png" /></figure><img src="https://medium.com/_/stat?event=post.clientViewed&referrerSource=full_rss&postId=98827b8fd49f" width="1" height="1" alt="">]]></content:encoded>
        </item>
        <item>
            <title><![CDATA[Generazione e verifica di notizie di qualità attraverso il Web Semantico: la storia di Liliana…]]></title>
            <link>https://medium.com/@gpirrotta/generazione-e-verifica-di-notizie-di-qualit%C3%A0-attraverso-il-web-semantico-la-storia-di-liliana-6cd81f05e9fe?source=rss-8f9654a9875------2</link>
            <guid isPermaLink="false">https://medium.com/p/6cd81f05e9fe</guid>
            <category><![CDATA[liliana-segre]]></category>
            <category><![CDATA[semanticweb]]></category>
            <category><![CDATA[shoah]]></category>
            <category><![CDATA[fake-news]]></category>
            <category><![CDATA[linked-data]]></category>
            <dc:creator><![CDATA[Giovanni Pirrotta]]></dc:creator>
            <pubDate>Tue, 19 Nov 2019 05:48:04 GMT</pubDate>
            <atom:updated>2020-01-20T18:11:11.907Z</atom:updated>
            <content:encoded><![CDATA[<h3>Generazione e verifica di notizie di qualità attraverso il Web Semantico: la storia di Liliana Segre</h3><p>La storia della bambina Liliana, oggi Senatrice della Repubblica Italiana.</p><figure><img alt="" src="https://cdn-images-1.medium.com/max/593/0*FEdImWmrZ2kP9xYE.jpg" /></figure><p>In rete siamo continuamente invasi da fake news, articoli redatti con notizie inventate, ingannevoli o distorte, con il deliberato intento di disinformare attraverso i mezzi di informazione. I social network fanno da cassa di risonanza e le condivisioni amplificano a dismisura il problema.</p><p>La fake-news è un’informazione creata per disinformare ed è basata su fatti inventati. A sua volta questi fatti si basano su dati fasulli o inesistenti. Il <strong>dato</strong> di per sé è un numero, un testo, un’immagine, un video, un suono, un qualsiasi dato grezzo che assume significati differenti a seconda del contesto in cui si trova. L’informazione è quindi il <strong>dato</strong> nel suo <strong>contesto</strong>.</p><p>I dati costituiscono la <strong>dorsale</strong> su cui si innesta l’impalcatura della comunicazione. Ma più i dati sono <em>autentici</em>, <em>veritieri</em>, <em>autorevoli</em>, <em>certificati</em> e <em>verificabili</em>, più è <strong>difficile</strong> inventare fake-news.</p><p>Per cui mi chiedo, quali strumenti ha oggi il giornalista per scrivere e il lettore per verificare un episodio accaduto? Come poter tutelare la veridicità delle informazioni e allo stesso tempo individuare le bufale che si trovano in rete, attraverso sistemi automatizzati che consentano di isolare le vere notizie dalle fake-news?</p><p>Da diversi anni ormai esistono algoritmi di <em>machine-learnin</em>g e, in tempi più recenti, <em>reti neurali</em> di nuova generazione, in grado di allenare modelli predittivi, al fine di classificare testi informativi e stabilire, con una certa probabilità, quanto è “<strong><em>vera</em></strong>” una notizia. Ma la strada da percorrere è ancora tanta.</p><p>In un mondo utopico gli editori dovrebbero disporre di strumenti in grado di creare un ambiente nel quale pubblicare le informazioni e grazie al quale l’utente può interagire per verificare, in modo automatizzato, l’autenticità delle notizie. Se le informazioni sono basate su dati certi e autorevoli, l’editore dovrà allora mettermi nelle condizioni di credergli e, per fare ciò, mi dovrà fornire tutto l’occorrente per consentirmi, in modo più neutrale e automatico possibile, di verificare ciò che dice.</p><p>Proviamo a immaginare un spazio digitale all’interno del quale sia possibile pubblicare una informazione attraverso <strong>relazioni semantiche</strong> tra dati, cioè piccoli oggetti legati tra loro mediante <strong>connessioni semantiche</strong>. Proviamo a immaginare che la semantica di ciascun oggetto e delle sue connessioni sia stata definita in maniera formale utilizzando grammatiche <strong>comprensibili</strong> ai sistemi di elaborazione. Proviamo a immaginare che l’informazione generata dalle connessioni semantiche sia prodotta a partire da dati <em>autorevoli</em>, a disposizione e raggiungibili da chiunque, <em>certificate</em> da fonti considerate <em>sicure</em>. Proviamo a immaginare che il lettore, utilizzando semplicemente il proprio browser, senza quindi avere la necessità di installare software ad-hoc, plugin o estensioni varie, sia in grado di leggere una notizia e automaticamente poterne <em>verificarne</em> ogni sua parte.</p><blockquote>Immaginiamo tutto questo</blockquote><p>Questo articolo non vuole avere nessuna pretesa. Vuole solo raccontare l’idea, o meglio un possibile tentativo di ciò che potrebbe avvenire in un probabile futuro. Il mio intento non è quello di scrivere una puntata di <em>Black Mirror</em>, voglio solo immaginare un possibile approccio per <strong>ridurre</strong> il proliferare di fake-news mediante l’utilizzo delle reti semantiche. Voglio descrivere di un possibile quotidiano del futuro in grado di <strong>aiutare il lettore</strong> a verificare ciascuna notizia sulla base di fonti <strong>autorevoli</strong> e <strong>certificate</strong>, in modo più <strong>accessibile</strong> e <strong>neutrale</strong> possibile. Voglio poter pensare che nel futuro, un <strong>quotidiano semantico</strong> sia in grado di generare, in piena autonomia, tutte le notizie del giorno, senza omettere o falsificare i fatti. Voglio immaginare una macchina intelligente in grado di, partendo da più fonti<strong>, creare nuove connessioni</strong> semantiche tra oggetti reali e, mediante processi di ragionamento automatico, arrivare a generare <strong>nuova conoscenza</strong>.</p><blockquote>Si tratta solo di riuscire a far pensare una macchina e a renderla intelligente.</blockquote><figure><img alt="" src="https://cdn-images-1.medium.com/max/235/0*dbRj447Yru-2Gg9C" /></figure><p>Non nego un aspetto romantico e fantascientifico in tutto ciò. Tuttavia gli strumenti in grado di rappresentare la realtà in un modo comprensibile alle macchine <strong>esistono da decenni </strong>e vanno sotto il nome di <a href="https://it.wikipedia.org/wiki/Web_semantico"><strong>Web Semantico</strong></a>.</p><p>Senza entrare in dettaglio sugli aspetti tecnici del Web Semantico (ne ho già parlato qui [<a href="http://giovanni.pirrotta.it/blog/2013/05/24/semantic-web-what/">1</a>][<a href="http://giovanni.pirrotta.it/blog/2013/06/03/limits-of-the-web-today/">2</a>][<a href="http://giovanni.pirrotta.it/blog/2013/07/04/can-machines-think/">3</a>][<a href="http://giovanni.pirrotta.it/blog/2013/11/20/xml-limits/">4</a>][<a href="http://giovanni.pirrotta.it/blog/2013/12/23/the-rdf-model/">5</a>][<a href="http://giovanni.pirrotta.it/blog/2014/01/06/semantic-web-ingredients-the-rdf-schema-model/">6</a>][<a href="http://giovanni.pirrotta.it/blog/2014/07/22/semantic-web-ingredients-the-web-ontology-language/">7</a>][<a href="http://giovanni.pirrotta.it/blog/2014/07/30/semantic-web-ingredients-rdfa/">8</a>][<a href="http://giovanni.pirrotta.it/blog/2014/10/27/semantic-web-ingredients-the-sparql-language/">9</a>][<a href="http://giovanni.pirrotta.it/blog/2015/10/18/developing-an-ontology/">10</a>][<a href="http://giovanni.pirrotta.it/blog/2018/07/27/linked-data-the-four-rules/">11</a>]), in questo articolo intendo sperimentare un possibile approccio al problema. Mi chiedo se sia possibile, con i dati attualmente disponibili, provare a creare notizie che siano certificate e verificabili. Mi chiedo se sia possibile confezionare una notizia tutelando il più possibile il lettore da informazioni ingannevoli e distorte, non supportate da dati autorevoli. Mi chiedo fino a quanto possiamo spingerci e dove invece siamo costretti a fermarci. Mi chiedo, quando leggiamo un fatto avvenuto in rete, cosa ci sia davvero dietro, quali sono le fonti del giornalista, dove ha reperito i dati, quale sia l’autorevolezza delle fonti e in che modo posso credere al 100% che i fatti accaduti siano effettivamente ciò che è successo.</p><p><em>Per fare quest’esperimento prenderò in considerazione i seguenti fatti:</em></p><blockquote><em>L’8 dicembre 1943, una ragazzina di 13 anni di nome </em><a href="https://it.wikipedia.org/wiki/Liliana_Segre"><strong><em>Liliana Segre</em></strong></a><em>, viene arrestata e successivamente deportata ad Auschwitz. Della sua famiglia, anche loro arrestati, sopravviverà solo lei.</em></blockquote><blockquote><em>Il 19 gennaio 2018 Liliana Segre, attiva testimone della </em><a href="https://it.wikipedia.org/wiki/Olocausto_in_Italia"><strong><em>Shoah italiana</em></strong></a><em>, viene nominata senatrice a vita dal presidente della Repubblica </em><a href="https://it.wikipedia.org/wiki/Sergio_Mattarella"><strong><em>Sergio Mattarella</em></strong></a><em>, </em>per aver illustrato la Patria con altissimi meriti nel campo sociale<em>.</em></blockquote><blockquote><em>Come primo atto legislativo propone l’istituzione di una </em><strong><em>Commissione</em></strong><em> parlamentare di indirizzo e controllo sui fenomeni di intolleranza, razzismo, antisemitismo e istigazione all’odio e alla violenza.</em></blockquote><blockquote><em>Il 30 ottobre 2019 il </em><strong><em>Senato della Repubblica</em></strong><em> approva la mozione.</em></blockquote><blockquote><em>Il 7 novembre 2019, a causa delle </em><strong><em>crescenti</em></strong><em> </em><strong><em>minacce e insulti</em></strong><em> che le sono rivolti attraverso internet, il prefetto di Milano </em><strong><em>le assegna una scorta</em></strong><em>.</em></blockquote><p>I dati da cui partire devono essere <strong>autorevoli</strong>, <strong>certificati</strong> e <strong>comprensibili</strong> <strong>dalle macchine</strong> e sono di seguito descritti.</p><h4><strong>Fondazione Centro di Documentazione Ebraica Contemporanea</strong> (<a href="http://www.cdec.it/"><strong>CDEC</strong></a>)</h4><p>È il principale istituto di ricerca per la storia degli ebrei in Italia in età contemporanea e possiede la più ampia raccolta di documentazione inerente la Shoah in Italia. <br>Alla fine del 2012 la Fondazione CDEC ha avviato un importante <a href="http://dati.cdec.it/">progetto</a> di riorganizzazione e razionalizzazione del proprio sistema informativo e di digitalizzazione di alcune delle sue raccolte documentarie.<br>Una delle cose più interessanti di questo progetto è che i dati sono stati pubblicati in Linked-Data, per cui tutti i dati sono stati modellati attraverso un’<a href="http://dati.cdec.it/lod/shoah/reference-document.html"><strong>ontologia</strong></a> creata ad-hoc sul dominio <strong>Shoah</strong> e resi disponibili tramite uno <a href="http://lod.xdams.org/sparql"><strong>SPARQL endpoint.</strong></a><strong> </strong>L’ontologia definisce la semantica che serve alle macchine per comprendere il significato dei concetti e il linguaggio SPARQL è il modo con cui è possibile interrogare i dati tra di loro connessi. I dati sono stati pubblicati secondo il paradigma dei <a href="http://linkeddata.org/"><strong>Linked-Data</strong></a><strong>.</strong></p><p>Dal sito CDEC si legge:</p><p><em>L’ontologia sul dominio “Shoah” […] ha l’obiettivo di descrivere in maniera formale i concetti e le relazioni che caratterizzano e specificano il processo di persecuzione e deportazione degli ebrei dall’Italia fra il 1943 e il 1945. […]<br>Punto di partenza per la costruzione dell’ontologia sulla Shoah è stata la banca dati delle oltre </em><strong><em>8000 vittime</em></strong><em> della persecuzione nazista e fascista in Italia, realizzata dalla Fondazione CDEC nel corso del pluridecennale lavoro di ricerca per l’individuazione e la verifica dei nomi e dei destini di ciascuna persona.</em></p><p>L’ontologia è rappresentata nella seguente figura:</p><figure><img alt="" src="https://cdn-images-1.medium.com/max/1024/0*RYUGKUuujyXbnF2U.png" /><figcaption>Ontologia della Shoah</figcaption></figure><p>Confesso che la prima volta che ho analizzato l’ontologia sono rimasto dolorosamente sconcertato dalla crudezza dei concetti del dominio. Il risultato del progetto della fondazione CDEC è di altissimo valore.<br>Abbiamo a disposizione il <em>grafo di conoscenza</em> (<strong>Knowledge Graph</strong>) della Shoah italiana i cui concetti e relazioni (cioè fatti) sono per la prima volta comprensibili dalle macchine. La fonte è <em>autorevole</em>, <em>certificata</em> e <em>comprensibile</em> dalle macchine.</p><h4>Camera dei Deputati</h4><p>La Camera dei Deputati, col progetto <a href="http://dati.camera.it/"><strong>dati.camera.it</strong></a>, offre una piattaforma di pubblicazione e condivisione di linked-data sull’attività parlamentare; la fonte è <em>autorevole</em>, <em>certificata</em> e <em>comprensibile</em> dalle macchine, in quanto i dati vengono pubblicati usando descrittori semantici in grado di far emergere i collegamenti tra le risorse correlandole in base al loro <strong>significato. </strong>L’ontologia è rappresentata nella seguente figura.</p><figure><img alt="" src="https://cdn-images-1.medium.com/max/1024/0*oW_kG_NWh2qm7MBT.png" /><figcaption>L’ontologia della Camera dei Deputati</figcaption></figure><h4>Senato della Repubblica</h4><p>Anche in questo caso il Senato della Repubblica, col progetto <a href="http://dati.senato.it/"><strong>dati.senato.it</strong></a>, mette a disposizione i dati dell’attività parlamentare dei senatori in modalità <em>linked-data</em>: la fonte è <em>autorevole</em>, <em>certificata</em> e <em>comprensibile</em> dalle macchine. L’ontologia è rappresentata nella seguente figura.</p><figure><img alt="" src="https://cdn-images-1.medium.com/max/800/0*532-C9cmgrEXcnxU.png" /><figcaption>L’ontologia del Senato della Repubblica</figcaption></figure><p>Inizia adesso l’esperimento. Tutto ciò che dirò non sarà nulla di nuovo rispetto a quanto non sappiamo già. L’unica differenza è che saremo supportati da uno strumento di verifica automatica, non potremo falsificare i dati perché verremmo <strong>smascherati</strong>. Nel Web Semantico una macchina conosce il significato dei dati. Saprebbe lui stesso raccontarvi le notizie e lo farebbe sicuramente con meno errori di un umano. Io traccerò una pista narrativa, il mio racconto sarà <em>data-driven,</em> con una spolverata tecnologica di intelligenza artificiale.</p><p>La narrazione avverrà nel seguente modo: ogni fatto descritto sarà <strong>verificato</strong> con i dati sopra menzionati attraverso l’invocazione in tempo reale di una query <strong>SPARQL</strong> (<em>il linguaggio usato dalle macchine per interrogare i dati</em>), invocabile tramite il link <strong>[verifica]</strong> tra parentesi quadre. La narrazione vera e propria apparirà scritta in <em>corsivo</em>. Cominciamo.</p><figure><img alt="" src="https://cdn-images-1.medium.com/max/1024/1*UWHwK7WfHPq8RRQy1DCFzA.png" /></figure><p><em>Questa è la storia di </em><strong><em>9012</em></strong><em> persone che dal 1943 al 1945 furono perseguitate perché ebree. </em>[<a href="http://lod.xdams.org/sparql?default-graph-uri=&amp;query=PREFIX+shoah%3A+%3Chttp%3A%2F%2Fdati.cdec.it%2Flod%2Fshoah%2F%3E%0D%0A%0D%0ASELECT+count%28distinct%28%3Furi%29%29+as+%3Fcount+%0D%0AFROM+%3Chttp%3A%2F%2Fdati.cdec.it%2Flod%2Fshoah%2F%3E%0D%0A%7B%0D%0A%3Furi++a+foaf%3APerson%3B%0D%0A++++++shoah%3Apersecution+%3Fpersecution.%0D%0A%7D&amp;format=text%2Fhtml&amp;timeout=0&amp;debug=on">verifica</a>]</p><iframe src="" width="0" height="0" frameborder="0" scrolling="no"><a href="https://medium.com/media/d635ce9557a26b07777e3e6ba7c84a14/href">https://medium.com/media/d635ce9557a26b07777e3e6ba7c84a14/href</a></iframe><p><em>In campo di sterminio morirono </em><strong><em>7553</em></strong><em> persone, </em><strong><em>215</em></strong><em> morirono durante un eccidio, </em><strong><em>80</em></strong><em> morirono in stato di detenzione. Durante gli spostamenti morirono </em><strong><em>21</em></strong><em> persone mentre </em><strong><em>19</em></strong><em> persone morirono suicide. Altre </em><strong><em>18</em></strong><em> persone morirono durante l’arresto, tentando la fuga, per disagi e privazioni. I dispersi furono </em><strong><em>3,</em></strong><em> di morte ignota </em><strong><em>1</em></strong><em>. [</em><a href="http://lod.xdams.org/sparql?default-graph-uri=&amp;query=PREFIX+shoah%3A+%3Chttp%3A%2F%2Fdati.cdec.it%2Flod%2Fshoah%2F%3E%0D%0A%0D%0ASELECT+distinct+%3Fdescr+%28count%28%3Fdescr%29+as+%3Ftipo%29%0D%0AFROM+%3Chttp%3A%2F%2Fdati.cdec.it%2Flod%2Fshoah%2F%3E+%0D%0AWHERE%7B%0D%0A%3Furi+a+foaf%3APerson%3B%0D%0A+++++shoah%3Apersecution+%3Fpersecution.%0D%0A%3Fpersecution+shoah%3AdeathDescription+%3Fdescr.%0D%0A%7D+%0D%0AORDER+BY+DESC%28%3Ftipo%29%0D%0A&amp;format=text%2Fhtml&amp;timeout=0&amp;debug=on"><em>verifica</em></a><em>].</em></p><iframe src="" width="0" height="0" frameborder="0" scrolling="no"><a href="https://medium.com/media/6c442625724befbf838775073e38520c/href">https://medium.com/media/6c442625724befbf838775073e38520c/href</a></iframe><p><em>In tutto sopravvissero </em><strong><em>1101 </em></strong><em>persone.</em>[<a href="http://lod.xdams.org/sparql?default-graph-uri=&amp;query=PREFIX+bio-ext%3A+%3Chttp%3A%2F%2Fdati.cdec.it%2Flod%2Fbio-ext%2F%3E%0D%0A%0D%0ASELECT+%28count%28distinct+%3Furi%29+as+%3Fsurvived%29%0D%0AFROM+%3Chttp%3A%2F%2Fdati.cdec.it%2Flod%2Fshoah%2F%3E%0D%0A%7B%0D%0A%3Furi++a+foaf%3APerson%3B%0D%0A++++++bio-ext%3AshoahSurvivor+%22true%22.%0D%0A%7D&amp;format=text%2Fhtml&amp;timeout=0&amp;debug=on">verifica</a>]</p><iframe src="" width="0" height="0" frameborder="0" scrolling="no"><a href="https://medium.com/media/8236dcde65c20d239f228c44d8c38654/href">https://medium.com/media/8236dcde65c20d239f228c44d8c38654/href</a></iframe><p><em>Tra gli arrestati e deportati dall’Italia </em><strong><em>364</em></strong><em> erano ebrei stranieri. [</em><a href="http://lod.xdams.org/sparql?default-graph-uri=&amp;query=PREFIX+bio-ext%3A+%3Chttp%3A%2F%2Fdati.cdec.it%2Flod%2Fbio-ext%2F%3E%0D%0APREFIX+shoah%3A+%3Chttp%3A%2F%2Fdati.cdec.it%2Flod%2Fshoah%2F%3E%0D%0A%0D%0ASELECT++count%28%3Fcountry%29+as+%3Fcount%0D%0AFROM+%3Chttp%3A%2F%2Fdati.cdec.it%2Flod%2Fshoah%2F%3E++%0D%0AWHERE+%7B%0D%0A%3FIRI+a+foaf%3APerson%3B+%0D%0A+++++bio-ext%3AbirthPlace+%3Fbirth.+%0D%0A%3Fbirth+foaf%3Acountry+%3Fcountry.%0D%0AFILTER%28%3Fcountry+%21%3D+%27Italia%27%29.%0D%0A%7D+%0D%0AORDER+BY+DESC%28%3Fcount%29&amp;format=text%2Fhtml&amp;timeout=0&amp;debug=on"><em>verifica</em></a><em>]</em></p><iframe src="" width="0" height="0" frameborder="0" scrolling="no"><a href="https://medium.com/media/70e313279cee8c498f4925eb8421cd5f/href">https://medium.com/media/70e313279cee8c498f4925eb8421cd5f/href</a></iframe><p><em>E provenivano principalmente dalla </em><strong><em>Polonia</em></strong><em>, dalla </em><strong><em>Romania, </em></strong><em>dalla </em><strong><em>Jugoslavia</em></strong><em> e dalla </em><strong><em>Francia</em></strong><em>.</em>[<a href="http://lod.xdams.org/sparql?default-graph-uri=&amp;query=PREFIX+bio-ext%3A+%3Chttp%3A%2F%2Fdati.cdec.it%2Flod%2Fbio-ext%2F%3E%0D%0APREFIX+shoah%3A+%3Chttp%3A%2F%2Fdati.cdec.it%2Flod%2Fshoah%2F%3E%0D%0A%0D%0ASELECT+DISTINCT+%3Fcountry+count%28%3Fcountry%29+as+%3Fcount%0D%0AFROM+%3Chttp%3A%2F%2Fdati.cdec.it%2Flod%2Fshoah%2F%3E++%0D%0Awhere+%7B%0D%0A%3FIRI+a+foaf%3APerson%3B+%0D%0A+++++bio-ext%3AbirthPlace+%3FBirth.+%0D%0A%3FBirth+foaf%3Acountry+%3Fcountry.%0D%0AFILTER%28%3Fcountry+%21%3D+%27Italia%27%29.%0D%0A%7D+%0D%0AGROUP+BY+%3Fcountry%0D%0AORDER+BY+DESC%28%3Fcount%29&amp;format=text%2Fhtml&amp;timeout=0&amp;debug=on">verifica</a>]</p><iframe src="" width="0" height="0" frameborder="0" scrolling="no"><a href="https://medium.com/media/1c2c88a852dd0ed5dda02a0aa336ec7c/href">https://medium.com/media/1c2c88a852dd0ed5dda02a0aa336ec7c/href</a></iframe><p><em>Il numero degli oppositori politici ammontava a </em><strong><em>50</em></strong><em> persone. </em>[<a href="http://lod.xdams.org/sparql?default-graph-uri=&amp;query=PREFIX+bio-ext%3A+%3Chttp%3A%2F%2Fdati.cdec.it%2Flod%2Fbio-ext%2F%3E%0D%0APREFIX+shoah%3A+%3Chttp%3A%2F%2Fdati.cdec.it%2Flod%2Fshoah%2F%3E%0D%0A%0D%0ASELECT+DISTINCT+%3Fs+%3Fnome+%0D%0AFROM+%3Chttp%3A%2F%2Fdati.cdec.it%2Flod%2Fshoah%2F%3E+%0D%0AWHERE+%7B%0D%0A%3Fs+a+foaf%3APerson%3B++%0D%0A+++rdfs%3Alabel+%3Fnome%3B%0D%0A+++shoah%3Apersecution+%3Fpersecution.%0D%0A%3Fpersecution++shoah%3AconvoyNumber+%3Fconvoy.%0D%0A%0D%0AFILTER+%28%3Fconvoy%3D%27P%27%29%0D%0A%0D%0A%7D+order+by+%3Fnome&amp;format=text%2Fhtml&amp;timeout=0&amp;debug=on">verifica</a>]</p><iframe src="" width="0" height="0" frameborder="0" scrolling="no"><a href="https://medium.com/media/7480e26927d03dfac8f6089a979d7b79/href">https://medium.com/media/7480e26927d03dfac8f6089a979d7b79/href</a></iframe><p><em>Anche Elio Morpurgo, politico di origine ebraica, </em><strong><em>deputato</em></strong><em> del Regno d’Italia per </em><strong><em>6 legislature</em></strong><em>, </em><strong><em>senatore</em></strong><em> del Regno d’Italia per </em><strong><em>una legislatura</em></strong><em>, per </em><strong><em>4 volte</em></strong><em> </em><strong><em>nominato sottosegretario ministeriale</em></strong><em>, viene arrestato ad </em><strong><em>Udine</em></strong><em> nel </em><strong><em>marzo del 1944</em></strong><em> e deportato ad </em><strong><em>Auschwitz</em></strong><em>: </em><strong><em>non sopravviverà</em></strong><em> alla Shoah.<br></em>[<a href="http://dati.camera.it/sparql?query=PREFIX+shoah%3A+%3Chttp%3A%2F%2Fdati.cdec.it%2Flod%2Fshoah%2F%3E%0D%0APREFIX+bio-ext%3A+%3Chttp%3A%2F%2Fdati.cdec.it%2Flod%2Fbio-ext%2F%3E%0D%0A%0D%0ASELECT+DISTINCT+%3FfirstName+%3FfamilyName++%3FarrestPlace+%3FdepartureDate+%3FtoNaziCampLabel+%3Fsurvivor+%3Fmandato%0D%0AWHERE+%7B+%0D%0A%7B%0D%0A%3Furi+owl%3AsameAs+%3FsameAs.+%0D%0A%3Furi+ocd%3Arif_mandatoCamera+%5Brdfs%3Alabel+%3Fmandato%5D.%0D%0A%7D+%0D%0A++UNION%0D%0A%7B%0D%0A%3Furi+owl%3AsameAs+%3FsameAs.+%0D%0A%3Furi+ocd%3Arif_mandatoSenato+%5Brdfs%3Alabel+%3Fmandato%5D.%0D%0A%7D%0D%0A++UNION%0D%0A%7B%0D%0A%3Furi+owl%3AsameAs+%3FsameAs.+%0D%0A%3Furi+ocd%3Arif_membroGoverno+%5Brdfs%3Alabel+%3Fmandato%5D.%0D%0A%7D%0D%0A+++%0D%0AFILTER+%28%3Furi+%3D+%3Chttp%3A%2F%2Fdati.camera.it%2Focd%2Fpersona.rdf%2Fpr3144%3E%29+%0D%0AFILTER+%28REGEX%28%3FsameAs%2C+%22dbpedia%22%2C+%22i%22%29%29%0D%0A++SERVICE+%3Chttp%3A%2F%2Flod.xdams.org%2Fsparql%3E%0D%0A++%7B%0D%0A++++%3Furi_cdec+owl%3AsameAs+%3FsameAs.%0D%0A++++%3Furi_cdec++a+foaf%3APerson%3B%0D%0A+++++++++++++++foaf%3AfirstName+%3FfirstName%3B%0D%0A+++++++++++++++foaf%3AfamilyName+%3FfamilyName%3B%0D%0A+++++++++++++++bio-ext%3AshoahSurvivor+%3Fsurvivor%3B%0D%0A+++++++++++++++shoah%3Apersecution+%3Fpersecution.%0D%0A%3Fpersecution+++shoah%3AarrestPlace+%5Brdfs%3Alabel+%3FarrestPlace%5D%3B%0D%0A+++++++++++++++shoah%3AdepartureDate+%3FdepartureDate%3B%0D%0A+++++++++++++++shoah%3AtoNaziCampLabel+%3FtoNaziCampLabel.%0D%0A++%7D+%0D%0A%7D+++++&amp;debug=on&amp;default-graph-uri=&amp;format=text%2Fhtml">esegui</a>]</p><iframe src="" width="0" height="0" frameborder="0" scrolling="no"><a href="https://medium.com/media/1de592f70aff34052172e707e8fb2515/href">https://medium.com/media/1de592f70aff34052172e707e8fb2515/href</a></iframe><figure><img alt="" src="https://cdn-images-1.medium.com/max/246/1*hgpPZ3nw76vDSB-nNTUyfg.jpeg" /><figcaption>Nel ritratto Elio Morpurgo</figcaption></figure><p>I dati relativi ai <strong>mandati legislativi</strong> del deputato Elio Morpurgo sono stati estratti dai linked-data della Camera dei Deputati (<strong>CDD</strong>). La cosa più interessante del Web Semantico e dei Linked Data è che è possibile connettere in maniera nativa <em>knowledge graph</em> differenti. Nel caso in cui la stessa risorsa (in questo caso il deputato Elio Morpurgo) appartenga a più grafi, è possibile asserire l’uguaglianza delle singole risorse e la macchina potrà estrarre conoscenza da entrambe le fonti. Nel nostro caso il deputato Elio Morpurgo dalla fonte <strong>CDEC</strong> risulta essere collegato ai linked-data dello stesso deputato nella fonte <strong>CDD</strong>. È possibile effettuare quindi un’unica query federata e incrociare i dati per estrarre informazioni provenienti da entrambe le fonti? La risposta è assolutamente sì. Purtroppo però, a causa di un limite tecnico di configurazione nell’endpoint <strong>CDEC</strong>, non ci è consentito fare query federate dalla fonte <strong>CDEC</strong>. L’endpoint SPARQL della <strong>CDD</strong> consente invece di fare query federate. Purtroppo però, nel knowledge graph <strong>CDD</strong>, la risorsa relativa al deputato Elio Morpurgo non è collegata con la stessa risorsa nel knowledge graph del <strong>CDEC</strong>. Che fare quindi per incrociare automaticamente i dati con un’unica estrazione?</p><p>Fortunatamente entrambe le risorse, nei rispettivi grafi di conoscenza (<strong>CDEC</strong> e <strong>CDD</strong>), sono collegate alla risorsa Elio Morpurgo del grafo di conoscenza <a href="http://it.dbpedia.org/resource/Elio_Morpurgo"><strong>dbpedia</strong></a><strong>.it</strong>. Tale risorsa può essere sfruttata come ponte di collegamento per congiungere il mondo <strong>CDEC</strong> con il mondo <strong>CDD</strong>. Capisco che tutti questi <em>tecnicismi</em> possono sembrare un po’ <em>astrusi </em>per i non addetti ai lavori ma, in sintesi, intendo spiegare come sia possibile consentire alle macchine interrogare più fonti in modo efficiente e in piena autonomia, con lo scopo di verificare i fatti. Siamo adesso in grado di estrarre i dati necessari a partire dalla fonte CDD. [<a href="http://dati.camera.it/sparql?query=PREFIX+shoah%3A+%3Chttp%3A%2F%2Fdati.cdec.it%2Flod%2Fshoah%2F%3E%0D%0APREFIX+bio-ext%3A+%3Chttp%3A%2F%2Fdati.cdec.it%2Flod%2Fbio-ext%2F%3E%0D%0A%0D%0ASELECT+DISTINCT+%3FfirstName+%3FfamilyName++%3FarrestPlace+%3FdepartureDate+%3FtoNaziCampLabel+%3Fsurvivor+%3Fmandato%0D%0AWHERE+%7B+%0D%0A%7B%0D%0A%3Furi+owl%3AsameAs+%3FsameAs.+%0D%0A%3Furi+ocd%3Arif_mandatoCamera+%5Brdfs%3Alabel+%3Fmandato%5D.%0D%0A%7D+%0D%0A++UNION%0D%0A%7B%0D%0A%3Furi+owl%3AsameAs+%3FsameAs.+%0D%0A%3Furi+ocd%3Arif_mandatoSenato+%5Brdfs%3Alabel+%3Fmandato%5D.%0D%0A%7D%0D%0A++UNION%0D%0A%7B%0D%0A%3Furi+owl%3AsameAs+%3FsameAs.+%0D%0A%3Furi+ocd%3Arif_membroGoverno+%5Brdfs%3Alabel+%3Fmandato%5D.%0D%0A%7D%0D%0A+++%0D%0AFILTER+%28%3Furi+%3D+%3Chttp%3A%2F%2Fdati.camera.it%2Focd%2Fpersona.rdf%2Fpr3144%3E%29+%0D%0AFILTER+%28REGEX%28%3FsameAs%2C+%22dbpedia%22%2C+%22i%22%29%29%0D%0A++SERVICE+%3Chttp%3A%2F%2Flod.xdams.org%2Fsparql%3E%0D%0A++%7B%0D%0A++++%3Furi_cdec+owl%3AsameAs+%3FsameAs.%0D%0A++++%3Furi_cdec++a+foaf%3APerson%3B%0D%0A+++++++++++++++foaf%3AfirstName+%3FfirstName%3B%0D%0A+++++++++++++++foaf%3AfamilyName+%3FfamilyName%3B%0D%0A+++++++++++++++bio-ext%3AshoahSurvivor+%3Fsurvivor%3B%0D%0A+++++++++++++++shoah%3Apersecution+%3Fpersecution.%0D%0A%3Fpersecution+++shoah%3AarrestPlace+%5Brdfs%3Alabel+%3FarrestPlace%5D%3B%0D%0A+++++++++++++++shoah%3AdepartureDate+%3FdepartureDate%3B%0D%0A+++++++++++++++shoah%3AtoNaziCampLabel+%3FtoNaziCampLabel.%0D%0A++%7D+%0D%0A%7D+++++&amp;debug=on&amp;default-graph-uri=&amp;format=text%2Fhtml">verifica</a>]</p><iframe src="" width="0" height="0" frameborder="0" scrolling="no"><a href="https://medium.com/media/1bc0457d01bf56474f569d7f5feed6a9/href">https://medium.com/media/1bc0457d01bf56474f569d7f5feed6a9/href</a></iframe><p><em>Prima di partire verso i campi di concentramento gli arrestati venivano trattenuti in luoghi di detenzione. Si trattava di 190 campi o prigioni [</em><a href="http://lod.xdams.org/sparql?default-graph-uri=&amp;query=PREFIX+shoah%3A+%3Chttp%3A%2F%2Fdati.cdec.it%2Flod%2Fshoah%2F%3E%0D%0A%0D%0Aselect+COUNT%28%3Fprigione%29+as+%3Fcount%0D%0AFROM+%3Chttp%3A%2F%2Fdati.cdec.it%2Flod%2Fshoah%2F%3E%0D%0A%0D%0Awhere+%7B%0D%0A%3Fprigione+a+shoah%3ADetentionPlace%3B%0D%0A+rdfs%3Alabel+%3Flabel.%0D%0A%7D&amp;format=text%2Fhtml&amp;timeout=0&amp;debug=on"><em>verifica</em></a><em>] distribuiti geograficamente nell’Italia centro-nord. [</em><a href="http://lod.xdams.org/sparql?default-graph-uri=&amp;query=PREFIX+shoah%3A+%3Chttp%3A%2F%2Fdati.cdec.it%2Flod%2Fshoah%2F%3E%0D%0A%0D%0ASELECT+%3Fprigione+%0D%0AFROM+%3Chttp%3A%2F%2Fdati.cdec.it%2Flod%2Fshoah%2F%3E%0D%0AWHERE+%7B%0D%0A%3Furi+a+shoah%3ADetentionPlace%3B%0D%0A+rdfs%3Alabel+%3Fprigione.%0D%0A%7D&amp;format=text%2Fhtml&amp;timeout=0&amp;debug=on"><em>verifica</em></a><em>]</em></p><iframe src="" width="0" height="0" frameborder="0" scrolling="no"><a href="https://medium.com/media/482cc37177031af514ac31de606306b4/href">https://medium.com/media/482cc37177031af514ac31de606306b4/href</a></iframe><iframe src="" width="0" height="0" frameborder="0" scrolling="no"><a href="https://medium.com/media/fadde0d1dc7752371ae02be35bd73744/href">https://medium.com/media/fadde0d1dc7752371ae02be35bd73744/href</a></iframe><p><em>In base al luogo di arresto veniva scelta la prigione (campo di detenzione) più vicina. [</em><a href="http://lod.xdams.org/sparql?default-graph-uri=&amp;query=PREFIX+shoah%3A+%3Chttp%3A%2F%2Fdati.cdec.it%2Flod%2Fshoah%2F%3E%0D%0APREFIX+bio-ext%3A+%3Chttp%3A%2F%2Fdati.cdec.it%2Flod%2Fbio-ext%2F%3E%0D%0A%0D%0ASELECT+DISTINCT+%3Fname+%3FbirthPlace+%3FarrestPlace+%3Fraccolta+%0D%0AFROM+%3Chttp%3A%2F%2Fdati.cdec.it%2Flod%2Fshoah%2F%3E+%0D%0AWHERE+%0D%0A%7B+%3Furi+a+foaf%3APerson%3B+%0D%0A+++++++rdfs%3Alabel+%3Fname%3B+%0D%0A+++++++bio-ext%3AbirthPlace+%3Fbirth.+%0D%0A%3Fbirth+rdfs%3Alabel+%3FbirthPlace.%0D%0A%3Furi+shoah%3Apersecution+%3Fpers.%0D%0AOPTIONAL%7B%0D%0A+++%3Fpers+shoah%3AarrestPlace+%3Farr.+%0D%0A+++%3Farr++rdfs%3Alabel+%3FarrestPlace.%0D%0A%7D%0D%0AOPTIONAL%7B%0D%0A+++%3Fpers+shoah%3AconvoyDeparturePlace+%3Fracc.+%0D%0A+++%3Fracc+rdfs%3Alabel+%3Fraccolta.%0D%0A%7D%0D%0A%7D+ORDER+BY+%3Fname&amp;format=text%2Fhtml&amp;timeout=0&amp;debug=on"><em>verifica</em></a><em>]</em></p><iframe src="" width="0" height="0" frameborder="0" scrolling="no"><a href="https://medium.com/media/20e9d260be68a9838fc60946dc6fc1e0/href">https://medium.com/media/20e9d260be68a9838fc60946dc6fc1e0/href</a></iframe><p><em>Il trasferimento nei campi di concentramento avveniva tramite la formazione di convogli ferroviari.[</em><a href="http://lod.xdams.org/sparql?default-graph-uri=&amp;query=PREFIX+shoah%3A+%3Chttp%3A%2F%2Fdati.cdec.it%2Flod%2Fshoah%2F%3E%0D%0APREFIX+bio-ext%3A+%3Chttp%3A%2F%2Fdati.cdec.it%2Flod%2Fbio-ext%2F%3E%0D%0A%0D%0ASELECT+distinct+%3Fconvoy+%3FdeparDate+%3FlabelCamp+%0D%0AFROM+%3Chttp%3A%2F%2Fdati.cdec.it%2Flod%2Fshoah%2F%3E++%0D%0AWHERE%0D%0A%7B+%0D%0A%3Furi+a+shoah%3AConvoy%3B%0D%0A++++++++++rdfs%3Alabel+%3Fconvoy%3B%0D%0A++++++++++shoah%3AdepartureDate+%3FdeparDate%3B%0D%0A++++++++++shoah%3AtoNaziCamp++%3FnaziCamp.%0D%0A%3FnaziCamp+rdfs%3Alabel+%3FlabelCamp%0D%0A%7D%0D%0AORDER+BY+%3FdeparDate&amp;format=text%2Fhtml&amp;timeout=0&amp;debug=on"><em>verifica</em></a><em>]</em></p><iframe src="" width="0" height="0" frameborder="0" scrolling="no"><a href="https://medium.com/media/b587a41e0c4e17065eb052cca7617134/href">https://medium.com/media/b587a41e0c4e17065eb052cca7617134/href</a></iframe><p><em>E per ciascun convoglio partiva un treno carico di persone.[</em><a href="http://lod.xdams.org/sparql?default-graph-uri=&amp;query=PREFIX+shoah%3A+%3Chttp%3A%2F%2Fdati.cdec.it%2Flod%2Fshoah%2F%3E%0D%0APREFIX+bio-ext%3A+%3Chttp%3A%2F%2Fdati.cdec.it%2Flod%2Fbio-ext%2F%3E%0D%0A%0D%0ASELECT+DISTINCT+%3FlabelConvoy+%3FdeparDate+%3FlabelCamp+%3Fgender+%28count%28%3Fgender%29+as+%3Fcount%29++%0D%0AFROM+%3Chttp%3A%2F%2Fdati.cdec.it%2Flod%2Fshoah%2F%3E+where%0D%0A%7B%0D%0A+++%3Fconvoy+a+shoah%3AConvoy%3B%0D%0A+++++++++++rdfs%3Alabel+%3FlabelConvoy%3B%0D%0A+++++++++++shoah%3AdepartureDate+%3FdeparDate%3B%0D%0A+++++++++++shoah%3AtoNaziCamp+%3FnaziCamp.%0D%0A%3FnaziCamp+rdfs%3Alabel+%3FlabelCamp.%0D%0A%0D%0A%3Fperson+shoah%3Apersecution+%3Fpers.%0D%0A%3Fpers+shoah%3Aconvoy+%3Fconvoy.%0D%0A%0D%0AOPTIONAL+%7B%3Fperson+foaf%3Agender+%3Fgender.%7D%0D%0A%7D+ORDER+BY+%3Fconvoy&amp;format=text%2Fhtml&amp;timeout=0&amp;debug=on"><em>verifica</em></a><em>]</em></p><iframe src="" width="0" height="0" frameborder="0" scrolling="no"><a href="https://medium.com/media/8a288f5ed1b34aeba9efa8c22ae2422a/href">https://medium.com/media/8a288f5ed1b34aeba9efa8c22ae2422a/href</a></iframe><p><em>All’interno di quei carichi c’erano anche bambini. [</em><a href="http://lod.xdams.org/sparql?default-graph-uri=&amp;query=PREFIX+shoah%3A+%3Chttp%3A%2F%2Fdati.cdec.it%2Flod%2Fshoah%2F%3E%0D%0APREFIX+bio-ext%3A+%3Chttp%3A%2F%2Fdati.cdec.it%2Flod%2Fbio-ext%2F%3E%0D%0A%0D%0ASELECT+DISTINCT+%3FlabelConvoy+%3Fbirth+%3FdeparDate+%3FlabelCamp+%3Fgender++%28count%28%3Fgender%29+as+%3Fcount%29++%0D%0AFROM+%3Chttp%3A%2F%2Fdati.cdec.it%2Flod%2Fshoah%2F%3E+%0D%0AWHERE%0D%0A%7B%3Fconvoy+a+%3Chttp%3A%2F%2Fdati.cdec.it%2Flod%2Fshoah%2FConvoy%3E%3B%0D%0A+++++++++rdfs%3Alabel+%3FlabelConvoy%3B%0D%0A+++++++++shoah%3AdepartureDate+%3FdeparDate%3B%0D%0A+++++++++shoah%3AtoNaziCamp++++%3FnaziCamp.%0D%0A%3FnaziCamp+rdfs%3Alabel+%3FlabelCamp.%0D%0A%3Fperson+shoah%3Apersecution+%3Fpers%3B+%0D%0Abio-ext%3AdateOfBirth+%3Fbirth.%0D%0A%3Fpers+shoah%3Aconvoy+%3Fconvoy.%0D%0A%0D%0AOPTIONAL+%7B%3Fperson+foaf%3Agender+%3Fgender.%7D%0D%0AFILTER%28REGEX%28%3Fbirth+%2C%27%5E194%27%2C%27i%27%29+%7C%7CREGEX%28%3Fbirth+%2C%27%5E193%27%2C%27i%27%29%29%0D%0A%7D+ORDER+BY+%3Fconvoy&amp;format=text%2Fhtml&amp;timeout=0&amp;debug=on"><em>verifica</em></a><em>]</em></p><iframe src="" width="0" height="0" frameborder="0" scrolling="no"><a href="https://medium.com/media/937b6dcbba1cc9b24457d1563f8d2b8a/href">https://medium.com/media/937b6dcbba1cc9b24457d1563f8d2b8a/href</a></iframe><figure><img alt="" src="https://cdn-images-1.medium.com/max/1024/1*wczSPxymYTQeZ_GU9Qr-JA.png" /></figure><p><em>Tra tutte le bambine ce n’era una nata il 10 settembre del 1930 che si chiamava </em><strong><em>Liliana</em></strong><em> </em><strong><em>Segre</em></strong><em>. [</em><a href="http://lod.xdams.org/sparql?default-graph-uri=&amp;query=PREFIX+bio-ext%3A+%3Chttp%3A%2F%2Fdati.cdec.it%2Flod%2Fbio-ext%2F%3E%0D%0A%0D%0ASELECT+%3Fname+%3Fsurname+%3Fbirth%0D%0AFROM+%3Chttp%3A%2F%2Fdati.cdec.it%2Flod%2Fshoah%2F%3E%0D%0A%0D%0A%7B%0D%0A%3Furi++a+foaf%3APerson%3B%0D%0A++++++foaf%3AfirstName+%3Fname%3B%0D%0A++++++foaf%3AfamilyName+%3Fsurname%3B%0D%0A++++++bio-ext%3AdateOfBirth+%3Fbirth.%0D%0A%0D%0AFILTER%28REGEX%28%3Fname%2C+%22Liliana%22%2C+%22i%22%29%29.%0D%0AFILTER%28REGEX%28%3Fsurname%2C+%22Segre%22%2C+%22i%22%29%29.%0D%0AFILTER%28REGEX%28%3Fbirth%2C+%2219300910%22%2C+%22i%22%29%29.%0D%0A%7D&amp;format=text%2Fhtml&amp;timeout=0&amp;debug=on"><em>verifica</em></a><em>]</em></p><iframe src="" width="0" height="0" frameborder="0" scrolling="no"><a href="https://medium.com/media/a7a46d99ad57e8331169c1d6dd4fa12c/href">https://medium.com/media/a7a46d99ad57e8331169c1d6dd4fa12c/href</a></iframe><figure><img alt="" src="https://cdn-images-1.medium.com/max/457/0*7MaGJa6rBZMAOa4s.jpg" /></figure><p><em>Nasce a Milano da papà Alberto e mamma Lucia. Il nonno paterno si chiamava Giuseppe, la nonna paterna Olga Loevvy. Il nonno materno si chiamava Alfredo Foligno mentre la nonna materna si chiamava Bianca Levi. Anche lei, insieme al padre, al nonno Giuseppe e a nonna Olga, avrebbe fatto parte di uno dei convogli.<br>[</em><a href="http://lod.xdams.org/sparql?default-graph-uri=&amp;query=PREFIX+bio-ext%3A+%3Chttp%3A%2F%2Fdati.cdec.it%2Flod%2Fbio-ext%2F%3E%0D%0A%0D%0ASELECT+%3FfirstName+%3FfamilyName++%3FfatherName+%3Fmaternal_grandfatherName+%3Fmaternal_grandmotherName+%3FmotherMaidenName+%3FmotherName+++%3Fpaternal_grandfatherName%0D%0A%3Fpaternal_grandmotherName+%3FshoahSurvivor++%3FuncleName+%3FbirthPlace%0D%0A%0D%0AFROM+%3Chttp%3A%2F%2Fdati.cdec.it%2Flod%2Fshoah%2F%3E%0D%0AWHERE+%0D%0A%7B%0D%0A%3Furi++a+foaf%3APerson%3B%0D%0A++++++foaf%3AfirstName+%3FfirstName%3B%0D%0A++++++foaf%3AfamilyName+%3FfamilyName%3B%0D%0A++++++bio-ext%3AfatherName+%3FfatherName%3B%0D%0A++++++bio-ext%3Amaternal_grandfatherName+%3Fmaternal_grandfatherName%3B%0D%0A++++++bio-ext%3Amaternal_grandmotherName+%3Fmaternal_grandmotherName%3B%0D%0A++++++bio-ext%3AmotherMaidenName+%3FmotherMaidenName%3B%0D%0A++++++bio-ext%3AmotherName+%3FmotherName%3B%0D%0A++++++bio-ext%3Apaternal_grandfatherName+%3Fpaternal_grandfatherName%3B%0D%0A++++++bio-ext%3Apaternal_grandmotherName+%3Fpaternal_grandmotherName%3B%0D%0A++++++bio-ext%3AshoahSurvivor+%3FshoahSurvivor%3B%0D%0A++++++bio-ext%3AmarriedName+%3FmarriedName%3B%0D%0A++++++bio-ext%3AuncleName+%3FuncleName%3B%0D%0A++++++bio-ext%3AbirthPlace+%5Brdfs%3Alabel+%3FbirthPlace%5D.%0D%0A++++++FILTER%28%3Furi+%3D+%3Chttp%3A%2F%2Fdati.cdec.it%2Flod%2Fshoah%2Fperson%2F7664%3E%29+++%0D%0A%7D&amp;format=text%2Fhtml&amp;timeout=0&amp;debug=on"><em>verifica</em></a><em>]</em></p><iframe src="" width="0" height="0" frameborder="0" scrolling="no"><a href="https://medium.com/media/c4946c614151b0653bd43fbcb055f0d2/href">https://medium.com/media/c4946c614151b0653bd43fbcb055f0d2/href</a></iframe><figure><img alt="" src="https://cdn-images-1.medium.com/max/1024/1*vBTkCa_M2tQRRcLf7X1Asg.png" /></figure><p>A differenza del Web tradizionale, dove ad essere collegati sono pagine Web, nel Web Semantico la connessione è a livello di dato e ogni collegamento rappresenta una relazione tipizzata da un’esplicita formalizzazione ottenuta tramite un linguaggio comprensibile alle macchine. Nel Web Semantico rappresentiamo una particolare realtà di interesse (il dominio di riferimento) mediante strutture a grafo in cui i nodi sono istanze di <strong>concetti</strong> (i cerchi in figura) e le connessioni tra i nodi sono le <strong>proprietà</strong> (le frecce in figura). Tale rappresentazione consente la navigazione tra dati mediante strumenti visuali (in questo caso è stato utilizzato <a href="http://dati.cdec.it/lodlive/?http://dati.cdec.it/lod/shoah/person/7664"><strong>LodLive</strong></a>) e le proprietà consentono di esplorare il grafo di conoscenza (<em>knowledge graph</em>) del dominio. Nel grafo in figura i cerchi verdi rappresentano <em>risorse</em> di classe “<strong>Persona”</strong>, i cerchi gialli <em>risorse</em> di classe “<strong>Persecuzione</strong>”. Le classi e le proprietà sono stati definite <em>ex-ante</em> da una ontologia sviluppata <em>ad-hoc</em> per modellare il dominio Shoah.</p><p><em>Giorno 8 dicembre 1943 Liliana viene arrestata a Selvetta di Viggiù, in provincia di Varese, all’età di 13 anni. Successivamente viene trasferita nel carcere di Milano. Dopo essere stata assegnata al convoglio n.6 (che passava anche da Verona), il 30 gennaio 1944 parte dalla stazione di Milano Centrale verso il campo di concentramento di Auschwitz, che raggiunge dopo 7 giorni. Alla selezione Liliana riceve il numero di matricola </em><strong><em>75190</em></strong><em> che le viene tatuato sull’avambraccio. Il 18 gennaio 1945 da Auschwitz viene trasferita al campo di Ravensbrueck. Il 28 gennaio 1945 viene trasferita da Ravensbrueck a Malchow. Viene liberata il 30 aprile 1945, unica superstite della sua famiglia. [</em><a href="http://lod.xdams.org/sparql?default-graph-uri=&amp;query=PREFIX+shoah%3A+%3Chttp%3A%2F%2Fdati.cdec.it%2Flod%2Fshoah%2F%3E%0D%0A%0D%0ASELECT+%3FfirstName+%3FfamilyName++%3FarrestPlace+%3FdetentionPlace+%3FcampSerialNumber+%3FconvoyLabel+%3FconvoyDeparturePlace+%0D%0A+++++++%3FconvoyDepartureDate+%3FconvoyArrivalDate+%3FtransferNaziCampLabel+%3FnaziCamp+%0D%0A+++++++%3FfromNaziCamp+%3FtransferNaziCampDate+%3FtoNaziCamp+%3Fliberation%0D%0AFROM+%3Chttp%3A%2F%2Fdati.cdec.it%2Flod%2Fshoah%2F%3E%0D%0AWHERE%0D%0A%7B%0D%0A%3Furi+a+foaf%3APerson%3B%0D%0A+++++foaf%3AfirstName+%3FfirstName%3B%0D%0A+++++foaf%3AfamilyName+%3FfamilyName%3B%0D%0A+++++shoah%3Apersecution+%3Fpersecution.%0D%0A%3Fpersecution+shoah%3AarrestPlace+%5Brdfs%3Alabel+%3FarrestPlace%5D%3B%0D%0A+++++++++++++shoah%3AdetentionPlace+%5B+rdfs%3Alabel+%3FdetentionPlace%5D%3B%0D%0A+++++++++++++shoah%3AcampSerialNumber+%3FcampSerialNumber%3B%0D%0A+++++++++++++shoah%3Aconvoy+%3Fconvoy.%0D%0A%3Fconvoy+rdfs%3Alabel+%3FconvoyLabel%3B%0D%0A++++++++shoah%3AdepartureDate+%3FconvoyDepartureDate%3B%0D%0A++++++++shoah%3AarrivalDate+%3FconvoyArrivalDate%3B%0D%0A++++++++shoah%3AconvoyDeparturePlace+%5Brdfs%3Alabel+%3FconvoyDeparturePlace%5D%3B%0D%0A++++++++shoah%3AtoNaziCamp+%5Brdfs%3Alabel+%3FnaziCamp%5D.%0D%0A%3Fpersecution+shoah%3AnaziCampTransfer+%3FtransferNaziCamp.%0D%0A%3FtransferNaziCamp+rdfs%3Alabel+%3FtransferNaziCampLabel%3B%0D%0A++++++++++++++++++shoah%3AtransferDate+%3FtransferNaziCampDate%3B%0D%0A++++++++++++++++++shoah%3AfromNaziCamp+%5Brdfs%3Alabel+%3FfromNaziCamp%5D%3B%0D%0A++++++++++++++++++shoah%3AtoNaziCamp+%5Brdfs%3Alabel+%3FtoNaziCamp%5D.%0D%0A%3Fpersecution++++++shoah%3Aliberation+%5Bshoah%3AliberationDate+%3Fliberation%5D.%0D%0AFILTER+%28%3Furi+%3D+%3Chttp%3A%2F%2Fdati.cdec.it%2Flod%2Fshoah%2Fperson%2F7664%3E%29.%0D%0A%7D&amp;format=text%2Fhtml&amp;timeout=0&amp;debug=on"><em>verifica</em></a><em>]</em></p><iframe src="" width="0" height="0" frameborder="0" scrolling="no"><a href="https://medium.com/media/8a537c8056843d7cffa453a7939e0a3d/href">https://medium.com/media/8a537c8056843d7cffa453a7939e0a3d/href</a></iframe><figure><img alt="" src="https://cdn-images-1.medium.com/max/1024/1*WmdnKwQ5lhM6Gy3u9iu7wg.png" /></figure><p>Anche in questo caso la rappresentazione semantica dei dati ci consente di visualizzare, in maniera più immediata, le connessioni tra i dati da cui è possibile generare automaticamente informazione.</p><p><em>Tornata libera si sposa con Alfredo Belli Paci da cui avrà tre figli: Alberto, Federica e Luciano. Oggi vive a Milano. [</em><a href="http://lod.xdams.org/sparql?default-graph-uri=&amp;query=PREFIX+bio-ext%3A+%3Chttp%3A%2F%2Fdati.cdec.it%2Flod%2Fbio-ext%2F%3E%0D%0A%0D%0ASELECT+%3FfirstName+%3FfamilyName+%3FconsortName+%3FchildName+%3FdistrictOfResidence%0D%0A%0D%0AFROM+%3Chttp%3A%2F%2Fdati.cdec.it%2Flod%2Fshoah%2F%3E%0D%0AWHERE+%0D%0A%7B%0D%0A%3Furi+a+foaf%3APerson%3B%0D%0A+++++foaf%3AfirstName+%3FfirstName%3B%0D%0A+++++foaf%3AfamilyName+%3FfamilyName%3B%0D%0A+++++bio-ext%3AconsortName+%3FconsortName%3B%0D%0A+++++bio-ext%3AchildName+%3FchildName%3B%0D%0A+++++bio-ext%3AdistrictOfResidence+%3FdistrictOfResidence.%0D%0A%0D%0AFILTER%28%3Furi+%3D+%3Chttp%3A%2F%2Fdati.cdec.it%2Flod%2Fshoah%2Fperson%2F7664%3E%29+++++++++++++++++++++++++++++++++++++++%0D%0A%7D&amp;format=text%2Fhtml&amp;timeout=0&amp;debug=on"><em>verifica</em></a><em>]</em></p><iframe src="" width="0" height="0" frameborder="0" scrolling="no"><a href="https://medium.com/media/737aa29e2c10b41d3f8146067186aad5/href">https://medium.com/media/737aa29e2c10b41d3f8146067186aad5/href</a></iframe><p><em>Nel 2018 il presidente della Repubblica la nomina senatrice a vita. [</em><a href="http://dati.senato.it/sparql?default-graph-uri=&amp;query=PREFIX+osr%3A+%3Chttp%3A%2F%2Fdati.senato.it%2Fosr%2F%3E%0D%0APREFIX+foaf%3A+%3Chttp%3A%2F%2Fxmlns.com%2Ffoaf%2F0.1%2F%3E%0D%0A%0D%0ASELECT+DISTINCT+%3Fsenatore+%3Fnome+%3Fcognome+%3Ftipo+%3FdataNomina%0D%0AWHERE+%7B%0D%0A++++%3Fsenatore+a+osr%3ASenatore.%0D%0A++++%3Fsenatore+foaf%3AfirstName+%3Fnome.%0D%0A++++%3Fsenatore+foaf%3AlastName+%3Fcognome.%0D%0A++++%3Fsenatore+osr%3Amandato+%3Fmandato.%0D%0A++++OPTIONAL+%7B+%3Fmandato+osr%3Afine+%3Ffine+%7D%0D%0A++++%3Fmandato+osr%3Alegislatura+%3Flegislatura.%0D%0A++++%3Fmandato+osr%3AtipoMandato+%3Ftipo.%0D%0A++++%3Fmandato+osr%3AdataNomina+%3FdataNomina.%0D%0A++++%3Fmandato+osr%3AtipoMandato+%3FtipoMandato.%0D%0A++++FILTER%28REGEX%28%3Fnome%2C+%22Liliana%22%2C%22i%22%29%29.%0D%0A++++FILTER%28REGEX%28%3Fcognome%2C+%22Segre%22%2C%22i%22%29%29.%0D%0A%7D+&amp;format=text%2Fhtml&amp;timeout=0&amp;debug=on"><em>verifica</em></a><em>]</em></p><iframe src="" width="0" height="0" frameborder="0" scrolling="no"><a href="https://medium.com/media/98ebcf868ca0d583a104e2cb6e69d0cb/href">https://medium.com/media/98ebcf868ca0d583a104e2cb6e69d0cb/href</a></iframe><p>Stiamo adesso interrogando i dati dalla <a href="http://dati.senato.it/sparql">fonte</a> del Senato della Repubblica</p><figure><img alt="" src="https://cdn-images-1.medium.com/max/800/1*eguOKPFK6C6iDIp-eTR40w.png" /></figure><p><em>Come primo atto legislativo propone l’istituzione di una </em><strong><em>Commissione</em></strong><em> parlamentare di indirizzo e controllo sui fenomeni di intolleranza, razzismo, antisemitismo e istigazione all’odio e alla violenza</em>. [<a href="http://dati.senato.it/sparql?default-graph-uri=&amp;query=PREFIX+ocd%3A+%3Chttp%3A%2F%2Fdati.camera.it%2Focd%2F%3E%0D%0APREFIX+osr%3A+%3Chttp%3A%2F%2Fdati.senato.it%2Fosr%2F%3E%0D%0APREFIX+foaf%3A+%3Chttp%3A%2F%2Fxmlns.com%2Ffoaf%2F0.1%2F%3E%0D%0A%0D%0ASELECT+DISTINCT+%3Fsenatore+%3Fnome+%3Fcognome++%3Fcommissione+%3Fdizione%0D%0AWHERE%0D%0A%7B%0D%0A++++%3Fsenatore+osr%3Aafferisce+%3Fafferenza.%0D%0A++++%3Fsenatore+foaf%3AfirstName+%3Fnome.%0D%0A++++%3Fsenatore+foaf%3AlastName+%3Fcognome.%0D%0A++++%3Fsenatore+a+osr%3ASenatore.%0D%0A++++%3Fafferenza+osr%3Acommissione+%3Fcommissione.%0D%0A++++%3Fafferenza+osr%3Acarica+%3Fcarica.%0D%0A++++%3Fcommissione+osr%3Adenominazione+%3Fdenominazione.%0D%0A++++%3Fdenominazione+osr%3Atitolo+%3Fdizione.%0D%0A++++OPTIONAL+%7B%3Fdenominazione+osr%3Afine+%3FdataFine%7D%0D%0A++++OPTIONAL+%7B%3Fafferenza+osr%3Afine+%3FfineAfferenza%7D%0D%0A++++FILTER%28REGEX%28%3Fnome%2C%27Liliana%27%29%29%0D%0A++++FILTER%28REGEX%28%3Fcognome%2C%27Segre%27%29%29%0D%0A%0D%0A%7D%0D%0A&amp;format=text%2Fhtml&amp;timeout=0&amp;debug=on">Verifica</a>]</p><p><em>Il 30 ottobre 2019 il </em><strong><em>Senato della Repubblica</em></strong><em> approva la mozione. [</em><a href="http://dati.senato.it/sparql?default-graph-uri=&amp;query=PREFIX+osr%3A+%3Chttp%3A%2F%2Fdati.senato.it%2Fosr%2F%3E%0D%0A%0D%0ASELECT+DISTINCT+%3FdataSeduta+%3FnumeroSeduta+%3Fvotazione+%3Fnumero+%3Foggetto+%3Fesito%0D%0A%3Fpresenti+%3Fmaggioranza+%3FnumeroLegale+%3Fvotanti+%3Ffavorevoli+%3Fcontrari%0D%0A%3Fastenuti+%3Fpresidente%0D%0AWHERE%0D%0A%7B%0D%0A++++%3Fvotazione+a+osr%3AVotazione.%0D%0A++++%3Fvotazione+osr%3Anumero+%3Fnumero.%0D%0A++++%3Fvotazione+osr%3Aseduta+%3Fseduta.%0D%0A++++%3Fvotazione+osr%3Apresenti+%3Fpresenti.%0D%0A++++%3Fvotazione+osr%3Afavorevoli+%3Ffavorevoli.%0D%0A++++%3Fvotazione+osr%3Amaggioranza+%3Fmaggioranza.%0D%0A++++%3Fvotazione+osr%3Avotanti+%3Fvotanti.%0D%0A++++%3Fvotazione+osr%3Acontrari+%3Fcontrari.%0D%0A++++%3Fvotazione+rdfs%3Alabel+%3Foggetto.%0D%0A++++%3Fseduta+osr%3AnumeroSeduta+%3FnumeroSeduta.%0D%0A++++%3Fseduta+osr%3AdataSeduta+%3FdataSeduta.%0D%0A++++%3Fseduta+osr%3Alegislatura+17+.%0D%0A++++%3Fvotazione+osr%3Aesito+%3Fesito.%0D%0A++++%3Fvotazione+osr%3Aastenuti+%3Fastenuti.%0D%0A++++%3Fvotazione+osr%3AnumeroLegale+%3FnumeroLegale.%0D%0A++++%3Fvotazione+osr%3Apresidente+%3Fpresidente%0D%0A%7D%0D%0AORDER+BY+DESC%28%3FdataSeduta%29+DESC%28%3FnumeroSeduta%29+DESC%28%3Fnumero%29%0D%0ALIMIT+100&amp;format=text%2Fhtml&amp;timeout=0&amp;debug=on"><em>Verifica</em></a><em>]</em></p><iframe src="" width="0" height="0" frameborder="0" scrolling="no"><a href="https://medium.com/media/1d3e8356ecc00c8709e4663371577355/href">https://medium.com/media/1d3e8356ecc00c8709e4663371577355/href</a></iframe><iframe src="" width="0" height="0" frameborder="0" scrolling="no"><a href="https://medium.com/media/19d4bdc3f89afd5cf7e5822954a9a7c6/href">https://medium.com/media/19d4bdc3f89afd5cf7e5822954a9a7c6/href</a></iframe><p>La prima interrogazione estrae tutte le commissioni a cui afferisce la senatrice Liliana Segre ma, purtroppo, non riusciamo a trovare la commissione appena costituita. Il motivo per cui la commissione non viene trovata ci viene fornito dalla seconda interrogazione, che estrae le ultime 100 votazioni elettroniche del Senato ma, purtroppo, i dati risalgono a novembre del 2016. Quindi i dati sono <em>autorevoli</em>, <em>certificati</em>, <em>comprensibili</em> ma <strong>non aggiornati.</strong> Per cui, in questo caso, una macchina, seppur dotata di intelligenza, <strong>non può</strong> verificare questo fatto, che noi esseri senzienti invece sappiamo essere avvenuto.</p><blockquote>Il 7 novembre 2019, a causa delle <strong>crescenti</strong> <strong>minacce e insulti</strong> che le sono rivolti attraverso internet, il prefetto di Milano <strong>le assegna una scorta</strong>.</blockquote><p>Anche in questo caso <strong>non possiamo verificare</strong> i fatti perché non esistono dei dati <em>autorevoli</em>, <em>certificati</em> e <em>comprensibili</em> dalle macchine, provenienti dall’attività della Prefettura, per cui ci dobbiamo fermare.</p><blockquote>Fine della storia</blockquote><p>Tutto ciò che ho scritto, ed è stato possibile verificare, poteva essere stato scritto autonomamente da una macchina. Così come ho fatto per la storia della senatrice Liliana Segre, perfino un software avrebbe potuto, conoscendo <strong>l’ontologia</strong> della Shoah, raccontare la biografia di tutti i perseguitati, in maniera automatica, verificabile e senza errori.</p><blockquote>Volete una prova?</blockquote><figure><img alt="" src="https://cdn-images-1.medium.com/max/1024/1*PhtVJRZspAn1Luzq1Yh3IQ.png" /></figure><p>Quella che vedete è una Web App, raggiungibile a questo <a href="http://pirrotta.info/pernondimenticare/mai/">link</a>, che sfrutta il <em>Knowledge-Graph </em>del <strong>CDEC </strong>e che, grazie alle connessioni semantiche, è in grado di interrogare tutto il grafo della conoscenza messo a disposizione dal centro di documentazione ebraica contemporanea. Utilizzando le tecnologie semantiche la Web App è in grado di “<strong>raccontare</strong>” la storia di donne e uomini che furono perseguitati durante la Shoah italiana. Le parole che vedete in <strong>grassetto</strong> sono state generate automaticamente grazie ai link semantici esistenti tra tutte le risorse del dominio, definite tramite una grammatica comprensibile dalle macchine.</p><p>È un nuovo modo di fare giornalismo? Non saprei. Una cosa è certa. Se tutti i dati delle informazioni fossero pubblicati da organismi autorevoli e certificati secondo le regole del Web Semantico, non solo si riuscirebbe a <strong>produrre</strong> informazione guidata dai dati ma si consentirebbe alle macchine di <strong>verificare</strong> in maniera automatica la veridicità delle informazioni, con buona pace dei produttori di fake news. Oggi, come non mai, chi produce fake news distorce la realtà e lucra consenso sull’ignoranza altrui. <strong>E oggi, come non mai, non possiamo tollerarlo più.</strong></p><p><em>Una nota a titolo personale adesso.<br></em>Questi fatti, insieme a rabbia, sgomento e senso di impotenza, mi hanno scosso non poco. Ho raccontato di vite strappate dalla follia umana, di eventi che mai sarebbero dovuti accadere, di lacrime, sofferenza e dolore. Penso che raccontare sia doveroso e sia lo strumento più potente che abbiamo per <strong>non dimenticare</strong>. E non essendo né giornalista né scrittore, ho voluto lasciare anch’io, nei modi che conosco e come meglio ho potuto, una traccia di memoria, per <strong>non dimenticare</strong> ciò che è stato.</p><p>Tanti anni fa lessi il diario di una giovane scrittrice olandese. Come Liliana Segre anche lei era di origine ebraica, anche lei deportata. Quella donna si chiamava <a href="https://it.wikipedia.org/wiki/Etty_Hillesum"><strong>Etty Hillesum</strong></a>, morì ad Auschwitz e conoscerla mi cambiò la vita.</p><figure><img alt="" src="https://cdn-images-1.medium.com/max/227/1*c376Y1pW7x2PBTmimso5Xg.png" /></figure><p><em>Se non sapremo offrire al mondo impoverito del dopoguerra nient’altro che i nostri corpi salvati ad ogni costo, e non un nuovo senso delle cose, attinto dai pozzi più profondi della nostra miseria e disperazione –, allora sarà troppo poco. Dai campi stessi dovranno irraggiarsi nuovi pensieri, nuove conoscenze dovranno portar chiarezza oltre i recinti di filo spinato, e congiungersi con quelle che là fuori ci si deve ora conquistare con altrettanta pena, e in circostanze che diventano quasi altrettanto difficili. E forse allora, sulla base di una comune e onesta ricerca di risposte chiarificatrici su questi avvenimenti inspiegabili, la vita sbandata potrà di nuovo fare un cauto passo avanti. […] E convinciamoci che ogni briciola di odio che aggiungiamo al mondo lo rende ancor più inospitale.</em><br>(<strong>Dal Diario di Etty Hillesum</strong>)</p><p>Se questo articolo ti è piaciuto mi aiuti a farlo conoscere con un <a href="https://twitter.com/intent/tweet?url=https%3A%2F%2Fmedium.com%2F%40gpirrotta%2Fgenerazione-e-verifica-di-notizie-di-qualit%25C3%25A0-attraverso-il-web-semantico-la-storia-di-liliana-6cd81f05e9fe&amp;via=gpirrotta&amp;text=Generazione%20e%20verifica%20di%20notizie%20di%20qualit%C3%A0%20attraverso%20il%20Web%20Semantico%3A%20la%20storia%20di%20Liliana%20Segre&amp;hashtags=semanticweb%20%23linkeddata%20%23shoah%20%23lilianasegre">tweet</a>?</p><img src="https://medium.com/_/stat?event=post.clientViewed&referrerSource=full_rss&postId=6cd81f05e9fe" width="1" height="1" alt="">]]></content:encoded>
        </item>
        <item>
            <title><![CDATA[Di obblighi di trasparenza, bussole disorientate e felini quantistici]]></title>
            <link>https://medium.com/@gpirrotta/di-obblighi-di-trasparenza-bussole-disorientate-e-felini-quantistici-cba20114d6f?source=rss-8f9654a9875------2</link>
            <guid isPermaLink="false">https://medium.com/p/cba20114d6f</guid>
            <category><![CDATA[semanticweb]]></category>
            <category><![CDATA[ontopia]]></category>
            <category><![CDATA[obblighi-di-pubblicazione]]></category>
            <category><![CDATA[linked-data]]></category>
            <category><![CDATA[trasparenza]]></category>
            <dc:creator><![CDATA[Giovanni Pirrotta]]></dc:creator>
            <pubDate>Wed, 21 Aug 2019 15:59:33 GMT</pubDate>
            <atom:updated>2019-09-01T07:43:37.625Z</atom:updated>
            <content:encoded><![CDATA[<p>Nel mio precedente <a href="https://medium.com/@gpirrotta/di-dati-aperti-indicatori-e-pubbliche-amministrazioni-f340d3e2299f">post</a> ho parlato dell’<strong>Open Data Maturity Report</strong>, documento strategico di monitoraggio con il quale la Commissione Europea rileva il grado di maturità degli open data negli stati membri. Successivamente ho cercato di fotografare la presenza di open data nei siti istituzionali delle città italiane calcolando l’<strong>indice</strong> di <strong>consapevolezza</strong> di <strong>opendata (ICO)</strong>, cioè una stima di predisposizione alla <strong>trasparenza</strong> dei comuni attraverso lo strumento opendata.</p><p>Parlando di trasparenza in Italia il documento normativo più importante è il <a href="https://www.normattiva.it/uri-res/N2Ls?urn:nir:stato:decreto.legislativo:2013-03-14;33!vig">decreto legislativo n. 33/2013</a> (e ss.mm.ii.), sul<em> riordino della disciplina riguardante gli obblighi di pubblicità, trasparenza e diffusione di informazioni da parte da parte delle pubbliche amministrazioni.</em></p><p>Il decreto ha come obiettivo fondamentale quello di favorire la prevenzione della corruzione, <em>riordinando</em> e <em>uniformando</em> gli <strong>obblighi</strong> e le <strong>modalità di pubblicazione </strong>per tutte le amministrazioni, derivanti dalle innumerevoli normative stratificate nel corso degli ultimi anni. Inoltre il decreto migliora l’<strong>accountability </strong>dei manager pubblici abilitando nuovi meccanismi di partecipazione e collaborazione tra PA e cittadini.</p><p>In particolare l’art. 9 del decreto Trasparenza recita:</p><blockquote>Ai fini della piena accessibilità delle informazioni pubblicate, nella home page dei siti istituzionali è collocata un’apposita sezione denominata «<strong>Amministrazione trasparente</strong>», al cui interno sono contenuti i dati, le informazioni e i documenti pubblicati ai sensi della normativa vigente. Al fine di evitare eventuali duplicazioni, la suddetta pubblicazione può essere sostituita da un <strong>collegamento ipertestuale</strong> alla sezione del sito in cui sono presenti i relativi dati, informazioni o documenti, assicurando la qualità delle informazioni di cui all’articolo 6.</blockquote><p>La porta di ingresso della trasparenza di ciascuna pubblica amministrazione è quindi (solitamente) un link presente nelle homepage dei siti Web istituzionali delle PA italiane, che rimanda ad una apposita sezione denominata <strong>Amministrazione Trasparente</strong>.</p><p>Il monitoraggio raccontato nel mio precedente post, relativo alla presenza di riferimenti open data sui siti istituzionali dei comuni italiani, si basava sulla scansione di un corpus dati costituito da tutte le homepage dei comuni presenti nell’indice IPA, scaricate in locale e opportunamente analizzate. Tale corpus era composto da <strong>7420 </strong>homepage e corrispondeva al <strong>94,8%</strong> di tutti i comuni italiani.</p><p>Avendo a disposizione tutte le homepage dei comuni italiani misuriamo adesso quanti di questi assolvono al sopra menzionato art.9. Partendo dallo stesso corpus utilizzato nel mio precedente post, effettuiamo una ricerca testuale di tutti i <em>link</em>, <em>bottoni</em>, <em>immagini</em> che rimandano alla sezione <em>Amministrazione Trasparente </em>delle rispettive PA e otteniamo che</p><blockquote>l’ <strong>85,75% </strong>di tutti i siti Web dei comuni italiani assolvono l’art.9 del decreto trasparenza.</blockquote><p>In realtà il dato reale è più alto in quanto a volte:</p><ul><li>la pagina del corpus è fittizia per la presenza di tag <em>FRAME </em>che puntano alla vera pagina Web per cui lo scraping non va a buon fine;</li><li>i link di rimando si trovano in menù <em>javascript </em>e non compaiono direttamente nel codice <em>HTML</em> della homepage;</li><li>l’homepage del sito istituzionale è un <strong>pre-sito</strong> di accesso a due macro-sezioni, una relativa al sito istituzionale delle PA, l’altra relativa al sito turistico del comune (come ad esempio il <a href="http://comune.viadana.mn.it/">comune di Viadana</a> (MN) nell’immagine)</li></ul><figure><img alt="" src="https://cdn-images-1.medium.com/max/1024/1*efE4LNeGiuPyZs66_UVr-Q.png" /></figure><h4>La Bussola della Trasparenza</h4><p>A fine 2016, l’Autorità Nazionale Anticorruzione (<strong>ANAC</strong>) approva le <a href="https://www.anticorruzione.it/portal/rest/jcr/repository/collaboration/Digital%20Assets/anacdocs/Attivita/Atti/determinazioni/2016/1310/Del.1310.2016.LGdet.pdf">linee guida</a> sulla trasparenza da cui le pubbliche amministrazione possono ricavare le indicazioni su come applicare la normativa sugli obblighi di pubblicazione. Insieme alle linee guida viene pubblicato sul <a href="https://www.anticorruzione.it/portal/public/classic/AttivitaAutorita/AttiDellAutorita/_Atto?ca=6667">sito ANAC</a> l’elenco puntuale e strutturato dei documenti, dati e informazioni che devono essere presenti nelle sezioni <em>Amministrazione Trasparente</em> di ciascuna PA, come contenuto degli obblighi di pubblicazione.</p><p>Tale elenco, costituito da più di 100 obblighi, è strutturato in sezioni per <em>macrofamiglie</em> e<em> tipologie di dati;</em> per ciascun obbligo è riportata la <strong>denominazione</strong>, il <strong>contenuto</strong> (dati, informazioni e documenti) e la <strong>frequenza</strong> di aggiornamento che la PA dovrà rispettare.</p><figure><img alt="" src="https://cdn-images-1.medium.com/max/1024/1*9rs12Q3e8WSP1uyDL2knEA.png" /></figure><p>Al fine di accompagnare le amministrazioni nel miglioramento continuo della qualità delle informazioni on-line, il<a href="http://www.funzionepubblica.gov.it/"> Dipartimento della Funzione Pubblica</a> ha realizzato un sistema in grado di analizzare, in modo automatico, i siti Web della pubbliche amministrazione ed, in particolare, la sezione <em>Amministrazione trasparente</em> prevista dalla normativa vigente. Il sistema realizzato prende il nome di <a href="http://bussola.magellanopa.it/"><strong>Bussola della Trasparenza</strong></a><strong>.</strong></p><figure><img alt="" src="https://cdn-images-1.medium.com/max/1024/1*FkMJ1-z1sa8VzrxHwr0NuA.png" /></figure><p>Attraverso un’interfaccia intuitiva e accessibile è possibile monitorare le PA presenti nell’indice IPA e calcolare il punteggio relativo al numero di obblighi di pubblicazione assolti. È possibile confrontare più PA, creare classifiche, accedere a un cruscotto con grafici, statistiche e analisi.</p><figure><img alt="" src="https://cdn-images-1.medium.com/max/974/1*TaJznHby4S5XcyqEI2nPMQ.png" /></figure><p>Il monitoraggio puntuale dei documenti, dati e informazioni previsti negli obblighi di trasparenza di tutte le PA è un’attività ardua, complessa e piena di insidie. Confesso che la prima volta che mi sono imbattuto in questo servizio sono rimasto positivamente sorpreso dalla potenza dello strumento e dalla facilità di utilizzo.</p><blockquote>Ma come spesso accade, le cose belle durano poco, qualcosa non mi tornava.</blockquote><p>Da un lato leggevo percentuali troppo alte di assolvimento degli obblighi da parte di comuni che conoscevo personalmente e che non brillavano certo per trasparenza. Dall’altro, andando direttamente sui siti dei comuni e verificando in modo puntuale l’assolvimento di quell’obbligo, non era presente alcun dato, informazione o documento relativo al contenuto dell’obbligo stesso. La domanda nasceva spontanea.</p><p><strong><em>Che cosa misurava quindi la Bussola della Trasparenza?</em></strong></p><figure><a href="https://www.freepik.com/free-vector/man-doubting-design_987207.htm"><img alt="" src="https://cdn-images-1.medium.com/max/308/1*OkjD87LHYeBoKlQrzI2ckQ.png" /></a><figcaption>Created by dooder — www.freepik.com</figcaption></figure><p>La risposta a questa domanda l’ho trovata direttamente sul sito della Bussola, nella <a href="http://bussola.magellanopa.it/il-progetto.html">pagina</a> di spiegazione del progetto:</p><blockquote>È <strong>importante</strong> sottolineare che la Bussola monitora soltanto la <strong>struttura</strong> dei siti Web delle pubbliche amministrazioni, ovvero la presenza all’interno dei siti delle sezioni previste dalla legge (es. Bandi di gara e contratti) e la loro articolazione secondo lo schema normativo. <strong>Non è, invece, analizzata la presenza delle informazioni all’interno delle varie sezioni e sotto-sezioni.</strong></blockquote><p>La bussola controlla quindi la presenza dei menù alle sezioni/sottosezioni degli obblighi di pubblicazione, verificando l’esistenza del link relativo, senza andare a verificare in modo puntuale i documenti presenti per ciascun obbligo. Si tratta di un controllo formale della presenza di aree dedicate agli obblighi di pubblicazione; dal punto di vista sostanziale lo strumento non mi fornisce alcuna misura sulla reale presenza dei documenti previsti dalla normativa.</p><p>Capisco che la <em>Bussola della Trasparenza</em> nasce come strumento di accompagnamento per le PA nell’assolvimento degli obblighi di pubblicazione, pur apprezzando il tentativo da parte del Dipartimento della Funzione Pubblica di aiutare le PA, devo dire purtroppo che lo strumento online, così come è stato concepito e per l’utilità nell’attività di monitoraggio da parte del cittadino, <strong>serve a poco</strong>.</p><p>La sensazione è un po’ quella del <a href="https://it.wikipedia.org/wiki/Paradosso_del_gatto_di_Schr%C3%B6dinger">paradosso del gatto di Schrödinger</a>, metafora utilizzata per illustrare i princìpi di incertezza della meccanica quantistica: un gatto viene chiuso in una scatola insieme ad un meccanismo <strong>aperto</strong> o <strong>chiuso</strong>, con probabilità del 50%, in grado di sprigionare un gas mortale per il gatto. L’unico modo per sapere se la scatola è piena di gas (e quindi se il gatto è morto) è quello di aprire la scatola, per cui, fino a quel momento, il gatto si troverà in una <strong>sovrapposizione</strong> di stati: è sia <strong>vivo</strong> sia <strong>morto</strong>.</p><figure><img alt="" src="https://cdn-images-1.medium.com/max/416/1*dEP4as3VfTAyzvU_cowZ2Q.png" /></figure><p>Allo stesso modo, con un pizzico di fantasia, quando cerco una PA nella Bussola della Trasparenza e rilevo che un obbligo di pubblicazione è assolto mi viene da associare l’obbligo di pubblicazione al gatto nella scatola, cioè al fatto che si trovi in uno stato indeterminato; l’obbligo è nello stesso istante sia <strong>assolto</strong>, sia <strong>non assolto</strong>. L’unico modo per risolvere la sovrapposizione di stati è aprire la scatola, cioè entrare nel sito e verificare la presenza dei documenti. :-)</p><h4>Bussole e Opendata</h4><p>Mettendo da parte questa parentesi scherzosa mi chiedo allora se sia possibile migliorare questo strumento e in caso affermativo, come?</p><p>A mio avviso, una delle sezioni più interessanti della Bussola della Trasparenza, è quella contenente l’esito delle verifiche effettuate, per la specifica sezione di “Amministrazione trasparente”, su tutti i siti web delle pubbliche amministrazioni. Questi dati sono disponibili in <a href="http://bussola.magellanopa.it/open-data.html">open data</a>, aggiornati frequentemente e rilasciati con licenza Creative Commons BY-SA.</p><p>Per ciascun obbligo di pubblicazione è presente un file CSV strutturato nel seguente modo:</p><ul><li><strong>Denominazione</strong>: nome dell’ente;</li><li><strong>Tipologia</strong>: descrizione della tipologia di appartenenza dell’ente;</li><li><strong>Regione</strong>: regione sede legale dell’ente;</li><li><strong>Provincia</strong>: provincia della sede legale dell’ente;</li><li><strong>Comune</strong>: comune della sede legale dell’ente;</li><li><strong>Esito</strong>: esito della verifica di presenza della sezione nel sito dell’ente. Questo campo può assumere i valori <strong>positivo</strong>, <strong>negativo</strong> o <strong>sito non presente/errato</strong>;</li><li><strong>Link</strong>: link alla sezione nel sito dell’ente;</li><li><strong>Data di aggiornamento</strong>: data e ora di aggiornamento del file.</li></ul><p>L’attributo più importante è sicuramente il campo <strong>esito</strong>, che ci dà informazioni sulla presenza o meno del menù relativo all’obbligo di pubblicazione monitorato; se positivo viene riportato anche l’URL di riferimento nel campo <strong>link</strong>. Queste informazioni sono degli ottimi punti di partenza per iniziare a esplorare lo spazio delle soluzioni possibili al problema del monitoraggio puntuale degli obblighi di pubblicazione.</p><h4>Un primo approccio</h4><p>Un primo tentativo potrebbe essere quello di selezionare un obbligo di trasparenza e analizzare tutte le pagine Web dei comuni di cui si riscontra un esito positivo negli open data.</p><p>Prendiamo ad esempio l’obbligo di pubblicazione: <strong>Informazioni Ambientali</strong></p><p>Il file <a href="http://bussola.magellanopa.it/open-data.html?type=1025&amp;tx_bussola_showcrawler%5Baction%5D=downloadFileElencoAmm&amp;tx_bussola_showcrawler%5Bcontroller%5D=Crawler&amp;IdIndicatore=266&amp;nomeIndicatore=Informazioni%20ambientali">CSV</a> riporta gli esiti di <strong>23782</strong> pubbliche amministrazioni, prese dall’indice IPA. Come primo passo effettuiamo il download di tutte le pagine in cui lo strumento Bussola della Trasparenza rileva la presenza del link “<em>Informazioni Ambientali</em>”.</p><p>Nel <a href="https://medium.com/@gpirrotta/di-dati-aperti-indicatori-e-pubbliche-amministrazioni-f340d3e2299f">post precedente</a>, quello relativo alla presenza degli open data, abbiamo analizzato il corpus dati delle homepage dei comuni italiani. In questo monitoraggio invece il monitoraggio è esteso a tutte le PA presenti nell’indice IPA.</p><p>Selezionando solo le PA con esito <strong>positivo</strong>, otteniamo <strong>11876 </strong>pagine scaricate pronte da analizzare. Anche in questo caso non scomodiamo nessuna tecnica particolare di NLP ma decidiamo di estrarre semplicemente tutti i link collegati a file di tipo <strong>pdf</strong>, <strong>rtf</strong>, <strong>xls</strong>, <strong>xlsx</strong>, <strong>doc</strong>, <strong>odt</strong>, <strong>ods</strong>, <strong>xml.</strong></p><blockquote>Mi fermo subito.</blockquote><p>A causa dell’alto numero di falsi positivi rilevati, il mio approccio risulta essere del tutto inefficace. I risultati sono <strong>disastrosi</strong>.</p><figure><img alt="" src="https://cdn-images-1.medium.com/max/495/1*Nd4FpcMFPilaXfiEyr8IcA.png" /></figure><p>Una delle criticità più importanti rilevate durante la fase di analisi riguarda i nomi dei file. Sia il nome sia il formato del file, relativo al documento pubblicato in Amministrazione Trasparente, viene scelto dalla PA in modo del tutto arbitrario. Non esiste né una nomenclatura standard né regole di uniformità, per cui l’euristica utilizzata per cercare un documento potenzialmente presente è del tutto inefficace. Inoltre, a volte, la pagina scaricata non è quella in cui si trovano i file, dato che l’URL indicato negli opendata della Bussola è, come già sappiamo, la pagina in cui si trova il menù indicante il nome dell’obbligo. Per accedere alla vera risorsa da analizzare bisognerebbe procedere allo scraping della pagina, recuperare il vero link dell’obbligo, effettuare il download e procedere all’analisi di questa nuova pagina. In aggiunta, spesso i file sono raggiungibili dopo l’apertura di due o più pagine interne e, non esistendo una regola fissa, molto dipende dall’applicativo gestionale. Durante lo scraping sono stati rilevati inoltre elementi di disturbo, come ad esempio la presenza di link a file PDF relativi a <strong>cookie policy</strong>, <strong>privacy policy</strong>, etc, non tutti facilmente identificabili solo dal nome.</p><p>Per la complessità riscontrata e la difficoltà ad individuare pattern ricorrenti in grado di automatizzare il monitoraggio del livello di trasparenza dei siti delle PA italiane, sono stato costretto a desistere da questo approccio e cercare un’altra strada.</p><figure><img alt="" src="https://cdn-images-1.medium.com/max/249/0*otX2xezZiwjugIFP.jpg" /></figure><h4>Una nuova speranza</h4><p>Dobbiamo quindi arrenderci all’evidenza? Dobbiamo rassegnarci al fatto di non poter controllare in modo automatico gli obblighi di pubblicazione delle PA italiane attraverso un sistema centralizzato? Non è possibile quindi misurare un indice della trasparenza nazionale e monitorare l’andamento degli assolvimenti normativi?</p><p>Attualmente, dal punto di vista delle modalità di pubblicazione, i dati e i documenti presenti nelle sezioni Amministrazione Trasparente di tutte le PA italiane rappresentano una babilonia di informazioni e di documenti <em>uplodati</em> online in maniera caotica, senza regole e standard.</p><p>Per poter processare, elaborare e confrontare questi dati bisognerebbe innanzitutto mettersi d’accordo sulle regole del gioco, imparare a parlare la stessa lingua e attenersi in maniera rigorosa a princìpi condivisi. Ma come fare? Dove guardare e soprattutto come partire?</p><p><em>Quando il </em><strong><em>Web</em></strong><em> si dispera nel caos, il </em><strong><em>Semantic Web</em></strong><em> fa la sua comparsa (cit. Divina Scuola di Hokuto) </em>😁</p><p><strong>In realtà non dobbiamo inventare nulla</strong>, abbiamo già tutto pronto, disponibile, adesso. Non si tratta più di cercare il miglior approccio all’interno di uno spazio infinito di possibili soluzioni perché il <strong>Semantic Web</strong> rappresenta <strong>la soluzione </strong>migliore per risolvere definitivamente il problema dell’interoperabilità semantica dei dati. Con questo approccio riusciamo a creare un ambiente in cui è possibile associare ai dati un contesto semantico in un formato adatto all’interrogazione, all’interpretazione e, più in generale, all’elaborazione automatica.</p><p>E su questa scia, in ambito obblighi di trasparenza, la soluzione si chiama <a href="https://github.com/italia/daf-ontologie-vocabolari-controllati"><strong>Ontòpia</strong></a>.</p><figure><img alt="" src="https://cdn-images-1.medium.com/max/451/1*xV63aS1PmwUetON0XP_C-Q.png" /></figure><p>Usare Ontopia significa:</p><ul><li>standardizzare l’architettura del patrimonio informativo delle pubbliche amministrazioni;</li><li>definire un linguaggio comune per l’interscambio dei dati;</li><li>creare un ambiente in cui poter interrogare quello che viene chiamato il <strong>grafo della conoscenza </strong>della pubblica amministrazione italiana o <strong>Knowledge Graph;</strong></li><li>creare una PA <strong>moderna</strong> e <strong>innovativa</strong>, <strong>trasparente</strong> e <strong>aperta</strong>, i cui dati sono <strong>semanticamente interoperabili;</strong></li><li>facilitare lo sviluppo di nuovi sistemi informativi, agevolare lo scambio di dati, abilitare l’integrazione tra dati provenienti da fonti diverse.</li></ul><p>Di Ontopia ne ho parlato in un mio precedente <a href="http://giovanni.pirrotta.it/blog/2019/05/04/alla-scoperta-di-ontopia-il-knowledge-graph-della-pa-italiana/">post</a>. <br>Ontopia è una famiglia di ontologie e di vocabolari controllati in grado di definire formalmente i domini del mondo delle pubbliche amministrazioni. Il progetto è sviluppato da <a href="https://www.agid.gov.it/">AGID</a> (Agenzia per l’Italia Digitale), con il contributo del Team per la Trasformazione Digitale, ma è allo stesso tempo un progetto aperto, collaborativo e partecipativo: chiunque può contribuire allo sviluppo di nuove ontologie e/o al miglioramento di quelle esistenti.</p><blockquote>Ma come può aiutarci Ontopia per risolvere il nostro problema iniziale?</blockquote><p>L’unico modo per far parlare <strong>23782</strong> PA insieme e soprattutto riuscire a <strong>capirsi</strong>, come già detto, è utilizzare la stessa lingua. Non esistono alternative o scorciatoie. E se qualche PA questa lingua non la conosce, allora la deve imparare. E in fretta.</p><p>La soluzione al nostro problema si chiama <a href="https://github.com/italia/daf-ontologie-vocabolari-controllati/tree/master/Ontologie/Transparency/latest"><strong>Transparency-AP-IT</strong></a><strong> </strong>ed è una delle ultime ontologie nate nel progetto Ontopia. Tale schema modella proprio gli obblighi di trasparenza della pubblica amministrazione italiana come descritti dal d.lgs 33/2013 e dal d.lsg. 97/2016, definendo formalmente gli <em>atomi</em> del dominio relativo gli obblighi di pubblicazione. L’ontologia rappresenta l’anello mancante della nostra evoluzione digitale da cui partire per il superamento del problema del monitoraggio della trasparenza dei siti istituzionali della PA. Anche se il modello è ancora in fase di sviluppo, nella figura sottostante è possibile vedere i concetti e le relazioni dell’ontologia.</p><figure><img alt="" src="https://cdn-images-1.medium.com/max/1024/1*KCtng7xTTq7drT9t2gDVlw.png" /></figure><p>In questo post non entreremo nel dettaglio dell’ontologia (per maggiori informazioni <a href="https://github.com/italia/daf-ontologie-vocabolari-controllati/tree/master/Ontologie/Transparency/latest">qui</a>); essa definisce la grammatica di base per descrivere gli obblighi di pubblicazione presenti all’interno delle sezioni <strong>Amministrazione Trasparente</strong> di tutte le PA italiane.</p><p>Pubblicare gli obblighi della trasparenza utilizzando Ontopia significa far diventare i dati <em>machine-readable</em>, cioè comprensibili ed elaborabili dalle macchine, interrogabili in modo automatico e centralizzato, riutilizzabili in contesti diversi da quello originale.</p><p>Sfruttando le potenzialità del Web Semantico, il sito istituzionale di una PA moderna dovrebbe prevedere inoltre la pubblicazione degli obblighi di trasparenza, all’interno della sezione Amministrazione Trasparente, secondo le regole dei <a href="http://linkeddata.org/">Linked Data.</a> I dati sarebbero così raggiungibili utilizzando le stesse regole del Web <em>tradizionale</em> ma supporterebbero in modo nativo l’interoperabilità semantica.</p><p>Potremmo interrogare direttamente il Web per chiedere informazioni in modo automatico e puntuale sui documenti di uno o più obblighi di pubblicazione presenti in Amministrazione Trasparente di uno o più PA italiane, elaborare tali richieste e aumentare la consapevolezza che abbiamo sulla trasparenza di una particolare PA. O di tutte le PA di una particolare categoria, ad esempio di tutte le regioni italiane. Oppure potremmo filtrare le richieste chiedendo informazioni <strong>reali</strong> sulla trasparenza di tutte le PA di una singola regione d’Italia e fare poi dei confronti territoriali a livello nazionale.</p><p>I dati così pubblicati costituirebbero un’<em>arma </em>di supporto alle decisioni molto potente, sia internamente a livello politico/amministrativo, sia esternamente per le attività di monitoraggio. Le possibilità di riutilizzo sarebbero infinite e il potenziale che ne scaturirebbe avrebbe un forte impatto sulla società e sul grado di trasparenza, fiducia e rendicontazione dell’attività amministrativa.</p><h4>Conclusioni</h4><p>Abbiamo individuato nell’utilizzo delle tecnologie semantiche la soluzione migliore e definitiva al nostro problema iniziale. Se tutte le applicazioni utilizzate dalle PA per la gestione della sezione Amministrazione Trasparente, fossero <em>Ontopia-compliant, </em>i dati sarebbero facilmente <em>interrogabili e elaborabili </em>dalle macchine e il monitoraggio centralizzato risulterebbe facilmente realizzabile. La <em>Bussola della Trasparenza</em> potrebbe allora beneficiare di tali tecnologie e fornire uno strumento molto più utile:</p><ul><li>alla stessa pubblica amministrazione, che potrebbe confrontare il proprio sito con altri siti di altre amministrazione e attivarsi per adeguarlo sempre più alle linee guida e alla trasparenza;</li><li>al cittadino, che potrebbe consultare il sito del proprio comune per capire quanto è <strong>realmente</strong> trasparente sul web, effettuare statistiche e vedere classifiche reali, diventando parte attiva e stimolando l’amministrazione ad essere più aperta;</li><li>a ricercatori e giornalisti, che potrebbero scaricare i dati in tempo reale per lavoro, studi, ricerche e per effettuare statistiche, analisi, grafici, report, fornendo proposte e suggerimenti.</li></ul><p><strong>p.s</strong>.: un’ultima nota sul servizio <em>Bussola della Trasparenza. <br></em>Due anni fa, con l’amico <a href="https://twitter.com/giuragu">Giuseppe Ragusa</a>, ci siamo inventati <a href="http://www.foiapop.it/">FoiaPop</a>, il portale che facilita la creazione di richieste di accesso civico semplice e generalizzato. Nelle richieste di accesso civico semplice, FoiaPop utilizza gli open data della Bussola della Trasparenza e, per agganciare le PA della Bussola a quelle dell’indice IPA, siamo stati costretti <strong>incredibilmente</strong> a utilizzare come <strong>chiave</strong> la <strong>denominazione</strong> dell’ente, con tutti i problemi legati alla normalizzazione e standardizzazione dei nomi delle PA. <br>Fare open data nelle PA non vuol dire <em>solamente</em> pubblicare sul proprio sito istituzionale dati in formato e licenza aperta. Per fare open data in PA bisogna avere una solida cultura del dato: ciò significa considerare i dati come risorse di valore e creare tutte le condizioni necessarie per massimizzarne il riutilizzo. Motivo per cui propongo ai responsabili della Bussola della Trasparenza, se mai leggeranno queste righe, di inserire nei CSV rilasciati almeno il <strong>codice IPA</strong> (a maggior ragione dato che la Bussola utilizza proprio le PA dell’indice) e, se proprio vogliono farci un regalo, anche il codice fiscale dell’ente. <a href="https://www.youtube.com/watch?v=oIc-z7iNT38"><em>Basta poco che ce vò?</em></a><em> </em>:-)</p><p><strong>p.p.s: </strong>un grazie sempre a <a href="https://twitter.com/giorgialodi">Giorgia Lodi</a>, consulente AGID e regista di Ontopia, che da anni coordina, promuove e supporta l’intero progetto.</p><img src="https://medium.com/_/stat?event=post.clientViewed&referrerSource=full_rss&postId=cba20114d6f" width="1" height="1" alt="">]]></content:encoded>
        </item>
        <item>
            <title><![CDATA[Di dati aperti, indicatori e pubbliche amministrazioni]]></title>
            <link>https://medium.com/@gpirrotta/di-dati-aperti-indicatori-e-pubbliche-amministrazioni-f340d3e2299f?source=rss-8f9654a9875------2</link>
            <guid isPermaLink="false">https://medium.com/p/f340d3e2299f</guid>
            <category><![CDATA[open-data]]></category>
            <category><![CDATA[comuni]]></category>
            <category><![CDATA[pubblica-amministrazione]]></category>
            <dc:creator><![CDATA[Giovanni Pirrotta]]></dc:creator>
            <pubDate>Thu, 11 Jul 2019 14:40:46 GMT</pubDate>
            <atom:updated>2019-07-11T14:45:04.089Z</atom:updated>
            <content:encoded><![CDATA[<figure><img alt="" src="https://cdn-images-1.medium.com/max/1024/1*wdsMzSl4sNsnLURY943U-w.png" /><figcaption><a href="http://www.freepik.com/">Designed by Jannoon028 / Freepik</a></figcaption></figure><h4>Open Data Maturity Report</h4><p>La valorizzazione del patrimonio informativo è una della priorità che la Commissione Europea si è data attraverso la strategia del <a href="https://ec.europa.eu/digital-single-market/en/">Mercato Unico Digitale</a> e la nuova <a href="https://eur-lex.europa.eu/legal-content/IT/TXT/HTML/?uri=CELEX:32019L1024&amp;from=EN">Direttiva Europea (PSI<strong>)</strong></a><strong>, </strong>relativa all’<strong>apertura dei dati</strong> e al riutilizzo dell’informazione del settore pubblico e recentemente <strong>approvata</strong>, ha l’obiettivo di facilitare la disponibilità e il riutilizzo dei dati delle pubbliche amministrazioni del panorama europeo.</p><p>Da qualche anno, come azione strategica di monitoraggio, la Commissione sottopone a ciascun stato stato europeo una indagine, al fine di rilevare il grado di maturità degli open data negli stati membri e lo stato di attuazione della direttiva PSI. I risultati di quest’indagine rappresentano la base di riferimento per l’elaborazione dell’ <a href="https://www.europeandataportal.eu/en/dashboard#2018">Open Data Maturity Report</a>, con il quale viene appunto rappresentato lo stato di avanzamento delle politiche di open data nei vari Paesi della UE.</p><figure><img alt="" src="https://cdn-images-1.medium.com/max/1024/1*n95ZKIOJ2uO-UFDhORvwLg.png" /><figcaption>Open Data Maturity Report — sezione Italia</figcaption></figure><p>In riferimento all’ Open Data Maturity Report del 2018, leggo dal sito <a href="https://www.agid.gov.it/">AGID</a> (Agenzia per l’Italia Digitale), centro di competenza nazionale in tema di opendata:</p><blockquote>[…] l’Italia si posiziona al quarto posto con un punteggio complessivo dell’80% e si classifica per il secondo anno consecutivo tra i Paesi “trendsetter”, cioè quelli che sono stati in grado di mettere in atto una politica di Open Data avanzata e ben coordinata tra tutti gli attori che operano sul territorio nazionale e che dispongono di un portale nazionale dei dati aperti con funzionalità avanzate. (<a href="https://www.agid.gov.it/it/agenzia/stampa-e-comunicazione/notizie/2018/11/20/open-data-maturity-report-italia-ai-primi-posti">Fonte</a>)</blockquote><p>Nel report l’Italia è collocata tra i paesi <strong>trendsetter</strong>, cioè è uno dei pochi paesi europei da <strong>imitare</strong> per le scelte politiche adottate in materia di opendata.<br>Un paese trendsetter :</p><ul><li>è in grado di rafforzare e consolidare l’ecosistema opendata sviluppato e di creare<em> profondità settoriale;</em></li><li>abilita lo sviluppo di <em>ecosistemi tematici</em> di alto valore su domini con alta priorità;</li><li>promuove attività che supportano <em>processi decisionali data-driven</em>;</li><li>definisce una strategia in grado di assicurare la <em>sostenibilità</em> del portale nazionale dei dati;</li><li>collabora con università e istituti di ricerca per determinare <em>metriche</em> in grado di misurare l’impatto economico degli opendata a livello micro e macro;</li><li>coinvolge la cittadinanza e le comunità abilitandole a partecipare e ad arricchire il catalogo nazionale dei dati attraverso sia l’upload di nuovi dataset sia condividendo esperienze di <em>riuso</em>;</li><li>mette a disposizione dati in <em>tempo reale</em> provenienti da fonti diverse;</li><li>lavora con istituti di formazione per l’erogazione di corsi e workshop di formazione avanzata sugli opendata;</li><li>condivide i risultati delle proprie azioni con altri paesi consentendo loro di imparare dalle <em>best-practices</em>.</li></ul><figure><img alt="" src="https://cdn-images-1.medium.com/max/220/1*nBZLjGvQc22CAqubYCN8XQ.png" /></figure><blockquote>Tutto molto bello</blockquote><p>Ma siamo proprio sicuri che l’Italia sia un paese <strong>leader</strong> e un <strong>modello</strong> di riferimento in Europa in materia di opendata?</p><p>Consentitemi di nutrire qualche dubbio.</p><p><em>A Giovà, sei sempre il solito disfattista! Sempre diffidente e negativo su tutto. Se l’Europa dice che siamo bravi… ALLORA SIAMO BRAVI, punto!!!</em></p><p>Va beh, aspetta! Non sto dicendo che l’Italia non abbia intrapreso nel corso degli anni iniziative mirate a valorizzare il patrimonio informativo della pubblica amministrazione. Non dico questo. E non voglio entrare neanche nel merito di ogni singolo indicatore del report europeo perché non posseggo informazioni sufficienti per verificarli.</p><p>Dico solo che <em>a me sembra </em>esserci un disallineamento tra quanto riportato nel report dalla Commissione e il paese reale. Per essere leader di qualcosa devi dimostrare che le azioni intraprese, competenze maturate e strategie adottate portino a dei risultati concreti e verificabili. È necessario che l’impatto dei tuoi sforzi sia verificabile nel contesto di riferimento. E mentre il report dipinge l’Italia, insieme ad altri 4, un paese <em>leader</em> sugli opendata, io, sinceramente, non me ne sono mai accorto.</p><p>Il report pone l’attenzione su aspetti sicuramente interessanti ma sono altre le informazioni che vorrei conoscere sullo stato degli open data in Italia, informazioni che non ritrovo né sul report né in altri posti. Tipo:</p><p><em>Chi pubblica opendata in Italia? Come e con che frequenza? Quali tipi di dati sono pubblicati? Qual è la qualità dei dati pubblicati? Con che licenze? Esistono delle differenze territoriali in Italia sulla disponibilità di dati aperti? E se sì, perché?</em></p><p>Mi piacerebbe capire come si muove il <em>fenomeno</em> opendata in Italia, un <em>feedback</em> a livello nazionale in grado di misurare l’efficacia delle azioni politiche intraprese, un <em>trend </em>reale che mi consenta di sapere se stiamo andando nella giusta direzione. Perché il report europeo, da solo, non mi dice molto purtroppo.</p><p>Ovviamente questo tipo di attività risulta essere molto ardua e complessa, lo riconosco, dispendiosa e difficile da attuare. Ma da qualche parte dovremo pur cominciare, o no?</p><p>Per poter monitorare il grado di maturità degli opendata a livello nazionale e rilevare lo stato di avanzamento delle politiche sui dati aperti, secondo me, si dovrebbe partire dalle seguenti domande:</p><ul><li>qual è la copertura a livello nazionale di dati aperti da parte delle pubbliche amministrazioni? E la copertura regionale? E la copertura provinciale?</li><li>quali sono le pubbliche amministrazioni che hanno rilasciato dati aperti? Con che licenza? In che formato?</li></ul><p>L’obiettivo da raggiungere è <strong>fotografare</strong>,<strong> </strong>nel miglior modo possibile, il <em>fenomeno</em> opendata nel sistema paese attraverso appositi indicatori, report, grafici che potranno supportare processi decisionali <em>data-driven</em>. <br>È necessario misurare l’esistente se no è vano ogni tentativo di ottimizzazione.</p><p><em>Si, Giovà, tu la fai facile. Ma che vor di’ fotografare il fenomeno opendata?</em></p><p>Beh, non so risponderti con precisione e non ho neanche la bacchetta magica. Quello che posso dirti è di partire dai dati esistenti e vediamo fin dove possiamo spingerci. Anche se non otterremo tantissimo almeno è una partenza.</p><p><em>Voglio darti fiducia Giovà, però, dimme, da dove partiamo?</em></p><p>Partiamo dai dati dell’ <a href="https://www.indicepa.gov.it/documentale/index.php">Indice della Pubblica Amministrazione</a> (IPA).</p><p>Il numero di pubbliche amministrazioni presenti nell’indice IPA è di <strong>22693 PA, </strong>dato aggiornato a luglio 2019. Andiamo a vedere quante PA sono presenti sul portale (portali?) nazionale dei dati.</p><ul><li>Sul <a href="https://ckan-geo.daf.teamdigitale.it/harvest/list">portale digitale nazionale dei dati</a> (PDND) sono presenti <strong>57</strong> PA;</li><li>Sul portale <a href="https://www.dati.gov.it/elenco-harvest-sources">dati.gov.it</a> sono presenti <strong>46</strong> PA.</li></ul><p>Anche se alcune PA trovate sono cataloghi regionali (e possono quindi federare più PA), è evidente che il numero di PA presente nei portali, rispetto al numero totale di PA dell’indice delle pubbliche amministrazioni, è molto basso.</p><p>Ma sono solo quelle le PA che pubblicano dati aperti sui propri siti istituzionali? Ne siamo proprio sicuri? Secondo me <strong>no</strong>.</p><p><em>Ah Giovà! Facile a dirsi, non è che mi posso mettere a guardare tutti i siti delle pubbliche amministrazioni e sgridare chi non rilascia i dati in formato aperto!!! E fallo te!!!</em></p><p>Magari sgridarle no però la <strong>tecnologia aiuta</strong>.</p><h3>L’idea</h3><p>Tra tutte le pubbliche amministrazioni, i dati delle città e della vita comunale costituiscono il patrimonio informativo più interessante sia per la comunità, per le attività di monitoraggio di trasparenza amministrativa, sia per le aziende, per attività di business. Dati su<em> trasporti, energia, istruzione, cultura, sport, economia, popolazione</em>, <em>ambiente</em>, se rilasciati in opendata, costituiscono la materia prima del terzo millennio e favorirebbero la nascita di nuove economie di mercato basate sul riuso dei dati.</p><p>Certamente è impensabile navigare su tutti i siti dei comuni e andare a verificare quali dati sono presenti. Un controllo in senso stretto sulla quantità e qualità dei dati non è fattibile. Ma se ci accontentassimo di un controllo un po’ più debole e più facilmente raggiungibile?</p><p><em>Aspe, aspe Giovà!!! Ma che vuoi fare??? Vuoi spulciare tutti i siti delle PA???</em></p><p>Voglio trovare un modo, il più accurato possibile, di fotografare la presenza di opendata nei siti istituzionali delle città italiane. Una sorta di <strong>indice</strong> di <strong>consapevolezza</strong> di <strong>opendata</strong>, che potremmo chiamare fantasiosamente <strong>ICO</strong>.<strong> </strong>Una stima di predisposizione alla trasparenza dei comuni attraverso lo strumento opendata, un indicatore <em>globale</em> e <em>reale</em> in grado di mettere in evidenza se esistono politiche di valorizzazione del patrimonio informativo pubblico in Italia. Non sarà un indicatore qualitativo, non mi darà informazioni sul numero e sulla qualità dei dati aperti (o chiusi) presenti all’interno dei siti delle pubbliche amministrazioni ma prenderà in considerazione solo l’<em>esistenza</em> di dati aperti o meglio l’<em>indicazione</em> della presenza di dati aperti. So che non è molto ma è il nostro <strong>punto di partenza.</strong></p><figure><img alt="" src="https://cdn-images-1.medium.com/max/604/1*fjeCwhRGZox2SXwczoQHDg.png" /><figcaption><a href="http://www.freepik.com/">Designed by Onlyyouqj / Freepik</a></figcaption></figure><p>L’obiettivo è riuscire a sintetizzare il livello di <em>consapevolezza</em> sugli opendata<strong> </strong>da parte dei comuni, attraverso lo studio di specifiche occorrenze di testo all’interno delle pagine Web dei siti istituzionali e, dai risultati ottenuti, riuscire a stabilire una connessione tra ciascun comune e la strategia adottata (o non) per valorizzare il proprio patrimonio pubblico. Dal punto di vista tecnico ci affideremo a semplici analisi testuali, senza scomodare troppo <em>barbatrucchi</em> avanzati di NLP e machine learning.</p><blockquote>Che il monitoraggio abbia inizio.</blockquote><figure><img alt="" src="https://cdn-images-1.medium.com/max/221/1*mkRmBkGx9BqxtvYFTpWzaA.png" /></figure><h3>Il monitoraggio</h3><p>L’elenco delle pubbliche amministrazioni è disponibile in opendata sul <a href="https://www.indicepa.gov.it/documentale/index.php">sito IPA</a> al seguente <a href="http://www.indicepa.gov.it/public-services/opendata-read-service.php?dstype=FS&amp;filename=amministrazioni.txt">link</a>. Il dataset contiene <strong>22693 </strong>pubbliche amministrazioni.</p><p>Estraggo dall’indice i comuni, ottenendo un dataset di <strong>7797</strong> <strong>città.<br></strong>Sì, lo so, ne mancano circa un trentina; selezionare i comuni italiani dall’elenco non è un’operazione immediata purtroppo. Non entro nel merito del problema, per chi volesse saperne di più consiglio di leggere le ottime osservazioni dell’amico <a href="https://medium.com/u/60adc577b3dd">Andrea Borruso</a>, che diversi mesi fa ha scritto in proposito su F<a href="http://www.indicepa.gov.it/public-services/opendata-read-service.php?dstype=FS&amp;filename=amministrazioni.txt">orum Italia</a>.</p><p>Per ciascuna PA, l’indice contiene il sito istituzionale di riferimento da cui iniziare il monitoraggio. Sfortunatamente non tutte le pubbliche amministrazioni hanno indicato il sito Web, per cui seleziono solo le PA con il sito presente, ottenendo un dataset composto da <strong>7761 città</strong>.</p><p>Per poter analizzare il testo di ciascun sito web della PA decido di scaricare in locale tutte le homepage istituzionali per poter successivamente lavorare in modo più agevole sul contenuto di ciascun sito.</p><figure><img alt="" src="https://cdn-images-1.medium.com/max/169/1*j70SW9lkVh20tdZWRCYXKQ.png" /><figcaption>Download process results</figcaption></figure><p>La seguente tabella riporta l’esito del processo di download. I numeri della prima colonna rappresentano lo <em>status_code </em>della richiesta mentre in fondo alla prima colonna sono riportati gli <em>errori/eccezioni</em> sollevati durante le richieste; la seconda colonna indica invece il numero di pubbliche amministrazioni. Dalla prima riga sappiamo che <strong>7420</strong> richieste sono avvenute con successo (<em>status code 200</em>) per cui ci ritroveremo in locale più di 7000 siti Web salvati. Tenuto conto del totale dei comuni dell’indice IPA, cioè <strong>7914</strong>, calcolato aggiungendo alle <strong>7797</strong> PA sopra menzionate, le circa <strong>30</strong> mancanti, il nostro corpus dei siti Web delle PA, cioè <strong>7420</strong>, copre circa il <strong>94,8%</strong> di tutte i comuni d’Italia. Faremo riferimento sempre a questo numero come totale PA.</p><p>A questo punto possiamo iniziare la nostra analisi testuale e verificare nel corpus di testo disponibile, costituito da siti Web, la presenza di particolari keyword, tag, link.</p><h3>Licenze Opendata</h3><p>Una prima verifica che faremo è controllare la presenza di link che puntano a licenze opendata standard. Verranno presi in considerazione le licenze <a href="http://www.creativecommons.it/">Creative Commons</a> e la <a href="https://www.dati.gov.it/content/italian-open-data-license-v20">Italian Open Data License</a> (IODL).</p><p>La struttura di un link di una licenza qualsiasi Creative Commons è la seguente:</p><p><a href="https://creativecommons.org/licenses/by/4.0/deed.it">https://<strong>creativecommons</strong>.org/licenses/by/4.0/deed.it</a></p><p>per cui controlleremo nel corpus la presenza di link contenenti il seguente testo</p><pre>creativecommons</pre><p>Il link di riferimento per la licenza IODL è il seguente:</p><p><a href="https://www.dati.gov.it/content/italian-open-data-license-v20">https://www.dati.gov.it/content/<strong>italian-open-data-license</strong>-v20</a></p><p>per cui controlleremo nel link la presenza del seguente testo:</p><pre>italian-open-data-license</pre><p>I risultati dell’analisi ci dicono che sono state trovate <strong>50</strong> pubbliche amministrazioni contenenti un link ad una licenza <strong>Creative Commons</strong> e <strong>un’unica</strong> PA contenente un link alla licenza <strong>IODL</strong>.</p><figure><img alt="" src="https://cdn-images-1.medium.com/max/566/1*_g27wnIRds2DQd9de1qJPA.png" /></figure><p>È interessante notare come quasi la metà dei link Creative Commons non si riferiscono a licenze <strong>opendata</strong>; la cella arancione invece si riferisce ad una licenza utilizzata per il rilascio di software libero. Il numero di collegamenti riferiti a licenze opendata è pari a <strong>22</strong> PA pari a allo <strong>0,29%</strong> del totale.</p><h3>Opendata</h3><p>Dai link presenti nelle homepage spostiamoci adesso all’analisi del testo contenuto nella pagina Web istituzionale del comune. Le parole da cercare sono le seguenti:</p><pre>opendata<br>open data<br>dati aperti<br>linked open data</pre><p>I risultati ottenuti sono i seguenti</p><figure><img alt="" src="https://cdn-images-1.medium.com/max/348/1*HSrSYSavAtXCkIToxgNNLA.png" /></figure><p>I numeri in tabella indicano il numero di PA in cui è presente uno dei termini sopracitati. Il numero totale di PA individuate, al netto di ripetizioni, è pari a <strong>292, </strong>che corrisponde al <strong>3,93%</strong> del totale.</p><h3>Copyright</h3><p>Passiamo adesso alle note dolenti. Il passo successivo è scansire il corpus di testi alla ricerca di una delle seguenti parole:</p><pre>Copyright<br>Tutti i diritti riservati<br>All rights reserved</pre><p>Il numero di pubbliche amministrazioni che mostrano in homepage il sopracitato testo è <strong>2519 </strong>pari a circa il <strong>34% </strong>del numero delle PA del corpus.</p><p>Quest’informazione ci consente di calcolare la percentuale di comuni d’Italia nei quali non è specificata alcuna licenza in homepage che è pari a</p><pre>100% - 34% - 3,93% = 62,07%</pre><p>L’art. 52 del <a href="http://www.visualcad.it/">Codice dell’Amministrazione Digitale</a> (CAD), comma 2, relativoall’ <em>Accesso telematico ai dati e documenti delle pubbliche amministrazioni</em>, recita:</p><blockquote>I dati e i documenti che i soggetti di cui all’articolo 2, comma 2, pubblicano, con qualsiasi modalità, <strong>senza l’espressa adozione di una licenza</strong> di cui all’articolo 2, comma 1, lettera h), del decreto legislativo 24 gennaio 2006, n. 36, <strong>si intendono rilasciati come dati di tipo aperto</strong> ai sensi all’articolo 1, comma 1, lettere l-bis) e l-ter)</blockquote><p>È il cosiddetto <em>open-by-default, </em>cioè la normativa secondo cui qualsiasi testo pubblicato sul sito istituzionale delle pubbliche amministrazioni italiane, in mancanza di esplicita licenza, acquisisce di default licenza aperta. Il contenuto dei siti Web del <strong>62.07% </strong>dei comuni italiani, secondo il nostro monitoraggio, è da considerarsi licenziato in modo aperto: parliamo di più di <strong>4500</strong> comuni d’Italia.</p><p>A questo punto potremmo chiudere il monitoraggio e passare alle conclusioni finali. Tuttavia qualcuno potrebbe torcere il naso e ne avrebbe ben donde.</p><blockquote>Vediamo perché.</blockquote><p>Fino adesso abbiamo utilizzato come corpus di riferimento i siti Web delle <strong>sole</strong> homepage dei siti istituzionali dei comuni d’Italia. Qualcuno potrebbe notare che spesso le informazioni sulle licenze di utilizzo dei dati sono dettagliate su una apposita pagina dedicata. Per fare questo dovremo allargare il nostro corpus inglobando anche le pagine dedicate.</p><p>Per procedere in tal senso estraiamo dal corpus delle homepage tutti i link collegate alle seguenti parole:</p><pre>Note legali, Licenza, License, Termini del servizio, Copyright</pre><p>Alla fine dell’estrazione otteniamo <strong>4256</strong> link reali (su <strong>4371</strong> trovati) relativi a pagine interne ai siti istituzionali dei comuni che fanno riferimento a informazioni di natura legale.</p><p>Procediamo al download di queste nuove pagine e otteniamo così un nuovo corpus di siti Web. Il risultato dell’attività di download è il seguente.</p><figure><img alt="" src="https://cdn-images-1.medium.com/max/143/1*71zBHPI4xqVKCMWY_qLmbQ.png" /></figure><p>Il nuovo corpus di pagine interne è composto quindi da <strong>4008</strong> pagine Web.</p><p>Cerchiamo i riferimenti a licenze Creative Commons e IODL sulle pagine interne e notiamo, come mostrato in tabella, un sostanziale aumento del numero di link a licenze standard rispetto alla precedente ricerca.</p><figure><img alt="" src="https://cdn-images-1.medium.com/max/596/1*IC_VmOgDk0f1_titu3kjNQ.png" /></figure><p>I risultati ci dicono che le licenze opendata standard sono presenti in <strong>202</strong> PA pari al <strong>2,72%</strong> del totale. Siamo passati da <strong>22</strong> PA (analizzando solo le homepage) a <strong>202</strong> PA (analizzando le pagine interne), a dimostrazione di come le pagine dedicate dei siti Web istituzionali offrano un maggiore dettaglio di informazioni utili al nostro scopo.</p><p>Continuiamo la nostra analisi.</p><p>Cercando adesso il testo <em>opendata (et similia) </em>nei siti interni dei comuni otteniamo <strong>216 </strong>PA mentre cercando il testo <em>copyright (et similia</em>) otteniamo <strong>2980 PA</strong></p><p>Facciamo un <strong>recap</strong> generale</p><figure><img alt="" src="https://cdn-images-1.medium.com/max/737/1*YpVn1BqiLnKEKdU1qG0sXw.png" /></figure><p>Diamo adesso una definizione formale dell’<em>indice</em> di <em>consapevolezza</em> degli <em>opendata</em> (<strong>ICO</strong>) dei comuni italiani.</p><h3>Gli indicatori</h3><p>L’indice di consapevolezza dei comuni (<strong>ICO</strong>) è uguale al rapporto in percentuale tra il numero di PA che hanno in homepage o in una pagina interna il riferimento ad un link di licenza opendata standard o a parole riferibili agli opendata e il numero totale di PA.</p><figure><img alt="" src="https://cdn-images-1.medium.com/max/876/1*utNWgztBJAC4rSpk4oDMJQ.png" /><figcaption>Formula dell’indice di consapevolezza degli opendata</figcaption></figure><p>Per poter calcolare l’ICO è necessario quindi normalizzare i dati riportati in tabella in modo da eliminare tutte le ridondanze, cioè le PA conteggiate più di una volta. Otteniamo quindi la seguente formula:</p><figure><img alt="" src="https://cdn-images-1.medium.com/max/410/1*Aktr10LQ0wO9vZWiyfullw.png" /></figure><p>In base al nostro monitoraggio possiamo affermare quindi che quasi il <strong>6% </strong>dei siti dei comuni italiani dichiara in modo esplicito di pubblicare i propri dati in modalità aperta.</p><p>È un dato preciso? <strong>No</strong>, è una stima abbastanza accurata su ciò che è possibile misurare con i dati a disposizione.<br>Emergono anomalie? <strong>Sì</strong>, ad esempio 49 siti comunali contenenti link a licenze opendata contengono riferimenti testuali di licenze <strong>non</strong> commerciali di tipo <strong>BY-NC</strong>.</p><p>Se decidiamo di considerarli falsi positivi la nuova ICO risulterà:</p><figure><img alt="" src="https://cdn-images-1.medium.com/max/434/1*0gN2yj38szxdN1Nrp0I5bA.png" /></figure><p>A questo punto potremmo calcolare anche la percentuale di siti comunali che hanno un’indicazione di dato chiuso, cioè quei siti in cui appare il testo <em>Copyright (et similia)</em>. Possiamo immaginare di calcolare un <em>indice</em> di <em>chiusura</em> dei <em>dati</em> (<strong>ICD</strong>)</p><figure><img alt="" src="https://cdn-images-1.medium.com/max/431/1*fOZL9_uz29cqzu6PiKON6Q.png" /></figure><p>Il valore <strong>3701</strong> è stato calcolato prima conteggiando il numero di PA in cui è presente un riferimento al testo Copyright o in homepage o in una pagina dedicata, ottenendo <strong>3963</strong>. Considerando che in <strong>262</strong> PA è presente sia il testo <strong>opendata (</strong>o un link ad una <strong>licenza</strong> opendata) sia il testo <strong>copyright</strong>,<strong> </strong>questa volta risulta ragionevole trattare queste PA come falsi negativi per cui ha senso sottrarli dal totale sopramenzionato. Otteniamo quindi il valore finale <strong>3701</strong>.</p><p>Questo nuovo indice ci dice che i dati di più della metà dei siti comunali italiani non sono disponibili al riuso perché l’indicazione del diritto d’autore (<em>copyright</em>) direttamente sul sito ne impedisce l’utilizzo, nonostante stiamo parlando di dati pubblici. Dati finanziati dalle tasse dei cittadini che ai cittadini dovrebbero ritornare essendo loro i naturali proprietari. Dati che invece rimangono bloccati nei siti istituzionali con i comuni a fare da padroni su un qualcosa che appartiene a tutti.</p><blockquote>Ma siamo messi proprio così male?</blockquote><p>Uno dei fattori che determina un indice di chiusura dei dati così alto è l’abitudine delle aziende software, fornitrici dei servizi Web dei comuni, di non modificare le informazioni sul copyright del <em>Content Management System </em><strong>(CMS) </strong>usato per sviluppare il sito istituzionale del comune. Questo fattore, unito alla <em>noncuranza </em>da parte delle amministrazioni comunali, determina un indice di chiusura dati <em>fuori misura.</em></p><p>Infine, possiamo calcolare l’<em>indice</em> di <em>apertura</em> dei <em>dati</em> (<strong>IAD</strong>) dei comuni italiani nel seguente modo:</p><figure><img alt="" src="https://cdn-images-1.medium.com/max/380/1*5V6xSVZIEfoiZtnXvqPI9Q.png" /></figure><p>Il risultato ottenuto rappresenta la percentuale dei siti dei comuni italiani che o hanno specificata una licenza di tipo aperto (o è possibile ritrovare nel testo la parola <em>opendata) </em>oppure non è presente nel testo alcun riferimento alla licenza da adottare per cui vale l’art.<strong> 52 del CAD</strong>, ovvero l’<em>open data by-default.</em></p><p>Anche se l’indicatore IAD può sembrare molto alto è ragionevole pensare che la mancanza di indicazione di licenza sia un segnale di poca attenzione dei propri dati per cui, secondo me, non dovremmo rallegrarci molto se grazie all’<em>open data by default</em> l’indicatore raggiunge quasi la metà dei siti comunali.</p><h3>Distribuzione geografica</h3><p>Con i dati raccolti possiamo anche calcolare la distribuzione dei dati aperti a livello regionale. Ai primi posti troviamo regioni prettamente del nord mentre le regioni del centro-sud sono distribuite nell’elenco senza seguire un particolare pattern.</p><p><strong><em>Una nota per la regione Lombardia</em></strong><em>. Negli ultimi anni la regione Lombardia ha avviato iniziative atte a valorizzare il patrimonio informativo dei propri comuni attuando politiche di sensibilizzazione all’apertura dei dati. Il frutto di questo lavoro è disponibile sul loro </em><a href="https://www.dati.lombardia.it/"><em>catalogo regionale</em></a><em> dove sono presenti dataset provenienti da un numero di comuni maggiore rispetto a quello riportato in tabella (40). Il motivo di questa differenza è che il presente monitoraggio non analizza i cataloghi regionali esistenti bensì i siti Web di ciascun comune.</em></p><figure><img alt="" src="https://cdn-images-1.medium.com/max/365/1*Li8SlW_TEcUl_-H3WSbgGw.png" /></figure><p>Proviamo adesso a rappresentare i comuni italiani con dati aperti in una mappa. Così come già anticipato in tabella troviamo una concentrazione maggiore di comuni distribuita al nord mentre al sud troviamo una diffusione più esigua di PA. Cliccando sulla mappa è possibile navigare tra i comuni tramite il servizio <a href="http://umap.openstreetmap.fr/it/map/comuni-con-indicazione-di-dati-aperti-sul-proprio-_344604#6/42.695/14.169">UMAP</a>.</p><figure><a href="http://umap.openstreetmap.fr/it/map/comuni-con-indicazione-di-dati-aperti-sul-proprio-_344604#6/42.695/14.169"><img alt="" src="https://cdn-images-1.medium.com/max/646/1*PHu0lbnfjSLTc8ZqT7_org.png" /></a><figcaption>Mappa distribuzione comuni con indicazione di dati aperti</figcaption></figure><h3>Conclusioni</h3><p>In questo monitoraggio ci siamo prefissi di trovare un punto di partenza per <em>fotograre</em> alcuni aspetti del <em>fenomeno</em> opendata in Italia attraverso l’utilizzo di indicatori reali. Con i dati a nostri disposizione abbiamo scelto di stimare la consapevolezza dei dati aperti nei siti comunali. Abbiamo calcolato i seguenti indicatori:</p><ul><li><strong>ICO</strong>: <em>indice</em> di <em>consapevolezza</em> degli <em>opendata</em> pari a <strong>5,06% </strong>PA sul totale (<strong>7420</strong> PA);</li><li><strong>ICD</strong> : <em>indice</em> <em>dati</em> <em>chiusi</em> pari a <strong>49,87% </strong>sul totale;</li><li><strong>IAD</strong>: <em>indice</em> <em>dati</em> <em>aperti</em> pari a <strong>50,13% </strong>sul totale.</li></ul><p>Ovviamente questi indici non hanno alcuna pretesa e non chiedono alcun riconoscimento. Lo ripeto ancora una volta: <strong>sono</strong> <strong>solo</strong> <strong>un punto di partenza</strong>.</p><p>Non è la destinazione ma il viaggio che conta.</p><p>In questo viaggio abbiamo imparato tante cose. Abbiamo scoperto comuni <em>infettati</em> da malware, abbiamo scovato comuni in <em>crisi di identità</em> con doppio link a licenze sia aperte che chiuse, abbiato trovato regioni con tantissime PA <em>consapevoli</em> e regioni con nessuna, abbiamo individuato i comuni che non consentono l’utilizzo dei propri dati , abbiamo scovato comuni che li rilasciano in pubblico dominio, etc.</p><p>Dall’ <em>Open Data Maturity Report 2018 </em>l’Italia risulta essere <em>trendsetter</em> in Europa. La mia sensazione di fondo è però che il documento dipinga un quadro un po’ diverso dalla realtà. <br>Esistono sicuramente casi virtuosi di PA da prendere come modello per le politiche adottate a favore della valorizzazione del patrimonio informativo pubblico, sia da anni impegnate a supportare gli opendata, come ad esempio la <a href="https://www.dati.lombardia.it/">regione Lombardia</a>, sia all’inizio di un processo di trasformazione digitale basato sull’apertura dei dati, con notevoli investimenti infrastrutturali, come ad esempio la <a href="https://dati.regione.campania.it/">regione Campania</a>.</p><p>Tuttavia gli indicatori trovati ci dicono che la consapevolezza sugli opendata è molto bassa. Fino a quando gli opendata non saranno considerati un obbligo ma una opportunità da consegnare alla società civile, al mondo della ricerca, al mondo del giornalismo, alle imprese, per favorire la trasparenza amministrativa, per evidenziare fenomeni socio-politico-culturali in grado di supportare decisioni data-driven, per creare servizi digitali a vantaggio del cittadino, fino a quando non avverrà tutto questo, secondo me, il paese non sarà mai veramente <em>maturo</em>!</p><p>Mi fermo qui, spero che da questo lavoro possano nascere spunti di riflessione, di analisi e successive attività. Per chi volesse consultare il materiale prodotto e usato in questo monitoraggio è disponibile un repo su <a href="https://github.com/gpirrotta/monitoraggio-opendata-comuni-italiani">github</a></p><p>That’s all folks!</p><p>Se questo lavoro ti è piaciuto mi aiuti a farlo conoscere con un <a href="http://twitter.com/share?url=https://medium.com/@gpirrotta/di-indicatori-pubbliche-amministrazioni-e-dati-aperti-f340d3e2299f&amp;text=Di+indicatori,+pubbliche+amministrazioni+e+opendata:+scopri+quali+sono+i+comuni+d&#39;Italia+con+licenza+aperta+/via+@gpirrotta">tweet</a>? Grazie</p><img src="https://medium.com/_/stat?event=post.clientViewed&referrerSource=full_rss&postId=f340d3e2299f" width="1" height="1" alt="">]]></content:encoded>
        </item>
    </channel>
</rss>