🙏Se vuoi sostenerci, puoi farlo in questi modi.

Iscriviti ora

Questo numero è un po’ speciale, con due sezioni a cui teniamo in modo particolare.

La prima nasce da un incontro fortunato, come spesso succede lungo le strade dell’attivismo civico: ci siamo imbattuti in Nadiia, un’attivista ucraina che cercava di leggere i dati del proprio ufficio statistico nazionale — da Kyiv, nel mezzo di una guerra. Proprio in quelle settimane stavamo lavorando a uno strumento per rendere più accessibili i dati statistici aperti. La coincidenza ci ha sorpresi. Leggete la sua storia: la tenacia che ci racconta, l’energia che trasmette, il contesto in cui si è spesa per raggiungere i suoi obiettivi.

La seconda è il lavoro di ricerca di Marialuisa, su un tema che non “invecchia”: i giovani che si trovano fuori dal sistema educativo e dal mercato del lavoro. Un tema di cui si parla da anni, ma che il suo libro aiuta a vedere in modo diverso — mettendo al centro non il numero, ma ciò che il numero nasconde. E c’è un paradosso difficile da accettare: chi si trova nelle condizioni più difficili è spesso invisibile agli strumenti che dovrebbero aiutarci a capirlo.

👉 Se ci leggi da e-mail, fai click qui per leggerla per intero

🌻 Non sono una programmatrice. Eppure l’ho fatto.

Di Nadiia Babynska Virna

Non sono una programmatrice. Non sono una data scientist, né una statistica. Da quindici anni sono un’attivista per i dati aperti e per i diritti civici — che crede che le informazioni del settore pubblico appartengano a tutti e debbano essere aperte, accessibili e riutilizzabili. Per molti anni, accessibilità, interoperabilità, leggibilità automatica e riutilizzabilità sono stati i temi centrali del mio attivismo. Ho trascorso centinaia di ore a formare funzionari pubblici, attiviste e attivisti della società civile, persino giudici, sui dati aperti nell’accezione classica. Ma ora, nell’era dell’AI, non basta più. Oggi i dati devono anche essere pronti per l’intelligenza artificiale e reperibili.

Vivo e lavoro a Kyiv, in Ucraina. C’è una guerra vera, sanguinosa, in corso. La Russia lancia centinaia di missili e droni quasi ogni giorno. Volano sopra le nostre teste, distruggono le nostre case, tolgono vite. Ci sono sirene continue, molte ore di interruzioni di corrente e, di conseguenza, mancanza di internet. I nostri figli trascorrono ore nei rifugi invece che in classe. Le nostre persone care combattono per la libertà europea al fronte. Mio marito ha perso una mano in questa guerra e si trova attualmente in riabilitazione in ospedale.

Niente di tutto questo ferma il bisogno — e la mia dedizione — affinché cittadine e cittadini, giornaliste e giornalisti, ricercatrici e ricercatori (persino i funzionari pubblici!) possano accedere ai dati pubblici in Ucraina. Anzi, lo rende più urgente. Ne abbiamo bisogno per sopravvivere, per ricostruire, per prosperare. Abbiamo bisogno dei dati aperti per combattere la guerra dell’informazione: se non ci sono dati sull’Ucraina e dall’Ucraina nell’infrastruttura dell’AI, ci saranno le falsificazioni.

Nonostante tutti gli ostacoli, apro il mio modestissimo laptop e cerco risposta a una domanda che mi accompagna: i nostri dati ufficiali sono davvero aperti nell’era dell’AI? Come renderli davvero aperti? Non solo aperti in senso giuridico, o aperti nel senso classico, ma accessibili e reperibili — da chiunque e da qualsiasi cosa, da esseri umani e intelligenze artificiali, senza registrazione, senza identificazione, senza essere specialiste o specialisti. E inizio i miei test.

La legislazione ucraina sui dati aperti è chiara: accedere ai dati aperti non richiede né registrazione né identificazione (link). Ma un diritto legale vale quanto l’infrastruttura di dati che lo rende praticabile.

L’anno scorso, il Servizio statale di statistica dell’Ucraina — Derzhstat (n.d.r. il servizio statistico statale ucreaino) — ha lanciato StatGPT (stat.gov.ua), un assistente AI integrato nel loro nuovo sito. È impressionante: risponde rapidamente a domande su inflazione e demografia. C’è però un problema: per usarlo bisogna identificarsi tramite BankID o un altro sistema di verifica ufficiale. Le tue ricerche vengono registrate. La tua privacy è il prezzo dell’accesso.

Questo non è apertura. È esclusività travestita da servizio AI moderno.

Volevo capire se i dati sottostanti potessero essere raggiunti in modo diverso. Tramite un modello locale e privato, in esecuzione sul mio computer. Senza cedere la mia identità, e senza conoscenze da programmatrice o da statistica.

Ho iniziato a costruire un server MCP (Model Context Protocol) personalizzato con l’aiuto dell’AI. Ho testato Llama 3.2 3B e Qwen 2.5 7B, perché hardware più potenti non erano alla mia portata. Ho generato centinaia di prompt e varianti di codice. Ho letto documentazione. Ho mappato i dataflow.

Quello che ho incontrato era un muro fatto di errori 404, errori 500 e allucinazioni. Per ottenere dati sull’inflazione, per esempio, non basta chiedere “inflazione”. Bisogna sapere che Derzhstat la archivia sotto l’identificatore DF_PRICE_CHANGE_CONSUMER_GOODS_SERVICE. Il sistema non è progettato per essere scoperto; è progettato per chi già sa.

Ero quasi arrivata ad arrendermi.

Sotto uno dei miei post (link) su questa difficoltà, Andrea Borruso dell’associazione onData mi ha contattata. Ha suggerito un approccio più semplice: invece di costruire un server da zero, usare uno strumento già esistente — opensdmx — che sa già come leggere i dati statistici in formato SDMX (Statistical Data and Metadata eXchange) passo dopo passo. (github.com/ondata/opensdmx)

Ho configurato Qwen 2.5 7B in locale tramite LM Studio, usato l’agente opencode e collegato tutto a opensdmx (discussione). Poi ho scritto una domanda in ucraino: Qual era il tasso di disoccupazione nella regione di Chernivtsi, suddiviso per genere, in un anno specifico?

E ha funzionato.

La risposta è arrivata dalla fonte reale — verificata (link). Nessun codice necessario. Nessun identificatore dataflow da memorizzare. Nessuna identificazione richiesta. E, cosa fondamentale: quando il dato non era disponibile, il sistema lo ha detto. Non ha inventato numeri.

Questo esperimento ha anche rivelato problemi strutturali: dataset non aggiornati da anni, documentazione API carente, metadati presenti dove i dati completi non ci sono. Non sono fallimenti del mio setup; sono fallimenti del sistema così come è stato costruito.

Il motivo per cui tengo così tanto ai modelli locali e privati è una questione di principio. Se una cittadina o un cittadino ha il diritto legale di accedere ai dati senza identificazione, anche gli strumenti che li aiutano non dovrebbero richiederla. Un servizio cloud che registra le tue ricerche o una piattaforma che richiede BankID impone un costo che la legge dice esplicitamente non debba esistere.

Un modello che gira sul tuo laptop, che legge da un’API pubblica e non lascia tracce: così dovrebbe tradursi in pratica il diritto ai dati aperti.

Ho cominciato a condividere queste scoperte con il Servizio statale di statistica. Un dialogo reale è iniziato. Le mie richieste sono semplici ma richiedono lavoro: aggiornare i dati, scrivere documentazione chiara, pubblicare identificatori e cataloghi, rendere StatGPT davvero aperto — più simile a una biblioteca pubblica senza identificazione. E spero che insieme riusciremo a fare la differenza.

A chi guarda parole come MCP, SDMX o LLM e sente di essere nella “stanza sbagliata”: non è così.

Ciò che ha fatto la differenza per me è stato trovare una comunità — il mondo dei dati aperti, le persone intorno a onData, le colleghe e i colleghi su LinkedIn e GitHub — dove sono stata supportata, non derisa. La mia curiosità ha persino aiutato esperte ed esperti a migliorare strumenti per tutte e tutti.

Ancora oggi stento a crederci, ma ho costruito un ponte locale, privato e anonimo verso la statistica ufficiale — in ucraino, su un laptop modesto, nel mezzo di una guerra.

Se posso farlo io, puoi farlo anche tu.

Ci sono persone — appassionate che creano strumenti liberi e facili da usare — che ti supporteranno e festeggeranno con te il tuo successo 🤗

📚 Dare una nuova lettura alla condizione NEET è possibile?

Il termine NEET, acronimo di Not in Employment, Education and Training, viene utilizzato per indicare la quota di popolazione tra i 15 e i 29 anni che si trova fuori dal sistema educativo e dal mercato del lavoro.

Questo mese, come onData, partiamo da qui per raccontare il libro della nostra socia Marialuisa Villani: “La condizione NEET tra esclusione e disuguaglianze in Italia: Analisi critica del concetto e delle evidenze empiriche”.

Oggi in Italia il tasso dei NEET è sceso al 15,2%. Una buona notizia, senza dubbio. Ma è sufficiente per dire che il problema è superato?

La risposta è no, se si prova a guardare oltre il dato e a leggere il fenomeno attraverso la lente delle disuguaglianze. Il libro propone infatti uno spostamento di prospettiva: non limitarsi a misurare il fenomeno, ma interrogarsi su cosa quel numero nasconde. Perché dietro la categoria NEET si trovano condizioni molto diverse tra loro, che non possono essere comprese senza considerare i processi che le generano.

In questa prospettiva, la condizione NEET non può essere ridotta a una semplice categoria statistica, ma rappresenta l’esito, spesso temporaneo ma non sempre reversibile, di traiettorie segnate da opportunità diseguali.

L’analisi mostra come l’esclusione giovanile non sia il risultato di scelte individuali isolate, ma il prodotto di fattori che si accumulano nel tempo: sistema educativo, mercato del lavoro, welfare, origine sociale, genere, background migratorio. Sono queste dimensioni, nel loro intreccio, a modellare i percorsi dei giovani.

Ciò che emerge è una tensione evidente. Da un lato, il sistema educativo italiano mostra alcuni segnali di miglioramento.
Dall’altro, i territori, il mercato del lavoro e le condizioni economiche restituiscono un quadro molto più complesso.

Non esiste un’unica esperienza NEET, ma una pluralità di condizioni, con intensità e durate differenti, profondamente influenzate dal contesto sociale e territoriale. La questione della classe sociale torna così al centro dell’analisi, non per riproporre letture deterministiche o rafforzare lo stigma, ma come lente capace di rendere visibili i meccanismi che producono disuguaglianza e di orientare le politiche pubbliche.

I divari territoriali giocano un ruolo cruciale. Nel Nord e in parte del Centro si osservano livelli di povertà più contenuti, mercati del lavoro relativamente più dinamici e una maggiore disponibilità di servizi.
Nel Mezzogiorno, invece, si concentrano condizioni più fragili: maggiore rischio di povertà, più alta incidenza di abbandono scolastico, minore quota di laureati, maggiore precarietà lavorativa e una più debole infrastruttura di welfare.

Non è un singolo fattore a spiegare queste differenze, ma la loro combinazione. Quando più svantaggi si concentrano nello stesso contesto, tendono a rafforzarsi reciprocamente. In questa prospettiva, i dati non restituiscono semplicemente una frattura Nord-Sud, ma offrono una chiave di lettura per individuare dove il sistema è più fragile e dove è necessario rafforzare servizi e opportunità.

L’istruzione continua a rappresentare uno dei principali fattori di protezione rispetto al rischio di entrare e permanere nella condizione NEET. Tuttavia, questo effetto non è automatico.

Dipende in modo cruciale dalle condizioni dei contesti territoriali e dalla qualità delle opportunità occupazionali disponibili. I dati mostrano che bassi titoli di studio e basse competenze aumentano il rischio di NEET di lungo periodo, ma anche che l’istruzione, da sola, non è sufficiente.

Per questo, le politiche educative devono essere collocate all’interno di un più ampio quadro di investimento sociale. Interventi come Garanzia Giovani hanno provato a integrare formazione e attivazione, ma con risultati limitati nei contesti più fragili.

Una prospettiva di corso di vita rende evidente la necessità di investimenti precoci, in particolare nei servizi per la prima infanzia, anche per sostenere la partecipazione femminile al lavoro.

La dimensione di genere è centrale: le ragazze ottengono in media risultati scolastici migliori, ma questo vantaggio non si traduce automaticamente in migliori opportunità occupazionali. In particolare, la presenza di figli può aumentare il rischio di permanenza nella condizione NEET.

Nei contesti caratterizzati da precarietà diffusa, bassi salari e scarse tutele, anche competenze più elevate rischiano di non produrre effetti significativi. I dati mostrano infatti che, nei territori con maggiore diffusione di lavoro instabile, precarietà e tassi di NEET tendono a rafforzarsi reciprocamente, configurando un modello strutturale di esclusione.

Accanto alle evidenze empiriche, il volume mette in luce un nodo trasversale: i limiti degli strumenti statistici utilizzati per analizzare la condizione NEET. Questi limiti incidono direttamente su ciò che riusciamo a vedere e, quindi, su ciò che viene riconosciuto come oggetto di intervento pubblico.

Le principali fonti statistiche misurano lo status occupazionale e formativo in un determinato momento, ma faticano a restituire la complessità delle traiettorie giovanili. Rimangono spesso invisibili la qualità delle esperienze lavorative e formative, la durata e la ricorsività dei periodi di inattività, così come i fattori materiali e relazionali che condizionano l’accesso alle opportunità.

Ancora più rilevante è ciò che questi dati non riescono a intercettare: responsabilità di cura, condizioni di salute e disabilità, lavoro informale, barriere nell’accesso ai servizi.

L’assenza di queste informazioni produce una forma di invisibilità statistica che colpisce in modo selettivo i gruppi più vulnerabili.

Questo lavoro ci ricorda un punto essenziale: non è possibile comprendere la condizione NEET senza analizzare le disuguaglianze che la producono, ma anche che servono dati migliori, più completi e accessibili, capaci di restituire la complessità delle traiettorie giovanili.

In questa direzione, il volume è disponibile in open access: https://doi.org/10.30682/9791254777688

🔧 opensdmx: un tool per esplorare i dati statistici con l’aiuto dell’AI

I dati statistici ufficiali — quelli ad esempio di Istat, Eurostat, OCSE, Banca Mondiale — sono spesso accessibili tramite API in formato SDMX (Statistical Data and Metadata eXchange). Un formato potente, standardizzato, documentato, ma — come ha raccontato Nadiia — non alla portata di tutte le persone.

Da qui nasce opensdmx: una CLI (e libreria Python) open source che abbiamo sviluppato per esplorare e interrogare questi dati in modo semplice, pensata per essere guidata da un agente AI.

Il problema di fondo è noto: i modelli linguistici sono bravi a capire le domande, ma a volte “inventano” i numeri. Una ricerca dell’FMI ha dimostrato che i sistemi di AI generativa sbagliano i numeri la maggior parte delle volte — restituendo cifre che sembrano ragionevoli, ma non corrispondono ai dati pubblicati. La soluzione corretta non è chiedere all’AI di produrre i dati, ma di costruire la query giusta — e poi affidarsi a uno strumento affidabile per recuperare i dati reali dalla fonte. opensdmx è quel livello di esecuzione: l’AI decide cosa cercare, opensdmx recupera il dato pubblicato.

In pratica, l’agente usa i comandi della CLI passo dopo passo: cerca nei cataloghi, esplora la struttura del dataset, applica i filtri e scarica i dati. Il risultato arriva sempre dalla fonte ufficiale, verificabile.

Lo sviluppo di opensdmx ci spinge spesso a interrogare i dati italiani, e quindi l’endpoint SDMX di Istat. Purtroppo, rispetto a Eurostat, l’accesso machine-to-machine verso Istat presenta alcune barriere concrete. Gli endpoint di discovery — quelli che permettono di sapere programmaticamente quali valori sono presenti in un dataset — sono spesso non funzionanti o lenti. Senza un sistema a token, il rate limit di circa 5 query al minuto (con blocco IP fino a 48 ore) è così basso che basta una fase esplorativa un po’ intensa per ritrovarsi bloccati — anche senza aver scaricato un singolo dato. Per questo abbiamo scritto a Istat con tre richieste: abilitare sistematicamente gli endpoint di discovery, adottare un limite differenziato tra chiamate di metadati e chiamate dati, e introdurre un sistema di API key per utente registrato — modello già adottato da molte altre PA italiane.

In questo filmato introduttivo viene mostrato come installare opensdmx e la skill dedicata (che ti consigliamo di usare):

⚖️ Abbiamo fatto cambiare la licenza di alcuni dati del Senato

Ogni tanto succede qualcosa di semplice ma che vale la pena raccontare: si segnala un problema, e qualcuno dall’altra parte risponde, recepisce e agisce.

Il repository AkomaNtosoBulkData del Senato della Repubblica contiene i testi completi degli atti legislativi in formato XML Akoma Ntoso — un formato aperto e internazionale pensato per i documenti parlamentari. Dati preziosi, strutturati, riutilizzabili.

Il problema era che i README citavano una licenza Creative Commons, ma nel repository non c’era nessun file LICENSE. E la versione indicata era la CC BY 3.0, che non copre esplicitamente i Sui Generis Database Rights — la tutela giuridica specifica prevista per le banche dati. In pratica, la licenza citata era quella meno adatta proprio per un repository di dati.

Abbiamo aperto una pull request proponendo di aggiungere il file LICENSE e di aggiornare alla CC BY 4.0 — una delle licenze raccomandate nelle Linee Guida Open Data dell’Agenzia per l’Italia Digitale, progettata esplicitamente per i dati.

La risposta del Senato è stata rapida e cordiale: la PR è stata chiusa perché il repository viene generato automaticamente, ma la modifica è stata recepita. Il commit in produzione del 20 maggio 2026 lo conferma.

Piccola cosa, grande differenza: i dati legislativi del Senato sono ora rilasciati con una licenza esplicita, corretta e adatta al loro uso.

📍 I numeri civici di Palermo ora sono importabili in OpenStreetMap

I numeri civici del Comune di Palermo sono pubblici, aperti, sotto licenza CC BY e pubblicati nell’Archivio Nazionale dei Numeri Civici delle Strade Urbane (ANNCSU). Eppure non erano importabili in OpenStreetMap (OSM), che usa la licenza ODbL. Le due licenze non sono direttamente compatibili, senza un esplicito permesso del produttore del dato.

Allora - insieme a rappresentanti di Wikimedia Italia e della comunità OpenStreetMap - abbiamo scritto a Ciro Spataro, il responsabile open data del Comune, per chiedere alla PA di consentire l’importazione di questo prezioso insieme di dati in OSM.

Lavorando insieme con Anisa Kuci, Daniele Santini e Giovanni Pennisi - a loro e a Ciro Spataro il nostro grazie - il Comune ha aggiunto il waiver nei metadati: i numeri civici di Palermo sono ora importabili in OpenStreetMap.

Una soluzione piccola, elegante, replicabile da ogni Comune italiano.

🙏Se vuoi sostenerci, puoi farlo in questi modi.

Iscriviti ora

👉 Se ci leggi da e-mail, fai click qui per leggerla per intero

📊 Parlare con i dati Istat grazie all’intelligenza artificiale

È possibile parlare con i dati utilizzando l’intelligenza artificiale? Abbiamo provato a farlo con i dati della statistica ufficiale pubblicati dall’Istat. E i risultati sono stati, a dir poco, sorprendenti.

La diffusione dei dati è sempre stata una fase molto importante di tutto il ciclo di vita del dato, in particolar modo per i produttori di dati della statistica ufficiale. Il modello di diffusione attuale prevede uno o più data warehouse di diffusione dove i dati sono organizzati in “cubi multidimensionali” che è possibile “navigare” utilizzando l’interfaccia grafica della piattaforma di diffusione in modo da filtrare, sezionare, ruotare i dati fino ad ottenere la tabella di dati desiderata.

Oggi, la possibilità di utilizzare l’AI ha cambiato radicalmente le carte in tavola. Dare la possibilità agli utenti di poter accedere all’intera offerta informativa disponibile attraverso conversazioni in linguaggio naturale diventa un’occasione per introdurre un nuovo approccio alla diffusione dei dati, aggiungendo nuove e interessanti modalità di interazione con i dati statistici.

IstatData, “la banca dati dell’istituto Nazionale di Statistica”, è la piattaforma principale utilizzata da Istat per la diffusione dei dati. Una cosa interessante è che non solo è possibile cercare i dati e visualizzarli attraverso un’interfaccia web, ma è possibile accedere ai dati pubblicati anche attraverso API pubbliche. Le API di Istat sono conformi alle specifiche SDMX, uno standard ISO sviluppato appositamente per la trasmissione di dati e metadati statistici tra istituti nazionali di statistica e organizzazioni come Eurostat, FMI, World Bank e altre organizzazioni internazionali. Utilizzando le API, diventa quindi possibile connettere applicazioni esterne ai dati dell’Istituto. E questo vale anche per gli agenti di intelligenza artificiale.

MCP (Model Context Protocol) è uno standard aperto introdotto da Anthropic a novembre del 2024 che è diventato rapidamente lo standard di riferimento per far dialogare agenti di intelligenza artificiale in modo strutturato con sistemi esterni. MCP implementa un’architettura client/server dove il client è l’agente AI, mentre il server MCP contiene la “cassetta degli attrezzi” per interagire con il sistema esterno.

Nel nostro caso, il server MCP contiene tutti gli strumenti necessari per gestire l’interazione con le API SDMX di Istat e per costruire correttamente le chiamate agli endpoint dell’Istituto. Ma come funziona concretamente? Il nostro chatbot AI, ad esempio Claude Desktop, nel momento in cui lo avviamo, carica il server e tutti i vari tool che sono implementati all’interno del server. Quando un utente effettua una richiesta, questa va fatta specificando che si stanno richiedendo dati di Istat, in modo tale che l’agente “capisca” che deve interagire con il server MCP. L’applicazione agisce quindi da orchestratore: legge la configurazione, avvia il server MCP come processo locale e gestisce lo scambio di messaggi con il server e le chiamate ai tool, estendendo di fatto le capacità dell’assistente AI. Se la richiesta è qualcosa come “Quali sono i dataflow Istat per uno studio sulle coltivazioni agricole”, l’agente AI vede che la richiesta riguarda i dati Istat e andrà a guardare tra i tool disponibili nel server MCP, dove andrà a chiamare il tool “discover_dataflow”, la cui funzione è proprio quella di individuare i dataflow che hanno attinenza con la richiesta fatta. E così via.

Diventa quindi un’“interfaccia universale” per accedere a dati, fare analisi, ottenere visualizzazioni interattive e un’infinità di altre cose che possiamo chiedergli “parlando con i dati”. E così tutti gli altri client MCP compatibili.

La versione 1.0 del server può essere installata seguendo le istruzioni del seguente link su Github: https://github.com/ondata/istat_mcp_server.

Suggeriamo di installare anche la skill dedicata.

Il repository di Github è dove raccogliamo le segnalazioni che utilizzeremo per migliorare il server e rilasciare versioni successive più robuste ed efficienti.

Grazie in anticipo a chi lo vorrà provare e vorrà dare il proprio contributo. E un grosso grazie a 👏 Vincenzo Patruno, che lo ha immaginato, progettato e sviluppato.

Questo server MCP è in linea con il ckan-mcp-server presentato nel numero precedente, che consente di accedere in linguaggio naturale a qualsiasi portale open data basato su CKAN (più sotto info su una live dedicata): cercare dataset, esplorare organizzazioni, interrogare dati tabulari e leggere metadati.

🗺️ Ancora una volta sui dati aperti sui Numeri Civici e sulla loro qualità

Circa un anno fa avevamo già parlato dei dati aperti sui Numeri Civici, raccontando di un’opera incompiuta. Ci torniamo, perché a distanza di un anno emergono delle evidenze degne di nota.

L’ANNCSU — l’Archivio Nazionale dei Numeri Civici e delle Strade Urbane, gestito da Istat e Agenzia delle Entrate — pubblica mensilmente in open data l’indirizzario di tutti i civici italiani. È un dataset classificato “di alto valore” dal Regolamento europeo 2023/138. Lo usano pubbliche amministrazioni, aziende, ricercatori. È uno dei dati di base, per sapere “dove sono le cose”, su cui si costruiscono servizi, si pianificano interventi, si prendono decisioni.

Abbiamo scaricato il file di marzo 2026 dal portale ufficiale (anncsu.gov.it) e fatto un controllo elementare: prendere ogni indirizzo geocodificato, costruire il punto con le coordinate fornite, e verificare che cada nel territorio del comune a cui il record dichiara di appartenere. Un test banale. Il minimo sindacale.

I numeri

Il file contiene 27,6 milioni di record, uno per ogni civico d’Italia. Di questi, il 52,4% ha coordinate geografiche — 14,5 milioni di indirizzi. Un miglioramento significativo rispetto a un anno fa, quando i civici geocodificati erano appena il 4%. Ma quasi la metà dell’archivio resta ancora senza coordinate. Vale la pena però ricordare che il Regolamento di esecuzione (UE) 2023/138 è entrato in vigore il 9 febbraio 2023 ed è diventato applicabile dal 9 giugno 2024. Da quella data, i dati di elevato valore dovevano essere resi disponibili come dati aperti, gratuitamente e attraverso API e download in blocco. Sono passati quasi due anni.

Dei 14,5 milioni con coordinate, abbiamo verificato in quale poligono comunale ISTAT cade ciascun punto. Il risultato:

• 14.284.505 (98,83%) cadono nel comune corretto

• 157.717 (1,09%) cadono in un comune diverso da quello dichiarato

• 11.983 (0,08%) non cadono in nessun comune

Una nota: per il test abbiamo usato i confini delle unità amministrative a fini statistici di Istat, nella versione generalizzata (meno dettagliata). Questo significa che una parte degli errori è legata a civici che ricadono vicino a un confine amministrativo e che, per effetto della semplificazione geometrica, risultano erroneamente associati a un altro comune. Il numero reale di errori è quindi un po’ inferiore.

Detto questo, quasi 170.000 indirizzi hanno coordinate che puntano nel posto sbagliato.

Posizioni geografiche errate

In questa tabella di riepilogo, le prime 5 regioni per numero di indirizzi geocodificati che cadono fuori dal comune dichiarato:

A livello provinciale, Messina raggiunge il 7,29% e Catanzaro il 6,70%.

Ci sono 13 comuni in cui oltre la metà degli indirizzi geocodificati punta fuori dal proprio territorio. In 4 di questi — Furnari, Venetico, Montalbano Elicona (ME) e Stalettì (CZ) — la percentuale supera il 99%.

Ma ci sono anche casi in cui i punti ricadono nel territorio comunale corretto, eppure sono posizionati in modo del tutto errato: come questi 10.500 punti ammassati in pochi metri, a formare una “farfalla”.

Cosa significa

Non si tratta di coordinate spostate di qualche metro. Si tratta di punti che cadono nel territorio di un altro comune. O a mare, o come se fossero disegnati da un bambino o una bambina.

Questo tipo di dataset viene usato per geocodificare servizi, calcolare distanze, costruire indicatori territoriali. Chi lo usa in buona fede — perché è il dato ufficiale — rischia di attribuire indirizzi al comune sbagliato. E non ha modo di saperlo, a meno di non fare il controllo che abbiamo fatto noi.

Il punto

Errori nel processo di raccolta e consolidamento di 27 milioni di record sono inevitabili. Nessuno si aspetta la perfezione. Ma il test che abbiamo eseguito — un point-in-polygon tra le coordinate fornite e i confini ISTAT — è il controllo di qualità più elementare che esista per un dato geografico. Richiede pochi minuti di calcolo.

Se un dataset viene pubblicato come open data ufficiale di alto valore, chi lo scarica si aspetta che sia passato almeno attraverso i controlli minimi. Pubblicare dati non verificati su un canale ufficiale è come immettere acqua non controllata nella rete idrica.

C’è un altro numero che merita attenzione: il 47,6% dei civici non ha ancora coordinate. Quasi la metà dell’archivio non è geocodificata. È un dato che, da solo, limita drasticamente l’utilità del dataset per qualsiasi applicazione spaziale.

Nota metodologica

• Fonte indirizzario: ANNCSU, file INDIR_ITA_20260306.csv scaricato il 29 marzo 2026

• Confini comunali: ISTAT, limiti amministrativi al 1° gennaio 2025 (Com01012025_g_WGS84.shp)

• Anagrafe comuni: ISTAT, elenco comuni al 1° dicembre 2025

• Strumenti: DuckDB con estensione spatial (indice R-tree per il point-in-polygon)

• Test: per ogni record con coordinate valorizzate, è stato creato un punto (lon/lat) e verificata l’appartenenza al poligono comunale tramite ST_Contains

Per farsi un’idea

Suggeriamo di dare un’occhiata a questo lavoro di analisi dell’evoluzione della georeferenziazione dei numeri civici di ANNCSU a cura di Matteo Fortini. Un lavoro che mostra come, nonostante i miglioramenti, ci sia ancora molta strada da fare.

🌍 CKAN compie 20 anni: il futuro dei dati aperti nell’era dell’AI

A marzo 2026, la Open Knowledge Foundation ha organizzato la conferenza online The Future of Open Data, con una tavola rotonda dal titolo “CKAN at 20: The Future of Open Data in the Era of AI”. È stato invitato a partecipare anche il nostro Andrea Borruso.

CKAN — la piattaforma open source che da 20 anni alimenta i portali open data di oltre 40 paesi — è al centro di una riflessione importante. Come ha sintetizzato Rufus Pollock (fondatore di OKFN): “Rendere i dati disponibili non è la stessa cosa che renderli utili. Molti portali sono ancora degli schedari ben organizzati”. Il vero collo di bottiglia non è mai stato l’accesso tecnico, ma l’accesso cognitivo: sapere cosa chiedere, come interrogare i dati, come interpretarli.

Dalla tavola rotonda sono emersi alcuni spunti chiave:

• L’AI come ponte tra disponibilità e comprensione dei dati. Il linguaggio naturale diventa il linguaggio di interrogazione: chi ha una domanda non deve più essere un data engineer per ottenere una risposta. È il cambio di paradigma che i portali open data aspettavano da vent’anni.

• MCP server come un’interfaccia per i portali. Diversi relatori hanno mostrato server MCP per CKAN: da quello di data.gouv.fr (il portale open data francese, che ha ricevuto contributi dalla comunità ed è già stato forkato per altri portali nazionali), a quello di datHere (che genera notebook verificabili invece di risposte libere), fino al nostro ckan-mcp-server, attualmente il pacchetto npm più scaricato legato a CKAN. Un dato significativo: l’ufficio statistico della città di Zurigo ci ha contattati perché un cittadino aveva chiesto loro “Avete un MCP server per il vostro catalogo open data?”. Gli utenti si aspettano già questo tipo di interfaccia.

• Privacy e modelli locali. Steven De Costa (Link Digital) ha raccontato l’esperienza con LLM locali per i portali governativi: quando si lavora con dati potenzialmente sensibili, non si possono inviare a servizi cloud esterni. I modelli locali sono meno potenti ma garantiscono che i dati restino sotto il controllo dell’ente.

• Verificabilità e responsabilità. Più relatori hanno insistito sul fatto che l’AI applicata ai dati aperti deve produrre risultati verificabili. L’approccio di datHere — generare notebook riproducibili anziché risposte testuali — è emblematico: non basta dare una risposta, bisogna mostrare come ci si è arrivati.

• I dati aperti diventano più importanti, non meno. Come ha sottolineato Pollock, l’AI non rende obsoleti i dati aperti: li rende più preziosi. Dati affidabili, documentati e accessibili via API sono il fondamento su cui l’AI può costruire risposte utili. Senza dati di qualità, l’AI produce solo allucinazioni ben formattate.

Alla tavola rotonda hanno partecipato anche Antonin Garrone (data.gouv.fr), Jamaica Jones (CKAN/POSE Community Manager, moderatrice), Joel Natividad (datHere), Patricio Del Boca (OKFN).

🔓 Licenza sito Ministero della Giustizia: il difensore civico è d’accordo con noi

A novembre 2024 avevamo segnalato al Difensore Civico per il Digitale la licenza d’uso inadeguata del sito del Ministero della Giustizia: restrittiva, incompatibile con le norme sul riutilizzo dei dati pubblici, in contrasto con il CAD e con le direttive europee.

Dopo oltre un anno di attesa — la risposta è arrivata a inizio 2026 — il Difensore Civico ha stabilito che la nostra segnalazione “è stata ritenuta non manifestamente infondata”. La questione è stata quindi trasmessa ad AGID per l’esercizio dei poteri di vigilanza previsti dalla normativa.

Non possiamo ancora gridare vittoria, ma è un passo avanti concreto.

📊 Ora di religione: la Uaar libera i dati anno dopo anno

Per il quarto anno consecutivo, l’Unione degli Atei e degli Agnostici Razionalisti (Uaar) ha richiesto al Ministero dell’Istruzione e del Merito e alle province autonome di Trento e Bolzano i dati sul numero di studenti che scelgono di non avvalersi dell’insegnamento della religione cattolica nella scuola pubblica.

I numeri parlano chiaro: il 17,7% degli studenti non frequenta l’ora di religione, in crescita rispetto al 16,7% dell’anno precedente. Ogni anno circa 42.000 studenti in più scelgono di non partecipare. Le regioni con la percentuale più alta sono Valle d’Aosta (34,46%), Emilia Romagna (30,65%) e Toscana (30,60%). In tre comuni — Monfalcone, Pinerolo e Firenze — chi non si avvale supera il 50%.

È un esempio concreto di come la richiesta sistematica di dati pubblici possa documentare un fenomeno altrimenti invisibile. Senza questa ostinazione nel chiedere i dati anno dopo anno, il trend non sarebbe raccontabile. L’analisi completa è sul blog della Uaar.

Chiudiamo con una richiesta che ripetiamo volentieri anche noi: il Ministero dell’Istruzione e del Merito dovrebbe pubblicare autonomamente questi dati, ogni anno, senza che sia necessario che un’associazione presenti una richiesta di accesso civico. La Circolare FOIA n. 2/2017 (sezione 8.2, “Pubblicazione proattiva”) è molto chiara: “la pubblicazione proattiva sui siti istituzionali delle amministrazioni è fortemente auspicabile quando si tratti di informazioni di interesse generale o che siano oggetto di richieste ricorrenti”. Quattro anni consecutivi di richieste ci sembra una buona ricorrenza.

🎬 L’AI che interroga i dati aperti: la nostra live su CKAN e schema.gov.it

Il 13 marzo abbiamo trasmesso una live in cui Matteo Fortini e Andrea Borruso hanno mostrato come far dialogare un assistente AI con i portali di dati aperti pubblici, senza scrivere codice e senza conoscere API.

Lo hanno fatto attraverso due server MCP (Model Context Protocol), il protocollo aperto che permette agli assistenti AI di usare strumenti esterni come “estensioni” del proprio ragionamento:

• 🧠 dati-semantic-mcp (Matteo Fortini) — questo è particolarmente interessante. È un server MCP che si collega a schema.gov.it, il catalogo nazionale della semantica dei dati della PA italiana. Permette all’AI di esplorare ontologie, vocabolari controllati, schemi dati e le connessioni tra concetti. In pratica, rende l’assistente AI consapevole non solo dei dati grezzi, ma del significato di quei dati: cosa rappresentano, come sono classificati, quali standard seguono. È il tipo di strumento che potrebbe facilitare il modo in cui si costruiscono dati aperti di qualità;

• 🔍 CKAN MCP Server (Andrea Borruso / onData) — collega l’AI a qualsiasi portale CKAN, tra cui dati.gov.it, data.gov, open.canada.ca e altri 500+ portali mondiali. Permette di cercare dataset, interrogare tabelle con query SQL, esplorare organizzazioni e tag, tutto chiedendo in linguaggio naturale.

Un punto importante emerso dalla live: MCP è un protocollo machine-to-machine. Questi server non sono solo “plugin” per assistenti generalisti — sono interfacce standard che si possono integrare in applicazioni, pipeline di dati, agenti automatizzati. Se state costruendo qualcosa che ha bisogno di accedere a dati aperti pubblici, questi strumenti sono già pronti da usare.

🙏Se vuoi sostenerci, puoi farlo in questi modi.

Iscriviti ora

Immagine di Giulio Di Meo - licenza CC BY-SA 4.0

👉 Se ci leggi da e-mail, fai click qui per leggerla per intero

🟣 #datiBeneComune: 25.000 firme e un dialogo aperto con il governo sui dati dei femminicidi

Il 12 febbraio abbiamo consegnato alla Presidenza del Consiglio le oltre 25.000 firme della petizione #datiBeneComune che chiede dati aperti, aggiornati e disaggregati sulla violenza di genere e sui femminicidi. Alla campagna hanno aderito 39 organizzazioni — tra cui Action Aid Italia, Transparency International Italia, Info.Nodes, Period Think Tank e D.i.Re – Donne in Rete contro la violenza.

Ci ha ricevuto una delegazione del Dipartimento per le Pari Opportunità insieme al Servizio Analisi Criminale del Ministero dell’Interno e al Ministero della Giustizia. Abbiamo presentato una proposta tecnica (sotto i dettagli) che, partendo dalla legge 53/2022, indica cosa si potrebbe pubblicare subito.

Cosa abbiamo chiesto? Quello che sembra ovvio ma non lo è ancora: sapere ad esempio come sono distribuiti territorialmente i femminicidi, avere serie storiche, incrociare i dati con le relazioni vittima-autore. Dati che le amministrazioni già hanno, ma non rendono pubblici in forma fruibile e comparabile.

Dall’altra parte, abbiamo raccolto disponibilità. Il Servizio Analisi Criminale ha confermato che aggiungeranno alle pubblicazioni oggi esistenti dati aggregati per nazionalità, fasce d’età e distribuzione geografica. In questa occasione si è anche voluto sottolineare che la legge 53 è stata applicata solo dal 1° gennaio 2024, quando è stato introdotto nel sistema informatico il campo “relazione vittima-autore”.

Period Think Tank ha portato all’attenzione i problemi concreti dei dati richiesti e ricevuti via FOIA: righe duplicate, metadati assenti, e la gran parte delle informazioni riferite solo al 2024 — nonostante la richiesta coprisse il periodo 2019-2024. Questi dati sono disponibili in questo numero della newsletter “Liberiamoli tutti!”.

Il quadro istituzionale punta al recepimento della direttiva europea (entro giugno 2027) come occasione principale per sistematizzare tutto. Nel frattempo, l’Osservatorio sulla violenza contro le donne resta la una sede formale di confronto e un’opportunità che presidieremo.

La porta a questo punto è aperta e continueremo a bussare. Perché con questa consegna della nostra richiesta, abbiamo fissato e anche formalizzato l’inizio. Con tutte le organizzazioni aderenti e con il sostegno delle persone che hanno firmato, continueremo a monitorare e a chiedere la pubblicazione di questi dati.

🙏 Per l’associazione onData è motivo di orgoglio essere arrivata sino a qui. Ed è un piacere mettere in fila un po’ di grazie:

• a Action AID, info.nodes, Transparency International Italia, con cui da tante settimane ci riuniamo per immaginare, costruire e portare avanti la campagna;

• a change.org, che ha ospitato la petizione e ci ha supportato nella raccolta firme;

• a Patrizia Caruso, Daniela Casula, Davide Del Monte, Andrea Nelson Mauro e Alberto Pampalone Morisani

• alla nostra Donata Columbro - per chiudere in bellezza - che ha usato tanti dei suoi super poteri per fare “volare” questa iniziativa.

Video realizzato da Angela Nittoli

🦆 L’archivio del mio cancro

Paola Chiara Masuzzo, la vicepresidente di onData, ha costruito qualcosa che vale la pena leggere e guardare. Non solo per la storia che contiene, ma soprattutto per l’idea che ci sta dietro, e per come la realizza.

Si chiama L’archivio del mio cancro ed è esattamente quello che dice: un archivio personale costruito attorno ai dati della propria malattia. Quattro progetti, ciascuno con un disegno preciso.

Cosa c’è nel mio sangue: durante la chemioterapia, Paola scaricava i referti in PDF (sì, il formato di cui “sparliamo” spesso) ed estraeva i valori di emoglobina e neutrofili, salvandoli in un CSV. Ha poi imparato a leggere il proprio corpo attraverso quei numeri.

Quanto è grande il mio tumore: ha preso le dimensioni del tumore dai referti e si è chiesta — se lo tenessi in mano, quanto grande sarebbe? Ha cercato oggetti di tutti i giorni di quelle stesse dimensioni. Un mattoncino LEGO, un chicco di mais, una gomma per matita, una caramella, un chicco di caffè, una biglia, un dado da gioco. Un ponte tra dato medico e realtà percepibile.

Il collage delle mie pillole chemioterapiche: 224 fotografie, due al giorno per ogni giorno di chemioterapia. Un collage che è anche un calendario, con ricordi agganciati ad alcune foto. I metadati dei file (orario esatto dello scatto) sono stati usati per ricostruire la distanza tra le dosi mattutine e serali. Dodici ore, sempre rispettate.

La cronistoria del mio cancro: una timeline che va dalla prima ecografia alla prima chemioterapia. I dati vengono dalla cartella clinica — e qui emerge il tema più interessante: le immagini mediche sono in formato DICOM, uno standard aperto ma di fatto inaccessibile senza strumenti specialistici. Paola le ha convertite, liberate, e messe nel suo archivio. Perché quei dati sono suoi.

Quello che colpisce non è solo la cura messa nel fare tutto questo, ma l’energia con cui Paola trasforma un’esperienza difficile in un atto di riappropriazione e di senso. Nel mondo dei dati spesso mancano freschezza, diversità di sguardi e voglia di sperimentare, e questo archivio è un esempio raro e prezioso di cosa si può fare quando le idee hanno spazio per respirare.

👉 La newsletter di Paola si chiama Fate ə monellə — iscriviti.

🤖 Cercare dati aperti con l’AI: il nostro CKAN MCP server

Hai mai aperto un portale open data come dati.gov.it e passato minuti a capire come cercare, quale filtro usare, come si chiama la Pubblica Amministrazione giusta, se i dati che cercavi erano lì o altrove?

Abbiamo allora costruito ckan-mcp-server, che trasforma qualunque portale dati basato su CKAN in un’interfaccia conversazionale.
Descrivi in linguaggio naturale cosa stai cercando, e l’AI interroga il portale, restituisce informazioni sui dati, link di download, in che formato sono disponibili, e tanto altro. Puoi anche fare query SQL sui dati tabellari direttamente dalla chat — senza aprire un browser, senza conoscere le API (nei portali che lo supportano, come quello del Comune di Messina).

Ad esempio potresti chiedere:

“Cerca su dati.gov.it i dataset sulla qualità dell’aria a Milano, poi riassumi cosa contiene ciascuno — copertura temporale, licenza e formato migliore per il download.”

In output un riepilogo strutturato dei dati del Comune di Milano/AMAT, con informazioni sui parametri ambientali, copertura temporale, aggiornamento, ecc..

CKAN è la piattaforma open source usata da decine di portali in tutto il mondo: ad esempio dati.gov.it (Italia), data.gov (Stati Uniti), open.canada.ca (Canada), data.gov.uk (Regno Unito), data.gov.au (Australia). Il server funziona con qualunque strumento AI che supporti MCP — Claude, ChatGPT, Gemini e molti altri. Per i portali italiani, supporta anche le metriche MQA — la misura di qualità europea dei metadati dei dati aperti.

👉 Per installare questo strumento, puoi seguire una di queste modalità.

Può essere utile a giornaliste e giornalisti che cercano fonti, ricercatrici e ricercatori che esplorano dataset, funzionarie e funzionari pubblici che vogliono capire cosa pubblicano altre amministrazioni, attiviste e attivisti civici che monitorano la trasparenza. Abbassa la barriera di accesso per chi non ha competenze tecniche, ma è anche un acceleratore per usi machine-to-machine — e un punto di ingresso immediato per dirigenti e responsabili della PA che vogliono esplorare i portali open data senza dipendere da uno specialista.

Non è necessario installare nuovi tool, perché c’è un servizio pronto all’uso (100.000 richieste al giorno condivise tra chi lo usa). Se diventerà una modalità di esplorazione che userai frequentemente, ti consigliamo l’installazione locale. Il codice è open source.

Nel video (con audio) sottostante qualche esempio d’uso.

📐 Come dovrebbero essere pubblicati i dati sui femminicidi: la nostra proposta

Il 12 febbraio, come detto all’inizio, non abbiamo consegnato solo le firme. Insieme alla lettera aperta abbiamo portato una proposta tecnica concreta: uno schema dati che descrive come potrebbero essere strutturati e pubblicati i dati sui femminicidi e sulla violenza di genere.

Il punto di partenza per lo sviluppo del lavoro è stato questo: la Legge 53 del 5 maggio 2022 (“Disposizioni in materia di statistiche in tema di violenza di genere”) prevede già che questi dati vengano raccolti. Lo chiede alle forze dell’ordine, al sistema sanitario, ai centri antiviolenza. I dati esistono, ma quello che manca è la loro pubblicazione in forma aperta, leggibile, utilizzabile e continua.

E la pubblicazione non è solo auspicabile: il Codice dell’Amministrazione Digitale (D.Lgs. 82/2005) e il D.Lgs. 36/2006 prevedono che le pubbliche amministrazioni rendano disponibili i propri dati in formato aperto, con le necessarie misure di anonimizzazione.

Quattro dataset, quattro pilastri normativi. La L. 53/2022 articola la raccolta in diversi sistemi: i dati dei pronto soccorso (Art. 4), i dati penali del Ministero dell’Interno e della Giustizia (Art. 5) e i dati dai centri antiviolenza (Art. 7). Per ciascuno abbiamo proposto uno schema concreto: nomi dei campi, tipi di dato, valori controllati.

Il nodo tecnico: gli identificativi anonimi. Una delle sfide più delicate è che nella realtà un singolo episodio di violenza può coinvolgere più autori, più vittime o più reati. Se non si gestisce bene questa complessità, i numeri diventano inaffidabili. La nostra proposta introduce identificativi anonimi che permettono di contare correttamente senza esporre dati personali.

Il contesto normativo si è arricchito. Abbiamo integrato nello schema anche elementi della Legge 181 del 2 dicembre 2025, che introduce il nuovo reato di femminicidio e prevede una relazione annuale al Parlamento con dati disaggregati per sesso della vittima.

E l’Europa? La Direttiva UE 2024/1385 sulla violenza contro le donne impone agli Stati membri di raccogliere e pubblicare statistiche annuali entro il 14 giugno 2027. L’Italia con la legge 53/2022 ha già anticipato questo obbligo — e in alcuni aspetti lo supera (27 reati specifici, 15 modalità di relazione autore-vittima). Pubblicare ora i dati significherebbe dare piena attuazione a una norma vigente, anticipare virtuosamente il 2027 e dimostrare che si può fare.

📄 Leggi la proposta tecnica completa

🤔 Nota tecnica: per costruire la proposta è stato molto comodo usare normattiva2md, lo strumento che abbiamo costruito per scaricare le leggi italiane da normattiva e trasformarle in un formato “pronto” per l’analisi con il supporto dell’AI.

🔍 avalpdf: validare l’accessibilità dei PDF da riga di comando

Quante volte hai ricevuto un PDF inaccessibile — senza testo alternativo sulle immagini, senza una struttura leggibile da uno screen reader — e non avevi strumenti semplici per capire dove stesse il problema?

Dennis Angemi, nostro socio, ha costruito avalpdf: uno strumento da riga di comando per validare l’accessibilità dei PDF. Analizza la struttura del documento, verifica i tag, controlla la gerarchia delle intestazioni, l’alt text delle immagini, la struttura di tabelle e liste, la validità dei link e altro. Alla fine produce un report con errori, avvisi e successi, e assegna un punteggio di accessibilità.

È uno strumento pratico e open source (licenza MIT), che risolve un problema reale: sapere se un PDF rispetta gli standard di accessibilità. Per chi lavora con dati pubblici, atti amministrativi o documentazione tecnica, è esattamente il tipo di strumento che fa risparmiare tempo e aumenta la qualità del lavoro.

📸 Zappa News: una redazione che educa a guardare il mondo

La copertina di questo numero viene da un progetto che vale la pena conoscere.

Zappa News nasce nell’anno scolastico 2017/2018 dall’idea di Giulio Di Meo, fotografo e fotogiornalista con oltre vent’anni di lavoro nel reportage sociale. L’obiettivo: avvicinare ragazze e ragazzi al racconto della realtà attraverso gli strumenti del giornalismo e della fotografia. Non come esercizio scolastico, ma come pratica reale — una redazione attiva dove si impara a osservare, a fare domande, a verificare le fonti, a costruire notizie mettendo insieme parole e immagini.

Il progetto coltiva spirito critico e consapevolezza civica. Le studentesse e gli studenti fanno inchieste sul territorio, intervistano rappresentanti istituzionali, affrontano temi come crisi climatica, legalità e diritti umani. La redazione diventa uno spazio di cittadinanza attiva, dove le opinioni hanno valore nel presente — non in un futuro astratto.

L’immagine che apre questo numero viene dal numero 16 di gennaio 2026 (Anno 10), dedicato alle donne, nato da una domanda provocatoria: “E se fossero le donne a governare il mondo?”. Da lì prende forma un percorso tra storie di resistenza e impegno civile — dall’Iran all’Ucraina, dalla Palestina al Brasile — accanto a figure femminili significative per la comunità scolastica e il territorio bolognese.

Quando Lorenzo Perone ci ha fatto scoprire questo numero di Zappa News (grazie), ci è sembrata un’occasione imperdibile usare una delle sue immagini per la copertina di questo numero della nostra newsletter. Era un modo per firmare in modo bello questo numero.
Ancora un grazie a Giulio e a Lorenzo.

Strumenti/risorse

• 🗺️ MapFight: confronta visivamente la dimensione reale di paesi, regioni e città. Corregge le distorsioni della proiezione di Mercatore — quella che fa sembrare la Groenlandia grande quanto l’Africa

• 🪛 QMD – Quick Markdown Search: motore di ricerca locale per appunti e documenti Markdown. Gira interamente in locale, senza inviare dati a servizi esterni

• 🪛 Estensione Eurostat per DuckDB: interroga direttamente i dataset di Eurostat con SQL. Migliaia di dataset statistici europei a portata di query

• 🪛 Nuove prospettive per SpatiaLite: si prevede un aggiornamento a SpatiaLite 6.0 in primavera e una versione completa 6.1 in autunno (grazie Salvatore Fiandaca per la segnalazione)

• 🎓 Hello Data Science: libro open access che introduce R, RStudio e Quarto per chi vuole avvicinarsi all’analisi dati con strumenti open source

• 📊 Data to Art: galleria online di opere artistiche nate dai dati. Esplora il confine tra scienza e astrazione, con mostre fisiche e digitali in tutto il mondo

• 📺 Visualising Climate 2026: prima conferenza globale sulla visualizzazione dei dati climatici e ambientali. Si terrà a Bologna il 4-6 novembre 2026. La call for submissions è aperta fino al 30 aprile

🙏Se vuoi sostenerci, puoi farlo in questi modi.

Iscriviti ora

👉 Se ci leggi da e-mail, fai click qui per leggerla per intero

📊 Liberiamoli tutti! Dati sulla violenza di genere

I dati aperti pubblici sulla violenza di genere sono incompleti, difficili da consultare, pubblicati in modo frammentario. Risultato: la violenza rimane nebulosa, difficile valutare se le politiche pubbliche funzionano.

Ecco perché con info.Nodes, Transparency International Italia, ActionAid e la rete D.i.Re – Donne in rete contro la violenza, Period Think Tank, abbiamo lanciato una campagna per chiedere trasparenza e accesso ai dati sulla violenza di genere, affinché le istituzioni rispettino il diritto di conoscere e agire con consapevolezza e costruire, insieme, una società più giusta e più sicura.

👉 Abbiamo ad oggi raccolto più di 24.000 firme (GRAZIE!) ed è possibile ancora firmare la petizione su change.org/dativiolenzadigenere. Se invece vuoi aderire con la tua organizzazione, firmando la lettera aperta che consegneremo al governo, puoi chiederlo per email a info@datibenecomune.it.

Il 17 dicembre ne abbiamo parlato in una live dal titolo Perché è così difficile avere i dati sulla violenza di genere?, con Donata Columbro e Andrea Borruso per onData, Simona Ammerata per D.i.Re, Giuditta Bellosi per Period Think Tank e Rossella Silvestre per ActionAid. Tra i punti emersi dalla discussione:

• la mancanza di dati non è un dettaglio tecnico: incide su politiche, finanziamenti e servizi territoriali, e quindi sulla possibilità concreta di prevenire e sostenere chi subisce violenza;

• esiste già una base normativa in Italia (legge 53/2022) che punta a migliorare raccolta e diffusione delle statistiche, ma nella discussione è stata descritta come non ancora pienamente attuata;

• viene rivendicato il coinvolgimento di chi ha competenze sul campo nella costruzione e lettura dei dati, perché “i dati non sono neutrali” né quando mancano, né quando vengono interpretati;

• oltre alle fonti istituzionali, si è ricordato il lavoro “dal basso”: i centri antiviolenza producono e raccolgono dati utili al monitoraggio, proprio per colmare pezzi mancanti.

Infine, in questo numero della “Liberiamoli tutti!” sono stati pubblicati due dataset sui femminicidi. Il primo proviene dalla richiesta FOIA che Period Think Tank ha presentato al Ministero dell’Interno, ottenendo dati sui reati di genere dal 2019-2024. Il secondo è il dataset della RAI sui femminicidi 2012-2018. Per quest’ultimo un grazie speciale a Sabino Metta (data collector), e grazie anche Donata Columbro (data curator), Andrea Borruso (data curator), Paola Masuzzo (data curator).

🧮 Tutti contano: contare chi non conta

Tutti contano è la campagna di reclutamento per una Rilevazione sulle Persone Senza Dimora — un progetto del Censimento ISTAT coordinato da fio.PSD (Federazione Italiana Organismi per le Persone Senza Dimora).

Quando e dove: 26, 28 e 29 gennaio 2026 in 14 città metropolitane (Bari, Bologna, Cagliari, Catania, Firenze, Genova, Messina, Milano, Napoli, Palermo, Reggio Calabria, Roma, Torino, Venezia).

Come funziona: il 26 gennaio ci sarà una conta diretta, il 28 e 29 gennaio interviste. Migliaia di persone volontarie organizzate in squadre da 2-3 persone, coordinate da 22 Coordinatori e Coordinatrici Metropolitani e 180 Responsabili della Rilevazione, con la collaborazione dei Comuni.

Se vuoi partecipare: candidature su www.tutticontano.fiopsd.org entro il 20 gennaio. Tutte e tutti i volontari riceveranno formazione (in presenza o online), copertura assicurativa e attestato.

Perché è importante? il principio è semplice: senza contare, non contano. Se non esisti nei dati, sei invisibile alle politiche pubbliche. Questa rilevazione raccoglie informazioni cruciali per programmazione di politiche pubbliche più efficaci e mirate.

Alcune persone di onData parteciperanno alle attività a Roma, Palermo e Torino.

Grazie al nostro Marco Cortella per avercelo segnalato.

🔄 Normattiva2md: le norme italiane in Markdown

Avevamo bisogno di analizzare la legge legge 53/2022 citata sopra, in “materia di statistiche in tema di violenza di genere”: avere una mano a comprendere quelle parti scritte in linguaggio giuridico più complesso, avere un quadro delle leggi correlate, comprendere quali dati è previsto che vengano raccolti, da quale enti e con quali modalità. Ci serviva per progettare e sostenere meglio la campagna sulla pubblicazione dei dati sulla violenza di genere.

Questa norma e quelle correlate sono disponibili su Normattiva, il sito che centralizza e pubblica le norme italiane. Lo fa in diversi formati, tra cui l’XML (Akoma Ntoso), ottimo per archivi governativi e sistemi informatici che dialogano tra loro, ma meno adatto per usi legati all’intelligenza artificiale (AI) da parte un’utenza non esperta di sviluppo software.

Allora abbiamo creato normattiva2md, uno strumento che trasforma l’XML di normattiva in formato Markdown, un formato di testo semplice e strutturato, leggibile sia da umani che da macchine, che sta diventando quasi il de facto standard per l’AI. Facile da leggere per una persona, facile da processare per un algoritmo.

È uno strumento open source, potenzialmente utilizzabile da chiunque, che funziona o a riga di comando o come libreria Python.

Tre modalità di esempio per usarlo:

1. Da URL: normattiva2md "https://www.normattiva.it/..." output.md — copia-incolla il link dalla pagina normattiva

2. Da file XML locale: normattiva2md input.xml output.md — se hai già il file XML scaricato da normattiva

3. Da ricerca in linguaggio naturale: normattiva2md -s "legge stanca accessibilità" output.md — digita cosa cerchi, e l’API di Exa (da configurare) trova la norma per te.

Che cosa ottieni? Un file Markdown che mantiene la struttura originale, esporta i metadati YAML, ed è subito usabile da umani, personal computer e AI.

Vuoi provarlo? Qui le informazioni utili https://ondata.github.io/normattiva_2_md/

⚖️ I dati di Normattiva sono diventati dati aperti

In queste settimane in cui abbiamo lavorato a normattiva2md, abbiamo scoperto una novità importante: a decorrere dal 1° gennaio 2026, i dati di Normattiva sono finalmente dati aperti. È possibile scaricarli e utilizzarli con licenza Creative Commons CC BY 4.0.

Non troviamo il link alla pagina “dati” nei menu del sito, ma l’URL si trova utilizzando i motori di ricerca: https://dati.normattiva.it/home.

La pubblicazione dei dati e le modalità di accesso sono pensate per consentire il riuso della normativa vigente e la costruzione di servizi a valore aggiunto, a supporto della ricerca, della diffusione dell’informazione e dello sviluppo di applicazioni e servizi.

È accessibile anche in modalità machine-to-machine tramite API RESTful.

🔓 Come fare richieste di dati aperti alla pubblica amministrazione

Questo è un tema che ci sta molto a cuore. Non è nuovo, ma in una discussione fatta in una riunione del tavolo di lavoro dell’“Obiettivo C” del 6° Piano d’Azione Nazionale per il governo aperto è emerso che probabilmente nessuno ha mai richiesto dati aperti, secondo le modalità introdotte con le ultime Linee guida Open Data dell’Agenzia per l’Italia Digitale (AgID).

Abbiamo quindi pensato di aggiungere una nuova pagina dedicata alla versione HTML delle suddette linee. Versione creata da noi a partire dal PDF di AgID.

Nel paragrafo 5.2 delle linee guida infatti si riporta:

L’apertura dei dati può essere un’operazione conseguente anche ad una esplicita richiesta da parte di un soggetto interessato.

La pubblica amministrazione deve rispondere entro 30 giorni. Se la richiesta è particolarmente complessa o se ne ricevono molte contemporaneamente, il termine può essere prorogato di altri 20 giorni, ma solo con comunicazione motivata. Se la richiesta viene respinta, l’amministrazione deve spiegare il motivo del diniego.

Non si tratta quindi di una richiesta di accesso civico generalizzato (FOIA), né di una richiesta di accesso documentale, né di una richiesta di accesso civico semplice, legata agli obblighi di pubblicazione previsti dalle norme sulla trasparenza.

È una richiesta di pubblicazione di dati aperti, i cui eventuali buoni esiti diventano un bene comune: i dati infatti verranno pubblicati e resi disponibili a chiunque, a differenza delle richieste di accesso, dove i dati sono restituiti solitamente soltanto a chi li ha richiesti.

La richiesta fatta per i dati sulle firme per referendum e iniziative popolari

Il Ministero della Giustizia gestisce il portale per la raccolta delle firme per referendum e iniziative popolari - firmereferendum.giustizia.it - tramite il quale le persone possono firmare online per sostenere referendum o iniziative popolari, e un comitato promotore può promuovere la propria iniziativa.

Non ha una sezione dedicata ai dati raccolti. I numeri delle firme sono disponibili soltanto come grafici, immagini e tabelle HTML. È una grave lacuna, perché sarebbe molto utile poter seguire e monitorare l’andamento delle firme raccolte nel tempo, per iniziativa, per area geografica, per fascia di età e sesso.

Non è possibile ad esempio generare un grafico come questo sulla attuale raccolta firme sul Referendum costituzionale confermativo sulla riforma della magistratura (art. 138 Cost.).

E la mancanza di dati è inoltre in contrasto con il quadro normativo su trasparenza digitale e riutilizzo dei dati pubblici.

Sfogliando il sito è possibile visualizzare diverse informazioni di interesse. Oltre al numero di firme, anche il numero di voti per aggregati territoriali, fasce di età e sesso.

Abbiamo fatto allora una richiesta di pubblicazione dati, nelle modalità previste dalle linee guida AgID descritte poco sopra. Al momento nessuna risposta, ma vi terremo aggiornati.

⚠️ Su alcuni dati e cataloghi di dati

Poco dopo l’estate abbiamo fatto verifiche su alcuni cataloghi di dati aperti di pubbliche amministrazioni italiane, partendo dal catalogo nazionale dati.gov.it, che indicizza i cataloghi di dati aperti delle PA italiane.

E sono emerse criticità su alcuni dei cataloghi più importanti. Ad esempio:

• OpenCoesione, il portale dei dati su programmazione e attuazione delle politiche di coesione comunitarie e nazionali;

• INPS, il portale dei dati dell’Istituto Nazionale della Previdenza Sociale.

Molti dati erano in catalogo, ma non erano realmente accessibili. Abbiamo fatto allora una segnalazione ad AgID con il modulo “Scrivi alla redazione”, che ci ha risposto e si è attivata per chiedere alle amministrazioni di correggere i problemi. I problemi si sono risolti in tempi rapidi (grazie a chi ci ha lavorato).

Abbiamo segnalato anche un altro catalogo molto importante, quello del Ministero della Salute. AgID anche stavolta ci ha risposto e si è attivata, ma dopo mesi il Ministero ancora non ha corretto la cosa. E al 3 gennaio 2026 per questi 45 dataset i file CSV non sono scaricabili dal portale dati.gov.it e danno “Pagina non trovata”.

E qualcosa di simile è successo con i circa 700 dataset del Comune di Pisa, resi disponibili sul portale nazionale tramite il portale dati della Regione Toscana. Anche qui AgID prima e poi Regione Toscana ci hanno dato un riscontro rapido e cortese, ma il Comune di Pisa non ha ancora risolto il problema. E se si apre ad esempio il dataset “Biblio SMS, eventi (2014)” e si scorre la pagina per scaricare il file CSV, si ottiene “Dataset csv export error: dataset non found or insufficient permissions”. Qui l’elenco completo di quelli problematici.

Nell’Open Data Maturity Report 2025 l’Italia è tra i paesi con l’indice di maturità dei dati aperti più alto in Europa. Su questo facciamo i complimenti ad AgID e a tutte le amministrazioni che lavorano per migliorare la pubblicazione di dati aperti in Italia.
Sarebbe necessario che AgID - confrontandosi con PA, aziende, utenti, ecc. - attivasse azioni e procedure che stimolino le amministrazioni a risolvere problemi come questi e a mantenere i dati aperti accessibili e usabili nel tempo. Ad esempio: se un dataset non è scaricabile per più di X giorni consecutivi, dovrebbe essere rimosso dal catalogo nazionale o etichettato pubblicamente come non usabile.

Strumenti/risorse

• 🔧 opendatalab/MinerU — Trasforma PDF e documenti complessi in markdown e JSON pronti per LLM e agenti AI

• 🔧 Miller Release 6.16.0 — Tool per manipolazione CSV e JSON: grep, sort, aggregazioni direttamente da CLI

• 📖 AI Sheets — Interroga e analizza dataset con linguaggio naturale grazie agli LLM integrati

• 🎙️ AI for data engineers with Simon Willison — Podcast: come gli LLM cambiano i workflow dei data engineer

• 📺 Potenzia il tuo lavoro con gli LLM — Video di Hadley Wickham su come usare modelli linguistici per automatizzare coding e analisi dati

• 📖 Catalogo Nazionale Dati - Tre talk Istat — Approfondimento su schema.gov.it e sul catalogo dati della PA italiana

• 🎙️ Unlock the power of open data and teach open research — Podcast della Sheffield Hallam University: come i dati aperti abilitano la ricerca e la didattica

• 📖 A friendly guide to choosing a chart type — Guida pratica di Datawrapper: quale visualizzazione scegliere in base ai tuoi dati

• 📖 Fourth Wave of Open Data Seminar — Come rendere i dati aperti pronti per l’intelligenza artificiale

• 🪛 CatastoIT_GML_Merger_Pro — Plugin QGIS per elaborare dati catastali in formato GML

🙏Se vuoi sostenerci, puoi farlo in questi modi.

Iscriviti ora

👉 Se ci leggi da e-mail, fai click qui per leggerla per intero

🏘️ Quanto è difficile fare valere i diritti sui dati

In un mondo in cui la trasparenza e l’accesso ai dati pubblici sono sempre più invocati, la realtà ci mostra spesso quanto sia difficile far valere i propri diritti quando si tratta di ottenere anche informazioni di base per comprendere come funziona la “cosa pubblica”.

Un esempio lampante di questa sfida arriva da Ocio Venezia, un collettivo di abitanti e ricercatori che si batte per il diritto alla casa e all’abitare nella città lagunare. Ocio non si limita a trovare, chiedere, e analizzare i dati, ma li trasforma in conoscenza utile per la comunità e in spunto per proposte politiche.
Il loro recente report sul patrimonio residenziale comunale di Venezia (dati 2025) è un caso emblematico. Ocio ha voluto questi dati non per un astratto interesse informativo, ma per una ragione molto concreta: monitorare la gestione del patrimonio di edilizia residenziale del Comune, valutare l’efficacia delle politiche pubbliche e promuovere una partecipazione civica informata. Volevano capire quanti alloggi comunali fossero sfitti, come fossero classificati (ERP/Non ERP) e come venissero gestiti i canoni, per poter proporre correttivi e integrazioni basati su evidenze reali.

Ma questi dati non erano pubblici. E allora Alice Corona, una delle attiviste di Ocio, ha chiesto una mano a onData (di cui è anche socia) per fare una richiesta di accesso civico generalizzato. E allora abbiamo iniziato:

• 26/03/2025, presentiamo via PEC due istanze di accesso civico generalizzato, una al Comune e l’altra all’Azienda Territoriale per l’Edilizia Residenziale della Provincia di Venezia (ATER).

• 22/04/2025, il Settore Risorse Abitative del Comune di Venezia essenzialmente rifiuta l’istanza, motivando con

La richiesta formulata si configura come accesso massivo di dati/informazioni sia per la tipologia sia per il periodo temporale comportando un carico di lavoro tale da compromettere, in modo sostanziale, il buon funzionamento dell’amministrazione

• 12/05/2025, inviamo una richiesta di riesame al Responsabile della Prevenzione della Corruzione e Trasparenza (RPCT) del Comune, sottolineando come non avessero quantificato e motivato adeguatamente l’onere amministrativo

• 30/05/2025, il RPCT del Comune di Venezia risponde alla richiesta di riesame, accogliendola e disponendo la messa a disposizione di diversi dati molto interessanti nella sezione dedicata di Amministrazione Trasparente del sito istituzionale

• l’ATER ha ignorato del tutto la nostra richiesta.

L’accesso civico generalizzato - detto anche FOIA - consente a chiunque, senza bisogno di motivazione, di richiedere dati e documenti detenuti dalla pubblica amministrazione.
Ma questo nostro iter, che ha richiesto la conoscenza di normative specifiche (accesso civico generalizzato, riesame, circolari FOIA) e la capacità di argomentare contro dinieghi basati su concetti come “onerosità”, solleva una domanda fondamentale: se per far valere il diritto all’accesso ai dati pubblici sono necessari tempo, cura, e una specifica “cultura” burocratica e legale, ci sono davvero le condizioni perché questo diritto sia garantito a tutte le persone?

👉 Questo rende l’accesso ai dati un privilegio, anziché un diritto.

NOTA: mille grazie all’avvocato Gerlando Gibilaro - presidente della Camera Civile di Palermo - per averci aiutato a comprendere le dinamiche legali e burocratiche di questo processo e a scrivere la richiesta di riesame.

🪛 Plugin QGIS per Confini Amministrativi: ISTAT Boundaries Downloader

Hai mai avuto difficoltà a scaricare i confini amministrativi ufficiali italiani? Da oggi puoi dire addio a procedure complicate: è arrivato il plugin QGIS sviluppato da Totò Fiandaca - che sfrutta le API di onData create da Alessio Cimarelli - per offrirti un accesso semplice e veloce ai dati aperti di ISTAT.

Con questo strumento puoi ottenere regioni, province, comuni e ripartizioni geografiche in vari formati (Shapefile, GeoPackage, CSV, KML, KMZ), scegliendo la data di riferimento dal 1991 al 2025. Grazie ai filtri avanzati puoi selezionare solo le aree che ti interessano davvero. L’interfaccia è pensata per essere chiara: imposti i parametri, visualizzi subito l’URL di download (che puoi copiare con un click) e carichi i dati direttamente in QGIS, con una barra di avanzamento che ti mostra ogni passaggio. I file ZIP vengono estratti automaticamente in cartelle ordinate per tipo di confine e data.

Per l’installazione basta seguire le istruzioni riportate nel repository. Non appena il plug-in sarà approvato, si potrà installare dal gestore dei plug-in.

Perché è importante? Perché strumenti come questo abbattono le barriere tecniche e rendono i dati geografici ufficiali ancora più accessibili. Nota bene: le API espongono la versione generalizzata dei confini, quindi anche questo plugin offre i dati in questa forma.

A Totò Fiandaca va il nostro grazie, e ci scusiamo per avere annunciato il plugin in ritardo.

🌱 Dati aperti e nuove generazioni: un’alleanza per il futuro

In un periodo in cui il tema degli open data sembra muoversi più dietro le quinte che sotto i riflettori, fa un gran bene imbattersi in esperienze che ne riaffermano il valore. È quello che è successo durante un recente incontro online, in cui abbiamo avuto il piacere di dialogare con i veri protagonisti di un Percorso per le Competenze Trasversali e per l’Orientamento (PCTO) davvero speciale, organizzato da Liguria Digitale.

Grazie alla preziosa regia di Monica Cavallini, Nicola Vallinoto e Roberta Serafini di Liguria Digitale, ci siamo confrontati con gli studenti Angelo Ciausu e Sergio Bianchi dell’I.I.S. Calvino di Genova e con i docenti, Giovanni Longhi (I.T.C. Einaudi) e Alessio Sbarbaro (I.I.S. Calvino).

Quello che emerge dalle loro parole è la scoperta del dato non come un’entità astratta, ma come uno strumento concreto di conoscenza e di cittadinanza. Sentire i ragazzi raccontare la “fatica” di dover “pulire” i dati, ma anche la soddisfazione di trasformare semplici righe di un file in un’analisi o una mappa, è la testimonianza più autentica di quanto percorsi come questo siano fondamentali. Hanno toccato con mano il potenziale nascosto nei dati pubblici e le competenze necessarie per liberarlo.

Altrettanto preziose le riflessioni dei docenti, che hanno sottolineato come lavorare su dati reali abbia stimolato nei loro studenti un approccio critico e una maggiore consapevolezza del territorio in cui vivono. Non solo un esercizio tecnico, quindi, ma una vera e propria lezione di educazione civica.

Questa esperienza è la prova che investire nella cultura del dato a partire dalla scuola è una strada giusta per formare cittadini più consapevoli e per ricordare alla Pubblica Amministrazione e alle aziende che i dati aperti sono, prima di tutto, un bene comune da coltivare.

➡️ NOTA: il video è lungo. Se hai poco tempo ascolta Angelo e Sergio, dal minuto 47:17. Per noi ascoltarli è stato un vero piacere e un insegnamento.

✨ Gli albi pretori POP sono ancora vivi e sorprendenti

Ci sono idee che, una volta lanciate, prendono vita propria e continuano a generare valore anche quando non le seguiamo più da vicino. È il caso di AlboPOP, un progetto nato anni fa con l’obiettivo di rendere più accessibili le pubblicazioni degli albi pretori comunali. Siamo felici di vedere come questa intuizione continui a ispirare iniziative bellissime, che dimostrano il potenziale civico dei dati pubblici.

L’hacking civico di Nicola Vallinoto a Genova

Il nostro amico Nicola Vallinoto è un esempio perfetto di come la curiosità e l’ingegno possano trasformarsi in azione civica. Partendo da una richiesta specifica di un comitato cittadino che aveva bisogno di monitorare gli atti dell’albo pretorio del Comune di Genova relativi a un progetto sulla funivia, Nicola ha sviluppato una soluzione con poche righe di Python.

Questa esperienza lo ha portato a scoprire il progetto AlboPOP. Ha generalizzato la sua soluzione, rendendo l’albo pretorio del Comune di Genova “POP”. Ora, chiunque può essere avvisato delle nuove pubblicazioni tramite un feed RSS o un canale Telegram, trasformando un adempimento burocratico in uno strumento di monitoraggio civico accessibile alle persone.

Antonella Milanini e il podcast dell’albo pretorio di Cori

Un altro esempio straordinario arriva da Antonella Milanini, a cui siamo legati da tempo proprio grazie ad AlboPOP. Antonella e il suo gruppo curano da anni l’albo del Comune di Cori e hanno avuto un’idea geniale per rilanciare il progetto: un podcast quindicinale!

Il Comune di Cori ha lanciato “Insieme a te” su Spotify, un canale dedicato a informare e coinvolgere la cittadinanza sulle novità pubblicate tramite AlboPOP. Utilizzano l’intelligenza artificiale di NotebookLM per creare sintesi chiare, aggiornate e accessibili degli atti amministrativi. Questo rende la comunicazione inclusiva e fruibile, abbattendo le barriere informative e favorendo una cittadinanza realmente partecipe.

“Insieme a te” non è solo uno strumento informativo, ma nasce con l’obiettivo di attivare la cittadinanza al monitoraggio civico, rafforzando la trasparenza e la responsabilità amministrativa. Un vero primato nazionale nell’innovazione digitale, che dimostra come si possano trasformare i dati pubblici in strumenti operativi e coinvolgenti, in piena linea con gli standard europei di accessibilità.

Grazie Jacopo Solmi

Se AlboPOP ha lasciato un segno, lo dobbiamo anche a Jacopo Solmi, che ne ha curato l’ideazione e l’implementazione del suo spazio online. A lui ancora una volta un grosso grazie.

🔓 Liberiamoli tutti! - I dati sugli scioperi

La nostra campagna #DatiBeneComune continua a lavorare per rendere accessibili i dati di interesse pubblico, spesso nascosti o difficili da utilizzare. L’ultimo numero di “Liberiamoli tutti!” si è concentrato su un tema che tocca la vita di tutte le persone: i dati sugli scioperi.

Questi dati sono fondamentali per monitorare la situazione, prevedere e gestire le criticità e informare il pubblico. Eppure, la Commissione di Garanzia Scioperi (CGSSE) e il Ministero dei Trasporti (MIT) li pubblicano principalmente in formati non meccanicamente leggibili (spesso solo in HTML), contravvenendo alle linee guida sui dati aperti.

Per questo, sono stati “liberati” questi dati. Abbiamo estratto le informazioni sugli scioperi dal 1° gennaio 2025, normalizzato i nomi dei campi, aggiunto campi data e li abbiamo resi disponibili in formato CSV e JSON Lines, con aggiornamento automatico giornaliero. Chiederemo alle istituzioni di adeguarsi alle normative, perché crediamo che la disponibilità di questi dati in formati aperti sia un diritto civico.

Il valore di questa operazione è stato confermato anche da Raffaele Mastrolonardo, giornalista di Sky TG24, che ha spiegato come la disponibilità di dati aperti sugli scioperi trasformi un processo di ricerca manuale e scomodo in un’analisi più veloce, precisa e automatizzabile.

“Liberiamoli tutti!” è un’iniziativa promossa da ActionAid Italia, onData e Transparency International Italia, con l’obiettivo di costruire una comunità attorno ai dati liberati e promuovere la cultura dei dati aperti. Se hai un dataset che, secondo te, dovrebbe essere aperto, scrivici!

🗺️ SITUAS: le API di ISTAT per i dati territoriali

Una notizia importante per chi lavora con i dati territoriali e amministrativi: l’ISTAT ha reso disponibili le API del Sistema Informativo Territoriale delle Unità Amministrative e Statistiche (SITUAS). Questo significa che ora puoi accedere in modo programmatico a una vasta gamma di informazioni relative alle unità amministrative e statistiche italiane, come comuni, province e regioni.

Con l’introduzione delle API, l’ISTAT compie un passo significativo verso la riutilizzabilità dei dati pubblici, facilitando il lavoro di sviluppatori, ricercatori, giornalisti e chiunque voglia analizzare il territorio italiano.

Le API permettono di interrogare il sistema per ottenere dati specifici. Ad esempio i dati sulla “Dimensione dei Comuni” (Id report: 74) alla data del 04/11/2019, semplicemente chiamando un URL come questo:

https://situas-servizi.istat.it/publish/reportspooljson?pfun=74&pdata=04/11/2019

📊 Dati di elevato valore e governo aperto: il nostro punto di vista dal webinar di AgID

Il 23 maggio 2025, in occasione della Settimana del Governo Aperto (Open Gov Week), abbiamo partecipato al webinar di AgID “Dati di elevato valore e governo aperto: stato dell’arte e opportunità”. Un’occasione importante per fare il punto sull’implementazione della direttiva europea sugli High-Value Datasets (HVD) in Italia.

I dati di elevato valore (HVD) sono particolari set di dati pubblici la cui riutilizzabilità è considerata di grande beneficio per la società, l’ambiente e l’economia, identificati dalla direttiva europea 2019/1024 (Open Data Directive).

L’incontro è stato aperto dai saluti istituzionali di Antonio Maria Tambato (Direttore Innovazione e Transizione Digitale, Presidenza del Consiglio) e Antonio Romano (Dirigente Area Interoperabilità, Dati e Accessibilità, AgID).

A seguire l’intervento di Antonio Rotundo (AgID), che ha ribadito un punto fondamentale: i dati di elevato valore non sono stati scelti a caso. La direttiva europea li ha identificati perché possiedono un enorme potenziale socio-economico. L’obiettivo non è solo la trasparenza, ma stimolare la creazione di servizi innovativi a valore aggiunto, migliorare le politiche pubbliche e favorire lo sviluppo economico. In pratica, sono visti come un vero e proprio motore per la crescita.

Successivamente, Leonardo Donnaloia (AgID) ha presentato un caso d’uso concreto, mostrando il ruolo del Database Geotopografico come fonte per gli HVD geospaziali e l’importanza dell’armonizzazione secondo la direttiva INSPIRE.

Il nostro presidente, Andrea Borruso, ha sottolineato come la semplice pubblicazione dei dati non sia sufficiente. È fondamentale concentrarsi sulla qualità e sull’utilizzabilità dei dati, fornendoli in formati aperti, documentati e accessibili tramite API, per trasformarli da obbligo normativo a risorsa concreta per cittadini e imprese. Come esempio concreto, ha citato i dati catastali aperti vettoriali pubblicati di recente, disponibili in un formato che non ne facilita l’utilizzo: un archivio ZIP contenente centinaia di altri file ZIP, uno per ogni comune, che a loro volta contengono file in formato GML (un dialetto XML).

Infine, Salvatore Fiandaca (Planetek Italia) ha mostrato un esempio pratico di come utilizzare i dati catastali aperti con software open source come QGIS, dimostrando il valore che si può generare combinando dati aperti e strumenti accessibili.

Un webinar che ha confermato l’importanza di una collaborazione tra Pubblica Amministrazione, esperti e società civile per valorizzare appieno il potenziale dei dati pubblici.

Per chi volesse approfondire, il video completo è disponibile su YouTube.

🫶 Piccole soddisfazioni

Per segnalare fatti, cose e persone, che ci hanno restituito piccole soddisfazioni

➡️ Elena Panciera, che scrive su questa nostra newsletter:

“Una newsletter ricchissima sui dati, che sono politici. Dati pubblicati, dati incompleti, dati mancanti, una conferenza sui dati, molti strumenti. Imperdibile.” Grazie Elena!

Strumenti/risorse

• 🗺️ A5: un nuova griglia geografica mondiale: una nuova griglia geografica per indicizzare spazialmente il pianeta, utile per progetti di geocodifica e analisi spaziale.

• 📖 Data visualization | Primer: la sezione sulla data visualization del design system di GitHub, con linee guida e pattern per visualizzare dati in modo efficace e accessibile.

• 📺 Can You Trust It? 4 Ways Data Visualizations Mislead: un webinar di Enrico Bertini che analizza quattro tecniche con cui la data visualization può distorcere o manipolare la percezione dei dati.

• 🪛 FOIA Italia Alpha (ChatGPT bot): un bot di ChatGPT per aiutarti a formulare richieste di accesso civico generalizzato (FOIA).

• 📖 Announcing the Data.gov Archive: un articolo che annuncia l’archivio di Data.gov, un’iniziativa importante per la conservazione dei dati pubblici.

• 🗺️ Network Nazionale della Biodiversità (NNB): il portale del Network Nazionale della Biodiversità, con dati e informazioni sulla biodiversità italiana.

• 📖 Piccola guida essenziale alla dataviz.: una guida essenziale alla data visualization scritta da Alice Corona.

• 📖 Comparing Wikidata and Vatican Official Data about Cardinals.: un progetto che confronta i dati di Wikidata con i dati ufficiali del Vaticano sui cardinali.

• 📺 La notte della solidarietà a Roma: un video sulla ricerca degli homeless a Roma.

• 🪛 GitDiagram: uno strumento per visualizzare i repository Git.

• 🪛 DeepWiki: una piattaforma per cercare nei repository GitHub con l’AI.

• 🪛 Create and interact with Knowledge Graphs using Generative AI: un progetto per creare e interagire con Knowledge Graphs usando l’AI generativa.

• 🪛 Convert Google Maps directions routes into GeoJSON: un tool che converte le indicazioni stradali di Google Maps in una linea in formato GeoJSON.

• 📖 Sensing Data – How do we encode information in materials?: un progetto di data physicalization con materiali e tessuti.

• 🎙️ OpenAP - Cosa ci raccontano i dati?: il nuovo podcast dell’Università Bicocca sui dati.

• 🗺️ Layercake | OpenStreetMap US: un progetto di OpenStreetMap US per interrogare i dati OSM in modo semplice.

• 📺 EU Open Data Days 2025: i video delle due giornate degli EU Open Data Days 2025.

• 🪛 SveltePlot: un nuovo framework per la visualizzazione di dati.

• 📺 What You Should Know About Data Viz Accessibility in 2025?: un webinar sull’accessibilità nella data visualization.

• 📖 Sorry, I Can’t Read Your Visualization: un articolo sui problemi di accessibilità nella data visualization.

• 🪛 D2: un linguaggio di scripting per diagrammi che trasforma il testo in diagrammi.

• 🪛 DuckPlot: una libreria per realizzare grafici sfruttando la potenza di DuckDB e D3.js.

🙏Se vuoi sostenerci, puoi farlo in questi modi.

Iscriviti ora

👉 Se ci leggi da e-mail, fai click qui per leggerla per intero

🔬 #DefendResearch: difendere la scienza dalla censura

Dal giorno del suo insediamento, l'amministrazione Trump ha intrapreso una serie di azioni che sollevano enormi preoccupazioni riguardo lo stato della ricerca scientifica negli Stati Uniti. Queste misure includono la rimozione di dati dai siti governativi, il blocco selettivo dei finanziamenti per progetti di ricerca, e l'imposizione di restrizioni terminologiche nelle pubblicazioni scientifiche.

Trump ha firmato e continua a firmare dozzine di ordini esecutivi che stabiliscono come il governo deve operare nel quadro delle leggi esistenti, anche per quanto riguarda la ricerca scientifica. Ritirare il paese dall’Accordo di Parigi del 2015 per la riduzione delle emissioni globali e abbandonare l’Organizzazione Mondiale della Sanità non era abbastanza, a quanto pare. La lista è lunga e preoccupante: tagli ai finanziamenti federali destinati alla ricerca scientifica, riduzione della forza lavoro, parole da evitare nei materiali della ricerca - e quindi interi dataset rimossi dal web, manoscritti modificati, studi cancellati. Parole proibite significa censura. E censura significa ledere l’integrità scientifica, limitare la libertà accademica, e impoverire gravemente la ricerca.

Quello che sta succedendo è grave, gravissimo: mette a rischio la libertà di pensiero di chi fa ricerca, continua a opprimere intere comunità - soprattutto quelle più fragili - e segna l’inizio di una discesa verso un futuro sempre più oscuro.

#DefendResearch è il grido di resistenza della comunità scientifica contro i tentativi di censura e di oppressione messi in atto dall’amministrazione Trump.

La “Declaration To Defend Research Against U.S. Government Censorship” è una call to action aperta a tutta la comunità accademica - e a tutte le persone interessate - a condannare e a resistere ai recenti atti di censura della ricerca da parte del governo degli Stati Uniti. Firmando la declaration, ti impegni a fare almeno una di queste cose:

1. Mostrare supporto alle istanze di resistenza contro la censura implementata dal governo statunitense.

2. Promuovere spazi - virtuali e non - in cui ricercatori e ricercatrici possano condividere, salvaguardare e conservare il proprio lavoro, al di là della censura.

3. Tenere traccia e registrare tutti i casi di censura del governo statunitense.

4. Condividere il più possibile la declaration e incoraggiare quante più persone e organizzazioni a firmarla.

CALL TO ACTION: firma la declaration, usa l’hashtag #DefendResearch sui social, scarica il banner grafico da qui, condividilo sui social, stampalo, lascialo in giro, scattati una foto e usala come immagine profilo! Ci sono tanti modi per non stare in silenzio, scegline almeno uno!

📍 I dati aperti sui Numeri Civici sono un’opera incompiuta, non sono di alto valore

Il 24 febbraio 2025 è stata diffusa la notizia della pubblicazione dei dati aperti dell’Archivio Nazionale dei Numeri Civici delle Strade Urbane (ANNCSU). Due tabelle principali: lo stradario, e l’indirizzario.
Fanno parte dei dati di elevato valore che ogni Stato membro è tenuto a pubblicare, come previsto dalla Direttiva (UE) 2019/1024 e dal Regolamento di esecuzione (UE) 2023/138 della Commissione europea.

I dati di alto valore (in inglese high-value datasets) sono insiemi di dati pubblici che l'Unione Europea ha identificato come particolarmente utili per generare benefici economici, ambientali e sociali, se resi disponibili gratuitamente e senza restrizioni. Si tratta di dati con forte potenziale di riutilizzo, soprattutto per creare servizi digitali innovativi.

Per chi segue il tema dei dati aperti, l’indirizzario – ovvero i dati sui numeri civici – era da più di un decennio tra i più attesi di sempre. Perché i numeri civici sono uno dei modi più semplici per collegare qualcosa o qualcuno a un punto preciso sul territorio. Sono tra i dati più usati ogni giorno: per chiamare un taxi, ordinare una pizza, visitare un museo, o per qualsiasi analisi in cui c’è di mezzo un indirizzo.

Sono stati pubblicati 26,7 milioni di numeri civici, ma 25,6 milioni sono privi di coordinate. È come produrre automobili senza ruote.

Chiedersi se tutto questo è a norma impoverisce, a nostro avviso, la valutazione. Ma purtroppo è necessario aggiungere alcune note in merito:

• nelle Specifiche Tecniche, per ragioni non documentate, la raccolta delle coordinate per i numeri civici è considerata facoltativa;

• nel Regolamento di esecuzione (UE) 2023/138, più recente del documento precedente, la “geometria” è considerato un attributo chiave.

In questa mescola di contraddizioni e di scelte di fondo non comprensibili, il fatto normativo più impattante è però questo: l’attuazione del Regolamento UE 2023/138 non deve comportare nuovi o maggiori oneri a carico della finanza pubblica, nel rispetto del principio di invarianza finanziaria.
Questo è un punto di debolezza noto delle norme e regolamenti sui dati aperti.
È un’evidenza di cui abbiamo avuto riscontro diretto dall’Agenzia delle Entrate a cui abbiamo chiesto come mai non ci fossero le coordinate. Ci hanno risposto:

Ai sensi dell’art. 4 del DPCM l’ANNCSU (ndr Archivio Nazionale dei Numeri Civici delle Strade Urbane) è realizzato dall’Istat e dall’Agenzia delle entrate, ma l’aggiornamento è di competenza dei comuni. Va inoltre evidenziato che come previsto nell’ambito del richiamato articolo di legge, dall’attuazione delle disposizioni previste non derivano nuovi o maggiori oneri a carico della finanza pubblica.

Sull’homepage del sito si riporta un completamento all 99.96%. Ma se questo conteggio fosse fatto rispetto alla completezza dei dati, alla vera usabilità degli stessi, sarebbe poco più del 50% (tenendo conto dell’insieme dei numeri civici e dell’elenco delle strade).

In ultimo c’è un elemento funzionale contraddittorio. Per la città di Palermo ad esempio sono presenti circa 165.000 numeri civici, di cui il 100% è senza coordinate.
Se però si apre la pagina web per la ricerca dei numeri civici, e si usano uno o più punti con coordinate note, questi vengono visualizzati nella posizione corretta su mappa (vedi esempio sotto), quindi hanno delle coordinate associate.
Perché queste informazioni non sono presenti anche nei dati aperti? Sono di bassa qualità? Perché la cosa non è documentata, dichiarata o spiegata?

Quella dei numeri civici in open data è una storia a metà: un'opera incompiuta che, pur segnando un passo avanti, lascia l’amaro in bocca. La pubblicazione dell’ANNCSU doveva essere un momento storico per l’ecosistema dei dati aperti: finalmente disponibili i riferimenti spaziali fondamentali per collegare cittadini, servizi e territorio. E invece ci troviamo davanti a un database monco, privo dell’elemento che dà senso al tutto: le coordinate.
I dati sono veramente di alto valore se sono utili alla società, alle imprese, alla pubblica amministrazione stessa. Così è sprecare un’occasione.

📅csv,conf,v9: la conferenza più bella sui dati sarà in Italia

Siamo felici di condividere con te un evento imperdibile, se ami i dati e l’innovazione: csv,conf,v9!
È pensato per chi crea, cura, usa e ama i dati — e quest’anno si terrà a Bologna, dall’8 all’11 settembre 2025.
Il tema di questa edizione ci piace molto: Dati per le Comunità.

“Dati per le Comunità” significa riconoscere che i dati non appartengono solo a server o fogli di calcolo, ma devono essere nelle mani di chi lavora per migliorare i quartieri, i servizi sociali, la scuola e le politiche pubbliche. È un invito a esplorare come gruppi civici, associazioni locali e attivisti possano usare i dati aperti per affrontare problemi reali, costruire fiducia e generare cambiamenti duraturi.

👉 Se vuoi proporre un intervento, hai tempo fino al 27 aprile 2025!

Cerchiamo presentazioni da 25 minuti (20 minuti + 5 di domande opzionali) su temi come:

• raccolta dati partecipata e strumenti per il crowdsourcing;

• uso dei dati aperti per progettare infrastrutture più eque nelle città;

• esperienze didattiche che portano la cultura dei dati in contesti fragili;

• in generale, qualsiasi contributo coerente con il tema "Data for Communities".

Vuoi saperne di più di csv,conf? Guarda gli interventi delle precedenti edizioni su YouTube.

🎙️ La mia parte… di Europa

L’Europa è nei quartieri, nelle scuole, nelle voci di chi si impegna per migliorare il proprio pezzo di mondo. La nuova edizione del podcast La mia parte, prodotto da ActionAid in collaborazione con Chora Media, racconta proprio questo: come i fondi europei possano diventare strumenti di cambiamento concreto per le comunità locali.

Un viaggio tra bonifiche ambientali, prevenzione dei disastri naturali, case rifugio per donne vittime di violenza e monitoraggio civico del clima che cambia. Lo sguardo è quello di studenti e studentesse che si sono messi in gioco per capire dove vanno a finire davvero i soldi europei, con occhio attento a quelli delle politiche di coesione.

Ecco cosa troverai, puntata dopo puntata:

• Taranto: la bonifica del Mar Piccolo e il diritto a un ambiente sano.

• Macerata: la messa in sicurezza del fiume Potenza dopo l’alluvione.

• Salerno: una casa rifugio che nasce in un bene confiscato alla mafia.

• Alto Adige: due ragazzi alle prese con lo studio dei ghiacciai che si ritirano.

• E ovunque: il valore della cittadinanza attiva, spiegato da chi lo vive.

Dietro questo lavoro c’è il progetto europeo AwareEU, che punta a rendere più visibili i risultati della Politica di Coesione e del PNRR. Un progetto di ActionAid Italia, Info.Nodes, Monithon e noi di onData.

I dati aperti di OpenCoesione sono stati tra le “materie prime” per la realizzazione di questo progetto.

Qui sotto il trailer. Tutti gli episodi su Spotify, Apple Podcasts, Amazon Music, YouTube e su feed RSS.

📊 Sondaggio contro l’odio online

Chi subisce odio online spesso resta in silenzio. Perché si sente solo. Perché pensa che nessuno ascolterà. Perché, a volte, è difficile perfino capire se quello che si è vissuto è davvero un attacco.
Proprio per questo nasce il sondaggio lanciato all’interno del progetto #ElephantTalk: per raccogliere dati su come si esprimono e si percepiscono l’odio di genere e il body shaming nella sfera digitale. Non per fare numeri, ma per dare voce. E strumenti.

Il sondaggio è una delle azioni coordinata da Maghweb in collaborazione con Impact Hub Athens, Polylogos Association e Young Educators – European Association, finanziata dalla Commissione Europea nell’ambito del programma CERV (Citizens, Equality, Rights and Values).

😉 Piccole soddisfazioni: i link stabili ai dati aperti del PNRR, ora citati anche nell’ultima relazione al Parlamento

Fino ad alcuni mesi fa i link (gli URL) dei dati aperti del Catalogo Open Data del sito del Piano Nazionale di Ripresa e Resilienza (PNRR) variavano ad ogni aggiornamento dei dati.
Da qualche giorno è online la “Sesta Relazione al Parlamento sullo stato di attuazione del Piano Nazionale di Ripresa e Resilienza”. Nella Sezione I, c’è un capitolo dedicato ai dati aperti dove si segnala che gli URL ora sono stabili.

Ci fa molto piacere: è una proposta che avevamo avanzato nell’ambito dei lavori del Piano d’Azione Nazionale per il Governo Aperto e che lì si è concretizzata.

📉 Ora di religione a scuola: per l’ennesima volta, è servita una richiesta FOIA

Non è normale dover chiedere ogni anno gli stessi dati.

Anche quest’anno, per conoscere quanti studenti scelgono di non frequentare l’ora di religione, è servita una richiesta di accesso civico generalizzato. A presentarla, come sempre, l’UAAR. E a renderli pubblici non è stato il Ministero, ma un’associazione.
Parliamo di dati nazionali, rilevanti, sensibili, che riguardano oltre un milione di studenti. Eppure non sono disponibili nel portale ufficiale del Ministero dell’Istruzione e del Merito. Nessuna pubblicazione proattiva, nessuna sezione dedicata, nessuna serie storica.

È davvero singolare che si debba ancora bussare alla porta per ottenere questi dati. Che andrebbero invece pubblicati ogni anno, in formato aperto e accessibile, come previsto essenzialmente per tutti i dati della Pubblica Amministrazione (per eccezioni e dettagli, ci sono le linee guida open data).

👉 Il report completo è disponibile qui → uaar.it/dati-no-irc

🛏 Censimento dei senza dimora a Roma

A Roma si è svolta la "notte della solidarietà", un’indagine congiunta tra Roma Capitale e Istat per approfondire i profili e le condizioni delle persone senza dimora.

Durante l’iniziativa, oltre 1700 volontari hanno incontrato circa 2.200 persone tra chi vive in strada e chi si trova in strutture di accoglienza notturna. I primi dati mostrano che la maggior parte delle persone incontrate è di origine straniera, con Romania, Somalia e Marocco tra i Paesi più rappresentati. L’età media è inferiore ai 46 anni per chi vive in strada e intorno ai 53 anni per chi è ospitato nelle strutture. Le donne costituiscono circa il 16-17% delle persone in strada e il 25% tra gli ospiti delle accoglienze notturne.

Tra le criticità più rilevanti: l’accesso ai servizi sanitari e il fatto che oltre sei persone su dieci dichiarano di non aver mai lavorato.

L’iniziativa rappresenta un’indagine pilota che anticipa un progetto più ampio, destinato a coinvolgere diverse città metropolitane. I risultati completi saranno diffusi in seguito.

Strumenti/risorse

• 🕸️ Simon Wilson spiega come realizzare un web scraper utilizzando diverse tecniche, dal javascript all'utilizzo dell'AI.

• 🎓 Code Like a Journalist, un corso online, gratuito e open-source pensato per i giornalisti (e non solo) per analizzare dati e creare visualizzazioni con TypeScript.

• 🗞️ Data Formulator 2, un sistema di visualizzazione alimentato dall'intelligenza artificiale che facilita la creazione iterativa di grafici.

• 📺 Navigating Europe's data strategy:il percorso dell'Europa verso un'economia unificata basata sui dati, le politiche chiave come la Direttiva sull'Open Data, i dataset ad alto valore e il Data Governance Act.

• 📖 Defense Against Dishonest Charts, una guida, con piccoli test interattivi, per proteggersi dai grafici disonesti.

• 🔧 Datawrapper: arrivano gli small multiples per i grafici a barre

• 📖 Scopri come utilizzare ggplot2 in R per visualizzare dati urbani e demografici.

• 🔧 Spatial Equity Data Tool, uno strumento utile per analizzare le disparità demografiche e spaziali nei dati.

• 📺 Scopri il concetto di Linked Open Data attraverso un esempio ispirato a Tolkien!

• 🔧 Any Map Puzzle: creati il tuo puzzle a partire da una mappa basata sui dati di OpenStreetMap e risolvilo.

• 🔧 Scopri il mondo degli alimenti con l'app Open Food Facts, il tuo alleato per una scelta alimentare consapevole.

Anche quest’anno abbiamo avuto il privilegio di partecipare alla creazione di “SESSO È POTERE”, un report che analizza numeri e dinamiche di accesso ai ruoli decisionali.

Prima di un breve commento e di un invito alla lettura del report di quest’anno, per noi di onData è importante ringraziare l’associazione info.nodes, per averci proposto anni fa di collaborare alla cura di questo bel progetto.

Leggi il report

Il potere è ancora saldamente nelle mani degli uomini, con percentuali che evidenziano una disparità radicata e profonda.

📊 128.093 posizioni di comando analizzate
🏛 Solo il 35% occupato da donne
📉 Sindache: 15%. CEO donne: 4%. Direttrici di giornali: 6%.

Questi numeri confermano un campanello d’allarme per una società che non garantisce pari opportunità. Con storie di esclusione e resistenza, talenti inespressi e opportunità negate.

Non si tratta solo di misurare la disparità di genere, ma di comprendere il suo impatto sulla società. Il divario nel potere politico significa che le decisioni vengono prese da una prospettiva prevalentemente maschile. Nel mondo economico, una leadership al maschile perpetua un sistema che lascia poco spazio alle donne nei ruoli chiave. Nei media, la mancanza di donne ai vertici influenza quali storie vengono raccontate e come.

Davide Del Monte - presidente e fondatore di info.nodes - durante una riunione di lavoro per la realizzazione del report 2025 ha osservato con amarezza quanto fosse difficile trovare messaggi nuovi e originali per accompagnare questa edizione.
Eppure, è proprio per questo che è necessario rinnovare la pubblicazione ogni anno, perché la condizione attuale ancora una volta è troppo asimmetrica.

Il nostro auspicio è che “SESSO È POTERE” possa essere uno stimolo per chiunque voglia approfondire, riprendere, emulare o superare questo lavoro, contribuendo alla costruzione di una società più equa.

Cosa puoi fare?

• leggi il report, condividilo, e parlane con le persone della tua cerchia sociale e professionale

• metti in discussione i dati che abbiamo raccolto, studiali, interrogali

• dicci che abbiamo sbagliato tutto, se lo pensi - ma poi dimostraci anche perché

• cerca una dimensione nuova da osservare e raccogli i dati che la descrivano

• aiutaci a diffondere il report oltre i confini del nostro paese, magari traducendolo in un’altra lingua

• proponici una collaborazione, anche internazionale

Trovi tutti i dati raccolti per la stesura di questo report in un repository GitHub. Buon divertimento!

Il report Sesso è Potere - 2025 è a cura delle associazioni info.nodes e onData

È stato redatto da Marta Abbà, Flavia Baldinucci, Andrea Borruso, Donata Columbro, Davide Del Monte, Paola Chiara Masuzzo, Andrea Nelson Mauro

🙏Se vuoi sostenerci, puoi farlo in questi modi.

Iscriviti ora

👉 Se ci leggi da e-mail, fai click qui per leggerla per intero.

🔍 La qualità dei dati della pubblica amministrazione: un diritto che si può pretendere

Tanti dei dati che la Pubblica Amministrazione (PA) rende disponibili sono di scarsa utilità e interesse perché di poca qualità: spesso non sono aggiornati, completi, facilmente consultabili o accessibili.
La Delibera n. 495 del 25 settembre 2024 dell'Autorità Nazionale Anticorruzione e in particolare l'Allegato 4 Istruzioni operative introducono un cambiamento significativo: il diritto di avere dati di qualità.

Il testo si riferisce ai dati pubblicati nella sezione Amministrazione Trasparente, presente in tutti i siti della PA, che raccoglie documenti e informazioni per garantire la trasparenza e il controllo dell'operato delle PA.
Il documento chiave è proprio l'allegato 4, dal titolo "Istruzioni operative per una corretta attuazione degli obblighi di pubblicazione ex d.lgs. 33/2013" (Decreto Legislativo 33/2013, noto anche come "Decreto Trasparenza").
Tanti i punti di interesse contenuti. Qui ne sottolineiamo alcuni.

Sono definiti i requisiti di qualità - non le raccomandazioni - per i contenuti da pubblicare:

• i dati non devono essere parziali;

• vanno pubblicati tempestivamente e costantemente aggiornati;

• devono essere chiari e di semplice consultazione;

• devono essere accessibili, comprensibili e disponibili in formati aperti, senza restrizioni per il riutilizzo.

Le Istruzioni operative, oltre a definire tali requisiti di qualità, introducono processi di validazione che verificano l'accuratezza e la conformità dei dati prima della pubblicazione, e meccanismi di controllo per garantire il mantenimento degli standard nel tempo.

Infine il punto più importante: la qualità diventa un diritto esigibile. Se la qualità dei dati pubblicati non soddisfa i requisiti definiti dalla Delibera (e relativi allegati), ogni persona potrà far valere il proprio diritto attraverso l'accesso civico semplice, uno strumento introdotto dal legislatore per garantire la trasparenza e l'accuratezza delle informazioni (se non sai cosa sia, fai click qui).

La suddetta delibera è stata pubblicata nella Gazzetta Ufficiale del 21 gennaio 2025, n. 16.

La norma, anche in precedenza, sicuramente non intendeva favorire la pubblicazione di dati frammentati, incompleti, incoerenti o non aggiornati. È però significativo sia avere un riferimento più chiaro, che permettere alla cittadinanza di richiedere dati di qualità attraverso un accesso civico semplice.

Certo, per ottenere la qualità, serviranno persone disposte a fare richieste e a dedicare tempo alla cosa. Perché nella pratica significherà inviare una PEC al responsabile della trasparenza, sollecitare se non arriva risposta, scrivere all'OIV se il silenzio persiste e, se ancora nulla si muove, rivolgersi ad ANAC. E nel frattempo saranno passati mesi.

Beato il paese che non ha bisogno di persone con tempo a disposizione!

🫤 I dati su omicidi volontari e violenza di genere non vengono più aggiornati

Il Servizio analisi criminale della Direzione centrale della Polizia criminale cura da anni una pagina dedicata al monitoraggio e all’analisi dell’andamento dei reati riconducibili alla violenza di genere. L’aggiornamento era settimanale e ne avevamo parlato nel numero #10 di “Liberiamoli tutti!”.

Più di un anno fa, avevamo chiesto al servizio di pubblicare questi dati anche in formato CSV. Da allora la pubblicazione avviene anche in questo formato, ma con alcune criticità: i file sono piuttosto problematici, i dati sono molto aggregati e manca una serie temporale completa.
L’ultimo aggiornamento è al 7 gennaio 2025.

È un tema che meriterebbe molta visibilità, chiarezza e leggibilità, che si sviluppa spesso in contesti di relazioni violente, criminali e opache.
Accedere a dati di qualità non risolve il problema, ma aiuta a comprenderlo e quindi ad affrontarlo con maggiore consapevolezza.

Un conto è avere dati “brutti” o incompleti, un altro è non averli affatto.

Abbiamo chiesto conto agli uffici e speriamo di avere presto una risposta.

👌 I dati aperti diventano “popolari”: le FAQ nel portale sul PNRR

Alla fine del 2024 è arrivata una piccola grande novità: in un sito dedicato a un tema di interesse, che riguarda un po’ tutte le persone che vivono in Italia, nel sito informativo del più grande progetto di finanziamento europeo ricevuto dal nostro paese, è apparsa la sezione open data nelle FAQ.

Evidenziamo questa cosa perché troppo spesso la pubblicazione di dati aperti si sostanzia in un formalismo tecnologico, che si limita alla pubblicazione dei dati e quando va bene sono corredati di una descrizione e di una o più categorizzazioni.
E si usano modalità per lo più “leggibili” da un pubblico specializzato, che non li rendono un vero bene comune.

Avere una sezione dedicata sulle FAQ (le domande più frequenti) di Italiadomani - il sito del Governo Italiano dedicato al Piano Nazionale di Ripresa e Resilienza - “normalizza” l’accesso a questi dati, e si fa un passo in avanti importante, che speriamo crei emulazione in altri progetti della Pubblica Amministrazione.

Perché come ha scritto Andrea Borruso su Parallasse - la newsletter di Scomodo per un giornalismo sano e di qualità - è necessario anche averi dei dati che sia anche machine to human, che siano comprensibili e leggibili anche dalle persone. O come ha scritto nella sua newsletter “Descrivere bene i dati è importante quanto renderli pubblici”.

🟦 Seguire il tema dei dati aperti sui social network: il nostro feed su Bluesky

Come vi abbiamo già raccontato, Paola Chiara Masuzzo ha creato per onData una pagina (in realtà un feed) per seguire il tema dei dati aperti su Bluesky, in (quasi) tutte le lingue.
Quando l’ha fatto, questo social era ancora troppo di nicchia. Venivano fuori contenuti interessanti, ma era aggiornato non di frequente e sempre da un gruppo ristretto di persone.

Oggi che più di 25 milioni di utenti (un anno fa ne aveva poco più di 2), è diventato ancora più interessante, ed è spesso una fonte preziosa per scoprire progetti e soprattutto persone che alimentano la cultura del dato e della conoscenza aperta.

In queste ore ad esempio è possibile leggere:

• delle foto open data di alcune webcam del Canada;

• l’invito a inviare articoli, per una edizione speciale della rivista Aperture Neuro, focalizzata sull'importanza e le sfide legate all'uso di dataset aperti nel campo delle neuroscienze;

• l’elaborazione dei dati meteo aperti in Spagna;

• un programma che mira a incentivare l'uso dei big data nella ricerca scientifica, compresi i big open data;

• il portale dei dati aperti dei tribunali amministrativi in Francia.

E tantissimo altro, ovviamente anche cose brutte e noiose :)

🧮 I dati sulle cabine primarie della rete elettrica nazionale

In una discussione sul forum ufficiale della comunità di sviluppatori dei servizi pubblici Italiani, nella sezione Dati e open data, Francesca Cella chiedeva di poter accedere ai dati delle cabine primarie della rete elettrica nazionale.
Faceva riferimento ai dati pubblicati da GSE (Gestore Servizi Energetici) in questa mappa e anche a quelli analoghi pubblicati dal Ministero dell’Ambiente e della Sicurezza Energetica.
I dati pubblicati nella mappa di GSE non erano pubblicati a nostro avviso in modalità adeguate (non scaricabili, ma soltanto visualizzabili) e con una licenza inadeguata.

Abbiamo fatto allora una segnalazione al Difensore Civico per il Digitale, e dopo un po’ di tempo GSE ha abilitato il download dei dati.

Grazie Francesca!

📺 Webinar: dal tecnocivismo alla cittadinanza digitale

Fiorella De Cindio e Andrea Trentini sono gli autori del libro “Dal Tecnocivismo alla Cittadinanza Digitale Download”.

Il libro è indirizzato a tutti coloro – studenti, cittadini, attivisti, amministratori locali, progettisti informatici, politici – che vogliono (ancora!) provare a rispondere positivamente alla crescente necessità di applicare le tecnologie digitali per migliorare la partecipazione, la democrazia e la politica.

È stato pubblicato a settembre del 2024 ed è rilasciato anche con licenza Creative Commons Attribuzione - Condividi allo stesso modo 4.0 Internazionale (CC BY-SA 4.0).
Ma acquistarlo è un modo per sostenere questi temi e le persone che se ne prendono cura.

Se prima di farlo, ne volete sentire parlare, vi consigliamo questo webinar.

📊 Our World in Data è sempre più bello

Our World in Data ha introdotto nuove funzionalità che semplificano il download e l'accesso ai dati presenti sul sito.

Tra queste, la nuova Chart Data API si distingue per le opportunità che offre in termini di utilizzi e automazioni. È già disponibile una documentazione completa, insieme ad esempi pratici con notebook su Google Colab e Observable. In futuro è prevista un’espansione dell’API, che consentirà di accedere non solo ai dati sottostanti ai grafici, ma anche a quelli presenti nella sezione Data Explorer.

Lo guardi e vorresti così tutti i portali open data!

🫶 Piccole soddisfazioni

Per segnalare fatti, cose e persone, che ci hanno restituito piccole soddisfazioni

➡️ Riccardo Saporiti, che su Wired ha scritto un pezzo sulle carceri italiane, grazie ai dati che abbiamo reso disponibili;

➡️ Denni Angemi, che apprezza il nostro lavoro sulle linee guida open data in formato HTML;

➡️ #DatiBeneComune è citata su Wikipedia, nella pagina sul Superbonus 110%. Grazie Martina Esposito;

Strumenti/risorse

• 📖 Una guida all'arte e alla scienza della data visualization pubblicata dalla Royal Statistical Society.

• 📖 Un libro gratuito sull'analisi dati per discipline umanistiche utilizzando Python

• 🔧 the {messy} package, uno strumento un po’ matto, che trasforma dei dati “puliti”, aggiungendo casualmente del disordine, per creare dati più simili a quelli che si trovano nel mondo reale.

• 🔧 DataSonifyer: uno strumento web per creare Data Sonification con i propri dati.

• 🌡️Quanto siamo vicini a un aumento delle temperature globali di 1,5°C? Ce lo dice il C3S Global Temperature Trend Monitor di Copernicus.

• 🎓 L'Open Visualization Academy è un archivio open source sul design dell'informazione e sulla visualizzazione dei dati, che sarà disponibile nei prossimi mesi.

• 📺 La playlist YouTube di PyCon US 2024.

• 🔧 Color Buddy, un tool interattivo per la creazione di palette colori per la data visualization.

• 📊 Il machine learning per stimare il PIL pro capite di Europa e Nord America negli ultimi 700 anni.

• 🧮 Il progetto SIREN: un'iniziativa di citizen science dove volontari sulla piattaforma Zooniverse stanno digitalizzando gli Annali Idrologici del Servizio Idrografico e Mareografico Nazionale.

• 📊 ArXiv Data Map, una mappa dei paper su ArXiv realizzata attraverso la libreria DataMapPlot.

• 🧮 Climate—Conflict—Vulnerability Index, mappa i rischi globali integrando i pericoli climatici e i conflitti, con le vulnerabilità locali. Tutti i dati sono disponibili con licenza creative commons e la metodologia è spiegata in dettaglio sul sito web

🙏Se vuoi sostenerci, puoi farlo in questi modi.

Iscriviti ora

👉 Se ci leggi da e-mail, fai click qui per leggerla per intero

📖 Le linee guida open data, in un formato più leggibile e “comodo”

Nell’estate del 2023 l’Agenzia per l’Italia Digitale (AgID) ha pubblicato le linee guida sui dati aperti, anzi per l’esattezza le “Linee Guida recanti regole tecniche per l’apertura dei dati e il riutilizzo dell’informazione del settore pubblico”.

Purtroppo il documento è pubblicato soltanto come PDF.

💡 Allora ne abbiamo creato una versione HTML, consultabile e condivisibile da qualsiasi terminale, per garantirne una diffusione più ampia ed efficace.

È molto scomodo leggere un PDF in alcuni dispositivi e diventa pressoché impossibile fare un semplice passaparola e inviare ad esempio in chat, in un’e-mail, in una condivisione su un social network, ecc. il riferimento a una sezione di interesse:

Ehi, guarda che spettacolo! Il requisito 2 delle linee guida open data dice che i dati devono essere pubblicati in formato CSV, non in quei terribili PDF che non servono a nulla! https://ondata.github.io/linee-guida-opendata/capitolo-4.html#req-2

Per realizzare il tutto, abbiamo chiesto ad AgID il documento da cui hanno esportato il PDF ufficiale, lo abbiamo convertito in Markdown e infine esportato in HTML con l’eccezionale Quarto.
Abbiamo apportato alcune modifiche al documento originale, per renderlo più leggibile e navigabile. Ma nessuna alterazione del contenuto o di significato.

Questi e altri dettagli nelle “note di redazione”.

Non è la prima volta che facciamo un lavoro di questo: lo abbiamo ad esempio già fatto per la versione HTML della “Guida dei diritti di cittadinanza digitali”.

🗓️ AwareEU: promuovere la consapevolezza sui Fondi Europei!

Siamo lieti di annunciare la partecipazione del progetto AwareEU alla nona edizione del Festival della Partecipazione 2024, iniziativa organizzata a Bologna da ActionAid Italia per celebrare il ruolo dei cittadini come fautori dell’azione democratica.

Cos'è AwareEU?
AwareEU mira a diffondere una maggiore consapevolezza e rendere più trasparente e accessibile l'informazione su come i fondi di Coesione e del PNRR vengono investiti nei territori locali, favorendo una partecipazione più attiva dei cittadini.

Il progetto, promosso da @actionaiditalia in collaborazione con @monithon.europe, Osservatorio Civico PNRR, info.nodes e noi di onData, si propone di contrastare la mancanza di informazioni e la comunicazione inefficace che spesso circonda l'uso dei fondi europei. Grazie ad attività di monitoraggio civico e alla promozione di buone pratiche di trasparenza, AwareEU contribuisce a rendere più chiaro l'impatto reale di questi finanziamenti sulle nostre vite.

Durante il Festival, AwareEU organizzerà l’evento pubblico “Colmare il divario: quali i rischi di una scarsa comunicazione dei Fondi europei nei territori e come la partecipazione civica può contribuire a prevenirli”.
Sarà un’occasione per discutere di come migliorare la trasparenza e la partecipazione civica: il 14 settembre 17:00 - 19:00, Auditorium Enzo Biagi, Biblioteca Sala Borsa - Bologna.
L’evento farà seguito al workshop su invito "Aware of Europe: opportunità e rischi della comunicazione dei fondi di Coesione e del PNRR", dedicato a organizzazioni civiche, e professionisti del mondo della comunicazione.

✍️ Lavorare i dati “a mano”

Venerdì 28 giugno abbiamo tenuto un workshop per l’appena nominato progetto AwareEU intitolato "Lavorare i dati a mano".

Martina Pugliese (socia di onData) ha parlato di come realizza visualizzazioni dati “fatte a mano”, del processo che va dall'analisi di un dataset alla realizzazione su carta.
Ha approfondito alcuni dati di Open Coesione, il portale istituzionale che raccoglie e presenta i dati dei fondi europei di Coesione, con una dashboard semplice e accessibile. I dati sono disponibili al pubblico via API o in formati aperti come CSV e Parquet, uno dei pochi esempi in Italia di veri open data utilizzabili.

Nel workshop ci siamo rivolti in particolare a giornalisti interessati ad acquisire competenza sull'uso dei dati e di creazione di contenuti basati su dati, e abbiamo presentato una prima "viz" a cui ne seguiranno altre.
➡️ La puoi vedere qui e leggerne i dettagli.

🏅 Abbiamo chiesto dati aperti sul PNRR con “link stabili”

Perché chiediamo “link stabili” quando parliamo di dati aperti? Avere un collegamento che non cambia è essenziale per chi vuole lavorare con quei dati in modo efficiente. Immagina di creare una dashboard automatizzata che, ogni giorno, raccoglie i dati direttamente dalla fonte. Se il link cambia, il processo si blocca e tutto si rompe!
NdR: non dovremmo parlare di "link", ma di URL (o meglio ancora di URI).

Ma andiamo ai dati del PNRR. Sono pubblicati sul “Catalogo Open Data” di Italiadomani. Uno dei dataset di maggior interesse è quello dei Progetti del PNRR – Universo ReGiS e i file sono pubblicati in formato CSV, JSON e XLSX.
L’URL del CSV potrebbe essere qualcosa come:

https://www.esempio.it/opendata/pnrr_progetti_universo_regis.csv

E man mano che si aggiornano i dati questo URL dovrebbe rimanere stabile, non modificato, e si potrebbe creare il prezioso archivio delle versioni precedenti, ma con “link stabile” alla versione più recente.

Mentre nel tempo c’è stata una variazione continua, fra l’altro non preceduta da alcuna notizia di preavviso e la versione più recente di quel file, con il prefisso “https://www.italiadomani.gov.it/content/dam/sogei-ng/” ha avuto questi URL:

• opendata_luglio2024/PNRR_Progetti-Universo_REGIS.csv

• opendata__/PNRR_Progetti-Universo_REGIS.csv

• open-data/progetti-universo-regis/PNRR_Progetti-Universo_REGIS.csv

• open_data/progetti/PNRR_Progetti-Universo_REGIS_v2.csv

• open_data/progetti/PNRR_Progetti-Universo_REGIS_v2.1.csv

• open-data_/pnrr-progetti-universo-regis/PNRR_Progetti-Universo_REGIS_v3.csv

• opendata_/pnrr_progetti-universo_regis_v4/PNRR_Progetti-Universo_REGIS_v4.csv

• open_data_2024/PNRR_Progetti-Universo_REGIS_v5.csv

• open_data__/PNRR_Progetti-Universo_REGIS_v5.csv

• opendata-aprile2024/PNRR_Progetti-Universo_REGIS_v6.csv

• _opendata_/PNRR_Progetti-Universo_REGIS_v6.csv

Abbiamo fatto richiesta di avere un URL persistenti e abbiamo osservato che la versione più recente non ha finalmente nel nome o nel percorso del file qualcosa che sia correlata al tempo di pubblicazione:
https://www.italiadomani.gov.it/content/dam/sogei-ng/opendata__/PNRR_Progetti-Universo_REGIS.csv

E a proposito di linee guida open data, il requisito 10 indica - per i dati aperti della ricerca scientifica - di assegnare a dati e metadati un identificatore univoco e persistente e raccomanda di applicare questi principi non soltanto ai dati della ricerca.
I dati del PNRR, il più importante progetto di finanziamento mai ricevuto dall'Italia, non sono presenti nel portale nazionale italiano dei dati aperti. E questo va contro il requisito 29 delle linee guida.

Un aspetto molto positivo dei dati pubblicati sul sito del PNRR è la presenza di tutte le versioni nel tempo e così è possibile osservarne le variazioni. In Italia, per i portali open data, avviene molto, ma molto, raramente.

💡 Come assicurarsi che nessuno si interessi ai tuoi dati aperti

Marco Cortella ci ha scritto a luglio:

mi piace questa guida "al contrario" sugli open-data https://www.heltweg.org/posts/how-to-make-sure-no-one-cares-about-your-open-data/

Dopo qualche minuto è partita l’idea di crearne la versione italiana e i nostri Marco Cortella e Antonio Vivace l’hanno realizzata.
Antonio fra l’altro ha contattato l’autore - Philip Heltweg - per essere autorizzati a pubblicare la versione italiana e suggerirgli di associare a quel testo una licenza aperta. Philip ci ha autorizzati e ha associato una licenza Creative Commons Attribution 4.0 al suo testo.

Inizia così:

Jessica si è innamorata di Roger Rabbit perché lo fa ridere. Questo testo fa ridere e sorridere, e per questo stimola riflessioni ed è più didattico di tante guide “serie” (comprese le nostre).

📺 Riutilizzo dei dati statistici: open standard, dashboard e intelligenza artificiale

Sappiamo bene come il valore dei dati stia nella possibilità di metterli assieme e guardarli come un tutt’uno. Per poter fare questo diventa importante costruire i dati secondo standard comuni di riferimento. Sono infatti proprio gli standard che consentono di rendere i dati interoperabili tra loro. Standard che tornano utili anche per visualizzare, navigare e costruire dashboard interattive in modo automatico.

Ti invitiamo ad ascoltare il nostro Vincenzo Patruno, nell’Academy di FORUM PA 2024.

🔍 È difficile raccontare la disabilità senza dati

Siamo entrati in contatto con questo tema grazie a Fightthestroke e al progetto Disabled data, in cui è stato un piacere ed un onore aver dato un contributo:

Se volessimo raccontare la disabilità attraverso i suoi dati ci troveremmo immediatamente in una condizione di disabilità, impossibilitati/e nell’attività di ricerca, raccolta, analisi ed elaborazione, a causa di barriere strutturali e contestuali. Quali sono le barriere strutturali e contestuali che limitano l’accesso ai dati sulla disabilità?

Tanto mesi dopo Disabled data, ci finisce di nuovo sotto gli occhi uno stimolo molto simile: quello di Francesca Sanna!

Voleva raccontare visivamente la disabilità a partire anche dai numeri correlati, ma le fonti a cui voleva accedere erano “scomode” o non funzionanti. Come ha scritto in modo molto efficace: “La disabilità è esclusa dai nostri ragionamenti, dagli studi, dai libri, dalla fantasia”.

Abbiamo provato a darle una mano su una delle fonti dati, quella dell’Istituto Nazionale Assicurazione contro gli Infortuni sul Lavoro (INAIL), ma non siamo riusciti a fare in modo di restituire quei dati alla fantasia di Francesca. Abbiamo contattato l’INAIL in due modalità e abbiamo avuto grande prontezza e gentilezza nelle risposte (un plauso). Dopo un lungo scambio purtroppo è emerso che la loro Banca dati disabili non è più funzionante: dovrà essere riprogettata, ma al momento non sono stati fissati dei tempi.

👀 Possiamo parlare di diseguaglianza digitale di genere?

Così come il femminismo non è stato soltanto un atto di rivendicazione dei diritti delle donne ma un movimento politico che ha interessato l'intera società, oggi il tecnofemminismo è la chiave, il grimaldello per mettere in evidenza i punti oscuri delle nuove tecnologie, una cartina di tornasole che ne rivela discriminazioni e diseguaglianze. In questa puntata analizziamo le nuove forme di sfruttamento digitale e le ingiustizie algoritmiche, la violenza online e le possibili pratiche di resistenza, grazie alle testimonianze che abbiamo raccolto all'Intenet Festival di Pisa.

Digital World è un programma condotto da Matteo Bordone. Il programma si occupa di esplorare e spiegare le nuove tecnologie e il loro impatto sulla nostra vita quotidiana, aiutando gli spettatori a comprendere meglio il mondo digitale in cui viviamo.

➡️ In questo episodio sono state raccolte le belle testimonianze di Donata Columbro, Diletta Huyskes, Lilia Giugni, Laura Carrer, Daniela Tafani e Oyidiya Oji Palino. A tutte loro, grazie.

📊 Aggiornata l’analisi sugli impatti di genere del PNNR

Period Think Tank ha aggiornato a luglio la dashboard per l’analisi sugli impatti di genere del PNNR, sviluppata da Giuditta Bellosi, Dylan Tartarini e Alessandra Pomella.

🫶 Piccole soddisfazioni

Per segnalare fatti, cose e persone, che ci hanno restituito piccole soddisfazioni

➡️ Agnese Baini, che cura su substack “Matilda, 📚 Consigli non richiesti di libri squisiti”, che non si occupa di dati e ci legge e ci scrive: “Ma grazie a voi per il lavoro che fate!!! Sto imparando un saaaaaaaaaaacco di cose!”

➡️ I dati che abbiamo liberato sulla “Piattaforma Unica Nazionale dei punti di ricarica per i veicoli elettrici” sono stati usati da Lorenzo Stucchi per la sua presentazione al FOSS4G Europe 2024 dal titolo “Analyzing Charging and Petrol Station Distribution with FOSS4G: Implications for Energy Transition Monitoring in European Regions”.

➡️ I dati sul Superbonus 110%, pubblicati sul numero 7 di Liberiamoli tutti!" sono stati usati da “Ambiente e non solo…” per il loro post “Efficientamento energetico degli edifici residenziali e i dati del superbonus”.

Strumenti/risorse

• 📖 Una breve guida alla visualizzazione dei dati dal Governo del Regno Unito, che inizia dal citare “Alice nel Paese delle Meraviglie”;

• 🏅 Chi ha vinto il concorso sulle “belle tabelle”;

• 📖 “Il ruolo dell'intelligenza artificiale negli open data: sfide legali e politiche”, il report della “Unit G.1 Data Policy and Innovation” della Commissione Europea;

• 📖 “La riduzione della combustione di biomassa è fondamentale per diminuire l'esposizione al PM2.5 nelle città europee”, uno studio del Joint Research Centre (JRC);

• 📺 La presentazione del Rapporto "Il clima in Italia nel 2023", a cura dell’Istituto Superiore per la Protezione e la Ricerca Ambientale;

• 🔧 I dati di Overture Maps, sono adesso consultabile con un’applicazione accessibile via browser;

• 🧮 Da dieci anni, Justin Meyers raccoglie dati geospaziali provenienti da più di 150 paesi in tutto il mondo e li segnala sul suo blog;

• 📺 Tutti i talk di Outlier2024, l'evento sulla data visualization della Data Visualization Society, sono ora disponibili online gratuitamente in questa playlist YouTube;

• 👀 Un osservatorio e una raccolta di esempi su come si “incrocino” i dati aperti e l’intelligenza artificiale generativa;

• 📺 Un ottimo talk di Rahul Bhargava al CSVConf 2024 sulle rappresentazioni alternative dei dati per avvicinare le persone non esperte del campo;

• 👀 I dati sul sovraffollamento delle carceri italiane nell'articolo di Riccardo Saporiti su Wired;

• 🔧 Google ha aggiornato con nuove feature il suo storico strumento per la creazione di dataviz come gif animate o video;

• 🔧 Un gioco divertente in cui devi indovinare il dataset corretto partendo da un grafico, una sorta di “wordle” per i grafici;

• 📺 Per gli appassionati di duckdb, tutti i video della DuckCon #5 di Seattle;

• 📖 Pubblicata la versione 2.0 delle specifiche Data Package;

• 🔧 Uscita la versione 2.0 di Magrit;

• 👀 “Think small, develop locally, ship joyfully”, è lo “Small data manifesto”.

🙏Se vuoi sostenerci, è il momento del 5x1000. GRAZIE!!!

Il tuo 5x1000

👉 Se ci leggi da e-mail, fai click qui per leggerla per intero.

Quante pubbliche amministrazioni sono state sanzionate per aver violato le “norme sul digitale”?

Spesso in questa newsletter ti abbiamo raccontato delle nostre segnalazioni al Difensore Civico per il Digitale, per quelle Pubbliche Amministrazioni (PA) che non pubblicano dati aperti o che lo fanno in modo inadeguato a norme e linee guida correnti.
Per la tutela dei diritti di cittadinanza digitali ci si può infatti rivolgere alla figura del Difensore.

In questo contesto le norme di riferimento principale sono il “Codice dell'Amministrazione Digitale” (il CAD), e il Decreto Legislativo n. 36 del 2006, relativo all'apertura dei dati e al riutilizzo dell'informazione del settore pubblico.
Le PA che non pubblicano dati nelle modalità previste da queste norme non rispettano il CAD e - vedi comma 5 dell’articolo 18-bis del CAD - sono punibili con una sanzione amministrativa pecuniaria da parte dell’Agenzia per l'Italia Digitale (AgID), che va da un minimo di 10.000 a un massimo di 100.000 euro.

L’articolo 18-bis è stato introdotto da qualche anno e ci sembrava interessante sapere quante volte fosse stata applicata la sanzione: abbiamo fatto allora una richiesta di accesso civico generalizzato ad AgID.
Ci ha risposto il 24 maggio 2024 (vedi immagine seguente): ad oggi non sono mai state irrogate sanzioni ai sensi di questo articolo.

In linea di principio è una buona notizia.

Ci sono però degli elementi procedurali/normativi che non ci piacciono e che indeboliscono molto la precedente valutazione.

Questo infatti - semplificando un po’ - è il percorso di una segnalazione di violazione del CAD (si legga il regolamento), come quella che abbiamo fatto sui dati sulle erogazioni ai partiti politici:

• la persona fa la segnalazione al Difensore Civico per il Digitale;

• l’ufficio del Difensore, qualora “emerga la non manifesta infondatezza

  della segnalazione” (ovvero qualora la valuti come accettabile/ricevibile), ne dà comunicazione sia alla persona segnalante che all’Ufficio Legale di AgId;

• l’Ufficio Legale apre il procedimento di accertamento e contestazione con la Pubblica Amministrazione segnalata;

• Fine. A chi ha fatto la segnalazione non viene restituito più nulla, né se quanto segnalato è stato risolto e come, né se, a ulteriore approfondimento dell’Ufficio Legale, è stata verificata l’assenza di violazioni del CAD.

Abbiamo segnalato a novembre del 2023 al Difensore, insieme a Transparency International Italia, che i dati sulle erogazioni ai partiti sono pubblicati in PDF, quindi non in linea con le norme correnti.
Il Difensore ci ha risposto, come immaginavamo, che la segnalazione era accettabile/ricevibile. Ma poi non è cambiato più nulla e si continuano a pubblicare soltanto PDF.
Abbiamo allora successivamente chiesto quali sono state le valutazioni e gli esiti della procedura di accertamento e contestazione fatta dall’Ufficio Legale, per sapere perché è valutata accettabile questa bruttissima modalità di pubblicazione di dati così importanti. In risposta, in linea con il regolamento, abbiamo avuto:

si ricorda che, in esito alla trasmissione degli atti all’Ufficio Affari Legali di questa Agenzia per gli ulteriori accertamenti, ai sensi degli artt. 17, comma 1 – quater e 18 bis del CAD, l’eventuale apertura del procedimento di contestazione e accertamento di cui al predetto art. 18 bis del CAD non coinvolge il segnalante, ma riguarda esclusivamente l’amministrazione segnalata

Questo modo di procedere rende però impossibile valutare se la mancanza di sanzioni sia davvero un segnale positivo. Informare pienamente la persona che ha segnalato è essenziale, sia per evitare ulteriori segnalazioni errate, che per ispirare altre segnalazioni corrette basate sull'esito del caso e creare consapevolezza sull’importanza e l’efficacia di questi diritti.

Gli obblighi di trasformazione digitale sono essenzialmente "ON/OFF": o li hai attivati, oppure no.
Le vie di mezzo sono accettabili? E come devono essere valutate? Nella normativa ciò non viene detto.

A nostro avviso il regolamento così com'è va certamente cambiato. È infatti fondamentale che le valutazioni e gli esiti siano riportati e condivisi almeno con chi ha segnalato, che, ricordiamo, ha agito nell'interesse collettivo per consentire il miglioramento dei processi della PA.

Iscriviti ora

📃 Il Geoportale Nazionale nazionale ha corretto la sua licenza

Il Geoportale Nazionale è il portale che raccoglie (tra le altre cose) il catalogo dei dati geografici e territoriali pubblicati dalle Pubbliche Amministrazioni italiane.
È uno dei più importanti cataloghi italiani di dati.

Qualche settimana fa ci siamo resi conto che nelle note legali si faceva riferimento a una licenza dati errata (vedi immagine sotto), perché non consente l’uso commerciale.
Abbiamo subito segnalato la cosa al Difensore Civico per il Digitale - che tutela diritti di cittadinanza digitali - ed adesso la licenza è corretta (qui la versione vecchia della pagina, al 18 aprile 2024).

🧮 63.990 automobili in sosta irregolare in un giorno, a Milano

Sono 63.990 le automobili in sosta irregolare contate giovedì 16 maggio, dalle 18 all'una di notte, da oltre di 2 mila persone, divise in 800 squadre che hanno battuto strada per strada tutte le 3.873 vie di Milano.

Questo è un estratto del comunicato stampa di Via Libera, un progetto di “Sai che puoi?”, che fa emergere numeri incredibili: sia per il numero di auto in sosta regolare, che soprattutto per la partecipazione delle persone. Applausi a chi ha pensato, organizzato e sostenuto questa operazione.

Sul sito ufficiale verranno pubblicati i dati aperti e probabilmente grafici e mappe.
A caldo, nei giorni successivi, è stato reso disponibile un PDF con 110 pagine di tabelle con i nomi delle strade e per ognuna il numero di auto su marciapiede, su carreggiata e su verde.

Li abbiamo estratti e Guenter Richter ha generato una mappa dinamica che restituisce l’impatto di queste soste irregolari (nota bene: non ci sono i civici delle strade in quel PDF, quindi non è la posizione esatta delle soste).

Su questi dati si è generato un passaparola circoscritto (non ne avevamo dato annuncio pubblico) e ne è arrivata notizia a Sheldon.studio, che ha voluto sostenere questo bel progetto, creando la loro prima data song (aprite il link e attivate il volume).
Il loro è un progetto nato per portare l’attenzione in maniera leggera, su temi e progetti che hanno a cuore e per noi è stato un grande piacere avere dato un piccolo contributo.

🪛 Novità su confini-amministrativi.it

Confini amministrativi italiani è l’applicazione sviluppata da Alessio Cimarelli, per usare comodamente i dati geografici dei confini amministrativi italiani nel tuo prossimo progetto.
In queste settimane alcune novità: la validazione dei file secondo lo standard JSON Schema, la correzione di un bug visuale a cura di Alan Sprecacenere (grazie), l’aggiunta in interfaccia di un comodo “tasto” per copiare l’URL della risorsa (vedi immagine di sotto).

Visualizzare la distruzione in Ucraina

I dati radar sono informazioni raccolte utilizzando onde radio che “rimbalzano” su oggetti e superfici per creare immagini dettagliate. I dati SAR sono un tipo di dati radar che permette di ottenere immagini della Terra in qualsiasi condizione meteo e di luce. Queste immagini aiutano a monitorare terremoti, frane, cambiamenti urbani e a sorvegliare foreste e mari.

A partire dal 2022 Marco Hernandez ha iniziato studiare i dati SAR resi disponibili da Sentinel 1 - insieme a Jamon Van Den Hoek e Corey Scher - per documentare la devastazione in Ucraina attraverso l'uso di questi e altri dati. Uno dei punti che ci piace sottolineare è che si tratta di un lavoro basato principalmente su dati aperti o liberamente accessibili e software open source.

Ogni angolo del Paese aveva la sua storia da raccontare, alcune più conosciute come il caso di Mariupol, ma durante la mia esplorazione ho imparato a conoscere molti luoghi di cui non avevo mai sentito parlare prima, molti villaggi distrutti lontano dai riflettori dei media.

Il progetto ha affrontato numerose sfide, tra cui la gestione di grandi volumi di dati e la necessità di filtrare informazioni non rilevanti come attività minerarie o stazioni ferroviarie. L'uso di script Python ha aiutato a velocizzare il processo di verifica dei dati.
Oltre alle mappe, sono stati creati video e animazioni per spiegare il progetto al pubblico.

Il modo più bello e forse anche più straziante per apprezzare questo lavoro è leggere la gran bella storia in scrollytelling pubblicata sul New York Times e l’articolo che descrive come è stata realizzata l’inchiesta.

🔥 Liberiamoli tutti! - Numero #6, alcuni dati sulle elezioni europee 2024

L’ultimo numero di Liberiamoli tutti! “libera” alcuni dei dati sulle recenti elezioni europee.
Abbiamo rilanciato già la cosa spesso in queste settimane, e diverse persone hanno utilizzato questi dati per scrivere articoli, fare ricerche, analisi e rappresentazione di questi.

Vogliamo però ancora una volta invitare il Ministero dell'Interno a pubblicarli anche in formato "leggibile meccanicamente" (ad esempio una tabella in formato CSV, XLSX, ODS, ecc.), nei giorni seguenti alla chiusura dei seggi, e non settimane dopo.
È un errore, perché sono dati di grande interesse, che più di altri le persone sentono propri. Se il problema è la non “ufficialità”, basterebbe pubblicarli con la stessa nota attualmente presente nelle pagine web dedicate.

📖 PeaceRep, un progetto che raccoglie e mappa dati su conflitti e accordi di pace

PeaceRep è un bel progetto portato avanti dall'Università di Edimburgo, dedicato alla raccolta e organizzazione di dati sui trattati di pace del mondo, a partire dal 1990. Il gruppo di lavoro integra queste informazioni con i dati sui conflitti raccolti da ONG, governi e altre fonti.
Il risultato del loro lavoro è una pagina web con visualizzazioni interattive e dati.

Il team traduce i trattati di pace dalla lingua originale all'inglese, non utilizzando però modelli di linguaggio avanzati (LLM); con gli LLM i risultati non sono stati soddisfacenti, perché il linguaggio dei trattati è altamente specialistico e burocratico.
Una volta tradotti, i trattati vengono analizzati per estrarre i dati e i metadati necessari per analizzarli. Questo lavoro dettagliato e accurato consente di creare rappresentazioni visive e interattive che aiutano a comprendere meglio i processi di pace in tutto il mondo.

💡 National Grid: Live, i dati sulla rete di trasmissione dell'energia elettrica in Gran Bretagna

I dati della National Grid (rete elettrica) della Gran Bretagna sono aperti e disponibili su questo portale.

Una sviluppatrice, Kate Morley, ci ha fatto questo bellissimo strumento dove si può vedere live la provenienza delle fonti (fossili, rinnovabili) e vari altri dettagli: grid.iamkate.com.

Come ha sottolineato la nostra Martina Pugliese, è “un ottimo esempio di quello che si può fare con dati aperti, tra l'altro su argomento sostenibilità”.

🧮 Alcuni dati sui taxi e i servizi di Noleggio con Conducente

Riccardo Saporiti ha realizzato un’inchiesta per Wired Italia sui dati sui taxi e i servizi di Noleggio con Conducente (NCC).
Per farlo, sono state inviate richieste di accesso ai dati alle 50 più popolose città italiane e anche alle regioni e alle province autonome.

Ci sono due elementi che vogliamo sottolineare qui.

Il primo è che - per la prima volta nella storia di Wired Italia - alcune amministrazioni hanno richiesto un pagamento in denaro per rilasciare i dati. Il decreto trasparenza stabilisce che chiunque ha diritto di fruire “gratuitamente” di tutti i documenti, le informazioni e i dati oggetto di accesso civico, salvo il rimborso del costo effettivamente sostenuto e documentato dall’amministrazione per la riproduzione su supporti materiali. Che qui non sono presenti.

Il secondo è che Riccardo ha “liberato” i dati, e li ha resi disponibili in questo repository su GitHub. Questa è una pratica preziosa e ancora poco diffusa e quindi ci fa piacere sottolinearla.

🎤 Dati aperti: un diritto digitale, da rivendicare e da alimentare

Il nostro Andrea Borruso è stato invitato come keynote speakers al Trento Open Festival, che nasce per promuovere l’incontro e la condivisione di esperienze tra i diversi attori la cui attività si lega all’utilizzo o sviluppo di tecnologie aperte, tra cui open-source software, open data e open hardware.

È stato ospite della sessione a cura di Speck&Tech, una fantastica comunità nata in Trentino, composta da persone accomunate dalla passione per la tecnologia e l'innovazione, che vogliono scambiare idee e conoscenze su questi temi e su quelli correlati. Fanno un lavoro di gran qualità tematica, organizzativa e umana. Seguiteli!

Andrea ha scelto, nonostante la platea, di non fare un intervento “tech”, ma di sottolineare come i dati aperti siano un diritto, da rivendicare e da alimentare. Sotto il suo intervento e qui le sue slide.

🪛 Il Sistema Informativo Territoriale delle Unità Amministrative e Statistiche di Istat

Ad aprile 2024 Istat ha lanciato il SITUAS, “che raccoglie in maniera organica e coerente il patrimonio dell’Istat su codici, denominazioni, classificazioni e variazioni degli enti territoriali amministrativi e delle unità statistiche e costituisce un imprescindibile strumento di consultazione, interrogazione e analisi per la conoscenza territoriale.”

Lo stiamo già usando molto per i tantissimi casi in cui è necessario associare un codice identificativo territoriale, o una caratteristica dimensionale, a dati territoriali italiani.
Abbiamo già inviato alcune note e consigli, su alcuni elementi a nostro avviso migliorabili.

Ti consigliamo di usarlo e sfogliarne tutte le sezioni.

🫶 Piccole soddisfazioni

Per segnalare fatti, cose e persone, che ci hanno restituito piccole soddisfazioni

➡️ Roberto Marras, che ha usato la nostra Guida all'uso delle API REST di ISTAT, per sviluppare un’idea e un prodotto (grazie):

Se non ci fosse stato il lavoro di onData e quella guida, non sarei mai potuto arrivare a questo punto.[…] A quel punto i dati di ISTAT li avevo capiti, avevo imparato come funzionassero le API per i dati con SDMX e li ho collegati.

➡️ Riccardo Saporiti, che è spesso un compagno di viaggio e un data stalker, che ha usato i dati elettorali (grazie):

Ormai è purtroppo diventato repertorio: se vuoi lavorare sui dati elettorali, lo puoi fare solo grazie a @ondatait E visto che è periodo di dichiarazione dei redditi, sappiate che potete devolvere loro il 5xmille

Strumenti/risorse

• 📺 Il video-tutorial di OpenCUP per l'Open Gov Week

• 📊 Esame della trasparenza finanziaria dei partiti politici nel mondo con R

• 📖 Disponibile gratuitamente in open access il nuovo libro di Catherine D'Ignazio: “Counting Feminicide: Data Feminism in Action”

• 📊 Sul portale dei dati aperti nazionale, arrivano la provincia di Biella e l’Autorità Garante della Concorrenza e del Mercato

• 🪛 Data Wrangler, uno strumento di visualizzazione e pulizia dei dati incentrato VS Code

• 📖 La versione "community review" del libro Data by Design di Lauren Klein

• ✉️ La nuova newsletter di Eurostat

• 🪛 Accedere comodamente da DuckDB a più di 150 mila dataset di Hugging Face

• 📖 Arriva la versione 3 di DCAT-AP, il profilo di metadati sviluppato per facilitare l'interoperabilità tra cataloghi di dati aperti pubblici in Europa

• 📖 Teaching Accessible Computing, affinché l'informatica funzioni per tutti, deve essere accessibile a tutti

• 📊 Qual è la situazione climatica in Europa e nel resto del mondo? Lo puoi leggere nel report Copernicus "European State of the Climate 2023"

• 📊 La pagina di Istat, dedicata ai dati di Elevato Valore, così come definiti Regolamento di esecuzione Ue 138/2023

• 🧮 Il redesign del portale Open Data di Singapore

• 🎤 Gerlando Gibilaro e Andrea Borruso, parlano nel loro podcast dei dati elettorali liberati da “Liberiamoli tutti!”

• 🪛 Le novità del sito EUR-Lex, il sito per accedere alle norme dell’Unione Europea

• 🗞️ 1,18 miliardi di persone vivono in povertà energetica nonostante il crescente accesso all’elettricità

• 📖 Il report della Commissione Europea sugli High Value Datasets (HVD)

• 📺 Trovare buoni dati e trasformare le tue analisi in una storia basata sui dati. Il tutorial del mitico Jeremy Singer-Vine

• 📖 Quote giovani e donne, nessun miglioramento nel 2023. I dati della Relazione Anac

• 📖 La guida alle buone pratiche per la visualizzazione dei dati di osservazione della Terra

🙏Se vuoi sostenerci, puoi farlo in questi modi.

Iscriviti ora

👉 Se ci leggi da e-mail, fai click qui per leggerla per intero

🤔 Una riflessione su dati aperti e accessibilità dell'informazione

☝️ AGGIORNAMENTO: sul PUN è adesso possibile scaricare la tabella dei dati, ma è inutilizzabile, in quanto il file CSV contiene migliaia di errori (errato uso del separatore dei campi).

Vogliamo fare - e proporti - una riflessione su dati aperti e accessibilità dell'informazione, e su come il nostro paese debba ancora purtroppo fare molti passi perché questi concetti vengano implementati in modo corretto e come impostazione predefinita.

Di recente il Ministero dell'Ambiente e della Sicurezza Energetica ha pubblicato la sua Piattaforma Unica Nazionale dei punti di ricarica per auto elettriche (PUN). Ci sono una mappa dinamica e una lista, entrambe filtrabili per località.
La piattaforma è certamente utile e risponde al bisogno dei proprietari di auto elettriche di sapere dove ricaricare, ma ha il grave difetto di non fornire direttamente i dati grezzi in formato aperto, cosa che come sa chi legge questa newsletter è un tema a noi molto caro, perché crediamo fortemente che la partecipazione attiva e la comprensione dei fenomeni che ci riguardano passino per la possibilità di interagire con l'informazione e di costruirci sopra nuovi strumenti.

Fornire i dati online in formato leggibile meccanicamente aprirebbe alla possibilità, per chiunque, di usarli come base per altro software, di farne analisi e creare nuova informazione. Questi sono dati pubblici, dello Stato, cioè di tutti noi, e chissà, magari qualcuno potrebbe voler fare confronti tra regioni, creare nuove visualizzazioni e grafiche, usare i dati all'interno di progetti più ampi.

Il nostro Andrea Borruso ha aperto questi dati - sono qui sul GitHub di OnData. Con un po' di abilità tecnica che passa per la API che alimenta la piattaforma li ha raccolti in formato CSV e anche "ripuliti" di problemi relativi per esempio ai caratteri usati - qui potete vedere il risultato, che si auto-aggiorna giornalmente: chiunque può facilmente scaricarli o leggerli con codice.

Questo lavoro è stato poi usato dal nostro Günter Richter per creare quest'altra mappa interattiva - ricca di filtri - ed è un bell'esempio di quello che dicevamo prima: costruire software su dati aperti, elabolarli, usarli per scopi più ampi. Un altro esempio di riuso è il lavoro che ha fatto OpenDataSicilia. Abbiamo anche ricevuto una menzione da Isaia Invernizzi su Il Post sull'apertura di questi dati, che ha a sua volta creato una mappa. E, a qualche giorno di distanza, Riccardo Saporiti su Wired ha pubblicato un pezzo con un altro paio di grafiche sempre costruite sui “nostri” dati aperti! Questo a dimostrazione che quando si rilasciano open data veramente, le possibilità sono tantissime e l'informazione corre.

Di nuovo, sarebbe opportuno e doveroso che i dati aperti fossero disponibili presso la fonte primaria, che è ciò per cui qui a OnData ci spendiamo e vogliamo condividere con chi ci segue.

Nel Decreto Legislativo 24 gennaio 2006, n. 36, l'articolo 6 stabilisce che le pubbliche amministrazioni, gli organismi di diritto pubblico e le imprese pubbliche devono mettere a disposizione i propri dati in formati leggibili meccanicamente (definiti nell'articolo 2, lettera c-bis) e aperti (definiti nell'articolo 2, lettera c-ter)​​.

Come in molti altri casi, abbiamo segnalato questa mancanza al Difensore Civico per il Digitale.

🧮 L’importanza dell’articolo 18 bis del Codice dell'Amministrazione Digitale (CAD)

Sul numero #4 di - un'iniziativa della campagna #DatiBeneComune per individuare, ottenere, riformattare, pulire, documentare, pubblicare e diffondere dati di interesse pubblico - abbiamo pubblicato l'elenco complessivo dei beneficiari del cinque per mille (5x1000) 2022.

La fonte dei dati è questa pagina del sito dell’Agenzia delle Entrate, ma sono informazioni pressoché inutilizzabili, perché “intrappolate” in migliaia di pagine in file PDF. E allora li abbiamo estratti e resi disponibili anche in formato CSV.
Ti suggeriamo di leggere l’editoriale di Info cooperazione, sul valore di questi dati.

Abbiamo segnalato la cosa a dicembre del 2023 al “Difensore civico per il digitale”, che l’11 marzo ci ha comunicato “è stata valutata non manifestamente infondata”.
È il modo formale per dire che è stata accolta e girata all’Ufficio Affari Legali e al Direttore Generale di AgID per l'esercizio dei poteri di cui all'art. 18 bis del Codice dell'Amministrazione Digitale (CAD).

L'articolo 18 bis è fondamentale per le persone perché stabilisce i poteri sanzionatori dell'Agenzia per l'Italia Digitale (AgID). Questa norma permette all'AgID di adottare provvedimenti in caso di violazioni delle disposizioni del CAD riguardanti la digitalizzazione e l'innovazione nella pubblica amministrazione.
La presenza di un meccanismo di sanzione è pensato per garantire che le normative sul digitale siano rispettate dalle amministrazioni pubbliche, assicurando così che i diritti digitali — come l'accesso a servizi pubblici online, la protezione dei dati personali e l'uso efficace delle tecnologie digitali — siano effettivamente tutelati.
Se un'entità governativa non rispetta le regole stabilite per la digitalizzazione e l'innovazione, l'articolo 18 bis fornisce le basi per intervenire, contribuendo a mantenere un livello adeguato di servizio e responsabilità nell'erogazione dei servizi digitali.

🪛 Le API del portale nazionale dei dati aperti mettono l’acceleratore

Le API sono gli strumenti che consentono alle applicazioni software di scambiare informazioni tra loro.

Il portale nazionale dei dati aperti ha le sue API e consente, a chi lo fa tramite software e/o tramite linguaggi di programmazione, un accesso comodo alla sua banca dati, .
Noi ad esempio avevamo attivato tanto tempo fa il monitoraggio automatico della parola chiave “PNRR” per essere avvisati tutte le volte che viene pubblicato un nuovo dataset correlato. L’avevamo spento, perché anche limitando la risposta a poche decine di righe, si otteneva il risultato in più di un minuto. Troppo lento e non volevamo essere causa di ulteriori “lentezze”.

👏 Da alcune settimane abbiamo riscontrato che la stessa operazione restituisce un risultato in meno di 2 secondi. La cosa ci piace e abbiamo riattivato il monitoraggio.

Per i tecnici: la query CKAN (il motore del portale) è una package_search (documentazione), e in particolare package_search?q=PNRR&rows=100 (esempio).

🗺️ Confini amministrativi italiani

Nel numero speciale della nostra newsletter, pubblicato da poco, ti abbiamo presentato Confini amministrativi italiani, un'applicazione, per usare comodamente i dati geografici dei confini amministrativi italiani nel tuo prossimo progetto.

Ne abbiamo già scritto, quindi non ci ripetiamo e per approfondire ti lasciamo alla lettura di questa pagina.
Ancora grazie al nostro Alessio Cimarelli, per averla pensata e realizzata.

👥 La “bussola” dei dati di genere

Il Gender Data Compass (GDG) è una risorsa online creata dal Global Data Center dell'Open Data Watch, che fornisce informazioni e strumenti per l'utilizzo e la comprensione dei dati di genere.

Nonostante la sua importanza, la nostra comprensione di questi dati rimane spesso inadeguata. Persistono lacune nei dati, poiché la raccolta tradizionale spesso trascura o sottostima le disparità di genere. Inoltre, mancano informazioni sulle fondamenta di un sistema di dati di genere: quali dati vengono raccolti, come vengono interpretati e chi vi ha accesso.

L’ultimo report mostra una carenza diffusa di dati di genere completi e aperti, con un impatto negativo sulla capacità di monitorare l'uguaglianza di genere. Le categorie analizzate includono dati sulla salute, la povertà, la connettività digitale e altro ancora, rivelando lacune significative nella disponibilità e disaggregazione dei dati.
Viene ad esempio anche verificato se un Paese ha politiche e leggi che incoraggiano la produzione e la diffusione di dati ufficiali di genere, se il quadro normativo, il panorama dei finanziamenti sono sufficientemente forti da sostenere un cambiamento trasformativo.

🎙️ Un certo genere di violenza

L'Istat produce un podcast di nome "Dati alla mano", che esce a cadenza variabile e si trova qui.

Ogni episodio è interessante e la cosa notevole è che anche le trascrizioni sono pubblicate liberamente in PDF, per chi preferisce leggere - i temi sono naturalmente legati a dati e statistiche su società ed economia, ma l'approccio è non solo informativo ma anche "leggero" e rivolto a tutte le persone. Si possono anche mandare proposte per nuovi argomenti!

Qui segnaliamo in particolare l'episodio "un certo genere di violenza", (qui in trascrizione), che delinea i concetti di femminicidio e di violenza di genere in senso ampio, li inquadra in termini rigorosi e ci spiega come li si quantifica, nel mondo e in Italia.
Veramente un'iniziativa lodevole che speriamo possa avere ampia diffusione.

🪴 Aggiornate le belle slide didattiche a tema open data

Nel numero #27 della nostra newsletter ti abbiamo presentato il PCTO (Percorso per le competenze trasversali e per l’orientamento) "Open Data", un lavoro di Liguria Digitale, grazie al tramite di Scuola Digitale Liguria, in collaborazione con Accademia Digitale Liguria ITS-ICT.

Ne sono state tenute due nuove edizioni - per l’istituto Majorana-Giorgi e l’istituto Italo Calvino, di Genova, con alcuni interessanti aggiornamenti: l’introduzione del tema Linked Open Data, l’utilizzo del tool IMAGE di Eurostat (scoperto dai curatori del corso grazie alla nostra guida) e l’aggiornamento alla versione 3.0 del nostro amato VisiData.

➡️ Trovate il link alle splendide slide, nelle pagine ufficiali dei due PCTO: Majorana-Giorgi e Italo Calvino.

Rinnoviamo il grazie alle curatrici e ai curatori dei PCTO, perché è una soddisfazione grande avere fornito qualche spunto e qualche materiale didattico per lo sviluppo dei corsi.

🔍 Equità di Genere nell'Utilizzo dei Fondi PNRR

PERIOD Think Tank ha fatto una nuova analisi territoriale e per missione, per valutare l’impatto degli appalti PNRR sull’occupazione di donne e giovani. Il 65% dei bandi è andato in deroga rispetto ai meccanismi di tutela per favorire l’inclusione di donne, giovani e persone con disabilità, mentre solo il 6% presenta misure premiali di genere.

Noi abbiamo avuto l’opportunità e il piacere di dare una mano a Giuditta Bellosi, Dylan Tartarini e Alessandra Pomella - che hanno sviluppato la nuova interfaccia di esplorazione dei dati - per la corretta lettura e utilizzo delle principali banche dati di riferimento usate per la nuova analisi.
Tra queste quelle di ANAC (Autorità Nazionale Anticorruzione) e OpenCUP: ringraziamo entrambe le organizzazioni per i riscontri ottenuti durante lo sviluppo del lavoro.

Qui il comunicato stampa e la dashboard di PERIOD Think Tank.

🗓️ L’open data day 2024

Nella prima settimana di Marzo la Open Knowledge Foundation (fondazione dedicata alla condivisione libera di informazione, tra cui i dati aperti) ha organizzato l’Open Data Day 2024, una serie di eventi da tutto il mondo, online o in presenza fisica, volti a celebrare e condividere conoscenza e discutere di trasparenza dell'informazione.
In Italia si sono svolti 7 eventi, come si vede dalla mappa sul sito web. Per chi usa Mastodon, hanno un bel profilo, ma anche un canale YouTube.
OpenCoesione ha pubblicato un video tutorial sui suoi dati aperti in questa occasione.

➡️ Uno dei modi migliori per esplorare questa edizione, sono gli articoli del blog dedicati all’Open Data Day.

🧮 Common Corpus: il più grande set di dati di dominio pubblico per l'addestramento dei LLM

Common Corpus è un'iniziativa internazionale coordinata da Pleias, che coinvolge ricercatori in LLM (Large Language Model), etica dell'Intelligenza Artificiale e patrimonio culturale, in associazione con le principali organizzazioni impegnate in un approccio scientifico aperto per l'intelligenza artificiale.

È un’iniziativa che mira a dimostrare che è possibile addestrare gli LLM - semplificando un po’ le intelligenze artificiali - su un corpus completamente aperto e riproducibile, senza utilizzare contenuti protetti da copyright:

• comprende 500 miliardi di parole provenienti da un'ampia varietà di iniziative;

• è multilingue e ad oggi è il più grande corpus in inglese, francese, olandese, spagnolo, tedesco e italiano;

• dimostra appunto che è possibile addestrare LLM completamente aperti su fonti senza problemi di copyright.

🫶 Piccole soddisfazioni

Per segnalare fatti, cose e persone, che ci hanno restituito piccole soddisfazioni

➡️ Isaia Invernizzi, a cui viene chiesto ne LaCulturaDelDato di indicare un “progetto o la risorsa nel mondo dei dati di cui non potresti fare a meno”. E lui (grazie mille):

Negli ultimi anni l’associazione Ondata ha liberato una quantità incredibile di dati essenziali. Dati delle elezioni, dati sui vaccini, dati sulla scuola, sull’ambiente, perfino i dati degli alberi monumentali italiani. È stato un lavoro utile ai giornalisti, ai ricercatori, in generale alle persone. Il loro esempio mi ha spronato a diffondere i dati trovati nelle mie ricerche e a condividere esperienze e metodo di lavoro.

➡️ I dati sulla frequentazione dell'ora di religione pubblicati nel numero #2 di Liberimoli tutti! sono stati la fonte di un servizio a tema, del TG Regionale dell’Umbria, che ha citato le fonti in modo dettagliato e corretto.

➡️ Riccardo Saporiti, che proprio a proposito dei dati della Piattaforma Unica Nazionale dei punti di ricarica per auto elettriche (PUN), che abbiamo liberato, dice:

Vi voglio così bene che ogni anno vi do il 5xmille. Sono due lire, ma si fa quel che si può

Strumenti/risorse

• 🪛 Trelliscope, un progetto open source per costruire e condividere raccolte interattive di visualizzazioni dati, anche a “faccette”;

• 🗓️ il 29 maggio arriva csv,conf,v8, “una conferenza comunitaria per i creatori di dati di tutto il mondo”;

• 🧮 I numeri della PDND (la piattaforma che abilita lo scambio di informazioni tra gli enti) e i dati aperti correlati;

• 📰 “Come gli standard di accessibilità possono favorire una migliore progettazione visiva dei grafici”, Kent Eisenhuth su Smashing Magazine;

• 🗺️ Copernicus Interactive Climate Atlas, per esplorare, analizzare e visualizzare le informazioni sui cambiamenti climatici passati e futuri;

• 🎓 Istat promuove l’alfabetizzazione statistica e l’uso dei dati di statistica ufficiale tramite un percorso di formazione con tre webinar e materiali su MOOC;

• 🧮 Climate Pulse, aggiornamenti in tempo quasi reale delle principali variabili climatiche globali da parte del Servizio Cambiamenti Climatici di Copernicus;

• 📊 Data Insights, la sezione “concisa” di “Our World in Data” per evidenziare un dettaglio importante su come sta cambiando il mondo;

• 📺 “Uscire dalla nostra bolla con dati e statistiche”, un bel video divulgativo dell'Ufficio federale di statistica della Svizzera, per promuovere il progetto "Unlocking the Power of Data Initiative" (la playlist dedicata);

• 🎓 "First Python Notebook”, una guida passo passo all'analisi dei dati con Python e Jupyter notebook ;

• 🎓 “Teaching Accessible Computing”, un libro online gratuito che aiuta gli insegnanti di informatica a integrare i temi dell'accessibilità nelle loro lezioni;

• 📺 “Come ricercare gli OpenData”, un breve video-tutorial sui dati aperti di OpenCoesione, a cura di OpenCoesione;

• 🏢 Tutti gli speech di Unwrapped, la conferenza online di Datawrapper che si è tenuta a marzo 2024;

• 📺 Le brevi presentazioni di DuckCon #4, una conferenza dedicata a DuckDB;

• 🪛 Su Datawrapper è stato abilitato l’editing collaborativo in tempo reale;

• 📊 Nuovo portale dell'ONS (l'equivalente di Istat in UK), per esplorare le statistiche “locali”;

• 🗺️ WebGIS Infratel, un nuovo portale web GIS per consultare i dati dell'infrastruttura pubblica FTTH/FWA realizzata nell'ambito del piano BUL (Banda ultra larga)

➡️ Si chiama "Confini amministrativi italiani" e l'ha realizzata Alessio Cimarelli, a cui va il nostro grazie.

🙏Se vuoi sostenerci, puoi farlo in questi modi.

Iscriviti ora

Introduzione

I dati geografici dei confini amministrativi italiani sono una risorsa fondamentale per ogni mappa dell'Italia, ma finora era possibile ottenerli ed elaborarli solo manualmente, scaricando un file zip dal sito dell'Istat. 

Questo progetto mette pubblicamente a disposizione lo storico di tutti questi dati mediante un'interfaccia moderna, standard e integrabile con qualsiasi applicazione.

Contesto

Questi dati sono rilasciati annualmente da Istat come dati aperti, nel solo formato ESRI Shapefile sotto forma di file zip da scaricare manualmente (disponibili tutti gli anni dal 2001 al 2024, più il 1991).

Questo approccio ha alcuni importanti limiti: non ne permette un uso automatico da parte di applicazioni terze, richiede una conversione di formato per costruire mappe interattive su web, non mette immediatamente a disposizione i dati locali (es. i comuni di una sola regione).

Cosa fa

Questa applicazione elabora i dati primari ufficiali, con uno script open source, che genera nuove risorse statiche messe a disposizione pubblicamente via Web API, secondo lo standard REST API, documentate da una specifica OpenAPI. 

Nel dettaglio l'elaborazione uniforma la codifica dei caratteri a UTF-8, proietta le geometrie a WGS84 World, ne corregge una serie di errori, genera tutti i livelli amministrativi locali con tutte le sotto suddivisioni, converte gli shapefile in una dozzina di altri formati moderni (GeoPackage, GeoParquet, Geobuf, JSON, ecc.) e di uso comune (PNG, SVG, WEBP, ecc.).

È possibile accedere a tutto questo, definendo anche la data di rilascio dei dati - che come detto sopra va dal 2001 al 2024, più il 1991 - scegliendo la "forma geografica amministrativa" del territorio in un determinato periodo.
Inoltre i dati sono stati arricchiti con quelli provenienti da OntoPiA e da ANPR (per quanto riguarda i comuni).

A ogni risorsa, in base al dettaglio amministrativo di interesse (regioni, unità sovracomunali o comuni), in base alla data di rilascio, e in base al formato, è associato un URL.
La struttura tipo è (non è l’unica possibile):
/{countryId}/{releaseId}/{division}/{territoryId}/{subDivision}.format

Quindi ad esempio per il file CSV, dei comuni del Piemonte (codice regionale Istat uguale a “1”), per il rilascio dati dell'anno 2023, il path relativo è /it/20230101/regioni/1/comuni.csv. L'URL per “chiamarlo” è
https://www.confini-amministrativi.it/api/v2/it/20230101/regioni/1/comuni.csv

E così, anche l'accesso machine to machine è comodissimo. Nel video a seguire un esempio di lettura diretta dei dati con GDAL (un esempio di query SQL su una risorsa in formato GeoPackage), con VisiData (la lettura diretta di un file CSV) e DuckDB (abilitando l’estensione spaziale, una query sul formato GeoJSON).

Come è stato fatto

Il progetto ha una lunga storia, ma la sua definizione nella sua forma attuale risale al 2019 nell'ambito dei lavori del Team per la Trasformazione Digitale (vedi discussione su Forum Italia).

È passato poi sotto l'ombrello dell'associazione OnData, ed è un piacere per noi rilasciare ufficialmente la sua versione 2.0 con l'interfaccia grafica di interrogazione e download mediante pagina web e l’API documentata e interrogabile.

Il codice sorgente è open source, pubblicato su GitHub.

Nota bene: è stata utilizzata la versione generalizzata meno dettagliata dei dati Istat. Lo abbiamo fatto per avere un’applicazione più “leggera”, e perché per i casi applicativi più tipici è più che sufficiente.

🏃‍♂️ Riflessioni finali

Questa applicazione è un bell’esempio di quello che può abilitare la pubblicazione e la disponibilità di dati aperti di interesse, e del valore del loro aggiornamento nel tempo.

Pensiamo debba e possa creare emulazione per le Pubbliche Amministrazioni e le organizzazioni che pubblicano dati: alzare l’asticella delle modalità in cui viene fatto.
E non serve tantissimo. Qui -semplificando un po’ - vengono esposti soltanto dei file statici, ma in modalità e formati standard e integrabili, accessibili da qualsiasi applicazione.
Qualche passo avanti ai classici download, decompressione, selezione del file e lancio di una query.

🙏Se vuoi sostenerci, puoi farlo in questi modi.

Subscribe now

👉 Se ci leggi da e-mail, fai click qui per leggerla per intero

👩‍🏫 Un workshop per scoprire come si rendono “belli” i dati

FAIR, è un acronimo inglese che sta per Findable, Accessible, Interoperable, and Reusable: trovabili, accessibili, interoperabili e riutilizzabili.
Sono carattistiche che rendono i dati “belli”, e a cui è dedicata una sezione dei “I dati che Vorrei”, a cui ti rimandiamo per un primo approfondimento.

È un concetto che ha radici profonde nel mondo scientifico, per rendere i risultati della ricerca non solo accessibili ma anche comprensibili, verificabili, replicabili e condivisibili. Dà valore a tutti i dati, anche ai dati aperti ed è infatti una delle raccomandazioni (la “3”) delle Linee Guida Open Data nazionali a cura dell’Agenzia per l'Italia Digitale (AgID).
Ma FAIR non è equivalente a Open: sebbene l'apertura dei dati sia un obiettivo desiderabile, i principi FAIR si concentrano sulla gestione e sull'uso etico ed efficiente dei dati, indipendentemente dalla loro disponibilità pubblica.

E questo importante concetto è uno dei tanti sottolineati nel workshop di Paola Masuzzo: “Dealing with FAIR data”.

È diviso in tre parti: prima un’ampia introduzione ai concetti di base, poi una che riguarda i principi FAIR in azione con esempi pratici per ciascuna delle quattro lettere e infine una serie di esercizi.
Per sviluppare quest’ultimi sono stati messi a disposizione dei file: avrai la possibilità di capire cosa sono i “tidy data” e di crearli (usando OpenRefine), e scoprirai come pubblicarli e descriverli, in modo che siano “senza attrito”, secondo le specifiche “Frictionless Data”.

Circa 120 slide, con un gran cura nei testi, nelle immagini, nel layout e nella sequenza. Una piccola/grande perla didattica, consigliata a chiunque crea, pubblica e usa dati.

🛰️ Gli Hub del progetto Copernicus

Uno dei limiti di Copernicus - il programma spaziale dell'Unione Europea dedicato all'osservazione della Terra - è sempre stato la difficoltà di capire quali vantaggi potessero offrire la moltitudine di dati e servizi disponibili, quasi sempre in modo gratuito, ai non addetti ai lavori geospaziali.

Per superare questo ed altre limitazioni sono nati gli Hub Tematici di Copernicus (Copernicus Thematc Hubs, CTHs), che mirano a raggruppare sotto un unico punto di accesso, a livello del programma Copernicus, l'insieme di dati, prodotti e informazioni generati da diversi servizi o componenti di Copernicus (incluse le componenti spaziali e in-situ) per specifiche aree tematiche o geografiche.

Per esempio il Coastal Hub di Copernicus mette a disposizione una selezione di dati di osservazione della Terra gratuiti e con licenze aperte che coprono le zone costiere europee, compresi prodotti e informazioni su aria, mare e terra che descrivono l'ambiente costiero e il complesso continuum terra-mare attraverso un'ampia serie di variabili. Nel Coastal Hub quindi troviamo dati costieri dai servizi Copernicus e dai satelliti Sentinel a sostegno dell'attuazione delle politiche ambientali, del Green Deal europeo e delle applicazioni di tipo accademico o industriale.

Lo scopo di questi Hub Tematici è soprattutto riconducibile a specifiche esigenze di politica a livello dell'Unione Europea: gli Hub devono infatti consentire al programma europeo di affrontare una serie di aspetti politici difficili da gestire attraverso un singolo servizio di Copernicus, come ad esempio questioni legate alla coerenza delle politiche o all'integrazione di elementi strategici in diverse politiche, coprendo regioni geografiche di interesse per l'Unione Europea.

Un’attività trasversale, quindi, che vuole semplificare il percorso dell'utente e facilitare l'accesso a informazioni chiave su aree di interesse selezionate per vari stakeholder, decisori politici e utenti. Queste aree comprendono tematiche identificate nel Regolamento Spaziale dell'UE e nel Green Deal, come biodiversità, salute, zone costiere, Artico, energia, Obiettivi di Sviluppo Sostenibile, patrimonio culturale, Accordo di Parigi, conformità ambientale, gestione dell'acqua, lotta agli eventi estremi e supporto allo sviluppo internazionale.

Gli Hub tematici di Copernicus in sostanza puntano a semplificare l'accesso ai prodotti esistenti di Copernicus per un dominio specifico, ed al tempo stesso migliorare il coordinamento tra progetti correlati, agevolare studi su temi specifici, fornire conoscenze e esperienze sui dati/prodotti, e mostrare integrazioni di dati attraverso casi d'uso e storie di successo.

Questi gli Hub:

• sull’Artico, https://www.arctic.hub.copernicus.eu/

• sulle zone costiere, https://www.coastal.hub.copernicus.eu/

• sull’energia, https://energy.hub.copernicus.eu/

• sulla salute, https://health.hub.copernicus.eu/

🧮 Esplorare 23 GB file CSV, come se fosse un “Excel” da 1000 righe (l’esempio dei dati di OpenCUP)

Due tra i siti che pubblicano da anni dati di grande interesse sono stati da poco aggiornati.

Uno è OpenCUP, che mette a disposizione i dati, in formato aperto, sulle decisioni di investimento pubblico finanziate con fondi pubblici nazionali, comunitari o regionali o con risorse private registrate con il Codice Unico di Progetto. La novità più importante di questo aggiornamento, è legata alla natura degli interventi in elenco: a “Lavori Pubblici” e “Incentivi alle imprese e Contributi per calamità naturali”, si aggiungono “acquisti di beni, servizi, corsi di formazione, strumenti finanziari, progetti di ricerca e contributi a entità diverse dalle unità produttive per una Pubblica Amministrazione più trasparente e vicina al cittadino” (qui la notizia di lancio).

➡️ In numeri si passa da circa 6,5 a 9,5 milioni di progetti.

Nella sezione OpenData, il nuovo file “Complessivo”: è un file CSV compresso da circa 2.9 Gigabyte, che diventano 23 GB se decompresso.
È probabilmente il file CSV più grande (o uno dei più grandi), pubblicato in una sezione open data di un sito di una Pubblica Amministrazione italiana. Non è gestibile con un comune foglio di calcolo (né con tanti altri strumenti), è troppo grande e inutilizzabile dalla gran parte degli utenti. È quasi inevitabile.
Utilizzando però delle modalità e degli strumenti “giusti”, si può esplorare, filtrare, e analizzare, con grande leggerezza e rapidità, come se fosse un “Excel” da 1000 righe.
E su questo il nostro Andrea Borruso ha scritto un tutorial dedicato, con un contributo di Matteo Fortini. Nel testo sono illustrati alcuni strumenti classici per leggere in modo molto semplice file di testo, che dovrebbero nella cassetta degli attrezzi di tutte le persone che “fanno cose” con i dati (non soltanto i “tecnici”). Ed è anche indicato come creare la versione in formato parquet, in modo da potere usare una query SQL per avere dei dati di sintesi in tempi rapidissimi su una tabella di circa 17.000.000 di righe e 90 colonne.

L’altro sito è quello di OpenCoesione, l'iniziativa di open government sulle politiche volte a garantire il rafforzamento della coesione economica, sociale e territoriale con l’obiettivo di ridurre le disparità di sviluppo fra le regioni. Nel portale sono pubblicati i dati aperti su queste politiche ed è stata aggiornata proprio la sezione open data del portale, in cui adesso è possibile consultare i dati, filtrarli e scaricarli per categoria degli interventi, ciclo di programmazione, programma di riferimento, tema e Regione. È annunciato anche il futuro utilizzo di nuovi formati di pubblicazione.

😲 Spoiler: nella prossima newsletter (salvo imprevisti), una sorpresa anche su OpenCoesione.

🔥 Il numero #2 di Liberiamoli tutti!

“Liberiamoli tutti!” è un'iniziativa della campagna #DatiBeneComune per individuare, ottenere, riformattare, pulire, documentare, pubblicare e diffondere dati di interesse pubblico.

Ne numero #2 sono stati pubblicati i dati su sugli studenti che hanno scelto di non avvalersi dell’insegnamento della religione cattolica (IRC).
Nel 2022 la campagna #DatiBeneComune aveva già collaborato con l'Unione degli Atei e degli Agnostici Razionalisti (UAAR) per la pubblicazione di questi dati, ed è importante come l’UAAR si spenda perché venga data continuità a questa azione informativa.

Il Ministero dell'Istruzione e del Merito (MIM), pubblica diversi dati aperti. Ma ancora una volta è stata necessaria una richiesta FOIA dell’UAAR per fare in modo di acquisire dati e informazioni e renderli pubblici.
Le Pubbliche Amministrazioni dovrebbero pubblicare i loro dati come dati aperti (la norma di riferimento),  e il MIM dovrebbe quindi rendere disponibili e aggiornare ogni anno anche i dati IRC nella sua piattaforma dati, senza che sia necessaria alcuna richiesta.

Infine sottolineiamo come non siano stati ottenuti tutti i dati richiesti e che sarebbe essenziale avere anche le informazioni su quali alternative all'ora di religione offra la singola scuola.

📺 Un anno di Data Book Club

Il Data Book Club è un gruppo di lettura diffuso (online) per leggere insieme libri dedicati ai dati e alla tecnologia, che ha festeggiato da poco il suo primo anno di vita.

Nasce grazie all’incontro di due “nerd” dei libri sui dati - Donata Columbro e Elena Canovi e ha il suo quartier generale su Telegram.
Mira a esplorare opere che trattano il tema dei dati con un approccio divulgativo e intersezionale, ponendo domande critiche sul modo convenzionale di discutere dati in contesti aziendali.
Non si limita a manuali tecnici, ma seleziona libri che stimolano riflessioni e dubbi.

Un aspetto distintivo del club è l'impegno a esaminare come i dati influenzano la società a diversi livelli, incluso l'impatto sulle questioni di genere, privacy, etica e governance. Questo approccio permette ai membri di sviluppare una comprensione più profonda e critica dell'uso e dell'abuso dei dati nel mondo contemporaneo.

Donata e Elena hanno festeggiato questo primo anniversario registrando un dialogo con un video “riassuntone” dei titoli scelti durante il 2023 e letti dalla community del DataBookClub:

• Data Feminism, di Catherine D’Ignazio e Lauren F. Klein (MIT Press, 2020)

• Macchine ingannevoli, di Simone Natale (Einaudi, 2022)

• Discriminating Data, di Wendy Hui Kyong Chun (MIT Press, 2021)

• Factfulness, di Hans Rosling (Rizzoli, 2018)

• Big data e algoritmi, di Teresa Numerico (Carocci Editore, 2021)

• La matematica è politica (Einaudi, 2020) + La tecnologia è religione (Einaudi, 2022) di Chiara Valerio

• Gender Tech, di Laura Tripaldi (Laterza, 2023)

🤫 Sta arrivando anche nei portali italiani il formato parquet …??

Come ha scritto Éric Mauvière a dicembre del 2022 “Parquet dovrebbe sostituire il formato CSV”. Offre vantaggi significativi rispetto al CSV in termini di dimensioni del file, velocità di lettura e gestione dei tipi complessi dei dati.

Il CSV (come accennato sopra per i dati OpenCUP) è un formato file, che per file molto grandi, costituisce una grande barriera all’uso. Se è usato per stimolare e abilitare l’utilizzo da parte degli utenti, dovrebbe essere sempre accompagnato da uno schema dati leggibile meccanicamente che ne consenta la trasformazione in formati adatti alla gestione di grosse banche dati (sarebbe già una gran cosa, di grande usabilità per tutti, uno schema SQL).
E in tanti contesti, specie appunto per file di dimensioni importanti, il formato parquet sta diventando il formato di pubblicazione di dati aperti.

Anche in Italia si vedono i primi segnali: il portale Open Data del Comune di Bologna rende disponibili tutti i dati anche in formato parquet. Ce lo ha segnalato Francesco Paolicelli (grazie), mostrandoci il contenuto del catalogo/indice delle risorse del portale.

È ancora un’evidenza nascosta dietro le quinte, ma qui ad esempio è disponibile un file relativo a dei dati elettorali.
Se non sai come aprire un file parquet, puoi usare il comodo TAD, un visualizzatore gratuito e open source, per aprire file CSV, Parquet e database SQLite e DuckDb (sotto un esempio del file di sopra).

Se vuoi fare un query SQL live, puntando direttamente all’URL del file - perché è come avere delle API - puoi usare la shell web di DuckDB: ecco un esempio per avere un “summary” con le caratteristiche di questo file.

🔧 Se vuoi raccontare, rendicontare, mostrare, “cose”, pubblicare, a partire dai dati, hai degli strumenti magnifici

È un momento di maturità importante per gli strumenti per analizzare, condividere, riprodurre, storie da raccontare con i dati. Sono molto belli, ben documentati, in pieno e costante sviluppo e spesso con delle belle comunità alle spalle.
Qui te ne segnaliamo quattro. Ognuno meriterebbe un numero intero di newsletter, ma qui vogliamo essere sicuri che non te ne sfugga nessuno.

1️⃣ Il primo è Quarto - “Un sistema di pubblicazione scientifica e tecnica open-source” - in cui scrivi le tue storie in Markdown o partendo da un Jupyter notebook, per creare contenuti dinamici con Python, R, Julia, e Observable. È basato su Pandoc.
Potrai creare articoli scientifici, siti web e blog, libri in ePub, docx e PDF, presentazioni, con indici, citazioni, riferimenti incrociati, callout, dashboard e altro ancora.
È installabile su qualsiasi sistema operativo, e ha una comoda estensione per Visual Studio Code, per scrivere i propri progetti.
Visti i linguaggi che supporta, non ci sono limiti alle possibili fonti dati.
Ha una documentazione incredibile e una comunità molto attiva e reattiva. Il web è pieno di video con presentazioni e tutorial a tema: per chi inizia consigliamo questo.

2️⃣ Il secondo è Evidence - “un framework leggero per la creazione di applicazioni data based” - per la creazione tramite SQL di “storie”, report, dashboard, un'alternativa basata sul codice agli strumenti visuali di business intelligence in drag-and-drop.
Il modo più semplice per usarlo (e anche installarlo) è l’estensione Visual Studio Code dedicata.
Anche qui la modalità di scrittura principale è il testo in Markdown, mentre SQL è la modalità principale per “lavorare” i dati che si vogliono raccontare.
E ancora una volta, ha una documentazione molto ricca e leggibile.
Ha una ricca lista di tipologia di fonti dati e di componenti per creare grafici e altri elementi visuali.

3️⃣ Il terzo è marimo, un notebook Python con celle “reactive”, che consente di lavorare rapidamente con dati e modelli, di produrre notebook come pipeline o applicazioni web interattive.
Il formato dei file è un normale file Python e questi file possono essere eseguiti come "applicazioni", oltre a essere modificati nel blocco note. L'interfaccia è molto ben costruita, soprattutto per un progetto così giovane.
La novità forse più interessante è proprio quella delle celle “reactive”: se si modifica il valore o il codice di una cella (o si modifica il valore di un widget di input), tutte le altre celle che dipendono da quel valore si aggiornano automaticamente. E - come in Observable - non importa quale sia l’ordine delle celle.
Ha anche lui un’estensione Visual Studio Code, e una buona documentazione.

4️⃣ Il quarto è Observable Framework, che nasce perché (è il suo claim) “Le miglior dashboard sono costruite con il codice”.
Per creare applicazioni, dashboard e report di dati, veloci e belli, dalla riga di comando. Scrivendo in Markdown, JavaScript, SQL, Python, R... e qualsiasi altro linguaggio. Gratuito e open-source.
Il framework include un server per visualizzare in anteprima lo sviluppo fatto sul proprio PC e un'interfaccia a riga di comando per l'automazione di build e deploy.
Ci piace moltissimo l’idea dei loader dei dati, ovvero dei componenti che si possono scrivere in ogni linguaggio, per rendere disponibili i dati da usare negli output visuali da creare.
In output un sito statico. È tutto costituito da file, si può usare l'editor e il sistema di controllo di versione preferiti, condividere il codice con altre applicazioni e ospitare i progetti ovunque.
Include temi, griglie visuali e librerie per creare visualizzazioni leggibili da qualsiasi dispositivo, tra cui Observable Plot, D3, Vega-Lite, Graphviz, Mermaid, Leaflet, KaTeX (e per lavorare con i dati, Arquero, DuckDB e SQLite).
Bellissima la documentazione, ed è molto bella la procedura di “Get started” che ti porta a creare, visualizzare e modificare il primo esempio di output.

Tanti punti in comune tra (quasi) tutti questi straordinari strumenti: l’utilizzo del Markdown, la documentazione di qualità, il sottolineare quanto sia essenziale il “bel vedere” e la struttura per raccontare bene storie.
E come sottolineato nel workshop di Paola di inizio newsletter, l’importanza di poter mostrare, condividere e testare il processo di analisi fatto, per produrre la storia, la dashboard, il report, ecc..

📊 Il Bilancio di Stato 2024

Per il sesto anno i Copernicani presentano la visualizzazione percettiva del Bilancio di Stato 2024: navigazione e ricerca semantica negli oltre 1.200 miliardi di spesa pubblica con grafica interattiva, basati sugli open data del Ministero dell'Economia e delle Finanze.

Strumenti/risorse

• 📄Il profilo DCAT-AP per i dataset di alto valore.

• 🤣 “Gli amici non lasciano fare brutti grafici ai loro amici”, un saggio sulle buone e cattive pratiche di visualizzazione dei dati.

• 🔧 “Voici”, per convertire un notebook Jupyter in una dashboard interattiva (è un po’ il quinto della lista di sopra).

• 👩‍🏫 “Che differenza c'è tra il formato dati Wide e Long?” In questo video Alli Torban ce lo spiega in maniera semplice.

• 🧮 “Human Climate Horizons” (HCH), una piattaforma di dati e insights che fornisce informazioni localizzate sugli impatti futuri del cambiamento climatico su diverse dimensioni dello sviluppo umano e della sicurezza umana.

• 🗓️ Il “Data Research Camp”, un meeting di 4 giorni del Dipartimento di Statistica, Informatica, Applicazioni dell'Università di Firenze che si terrà a Firenze, dal 15 al 18 luglio 2024.

• 📊 Il report sulla qualità della vita nelle città europee, con mappe interattive, dati, questionari usati e PDF.

• 📚 Analisi dei dati del censimento degli Stati Uniti: metodi, mappe e modelli in R.

• 🎓 “2024 Cohort”, una borsa di studio estiva rivolta a studenti universitari o laureati in corso o neolaureati.

• 📊 “History of Data Visualization”, delle belle slide a tema, a cura di Michael Friendly

• 📺 “Presentazione Indice di Percezione della Corruzione”, a cura di Transparency International Italia.

• 🔧 “Shiny Express”, per rendere significativamente più facile iniziare a lavorare con Shiny.

• 📊 Datawrapper, il popolare tool web di data visualization, ha aggiunto il supporto agli small multiple line charts.

• 🧮 Sulla Piattaforma Nazionale Adattamento, sono disponibili i dati utilizzati per la definizione del “Piano Nazionale di Adattamento ai Cambiamenti Climatici”.

• 📄 AGID ha pubblicato il nuovo piano triennale per l'informatica nella PA 2024-2026, una sezione è dedicata alle azioni in tema di Open Data e Data Governance.

• 🧮 Tutte le organizzazioni francesi coinvolte nella distribuzione di elettricità e gas, uno sportello unico per i dati correlati.

• 📺 I webinar dell’European Master in Official Statistics - EMOS.

• 🔍 Un'inchiesta di Bloomberg svela come le compagnie energetiche abbiano tratto vantaggio dal lockdown durante l'emergenza COVID19.

• 📊 “Disuguaglianze nella mortalità per causa in Italia secondo caratteristiche demografiche, sociali e territoriali - Anno 2020”, a cura di Istat.

• 📖 “Code for Germany”, cura un gran bello spazio informativo. Questo post è un ottimo esempio.

🙏Se vuoi sostenerci, puoi farlo in questi modi.

Ma soprattutto buon 2024.
Noi staremo sul tema del valore che i dati aperti di qualità possono avere per le persone, con l’obiettivo di farlo diventare sempre di più un argomento di interesse generale: in modo che si possa essere sempre di più a chiedere di pubblicarli e manutenerli, ma soprattutto a utilizzarli per fare cose utili e/o divertenti e/o con un impatto positivo su di noi.

Subscribe now

👉 Se ci leggi da e-mail, fai click qui per leggerla per intero

📖 L’importanza di pubblicare Linee Guida in formato HTML

Alcuni anni fa il governo inglese avviava diverse iniziative importanti e pubblicava raccomandazioni per avere dati e documenti aperti e accessibili disponibili a un pubblico vasto. Sebbene con il tempo quel governo si sia un po' spento su certi fronti, è pur vero che online si trovano ancora articoli e raccomandazioni che riteniamo importanti evidenziare e che ci auspichiamo vengano un po' più adottati anche nel nostro paese. È questo il caso dei documenti pubblicati online in formato HTML da parte di istituzioni pubbliche.

Gli enti pubblici producono una mole di documenti piuttosto significativa: a volte pubblicano documenti per rendere disponibili dati, e questo è il male assoluto, ma diverse altre volte pubblicano proprio informazioni documentali come il caso dei vari documenti degli albi pretori dei comuni, oppure linee guida o ogni altro documento che indirizza tematiche di impatto sociale. Per rendere i documenti il più possibile accessibili, come si ricorda in questo articolo dal titolo (traducendolo in italiano) "Perché il contenuto GOV.UK dovrebbe essere pubblicato in HTML e non in PDF", è bene seguire una serie di accorgimenti.
Dall'articolo è nata nel 2020 la relativa guida dello stesso governo dal titolo "Pubblicare documenti accessibili". Il primo punto riguarda il formato dei documenti. Si suggerisce infatti di pubblicare il più possibile in HTML, prima di altri formati tipici documentali come il PDF.
Questo perché:

• l'HTML si presta molto bene a letture online,

• è più facile referenziare singole sezioni per esempio quando si deve enunciare un certo periodo scritto in una linea guida,

• è più facile leggerlo su dispositivi mobili in siti responsive,

• è più facile creare collegamenti tra pagine diverse che si richiamano a vicenda,

• è più facile perché è il formato naturale per l'accesso via Web.

Di contro, leggere un PDF online diventa più difficile: su dispositivi mobili si deve a volte ingrandire, spostandosi continuamente lungo lo schermo, se ci si deve riferire a un passaggio del documento con un interlocutore si è costretti necessariamente a indicare il numero della pagina e il numero di sezione in un testo scritto, senza poter incollare il link diretto alla sezione in questione, è più difficile tracciare quanti utenti hanno interagito con il file PDF,

Anche in Italia, in questo senso, sono stati fatti passi da gigante anni fa. Ai tempi dell'allora commissario straordinario Diego Piacentini, fu introdotta la piattaforma docs.italia. La piattaforma, si legge sul sito relativo, "è un servizio a disposizione delle Pubbliche Amministrazioni per pubblicare documenti tecnici e amministrativi, e offre ai cittadini la possibilità di leggere e commentare documenti pubblici ed essere informati sull’andamento dei progetti". Tutto questo attraverso strumenti di navigazione noti ormai a (quasi) tutti, rendendo il documento scaricabile anche in altri formati preferiti, tra cui il PDF.
Grazie anche all'uso di docs.italia vengono messe a disposizione, in bozza, linee guida così che utenti possano poi contribuire in fase di consultazione pubblica. Insomma, una piattaforma molto utile per l'accesso digitale ai vari documenti della pubblica amministrazione.

Docs.italia è stata usata negli anni anche per la pubblicazione delle linee guida sulla valorizzazione del patrimonio informativo pubblico, sia in versione bozza che nella loro versione stabile, e per le recenti linee guida open data, presentate l'anno scorso attraverso quella piattaforma per dare il via alla consultazione pubblica (qui le note che riportammo). Purtroppo però, disponibile in HTML è rimasta solo la bozza.

Considerando quelle linee guida particolarmente rilevanti, abbiamo chiesto ad AGID, titolare del documento, di rendere disponibile anche la versione stabile via HTML, e in altri formati tra cui PDF, sempre attraverso docs.italia. A tale richiesta, ci è stato risposto come di seguito riportato.

Non sembra esserci quindi intenzione di andare verso la direzione che il governo inglese, già diversi anni fa, auspicava per i documenti pubblici, nonostante gli strumenti per farlo esistano.
Un vero peccato, ma anche questa storia ha un lieto fine: siccome è un documento aperto e a noi piace il riutilizzo, stiamo lavorando per pubblicare in HTML la versione stabile, facilitando così la consultazione da parte di tutti!

🙃 In Italia non si buttano le “cartacce” per terra

Il titolo è scelto per attirare un po’ la tua attenzione, è un po’ una bugia, ma è una storia interessante.

Volevamo sapere, tramite richiesta al Ministero dell'Ambiente e della Sicurezza Energetica (MASE), quante sanzioni fossero state fatte in Italia per abbandono di rifiuti di piccolissime dimensioni e per quale valore.
Il riferimento è l’articolo 255, comma 1-bis del Decreto Legislativo 3 aprile 2006, n. 152:

Chiunque viola il divieto di cui all'articolo 232-ter è punito con la sanzione amministrativa pecuniaria da euro trenta a euro centocinquanta. Se l'abbandono riguarda i rifiuti di prodotti da fumo di cui all'articolo 232-bis, la sanzione amministrativa è aumentata fino al doppio.

L’articolo 232-ter citato, precisa il contesto della norma:

Al fine di preservare il decoro urbano dei centri abitati e per limitare gli impatti negativi derivanti dalla dispersione incontrollata nell'ambiente di rifiuti di piccolissime dimensioni, quali anche scontrini, fazzoletti di carta e gomme da masticare, è vietato l'abbandono di tali rifiuti sul suolo, nelle acque, nelle caditoie e negli scarichi.

Ebbene il 50% delle somme derivanti dai proventi delle suddette sanzioni sono versate in Entrata al bilancio dello Stato e successivamente riassegnate su un apposito Fondo istituito presso il MASE.

Ci aspettavamo di ricevere tante “pagine” di dati. Abbiamo chiesto i dati per ogni Comune, e invece sono arrivate 4 righe di dati per l’anno 2022 e 5 per il 2023.
Tenendo contro che si tratta del 50% delle somme e facendo riferimento alla tabella sottostante, si tratta di sanzioni pari a:

• 700,00 € per il 2022. Ipotizzando un valore di circa 50,00 € a sanzione, 14 sanzioni;

• 1440,00 € per il 2023, ovvero circa il doppio dell’anno precedente.

Se si osserva la distribuzione geografica delle sanzioni nel 2023, le regioni interessate sono soltanto 3 su 20.

Ovviamente non c’è purtroppo alcuna correlazione tra il numero di queste sanzioni e quanto osservato nella realtà delle strade: in tanti dei Comuni di Italia è pressoché impossibile passeggiare senza osservare uno o più rifiuti di piccole dimensioni abbandonati per terra.
Dalla tabella (per il 2023) emergono spannometricamente 30 sanzioni in un anno per tutto il paese (ipotizzando un valore sempre di 50 € a sanzione), mentre nella realtà in alcune città italiane si potrebbero emettere 30 sanzioni in una mattinata in una sola strada.

Sono due gli elementi che troviamo di interesse:

1. che le richieste di accesso civico generalizzato per accedere ai dati funzionano. Se ti interessano dati e le informazioni gestite dalla Pubblica Amministrazione, fai una richiesta;

2. che le norme andrebbero monitorate molto anche nella loro efficacia. Il fine di preservare il decoro urbano dei centri abitati ci sembra largamente non raggiunto.

🔥 Il numero #1 di Liberiamoli tutti!

Liberiamoli tutti è un'iniziativa della campagna #DatiBeneComune per individuare, ottenere, riformattare, pulire, documentare, pubblicare e diffondere dati di interesse pubblico.

Dopo il “numero zero”, è stato pubblicato il primo numero “ufficiale”: stavolta sono stati liberati i dati sugli edifici segnalati con presenza di amianto, gestiti dell'Agenzia di Tutela della Salute (ATS) della Città Metropolitana di Milano.
Erano intrappolati ancora una volta in un grande file PDF, pieno di pagine di tabelle non leggibili meccanicamente.

Ha chiesto di liberali Luca Rinaldi, che coordina Dossier, la sezione di inchiesta e approfondimento di MilanoToday e sono stati utili per la redazione di due articoli - "L’amianto è sparito dalle scuole di Milano?" e "Abitazioni, fabbriche e depositi: l'amianto da eliminare a Milano entro il 2032".

Ci piace quanto ci ha detto Luca:

Il valore dei dati che abbiamo liberato, o meglio, che abbiamo iniziato a liberare in questa inchiesta, è duplice: da una parte portarli in una modalità leggibile per la cittadinanza, dall’altra pungolare le istituzioni lombarde perché operino in maniera più trasparente e in coerenza con la disposizione di legge riguardo il rilascio dei dati stessi.

Se sei interessato, iscriviti alla newsletter di Liberiamoli tutti!, se vuoi segnalare o proporre dei dati da liberare, scrivi a 📧 info@datibenecomune.it.

📺 Open Science Café - Riuso dei dati: quale ruolo per la semantica

Il GARR cura da diverso tempo l’Open Science Café (qui tutte le registrazioni), per offrire alla comunità scientifica italiana un appuntamento mensile per informare e discutere di vari aspetti legati alla scienza aperta. Ogni puntata dura un'ora ed è focalizzata su un tema specifico, lasciando sempre uno spazio per la discussione.

Questo episodio è dedicato all'importanza della semantica nel contesto dei dati (aperti e non), che gioca un ruolo cruciale nell'attuazione dei principi FAIR (Findable, Accessible, Interoperable, Reusable), nell’efficacia nel produrre dati più riutilizzabili, interoperabili e accessibili.

I relatori sono la nostra cara Giorgia Lodi e Andrea Nuzzolese, entrambi del CNR. A gestire il tutto è stata la dott.ssa Elena Giglia.

L’Osservatorio Civico PNRR è stato finalmente convocato in cabina di regia PNRR

L'Osservatorio Civico PNRR - di cui facciamo parte - ha partecipato alla riunione della cabina di regia PNRR, convocata dopo la presentazione ufficiale del nuovo Piano. Si tratta di una convocazione attesa da tempo, che è arrivata grazie alle pressioni dell'Osservatorio e delle organizzazioni che ne fanno parte.

Durante la riunione, le organizzazioni hanno sottolineato l'importanza di una partecipazione stabile della società civile nell'implementazione del Piano e hanno chiesto maggiore trasparenza sulle informazioni relative all'avanzamento del Piano. Inoltre, hanno posto l'accento sulle questioni ambientali e di genere, chiedendo dati e indicatori per valutare l'impatto del PNRR su tali tematiche.

📊 Identificazione di modelli di valutazione e raccomandazioni, per iniziative sostenibili sui dati aperti

È stata da poco pubblicata un'analisi basata sul benchmarking delle iniziative di open government data tra i paesi europei. Questo documento è un elenco delle raccomandazioni per l'implementazione e il miglioramento delle iniziative di Open Government Data (OGD) e della loro valutazione.

Il governo aperto e i dati aperti del governo sono descritti da più di dieci anni come strumenti per creare nuove opportunità, eliminare o ridurre le disuguaglianze informative e migliorare i servizi pubblici.
È stata validata una lista finale di 94 modelli di benchmarking , includendo la loro frequenza e gli effetti sui rispettivi paesi e sono state definite 21 raccomandazioni, per iniziative e ecosistemi di dati aperti governativi più resilienti e sostenibili e per la loro valutazione. Tra queste:

• Rivedere e aggiornare regolarmente i portali open data, in linea con le esigenze e le aspettative degli utenti

• Sviluppare competenze sui dati aperti per diversi stakeholder e utenti attivi

• Istituire un hub nazionale per supportare la pubblica amministrazione nell'utilizzo dei progressi tecnologici

• Stabilire un'interazione e una cooperazione a lungo termine con la comunità e gli stakeholder dell'ecosistema

• Definire, aprire e mantenere dataset ad alto valore

• Considerare la qualità e la maturità dell'adempimento dei criteri, anziché usare una valutazione booleana

• Non fare affidamento solo su benchmarking e report internazionali

• L'iniziativa open data non è un processo una tantum, ma un processo continuo e in corso

• È necessaria una comprensione di chi fa parte dell’ecosistema open data di un’organizzazione, con riferimento ai suoi componenti, attori e stakeholder.

Molte di questi punti potranno sembrare ovvi e scontati. Sono molto spesso però anche inattesi. E quindi spesso si fanno valutazioni su ecosistemi “deboli” e non sostenibili.

🔧 IMAGE, per generare la mappa “giusta” per la tua “storia”

IMAGE è un generatore di mappe interattive fornito da Eurostat. Si tratta di uno strumento che consente agli utenti di creare rapidamente mappe statistiche professionali, a partire da diversi modelli predefiniti.
Possono essere generate a partire da dati Eurostat, ma anche da dati a propria disposizione; include anche una verifica finale per garantire che siano soddisfatti tutti i requisiti per ottenere una mappa perfetta e seguire le migliori pratiche.

I modelli di mappa sono basati sia sul tipo output (inserire un’immagine in un foglio A4, piuttosto che in una condivisione su un social network), che sul contesto geografico (una nazione, il continente, l’intero pianeta).
È possibile inoltre scegliere il tipo di mappa: se coropletica (come questa di sotto), se a simboli proporzionali e se categorica.
L’utente, come fatto in questo esempio, sceglierà il tema/dataset a cui è interessato, l’area geografica, quali etichette inserire, le classi di legenda, la classificazione cromatica/simbolica e il formato di download.
Qui la scelta è ampia, perché si ha il PNG, il PDF, ma anche il vettoriale SVG (ulteriormente quindi poi modificabile) e infine anche un HTML autoconsistente, che si potrà utilizzare nei propri spazi web.

Troviamo molto interessante e da emulare l’opportunità che viene data agli utenti di creare in modo rapido, semplice e anche didattico, un output di qualità da usare per raccontare una storia basata sui dati.

🧮 L’osservatorio globale della pesca

Un decennio fa, la creazione di un pannello di controllo ad accesso aperto per monitorare l'attività di pesca globale era fuori portata. Ma grazie ai progressi della tecnologia satellitare e del machine learning, Global Fishing Watch sta diventando realtà.

La salute dei nostri oceani è sottoposta a un'immensa pressione a causa dell'intensa attività umana e dei cambiamenti climatici. E nonostante la sua importanza, l'oceano rimane la parte del nostro pianeta meno osservata.

Global Fishing Watch nasce proprio per monitorala a partire da un requisito: l'attività umana in mare deve essere di dominio pubblico, deve essera “nota”. E per questo hanno creato un progetto che si propone di far progredire la governance degli oceani attraverso una maggiore trasparenza di queste attività. Creando e condividendo pubblicamente visualizzazioni cartografiche, dati e strumenti di analisi, con l’obiettivo di stimolare la ricerca scientifica e promuovere una trasformazione del modo in cui si gestiscono gli oceani.

Non conoscevamo questo progetto, che abbiamo scoperto grazie a questa interessantissma pubblicazione: “Satellite mapping reveals extensive industrial activity at sea”.
Sono stati analizzati 2 milioni di gigabyte di immagini satellitari nel periodo 2017-2021 per individuare le imbarcazioni e le infrastrutture offshore nelle acque costiere di sei continenti, dove si concentrano più di tre quarti delle attività industriali.
È emerso che il 75% dei pescherecci industriali del mondo fanno attività non note pubblicamente. Sotto ad esempio un’area del Mediterraneo, con 495.000 navi, di cui il 63% non svolge attività “note”.

I dati, il codice e ulteriori informazioni sono disponibili in questa pagina dedicata.

🪛 È uscito Visidata 3.0

VisiData è un fantastico strumento open source per esplorare e manipolare dati. Mette insieme la chiarezza di un foglio di calcolo, con l'efficienza del terminale e la potenza di Python, in una utility leggera in grado di gestire milioni di righe con facilità.

È uno strumento che consigliamo sempre e a cui abbiamo dedicato una guida in italiano. È uscita da pochi giorni la release 3.0, che regala ai suoi utenti tantissimi elementi che rendondo più facile e più “spiegato” l’utilizzo dell’applicazione. Sotto un esempio della nuova sidebar, che dà i suggerimenti di contesto: in questo caso si stava applicando un filtro tramite espressione regolare, e vengono suggerite agli utenti alcune regole di base delle regex.

Consigliatissimo!

📖 I dati sul clima possono salvare vite umane, ma la maggior parte dei Paesi non può accedervi

L'agenzia per il clima delle Nazioni Unite prevede che entro la fine di questo decennio il pianeta sarà colpito da disastri naturali significativi 560 volte all'anno.
Inoltre, i Paesi che non dispongono di sistemi di allerta precoce, come gli allarmi per il caldo estremo, registreranno un numero di decessi legati al clima otto volte superiore rispetto ai Paesi più preparati.
Entro la metà del secolo, circa il 50% di questi decessi si verificherà in Africa, un continente che ogni anno è responsabile di circa il 4% delle emissioni mondiali di gas serra.

Sono alcuni dei punti del report pubblicato dall’Organizzazione meteorologica mondiale (la WMO).

Da questo emerge come appena il 23% dei Paesi, utilizza i dati climatologici per informare sui potenziali rischi per la salute legati al clima, il che significa che gran parte del mondo è svantaggiata.

Strumenti/risorse

• 📺 La playlist dei video degli interventi di “State of the Map Europe 2023”.

• 📅 Unwrapped, la conferenza di Datawrapper, il 14 e 15 marzo 2024.

• 🗺️ Protomaps, una mappa del mondo gratuita e open source (è molto di più, è anche modo “nuovo” di pubblicare dati cartografici).

• 📖 “European Drought Risk Atlas”, una pubblicazione del JRC Publications Repository sull'Atlante europeo del rischio siccità.

• 📰 Un articolo che come le “note” della comunità su X/Twitter non riescano a combattere la disinformazione sulla guerra Israele-Hamas.

• 📖 Le tendenze geospaziali del 2023.

• 📖 The State of Open Data 2023, giunto all'ottava edizione, è la più lunga analisi degli atteggiamenti e delle esperienze dei ricercatori nei confronti dei dati aperti.

• 📰 Un post su come l’open source intorno all'intelligenza artificiale, al cloud e a Git sta cambiando l'esperienza degli sviluppatori.

• 📰 L’intersezionalità che manca ai dati sulla violenza di genere: dove sono le donne disabili? Donata Columbro su La Stampa.

• 🔧 Pubblicata la versione 6.10 di Miller, uno strumento molto comodo per leggere, trasformare e analizzare file di testo strutturati.

• 📖 Il nuovo Open Data Maturity Report 2023.

• 👨‍💻 Il calcolo del “volto medio” a partire da un insieme di foto.

• 📺 “Cosa abbiamo guardato?” I dati sugli show più visti su Netflix nel primo semestre 2023. Scaricabili qui.

• 🗺️ 15 min City, per capire se in un città i cittadini possano soddisfare le loro esigenze personali viaggiando a non più di 15 minuti di distanza dalla loro casa in bicicletta o a piedi.

🙏Se vuoi sostenerci, puoi farlo in questi modi.

Subscribe now

👉 Se ci leggi da e-mail, fai click qui per leggerla per intero

🙌 “Liberiamoli tutti!” un progetto sul valore dei dati

Il 9 novembre 2023 noi di onData, insieme a ActionAid Italia e Transparency International Italia, abbiamo lanciato un progetto che ci piace tanto: “Liberiamoli tutti!”.

Liberiamoli tutti!

È un'iniziativa della campagna #DatiBeneComune per individuare, ottenere, riformattare, pulire, documentare, pubblicare e diffondere dati di interesse pubblico.
Questa campagna ci ha fatto scoprire che molti sono inaccessibili alle persone e alle comunità che ne hanno più bisogno: non sono mai stati resi pubblici, sono pubblicati in formati di difficile utilizzo, o senza la documentazione necessaria per interpretarli correttamente.

“Liberiamoli tutti!” è una newsletter mensile, a monte della quale c’è un’esigenza, un’opportunità, un interesse che si potranno sviluppare meglio soltanto se certi dati saranno resi più leggibili, utilizzabili, accessibili e meglio descritti.

I dati liberati nel numero zero, sono quelli del "Cruscotto statistico giornaliero" del Ministero dell’Interno, a tema "sbarchi e accoglienza dei migranti". Al momento sono pubblicati soltanto in decine di file in formato PDF, non sono leggibili meccanicamente.

Abbiamo allora estratto da quei PDF i dati su (maggiori dettagli qui.) sbarchi giornalieri delle persone migranti, accoglienza per regione e nazionalità.

E abbiamo attivato anche due azioni:

• fatto una segnalazione al Difensore Civico per il Digitale, per dati pubblicati in modalità non adeguate a norme e linee guida correnti;

• fatto richiesta al Dipartimento per le Libertà civili e l'Immigrazione, che si occupa di questi dati, di pubblicarli anche in formato leggibile meccanicamente (come CSV, XML o JSON).

👏 “Sesso È Potere”

Per il terzo anno consecutivo pubblichiamo il report “Sesso è Potere” che indaga quali siano le diverse opportunità di accesso ai ruoli di comando per gli uomini e le donne. Il tema del dossier è il potere. Il rapporto aiuta infatti a capire chi lo detiene e chi è in grado di esercitarlo in Italia.

Leggi il report

La risposta è molto semplice: il potere è in mano agli uomini

L’analisi si basa sui dati, resi pubblici e accessibili online, da Governo italiano, Amministrazioni Regionali, Società quotate in Borsa, Ambasciate, Gruppi Bancari, Atenei ed Enti di Ricerca. 

Data la scarsa qualità e il mancato aggiornamento di molti database, il gruppo di ricerca ha dovuto integrare e ricomporre con ricerche aggiuntive le informazioni disponibili. Ad esempio, le informazioni relative agli enti di ricerca pubblici, sul sito del MIUR, non risultano aggiornate. Basti considerare che alla presidenza del CNR risulta ancora Massimo Inguscio, che è stato sostituito da ben più di due anni, dal 12 aprile 2021 per precisione, da Maria Chiara Carrozza.

La nostra analisi mostra come lo squilibrio di potere sia enorme, trasversale, endemico. Ogni settore della vita politica, economica, culturale e sociale del Paese, è gestito da uomini.

👉 “Prendersi cura” è uno dei modi più efficaci per cambiare le cose e per questo noi di onData ringraziamo moltissimo info.nodes, che per il terzo anno ha curato la pubblicazione di questo report e ci ha coinvolti ancora una volta nel realizzarlo.

📰 Come si contano i femminicidi in Italia

Nel numero #26 della nostra newsletter abbiamo raccontato di nuove modalità con cui Ministero dell’Interno ha iniziato a pubblicare dati su omicidi volontari e violenza di genere. E quei dati sono una delle tappe del viaggio informativo che fa Donata Columbro su L’Essenziale, nel suo articolo su come si contano i femminicidi in Italia.

Il termine "femminicidio" è entrato nel vocabolario italiano solo nel 2001, con l'Istat che ha iniziato ricerche periodiche sulla sicurezza delle donne dal 2006. Prima di allora, il termine utilizzato era "uxoricidio", limitato all'uccisione della donna in quanto moglie​.
La sfida nel monitorarli risiede nell'assenza di un database istituzionale e pubblico che registri sistematicamente questi crimini.
Il conteggio sistematico è vitale per comprendere l'entità e la natura di questa violenza. L'Agenda 2030 dell'ONU, ad esempio, include l'obiettivo di misurare questo fenomeno in modo omogeneo a livello mondiale.

Il database dell'osservatorio "Non una di meno" offre una delle risorse più complete per monitorare i femminicidi in Italia (grazie), fornendo dati alternativi o complementari a quelli ufficiali e contribuendo a stimolare il dibattito su questo grave problema.

Ci sembra essenziale questa frase di Donata:

Si rinnova il sito di RISVO

Grazie alla campagna datiBeneComune, quando chiedevamo la pubblicazione di dati sul COVID19, abbiamo conosciuto il progetto RISVO e le persone che se ne prendono cura.

L’obiettivo è quello di informare i professionisti della salute, divulgare i vantaggi offerti dalla condivisione dei dati statistici aggiornati relativi al rischio infettivo, comunicare alla cittadinanza quali siano i vantaggi dell’Open Science e i progressi dell’adozione di pratiche scientifiche e di ricerca aperte con benefici e ricadute per la società, coinvolgere esperti e addetti della ricerca per la promozione dei dati aperti.

Abbiamo realizzato con loro diversi momenti di confronto, e ci fa piacere segnalare qui il rinnovo del sito dedicato.

🎙️ Open Data Cafe' podcast

L'Unione Europea, col suo portale a tema dati ha da poco inaugurato un podcast in sei puntate dal titolo Open Data Cafe, che mira a diffondere conoscenza sul tema dei dati aperti/open data.

In ogni episodio, un esperto discute di un argomento specifico: i concetti fondamentali, la rilevanza dei dati aperti nella società, le applicazioni pratiche in diversi settori e, tra le tante cose, il ruolo che può avere l'intelligenza artificiale.

Sono usciti due degli episodi (gli altri seguiranno presto) e li consigliamo vivamente, anche perché è una bellissima iniziativa da parte di una grande istituzione, e, crediamo, un ottimo esempio di servizio ai cittadini.

🧮 Istat pubblica nuovi dati sulla popolazione italiana

Recentemente, Istat ha pubblicato dei nuovi dati sulla popolazione italiana partendo da quelli relativi al censimento permanente su base regionale fino al 2021 sottoforma di Data warehouse tematico consultabile online oppure attraverso lo strumento Esplora Dati con rappresentazioni tabellari e grafiche. I dati sono anche esportabili in formato Excel e CSV.

Un altro aggiornamento interessante riguarda le statistiche sperimentali sulle previsioni demografiche comunali che coprono il periodo dal 1° gennaio 2022 al 2042. Queste previsioni, sviluppate dall'Istat, sono essenziali per la pianificazione in vari settori, tra cui sanità, previdenza, urbanistica e molto altro. È importante tenere presente che, specialmente nel lungo termine, queste previsioni possono essere soggette a incertezze dovute alle specifiche ipotesi demografiche. I dati sono direttamente scaricabili in formato CSV dal sito dedicato (sezione "Download") per tutte le Province e Comuni sopra i 5mila abitanti.

ANAC: aperta consultazione pubblica sulla Piattaforma della Trasparenza

L'Autorità Nazionale Anticorruzione (ANAC) ha avviato una consultazione pubblica riguardante la Piattaforma della Trasparenza.

L'obiettivo della Piattaforma è quello di centralizzare e semplificare l'accesso ai dati che le amministrazioni sono obbligate a rendere pubblici secondo il decreto legislativo 33/2013.
È una norma fondamentale, perché riguarda quanto pubblicato nella sezione Amministrazione Trasparente di ogni sito della Pubblica Amministrazione.

E questa è una buona occasione per dare un contributo con suggerimenti e note sugli schemi di pubblicazione di questi dati, al fine di rendere più facile per i cittadini e per gli altri portatori di interesse accedere alle informazioni, riducendo gli oneri amministrativi e promuovendo una maggiore trasparenza.

⚖️ Rinnovato il sito web di Normattiva

Normattiva è uno strumento essenziale per molte delle nostre attività associative. È un progetto finalizzato all'erogazione di un servizio affidabile, gratuito e completo di informazione sulle leggi italiane.
Che consente ad esempio di fare una segnalazione a un responsabile della trasparenza, citando un articolo specifico di una norma, e fornendogli il collegamento alla pagina dedicata all’articolo (come, ad esempio, l’articolo 6 del Decreto Legislativo 24 gennaio 2006, n. 36).

Da fine ottobre il sito si è ulteriormente rinnovato e migliorato: la visualizzazione responsive degli atti, la funzione "visualizza atto intero", la possibilità di avviare il download di un atto nei formati XML, HTML, EPUB e RTF e la presenza nel menù "Approfondimenti" della funzione "atti parlamentari".

📚 data.europa academy: i dati aperti nella ricerca

Il workshop è il primo di una serie e mira a fornire una panoramica completa su come i dati aperti possono essere utilizzati in modo efficace nella ricerca accademica.
Offrirà anche spunti pratici e casi di studio reali per aiutare i ricercatori a capire come sfruttare al meglio questa risorsa.

🏆 Pale Blue Dot: un concorso della NASA, sulla visualizzazione dei dati

La NASA ha lanciato un contest di data visualization chiamato "Pale Blue Dot", ancora una volta su dati relativi all'osservazione della Terra.

L’obiettivo è quello di creare una visualizzazione, che promuova almeno uno dei seguenti Obiettivi di sviluppo sostenibile (SDG):

• 2: Fame Zero

• 6: Garantire la disponibilità e la gestione sostenibile dell’acqua e dei servizi igienico-sanitari per tutti

• 13: Azione per il clima

📺 I meravigliosi video dell’ultimo convegno della North American Cartographic Information Society (NACIS)

Tra noi di onData c’è un amore diffuso delle mappe, come strumento di analisi e racconto.

La NACIS è un’organizzazione che si spende perché la cartografia sia usata al meglio a questo scopo. Lo fa in diversi, ma lo esprime al massimo con il suo convegno annuale.

👉 Anche quest’anno hanno reso disponibili le registrazioni dell’evento e ti consigliamo di andare a curiosare. C’è molto di più di “come faccio a fare una super mappa”, c’è molto di più di “semplici” tutorial.
C’è l’opportunità di crescere.

🗺️ Una dashboard sul clima e le risorse idriche in Italia

Negli ultimi trent’anni il livello di disponibilità idrica sul territorio nazionale, ovvero la differenza fra l’afflusso liquido totale al suolo e l’effettivo livello di evaporazione e traspirazione delle acque, si è ridotto del 20 per cento (dati ISPRA), a causa soprattutto dei cambiamenti climatici in atto: un chiaro segnale della necessità di un approccio sistemico a tutela dell’ambiente e di una gestione sostenibile di una risorsa vitale come l’acqua.

È questo l’obiettivo centrale del progetto “Lungo le vie dell’ACQUA: Ambiente, Cultura, Qualità di vita per Educare alla Cittadinanza Globale”, co-finanziato dall’Agenzia Italiana per la Cooperazione allo Sviluppo, che vede il Comune di Rovereto capofila e partner gli omologhi di Cuneo e Mantova, oltre a una serie di altri soggetti dei tre territori coinvolti.

Nel contesto del progetto, è stata appena lanciata una dashboard, un’interfaccia interattiva, che offre una panoramica complessiva, dettagliata e aggiornata sul rapporto tra clima, risorse idriche e cittadinanza in Italia.
La dashboard, infatti, non si limita agli aspetti ambientali, ma considera anche il rapporto tra l’acqua pubblica, le politiche delle amministrazioni locali e il ruolo dei cittadini.

È un ottimo esempio di quello che è possibile fare con i dati aperti.

🔧 Sta per arrivare VisiData 3.0

VisiData - il coltellino svizzero per i dati - è uno strumento che consigliamo e amiamo molto. E a cui abbiamo dedicato una guida.

Saul Pwanson, il suo creatore, ha annunciato qualche giorno fa della prossima uscita della versione 3.0. Tante novità, tra cui una nuova barra laterale, un modo molto più rapido e comodo di lanciare un comando, i temi per personalizzare l’interfaccia, e tanto altro.

🫶 Piccole soddisfazioni

Per segnalare fatti, cose e persone, che ci hanno restituito piccole soddisfazioni

Stavolta sono monotematiche, e tutte nel contesto di un corso sui dati aperti sviluppato presso l’Istituto Tecnico Gastaldi Abba di Genova (le belle slide del corso):

1️⃣ il ringraziamento di Nicola Vallinoto:

un grazie enorme ad Andrea Borruso di onData che ci ha fornito materiale e consigli utilissimi per la preparazione del corso sui dati aperti realizzato da Liguria Digitale e Progetto Scuola Digitale Liguria per gli studenti e le studentesse dell'istituto tecnico Gastaldi Abba di Genova.

2️⃣ Le parole del Progetto Scuola Digitale Liguria: “OnData il vostro contributo è stato senz'altro significativo per i ragazzi e le ragazze coinvolte”

Strumenti/risorse

• 🧮 Population.io del World Data Lab: riflessioni sul posto che occupiamo rispetto all'intera popolazione globale.

• 🧮 CarbonBombs, dati e visualizzazioni sui più grandi progetti di estrazione di combustibili fossili del mondo e sui loro collegamenti con aziende e banche.

• 🧮 Climate Change in Numbers, dashboard di sintesi sul cambiamento climatico by Accurat, Data4Change e UCL.

• 📓 Math for journalists, un notebook interattivo con lo scopo di aiutare i giornalisti a comprendere i concetti matematici più utili per fare giornalismo basato sui dati.

• 🖋️ Dei font, per “scrivere” grafici.

• 📓 DuckDB in WebAssembly, Un notebook observable che spiega come usare DuckDB dentro il browser.

• 🔧 Tante novità recenti per RAWGraphs, uno strumento gratuito e open source per visualizzare dati.

• 🔧 Terra, uno strumento di Istat realizzato per consentire l’analisi esplorativa di open data di fonte Eurostat sul commercio internazionale.

• 🧑‍🤝‍🧑 Journocoders, una comunità di giornalisti che si incontra mensilmente per apprendere e condividere competenze tecniche, da utilizzare nei loro report.

• 📰 Vuoi iniziare a creare visualizzazioni dei dati ma non sai da dove cominciare? Ecco un articolo della bravissima Lisa Charlotte Muth.

• 🎞️ È stato realizzato il film "A Stranger Quest" sulla figura di David Rumsey, il mitico collezionista di mappe: primo e secondo trailer.

• 📰 Come il gruppo di Flourish sta rendendo il suo tool di data visualization più accessibile.

• 📝 Una lista curata di risorse legate a DuckDB.

• 💻 Generative AI for Beginners, un corso con i fondamenti della creazione di applicazioni di intelligenza artificiale generativa.

• 📊 “Forest fires in Europe, Middle East and North Africa 2022”, l'ultimo rapporto sugli incendi nella regione pan-europea.

• 🔧 Faker: il comodissimo generatore di dati Fake.

• 📺 “Two Tier Architectures are Anachronistic”, una bellissima presentazione di Hannes Mühleisen, uno dei creatori di DuckDB (da accoppiare a quest’altra).

• 🧮 Aggiornati i dati di Overture Maps Foundation.

• 🧮 Pubblicati i contorni di tutti i 69.000 seggi elettorali francesi (e noi italiani a rosicare). Grazie per la segnalazione a Riccardo Saporiti!

🙏Se vuoi sostenerci, puoi farlo in questi modi.

Sostienici

👉 Se ci leggi da e-mail, fai click qui per leggerla per intero

🪴 Il piacere di vedere germogliare quanto seminato

Per un'associazione come la nostra è molto bello quando quello che si semina produce dei frutti.
Ed è successo con una storia che inizia nella prima settimana di luglio del 2023.
In quei giorni Nicola Vallinoto - sviluppatore software in Liguria Digitale - ci scrive un'e-mail per avere un suggerimento sulle risorse didattiche da usare per costruire un corso sui dati aperti per un istituto tecnico.
Da lì inizia un fitto scambio, in cui la parte del leone, in modo inizialmente inaspettato, la fanno:

• Il nostro vademecum sui dati aperti del PNRR;

• La nostra guida su VisiData, un'applicazione comodissima per esplorare e analizzare dati.

Nicola ci fa tante altre domande, ma soprattutto ci fa notare errori da correggere e ci dà diversi suggerimenti (grazie mille).

Finché non è arrivato il giorno in cui ci ha mostrato la presentazione che ha costruito insieme alle sue colleghe e ai suoi colleghi (Alessandro Miracca, Stefano Parodi, Franco Avran, Roberta Serafini e Cecilia Costa).
Sono 207 pagine di grande qualità, frutto di un lavoro di sintesi difficile e bello, con tanta cura nella ricerca di fonti e di costruzione di un percorso formativo, che consentisse alle persone di impadronirsi sia dei concetti teorici di base, che imparare a usare alcuni strumenti di visualizzazione, analisi, trasformazione e rappresentazione dei dati. Con un focus su VisiData e QGIS e con il monitoraggio civico come esperienza per mettere in pratica il tutto.

Vedere citate in questo lavoro tante cose costruite da noi (in modo diretto e indiretto), vedere punti di sintesi che derivano da nostre pubblicazioni, vedere consigliata questa newsletter, ci fa un piacere veramente grande. Ci dà la bellissima sensazione di avere dato un piccolo contributo culturale.

Se sei interessato al tema dei dati aperti, questo è un prodotto didattico che ti consigliamo di mettere nella tua biblioteca.

È un lavoro di Liguria Digitale, grazie al tramite di Scuola Digitale Liguria, in collaborazione con Accademia Digitale Liguria ITS-ICT, Anpal Servizi e l’I.I.S. Gastaldi Abba di Genova, per il PCTO (Percorso per le competenze trasversali e per l’orientamento) "Open Data". L’attività si concluderà il 6 novembre con la presentazione dei progetti di entrambe le classi. I migliori verranno successivamente ripresentati durante l’evento PCTO Open Data: un esperimento di filiera scuola - lavoro, in programma il 17 novembre a Orientamenti 2023, il festival dedicato al mondo della scuola e del lavoro e alle diverse opportunità offerte sul territorio.

In ultimo un affettuoso saluto agli studenti e alle studentesse e ai docenti dell'Istituto di Istruzione Superiore Gastaldi-Abba. Con loro e con Nicola, speriamo di organizzare presto un incontro video dal vivo, in cui raccontare l'esperienza.

🪫 OpenUK e talk aperti a tema sostenibilità

Il Regno Unito, nel panorama internazionale, è un paese con diverse belle realtà quando si tratta di dati aperti e pubblici e anche scienza e tecnologia aperte.
Una di queste realtà è OpenUK, che si propone di rendere il panorama tecnologico del paese sempre più aperto e accessibile, organizzando corsi (anche per bambini), eventi, e facendo attività di advocacy.

Il 14 settembre di quest'anno si è svolto a Edimburgo (Scozia, UK) un loro evento, dedicato al tema della sostenibilità. Sono intervenute diverse personalità del mondo del pubblico e del privato, da rappresentanti del governo e delle Nazioni Unite a executive di azienda e accademici.
I talk, per essere fedeli allo spirito di apertura, sono disponibili a tutti online, fruibili a questo link.
Ti consigliamo vivamente di darci un'occhiata - naturalmente sono in inglese - ma si può chiedere a YouTube di generare sottotitoli in molte lingue.

C'è questo talk per esempio, della Chief Research Officer di OpenUK stessa, che ha parlato di efficienza energetica di diversi linguaggi di programmazione, mostrando per esempio come Python sia uno dei peggiori, il che non è molto sorprendente essendo un linguaggio interpretato ma è sempre bene tenere a mente.

🧮 ANAC aggiunge il flag “PNRR” ai dati sui bandi

Uno degli obiettivi del nostro vademecum sulle principali fonti dati PNRR della Pubblica Amministrazione Italiana, è quello di valorizzare quei dati già pubblici, ma magari poco noti, complicati da “usare”, difficili da mettere in relazione con altri dati o per i quali fosse complesso distinguere quelli correlati al PNRR dagli altri.
Per quest’ultimo punto una soluzione classica è quella di aggiungere un flag, ad esempio una colonna in una tabella con i valori 0 e 1 (ovvero “no” e “sì”), per indicare se una certa riga è associata al PNRR.

Da qualche settimana lo ha fatto l’Autorità Nazionale Anticorruzione (ANAC), per i dati sui bandi di gara, che sono probabilmente quelli più scaricati della loro banca dati. È possibile, grazie alla nuova colonna FLAG_PNRR_PNC, applicare un filtro a questi dati e ottenere soltanto quelli relativi al Piano Nazionale di Ripresa e Resilienza (PNRR) o del Piano Nazionale per gli investimenti Complementari al PNRR (PNC).

👉 NOTA BENE: Il flag è valorizzato dal 2023, sulle risorse incrementali del dataset “CIG aggiornamenti delta”.

Questa novità è visibile anche nella dashboard interattiva realizzata da ANAC, per esplorare i dati della “Banca Dati Nazionale dei Contratti Pubblici”: nell’interfaccia è presente un menu a tendina per applicare il “flag” PNNR/PNC come filtro.

In ultimo sottolineiamo che il 3 ottobre 2023 l’ANAC ha pubblicato due nuovi dataset a tema PNRR:

• Indicatori PNRR/PNC

• Misure premiali PNRR/PNC

Il primo riguarda le “quote di inclusione” ed eventuali deroghe alla norma sulle pari opportunità, per i bandi di gara che utilizzano fondi PNRR/PNC (art. 47 del decreto 77 del 31 maggio 2021).
Il secondo riguarda l’elenco delle misure premiali che attribuiscono un punteggio aggiuntivo all’offerente o al candidato, per i soli bandi di gara che utilizzano fondi PNRR/PNC e che presentano ulteriori misure premiali nell’avviso o nell’invito.

Abbiamo contribuito a “spingere” per la pubblicazione di questi dati e ci fa piacere vedere gli esiti del lavoro a tema da parte dell’Autorità.

🛠️ L’hackathon del progetto WHOW

Il progetto WHOW – Water Health Open knoWledge, sull’apertura dei dati sulla qualità delle acque marine, superficiali e per il consumo umano, e su parametri di salute, è alle battute finali e organizza un hackathon conclusivo per valorizzare i dati aperti ora disponibili.

L’hackathon si terrà il giorno sabato 18 novembre 2023 dalle 9:00 alle 19:30. Sarà sia in presenza, presso Regione Lombardia - palazzo Pirelli in via Filzi 22 Milano, ma potrà essere seguito anche online via streaming. Per parteciparvi in entrambe le modalità è necessario registrarsi. La registrazione rimarrà aperta fino al giorno prima dell’evento.

Il tema dell’hackathon, pensato per ospitare anche partner europei, è "Water is life: Knowing it for a Better Future". Vari team saranno chiamati a sviluppare idee ma anche vere e proprie soluzioni software per rispondere ad alcune sfide che i partner del progetto hanno scelto. Nello specifico, sono quattro le sfide individuate:

• Riutilizzo dei dati aperti di WHOW. Progettare o progettare e sviluppare qualsiasi tipo di riutilizzo del dato (e.g., una data viz, delle mappe, delle vere e proprie applicazioni). Per facilitare la sfida, strumenti per l’interrogazione dei dati verranno spiegati e messi a disposizione dei partecipanti dai mentor dell’hackathon.

• Sviluppare API REST semanticamente arricchite. La sfida ha lo scopo di progettare API di tipo REST che siano ben documentate attraverso schemi di API semanticamente arricchiti con i riferimenti alle ontologie (o modelli semantici dei dati) sviluppate nel progetto WHOW. L’idea è quella di agire secondo quanto richiesto nell’ecosistema di interoperabilità italiano e proporre i risultati di questa sfida per l’inclusione nel catalogo nazionale della semantica dei dati, schema.gov.it.

• Multilinguismo. Massimizzare il riutilizzo, anche in un contesto transfrontaliero, significa fornire risorse multilingua, comprensibili da un pubblico vasto. La sfida ha lo scopo di arricchire le risorse aperte messe a disposizione con ulteriori risorse multilingua. Questo, per esempio, può essere fatto estendendo la pipeline di produzione del dato aperto di WHOW con l’uso di servizi esterni di traduzione.

• Sfida speciale. Una sfida aperta: si usa la fantasia per arricchire e usare i dati aperti del progetto WHOW.

Quanto prodotto sarò pubblicato su piattaforma GitHub del progetto e i team vincitori saranno annunciati nei siti web istituzionali delle pubbliche amministrazioni coinvolte in WHOW.

Per ulteriori informazioni sul programma della giornata e sul link per lo streaming, suggeriamo di seguire i canali di comunicazione di WHOW linkedin e sito web.

👉 Noi di onData ci saremo!

🎓 L’Università degli Studi di Milano è il primo Ateneo lombardo a contribuire a Open Data Lombardia

L’Università degli Studi di Milano è il primo Ateneo lombardo a contribuire a Open Data Lombardia, il portale di Regione Lombardia che espone, in formato aperto, i dati delle pubbliche amministrazioni del territorio lombardo a cittadini, imprese ed enti, in linea con il Piano Triennale per l’Informatica nella Pubblica Amministrazione (2022-2024), strumento essenziale di promozione della trasformazione digitale del Paese.

Il risultato è frutto di un accordo con Regione Lombardia, su iniziativa della Direzione Performance, Assicurazione Qualità, Valutazione e Politiche di Open Science, in collaborazione con la Direzione ICT.

La Statale è dunque presente su Open Data Lombardia con una propria sezione “Università degli Studi di Milano – Pubblicazioni”, facilmente reperibile selezionando la categoria “Università e ricerca” o attraverso il motore di ricerca del portale, e con un dataset che raccoglie le pubblicazioni scientifiche degli ultimi cinque anni inserite nell’applicativo AIR (Archivio Istituzionale della Ricerca).

l dataset, la cui creazione ha impegnato le Direzioni dell’Università Statale per un semestre, sarà aggiornato mensilmente, in attesa del caricamento automatico dei dati in programma nei prossimi mesi, grazie all’interoperabilità dei sistemi informativi tra pubbliche amministrazioni.

🗣️ A proposito dei dati aperti su Omicidi volontari e violenza di genere: l’importanza di dialogare con la PA

Nel numero #26 della nostra newsletter ti abbiamo raccontato che il Ministero dell’Interno ha pubblicato finalmente anche in formato (potenzialmente) adatto all’analisi i dati del report settimanale su “Omicidi volontari e violenza di genere” (in formato CSV).

Abbiamo valutiamo molto positivamente la cosa, ma facevamo notare l’opportunità di pubblicare altri dei dati (al momento soltanto leggibili a schermo nei file PDF) e di pubblicare meglio i file in formato CSV.
Su questi due punti abbiamo scritto agli uffici che si occupano nella loro pubblicazione e abbiamo avuto una prima risposta nei fatti: il file CSV del report non contiene più tante delle criticità segnalate.

Lo sottolineiamo per evidenziare il valore e l’opportunità di dialogare con la Pubblica Amministrazione. Su questi dati continueremo a farlo con il Ministero.

🚩 Alcune segnalazioni/richieste che abbiamo fatto

1️⃣ In Italia vale il cosiddetto Open by default: “i dati e i documenti pubblicati dalle Pubbliche amministrazioni, senza un'esplicita licenza d'uso che ne definisca le possibilità e i limiti di riutilizzo, sono da intendersi come dati aperti”. E questo lo spiega il filmato pubblicato dal Ministero dell’Interno nel 2017, che però - un po’ paradossalmente - è pubblicato con una licenza non aperta, la CC-BY-NC-SA, che non consente l’uso commerciale.
Abbiamo allora segnalato la licenza inadeguata al Difensore civico per il digitale, che l’ha valutata “ricevibile” e che sta “dialogando” con il Ministero per risolvere la cosa.

2️⃣ L’Agenzia delle Dogane e dei Monopoli cura una pagina con dei report sul gioco legale in Italia: gli ultimi dati sono del 2019 e “intrappolati” in file PDF. Abbiamo chiesto di aggiornarla con le informazioni sugli gli anni mancanti, e di pubblicare i dati anche in formato leggibile meccanicamente (ovvero delle “vere” tabelle, usabili da un’applicazione di analisi dati).

🗺️ La mappa dell’impatto degli incendi in Sicilia

Anche quest’estate la terra ha bruciato in molte aree dell’Europa. La situazione in Sicilia ha suscitato diverse reazioni da parte della stampa siciliana e nazionale, nonché pubblicazioni di associazioni e gruppi di attivisti. Ad esempio, il post di OpenDataSicilia sulle “Terre percorse dal fuoco” o l’articolo “A Palermo è stata una disastrosa estate di incendi” de Il Post.

Sono emerse diverse fonti dati - SIF (Sistema Informativa Forestale - Regione Sicilia), EFFIS (European Forest Fire Information System - Copernicus) e l’Elenco dei comuni inadempienti al catasto degli incendi - che Guenter Richter ha usato per creare una mappa per:

• mostrare l'impatto degli incendi sul territorio, “sommando” i vari eventi;

• mostrare il loro rapporto con l'uso dei rispettivi territori (parchi, zone ricreative, ecc.);

• mostrare la dinamica degli eventi (curve con incendi per anni, mesi o giorni della settimana);

• combinare la situazione storica (SIF) con quella attuale (EFFIS).

🧮 Il Tree Equity Score

Gli alberi sono infrastrutture urbane critiche, essenziali per la salute e il benessere pubblico.

Il Tree Equity Score è una metrica che aiuta a valutare il grado di copertura arborea equa, disponibile per quasi 200.000 quartieri urbani degli Stati Uniti.
Il punteggio deriva dalla copertura arborea, dai dati climatici, demografici e socioeconomici. Il punteggio varia da 0 a 100. Più basso è il punteggio, maggiore è la priorità di piantare alberi. Un punteggio di 100 significa che il quartiere ha raggiunto gli obiettivi di piantumazione di alberi.

Il Tree Equity Score di un’area è pubblicato con un indice di priorità ponderato che viene integrato nel punteggio di equità. Un indice di priorità più alto, indica una “tipologia” di popolazione più a rischio.

Nella pagina “Methods & Data” i dati, e il “data glossary”.

🧮 Dati pubblicati

👉 Iniziamo dall’aggiornamento de dati ISPRA copertura e consumo di suolo. Da due anni non rallenta più, e nel 2022 accelera bruscamente e torna a correre a ritmi che, in Italia, non si vedevano da più di 10 anni. I dati grezzi sugli indicatori li trovi qui e qui tutto il materiale di presentazione del rapporto edizione 2023. Trucchetto: noi seguiamo tutti questi aggiornamenti dei dati ISPRA, tramite il loro feed RSS dedicato.

👉 Altri dati sono quelli del progetto Cresce Bologna: uno spazio online dedicato al racconto delle iniziative e dei progetti promossi dal Comune e dalla Città metropolitana di Bologna e finanziati attraverso risorse PNRR, PON Metro 2014-2020 e FSC.

👉 In ultimo, sul portale Open Data del Comune di Bologna una mappa collegata alle nuove raccolte di dati che consentono di vedere in tempo reale la disponibilità di posti presenti nei principali parcheggi della città, con informazioni dettagliate sulla localizzazione dei parcheggi, il numero di posti a disposizione, le tariffe previste per la sosta e molto altro ancora.

👀 Il feed Bluesky, per seguire il tema dei dati aperti

Bluesky è un progetto di ricerca e sviluppo di una piattaforma social decentralizzata e aperta, basata su standard e protocolli comuni. È stato annunciato nel dicembre 2019, con l’obiettivo di creare un social network che sia più resistente alla censura, alla manipolazione e agli abusi. È ancora in fase embrionale e non ha ancora rilasciato nessun prodotto o codice sorgente.

I feed di Bluesky sono una funzionalità che consente agli utenti di personalizzare il loro flusso di contenuti in base ai propri interessi. Paola Masuzzo ha creato per onData quello per seguire il tema dei dati aperti, in diverse lingue. È molto utile per scoprire persone, progetti, attività, ecc. a tema.
È necessario un account, che al momento sono ad inviti (alcuni di noi ne hanno alcuni, se volete lasciate un commento).

🫶 Piccole soddisfazioni

Per segnalare fatti, cose e persone, che ci hanno restituito piccole soddisfazioni

1️⃣ Le belle parole di Giuseppe Sollazzo, nel numero #083 de

Sicuramente il lavoro dell’Associazione OnData, che mette insieme attivismo sui dati aperti e lavoro tecnico di qualità, si pensi ad esempio al lavoro di data processing che hanno fatto durante le ultime elezioni. La loro mailing list è una fantastica risorsa su quello che succede in Italia nell’ambito dei dati e del pubblico. Recentemente Andrea Borruso, presidente dell’associazione, ha rilasciato un bellissimo, e molto accessibile, articolo sul come usare DuckDB per l’analisi di file CSV molto grandi, che è un esempio di come rendere l’uso dei dati più facile e comprensibile per tutti.

2️⃣E , che scrive “Il lavoro pazzesco sugli open data di Associazione onData”, segnalandoci però un tema importante e per il quale ci metteremo in contatto con lui: sono pochi i dati su diagnosi HIV e IST in Italia e alcuni sono intrappolati in file PDF.

Strumenti/risorse

• 📺 Un video corso in quattro parti su Observable Plot, una libreria ad alto livello (basato sulla grammar of graphics) per la creazione di data visualization.

• 👀 L'Head of App Development di Datawrapper condivide il percorso di migrazione da uno stack tecnologico basato su PHP+JQuery a uno più moderno con Node+SvelteKit.

• 🔧 Graphic Walker: un progetto open-source che si propone come alternativa a Tableau. C'è anche una versione dedicata a Python chiamata PyGWalker.

• 🗓️ il 2 Febbraio 2024, ad Amsterdam, la quarta DuckCon celebra DuckDB (il potente database di cui via ha già parlato Andrea Borruso) nella sua città natale.

• 🙌 Il tappeto data-driven creato da Giorgia Lupi (Pentagram) in collaborazione con Well Woven, per arredare le case di chi ama i dati;

• 🧮 Dove sono le donne, nelle strade di Tolosa? Un bel post che racconta l’analisi fatta Éric Mauvière, sui nomi delle strade della città.

• 🔧 Gridviz, una libreria JavaScript di Eurostat che consente di visualizzare dati a “griglia” (o qualsiasi serie di dati tabellari con posizione x/y) in un'ampia gamma di stili cartografici.

• 👀 Documentare il movimento femminista in Italia. Il Centro Studi Movimenti di Parma ha reso disponibile dei materiali sul tema della storia del movimento femminista in Italia.

• 📰 Una riflessione del Prof. Paolo Ciuccarelli (Northeastern CAMD - Politecnico di Milano) sul ruolo dei dati nella società contemporanea dopo la visita alla Biennale Architettura di Venezia.

• 🎓 La prima lezione del corso Rethorical Data Visualization del Prof. Enrico Bertini sul ruolo delle visualizzazioni dati nel supportare argomenti e nella loro interpretazione.

• 📖 Una completissima guida alla Data Visualization pubblicata dal Publication Office dell'Unione Europea che copre diversi aspetti dall'accessibilità agli aspetti di storytelling partendo dalle basi ai concetti più avanzati.

• 📊 Un esempio molto originale di data visualization creativa dal team di Bloomberg Graphics, che ha utilizzato perline e braccialetti per rappresentare il successo internazionale di Taylor Swift.

• 🗓️ Il 7 novembre, l’edizione 2023 dell’ODI summit, dal titolo “Data changes”.

• 🗓️ Il 1° novembre inizia il mitico mese di “sfide con le mappe”, il 30DayMapChallenge.

• 🔧 Tad è uno dei visualizzatori open source più rapidi, per file in formato CSV, Parquet, SQLite e DuckDB. È uscita la release 0.13.

• 🖥️ Rilasciato Python 3.12.

🙏Se vuoi sostenerci, puoi farlo in questi modi.

Sostienici

🔗 twitter | youtube

🧮 Omicidi volontari e violenza di genere: nuove modalità di pubblicazione dei dati

Il Ministero dell’Interno cura da tempo una pagina dedicata al tema, in una sezione denominata Dati e statistiche. Fino a poche settimane fa l’unica modalità di pubblicazione era quella dei file in formato PDF, un formato pensato per la stampa e la visualizzazione, non per l'elaborazione automatica dei dati.

Abbiamo fatto delle segnalazioni al Difensore Civico per il Digitale (se non sai cosa sia, è utile la Guida dei diritti di cittadinanza digitali) e interloquito in modo diretto con gli uffici responsabili, proprio per chiedere di pubblicare questi dati anche in modalità più adeguate all’analisi degli stessi.
Da qualche settimana sono disponibili alcuni file in formato CSV, aggiornati settimanalmente di lunedì.
Non crediamo sia merito delle nostre segnalazioni, ma è probabile che abbiano contribuito a “oliare” gli ingranaggi di rilascio online.

Siamo lieti di tutto questo e abbiamo già riscontrato dei segnali che ci fanno pensare/sperare che siano i primi passi di un nuovo percorso (prima un solo file, poi dopo alcuni giorni un secondo).
E a maggior forza vogliamo sottolineare alcune cose:

• la modalità di pubblicazione dei file CSV va rivista, perché ci sono diverse problematicità (ad esempio, riga di intestazione da rimuovere, colonna senza nome, righe vuote e colonne vuote, nome colonna con data errata);

• nei report in PDF ci sono molte più informazioni, che andrebbero parimenti rese disponibili in formato CSV. Come quelle presenti nel report regionale sugli omicidi o in quello su “Costrizione o induzione al matrimonio”;

• i due CSV sono molto aggregati a livello geografico (solo dati nazionali) e (per uno di questi) relativi a un piccolo intervallo temporale, e diventa impossibile o poco significativo fare analisi geografiche e temporali.

La terribile cronaca di queste settimane è piena di casi di omicidi volontari: da questi dati emerge che dal 1° gennaio al 24 settembre 2023 (ultimo aggiornamento) sono stati registrati 243 omicidi, con 84 vittime donne, di cui 69 uccise in ambito familiare/affettivo e di queste, 44 hanno trovato la morte per mano del partner/ex partner.

Questo orrore non si cancella con i dati aperti, ma avere maggiori informazioni su demografia, luoghi, motivazioni, contesto sociale, tassi di denuncia, esiti giudiziari, ecc., aiuta ad avere una visione più chiara, aiutando nella formulazione di politiche e interventi mirati per prevenirlo e affrontarlo in modo più efficace.

E non sono dati soltanto per esperti, perché diffonderli e ben raccontarli, aumenta la responsabilità delle istituzioni e degli organi responsabili dell'applicazione della legge, sensibilizza e coinvolge l'opinione pubblica, consente di fare monitoraggio, aiuta a individuare lacune nei servizi di supporto per le vittime, può rendere le persone più in grado di proteggersi.

Un’informazione che manca è ad esempio e quella dei figli delle vittime di questi omicidi. Lo dice bene Donata Columbro su L’Essenziale:

Conoscere la situazione di bambini e bambine rimasti orfani della madre uccisa dal padre e che sono accuditi da altri familiari è fondamentale per capire che tipo di assistenza garantirgli

È essenziale pubblicare dati “buoni” e aperti, ma soprattutto che riescano a far risolvere dei problemi, stimolare nuove domande, guidare le azioni politiche.

🔬 Riscrivere la scienza attraverso narrazioni di apertura

L'Open Science Ambassadors è un programma della Max Planck Society che vuole promuovere pratiche di ricerca aperta (open science) all'interno degli istituti Max Planck (ce ne sono più di 80). Tutti gli anni, la rete di ambasciatori e ambasciatrici organizza un incontro per fare il punto sulla scienza aperta, mappare lo stato di implementazione di pratiche di ricerca aperta all'interno degli istituti (dall'open access alla pubblicazione open dei dati della ricerca), e promuovere uno scambio interdisciplinare sulle sfide e opportunità che queste pratiche comportano. Per l'edizione 2023 di questo incontro, la nostra socia Paola Masuzzo è stata invitata a parlare di open science, e in particolare a condividere la sua personale esperienza nel mondo della ricerca.

La presentazione si è sviluppata in tre punti.

1. La prima parte parla della scienza come di un'istituzione sociale guidata e regolamentata da norme, principi, e valori. Lo scriveva Richard Lewontin nel suo "A Reasonable Skepticism":

la scienza, come altre attività produttive, come lo Stato, la famiglia, lo sport, è un’istituzione sociale completamente integrata e influenzata dalla struttura di tutte le altre nostre istituzioni sociali.

Pensare che la scienza sia immune da forze di natura diversa, a volte contrastanti, persino pericolose, pensare che sia una manna dal cielo, è ingenuo e poco onesto. In particolare, una serie di metriche di giudizio che sono state scelte negli ultimi decenni, hanno finito per distorcere completamente il quadro di valori che dovrebbe guidare la conduzione della ricerca. La retorica dell'eccellenza non ha fatto altro che inasprire disuguaglianze e alimentare dinamiche di potere, nutrendo fenomeni come l'effetto Matteo e l'effetto Matilda.

2. La seconda parte prova a presentare la scienza aperta come uno strumento che può aiutare la comunità scientifica a riscrivere i processi di ricerca: non è soltanto una questione di open access (poter leggere gli articoli scientifici online gratuitamente), ma è anche, e soprattutto, una questione di nuovi valori. I principi dell'open science possono aiutarci a riflettere su che cosa significhi praticare della 'buona scienza' - rispettare le tradizioni di comunità e discipline, favorire il multilinguismo, progettare degli spazi etici per lo scambio multidirezionale di conoscenza (dove, ad esempio, la raccolta e l'analisi di dati hanno come scopo il beneficio collettivo di tutte le comunità coinvolte).

Le questioni relative al copyright e all'accesso aperto diventano così piccole, quasi insignificanti, quando messe vicino alle grandi crisi di oggi - la crisi climatica, la polarizzazione sociale, la violenza politica. Allora la domanda è: come possiamo fare in modo che i movimenti per l'apertura della conoscenza (open movements) riscrivano le proprie agende per abbracciare, sostenere, e alimentare altre lotte?

3. La terza parte chiude la presentazione con storie di vita vissuta: gli spazi alternativi di onData e di IGDORE sono per Paola luoghi in cui la conoscenza aperta, che circola liberamente e si fa bene comune, diventa strumento per lotte di liberazione collettiva, una lente intersezionale per capire meglio la realtà in cui viviamo, e renderla un po' più giusta.

La presentazione è stata pubblicata su Zenodo.

Il progetto ODECO – Open Data Ecosystem

Se da un lato gli Open Data sono diventati a pieno titolo un pezzo della strategia europea sui dati, dall’altra sono diventati spesso oggetto di studio nell’ambito della Ricerca Scientifica. Sappiamo infatti che i dati aperti hanno un’importante valenza sia di tipo sia sociale che economico. Su quest’ultimo punto, si ritiene che il potenziale dell’intera data economy a livello europeo sia valutato attorno ai 739 miliardi di euro, una parte dei quali generati proprio dagli Open Data.  E sono dati destinati a crescere. Il progetto ODECO (Open data Ecosystem) è un’iniziativa della rete di formazione innovativa delle azioni Marie Skłodowska-Curie che ha consentito a 15 giovani ricercatori provenienti da tutto il mondo di sviluppare e approfondire progetti di ricerca sui dati aperti all’interno di Università europee. L’idea è quella di dare risposte innovative ai tanti temi che coinvolgono gli Open Data e di favorire così la creazione di un ecosistema dei dati aperti a livello europeo.

Alcuni esperti italiani di primo piano sugli Open Data, tra loro diversi soci di onData, li hanno incontrati nella sede di Ascoli Piceno dell’università di Camerino su invito del Prof. Andrea Polini. Una giornata di lavoro in cui ogni ricercatore ha presentato brevemente il proprio progetto di ricerca. Progetti che vanno a guardare nell’articolato mondo degli Open Data toccandone innumerevoli aspetti: dall’uso degli Open Data nelle scuole, al mercato e ai modelli di business sugli Open Data, dall’interoperabilità semantica al Data Journalism e alla creazione di servizi pubblici. Tanti aspetti da poter mettere assieme per immaginare così un vero e proprio ecosistema dei dati aperti, un ecosistema in cui settore pubblico e settore privato possono operare e soprattutto cooperare.

EURIO Knowledge Graph: il grafo di conoscenza dei progetti di ricerca finanziati dell’Unione Europea

Il grafo di conoscenza EURIO rende disponibili le informazioni relative ai progetti di ricerca finanziati nell’ambito del settimo programma quadro e del programma Horizon2020. Si tratta pertanto di tutti i progetti di ricerca finanziati dalla comunità Europea dal 2007 al 2020, su una varietà di argomenti, come l'agricoltura, l'ambiente, l'energia, la salute, i trasporti e molti altri.

Va evidenziato che i dati relativi ai progetti del settimo programma quadro e del programma Horizon2020 erano già disponibili in formati più comuni come JSON, CSV. 

Il grafo di conoscenza EURIO utilizza altri formati come RDF, n-turtle, JSON-LD per pubblicare i dati seguendo il formalismo proprio dell’ontologia EURIO (EUropean Research Information Ontology). Questa ontologia è stata creata con l’obiettivo di formalizzare tutti i concetti necessari per rappresentare i progetti di ricerca finanziati dai programmi quadro dell'UE e renderli disponibili in un formato strutturato, aperto, leggibile da una macchina e pronti per essere collegati con altri dati. Di fatto il grafo di conoscenza utilizzando identificativi univoci per riferirsi ai progetti di ricerca e alle organizzazioni finanziate, apre la strada alla creazione di applicazioni basate sui Linked Open Data. 

Inoltre, i dati presenti nel grafo di conoscenza per la loro struttura possono essere interrogati non solo dagli umani ma anche da agenti software. Tramite un apposito linguaggio di interrogazione utilizzato in questi contesti (chiamato SPARQL) è possibile formulare delle domande per conoscere ad esempio quali nazioni hanno ricevuto maggiori finanziamenti, quali organizzazioni hanno avuto finanziati più progetti e quali tematiche sono state più esplorate dai progetti di ricerca. 

Interessante… ma tutto ciò riguarda solo gli addetti ai lavori? Assolutamente no! In generale, e non solo per i dati dei progetti di ricerca, mettere a disposizione un grafo di conoscenza è un passo importante. Sistemi più o meno intelligenti con cui dialoghiamo in linguaggio naturale sono sempre più diffusi, e tali sistemi hanno un enorme bisogno di dati, possibilmente strutturati in modo opportuno, come in un grafo di conoscenza, per fornire le risposte corrette alle nostre domande.  

Ritornando al nostro grafo di conoscenza EURIO, purtroppo il grafo è scaricabile nei tipici formati utilizzati per la pubblicazione dei dati linked come detto prima, ma non viene reso accessibile e interrogabile online tramite linguaggio SPARQL. Per beneficiare delle caratteristiche summenzionate bisogna caricarlo su un triple store o utilizzare il linguaggio di programmazione preferito o un programma specifico …  eh, sì questa volta ci rivolgiamo solo agli addetti ai lavori!!

📺 Dati aperti per il monitoraggio dei progetti pubblici

Giovedì 28 settembre 2023 si è svolto, presso la sala conferenze dell’Autorità Nazionale Anticorruzione, il seminario “Dati aperti per il monitoraggio dei progetti pubblici“. L’incontro si inserisce all’interno del programma del gruppo di lavoro dell'impegno 5.02 del V Piano d’Azione Nazionale per il governo aperto 2022-2023.

Siamo intervenuti anche noi e siamo in “conflitto di interessi”, ma vi consigliamo la visione:

• I nuovi dati sugli appalti disponibili per il riuso, Giampaolo Sellitto, ANAC - Ufficio Relazioni Internazionali

• Facilitare il riuso dei dati a tutti. La guida ai dati del PNRR: Andrea Borruso, Ondata

• Le novità sulle API per l'interoperabilità dei dati per la PA e per i cittadini, Matteo Fortini Dipartimento Trasformazione digitale, Presidenza del Consiglio dei Ministri

• Le nuove Linee guida Open data: indicazioni e casi applicativi - Antonio Rotundo - AgID

• Dati di avanzamento delle misure e dei progetti del PNRR, Chiara Ricci, MEF - Unità di missione NG-EU

• Presente e futuro di Opencoesione, Nicola De Chiara, Simona de Luca - Dipartimento per le politiche di coesione (DPCoe) della Presidenza del Consiglio dei Ministri, Progetto OpenCoesione

• Dati aperti del PNRR nel territorio regionale, Alessandra de Renzis - Regione Toscana

• Le assegnazioni PNRR ai comuni italiani, Giorgia Marinuzzi - IFEL-Fondazione ANCI

• Il monitoraggio civico dei progetti pubblici: pratiche esistenti e prospettive future, Luigi Reggi - Monithon

• L’esperienza della Regione Puglia sul monitoraggio dei progetti pubblici, Morena Ragone - Supporto giuridico specialistico per la transizione alla modalità digitale" - Ufficio RTD - Regione Puglia

• Chiusura dei lavori, Giampaolo Sellitto, Ugo Bonelli 

🧮 Pubblicati i dati del progetto Mapping Diversity

Lo European Data Journalism Network (EDJNet) ha pubblicato i dati completi del progetto Mapping Diversity, un'indagine sui nomi delle strade nelle città d’Europa. Inizialmente erano stati riservati ai partner di EDJNet e a un gruppo selezionato di media e ricercatori: ora sono disponibili pubblicamente.

È un progetto - basato sui dati aperti di OpenStreetMap e Wikidata - che nasce per suscitare un dibattito su chi manca nei nostri spazi urbani: più del 90% delle strade intitolate a individui sono ad esempio dedicate a uomini bianchi. Dove sono finite tutte le altre persone?

Grazie Federico Caruso per avercelo segnalato.

Dati aperti geografici: se ci sono i dati, le persone si attivano

Da un po’ di tempo il panorama dei dati geografici aperti dà tanti bei segnali di vita. Tra questi, in ordine casuale:

• il primo rilascio di dati di OvertureMaps Foundation (confini amministrativi, luoghi di interesse, edifici e reti di trasporto), per i quali ti consiglio di leggere l’articolo di Maurizio Napolitano;

• la versione 3 di Google Open Buildings, i contorni degli edifici derivati da immagini satellitari ad alta risoluzione;

• e i Microsoft Building Footprints, sempre i contorni degli edifici derivati da immagini satellitari ad alta risoluzione;

• il DBSN (DataBase di Sintesi Nazionale) dell’IGM (Istituto Geografico Militare), un archivio diviso per regioni e province di Italia, multi-tematico (viabilità, mobilità e trasporti, immobili ed antropizzazioni, idrografia, orografia, vegetazione, reti di sottoservizi, località significative e scritte cartografiche, ambiti amministrativi e aree di pertinenza).

Sono dati preziosi sia per fare analisi, che per rappresentare il territorio. Ma sono pubblicati in modalità non pronte all’uso per tutte le persone.
E qui viene il bello di rendere disponibili dati aperti: una persona, un’azienda, un’organizzazione li può elaborare e ripubblicare in modo che sia più facile utilizzarli.

Alcuni esempi:

1. I dati aperti di OvertureMaps, estratti per l’Italia, con taglio regionale e in formato GeoPackage. Grazie a Maurizio Napolitano.

2. I dati aperti globali sugli edifici di Google e Microsoft, unificati in un unico dataset. Poco più di 2,5 miliardi di edifici, in formato GeoParquet, FlatGeobuf e PMTiles, suddivisi per nazione (e per griglia S2). Grazie a Vida.

3. I dati del DBSN, suddivisi per Regioni e Province, scaricabili in un click (sul sito dell’IGM è necessario registrarsi e fare il login). Grazie alla comunità OpenStreetMap Italia.

😲 Crea una “piccola” visualizzazione per aumentare la consapevolezza sul clima

Little Pictures è un meraviglioso concorso dell’Agenzia Spaziale Europea (ESA) che premierà quelle visualizzazioni “piccole” che siano:

• super semplici, e “distillino” un messaggio sul clima nella sua forma più chiara e senza fronzoli;

• belle by design, ispirate al design grafico, industriale e di prodotto;

• autoconsistenti, e incorporabili in siti web, app, articoli, ecc.;

• data-driven, e realizzate con gli strumenti utilizzati nel data journalism per ra i dati climatici.

Il sito dedicato è una piccola gemma in termini di contenuti. Tre sezioni “wow”: la galleria di esempi, l’elenco di alcuni dei dati usabili per il concorso e soprattutto quella delle guide per creare queste “piccole” visualizzazioni.

Il concorso è aperto sino al 4 novembre 2023. Chi vincerà potrà mostrare il proprio lavoro al COP28 e potrà godere di un tour con spese pagate presso la ESA's data-visualisation suite di Firenze.

🧮 Dati per i disastri di Libia e Marocco

Sul portale dati dell’Humanitarian Data Exchange sono stati pubblicati dati a supporto del terremoto in Marocco e alle inondazioni in Libia. Oltre cinquanta dataset resi disponibili dal Team Humanitarian OpenStreetMap, dall'OCHA, dall'UNOSAT, dal WorldPop e altri: i confini amministrativi, i luoghi popolati, le valutazioni dei danni e altro ancora.
Tra questi anche i poligoni degli edifici, derivati dal progetto di Google citato sopra.

🚀 Hackathon Open Data Regione Puglia

Il 12 ottobre 2023, dalle 8.30 alle 19.30 si terrà un hackathon dedicato all'innovazione attraverso l'utilizzo dei dati aperti del portale dati.puglia.it.

Possono partecipare, previa iscrizione, tutte le cittadine ed i cittadini maggiorenni di ogni nazionalità. È pensato soprattutto per studenti di ITS, istituti superiori, università, sviluppatori, professionisti e ricercatori. La partecipazione è gratuita.

Gli obiettivi: sviluppare app e web app innovative, prototipi o applicazioni concrete che possano generare nuove opportunità economiche nell'ambito dell'innovazione tecnologica. Inoltre, creare storytelling e dashboard per migliorare la trasparenza e coinvolgere le comunità nelle decisioni locali e regionali.

È un’iniziativa del progetto Opentusk.

🫶 Piccole soddisfazioni

Per segnalare fatti, cose e persone, che ci hanno restituito piccole soddisfazioni

1️⃣ Che la campagna DatiBeneComune sia citata nell’editoriale de “le Scienze”, “Il peso dei dati che non abbiamo”

2️⃣ Laura Bartolini, che scrive “Grazie a quella miniera d'oro che è la newsletter di @ondatait sto passando la pausa pranzo a scrollare questo sito https://violencespolicieres.fr”

3️⃣E poi le parole di una bella persona che legge questa newsletter

Ciao, ci tenevo a farvi i complimenti per la newsletter di Ondata di stamattina. Oltre al lavoro sui dati PNRR è figa e spiegata bene anche per i non nerd. L’ho girata alle mie colleghe che si occupano di policy.
Ci tenevo a farvi sapere che OnData spacca e rispetto ad altri enti del terzo settore che si occupano di dati, siete una spanna sopra in chiarezza, correttezza e spirito di condivisione.

Strumenti/risorse

• 📖 Geospatial Data Science with Earth Engine and Geemap, un bel libro a tema datascience geografica, basatp sull’utilizzo di Google Earth Engine in geemap.

• 🔧 Dopo 5 anni dall’ultima, arriva una nuova release di jq, uno straordinario strumento per lavorare con in file JSON. La notizia importante è quella di nuovi gestori e manutentori del progetto, jq è vivo.

• 🔧 Una notizia simile alla precedente: anche uMap è vivo! È una bella piattaforma open source per la creazione di mappe online, ma lo sviluppo si era un po’ fermato.

• 🗞️ Fields of open. Mapping the open movement, uno studio molto interessante per mappare il movimento OPEN, le sue origini, le sue evoluzioni, le sue cause, il suo futuro (grazie Marco Cortella per la segnalazione).

• 📺 Cinque video corsi su D3, una della più importanti librerie di visualizzazione, nel contesto di Observable (un data notebook, javascript): parte 1, 2, 3, 4 e 5.

• 🔧 MotherDuck, il data notebook basato su duckdb, è adesso disponibile per tutte/i.

• 📰 Non sappiamo quanti siano gli orfani di femminicidio in Italia, Donata Columbro su “L’Essenziale”.

• 📰 Aborto sicuro, il ministero della salute continua a non comunicare i dati sull’applicazione della 194, sempre Donata Columbro su “La Stampa”.

• 🧮 Rilasciati i dati sulle indagini Flash Eurobarometer su “Imprenditorialità sociale e giovani”, “Integrazione dei giovani nel mercato del lavoro” e “Monitoraggio del livello di alfabetizzazione finanziaria nell’UE” (qui il feed RSS, per le notifiche).

• 🧮 Rilasciati su ItaliaDomani dati PNRR nuovi e aggiornati.

• 📺 Generative AI: What journalists need to know about ChatGPT and other tools.

• 🧮 Agosto 2023 è stato il mese di agosto più caldo mai registrato e più caldo di tutti gli altri mesi, ad eccezione di luglio 2023. Dati dal progetto Copernicus.

• 📺 Un webinar su come usare i dati OvertureMaps Foundation

• 📖 ggplot2: Elegant Graphics for Data Analysis, una guida all’uso di ggplot2.

• 📖 Attuazione del PNRR, a che punto siamo? Cosa dicono i dati, cosa fare per cambiare marcia, un report a cura di Paola Conio e Federico Morando.

🙏Se vuoi sostenerci, è il momento del 5x1000.

Sostienici con il tuo 5x1000

Ti auguriamo di passare un agosto con tanti momenti piacevoli. Noi ci prenderemo una pausa di pubblicazione e torneremo a settembre.

🔗 twitter | youtube

I dati aperti di IT-alert, il sistema di allarme pubblico per l'informazione diretta alla popolazione

IT-alert è il sistema di allarme pubblico per l'informazione diretta alla popolazione in caso di gravi emergenze o catastrofi, che dal 28 giugno 2023 ha attivato i test nel territorio, a partire da quelli fatti in Toscana.
È un progetto del Dipartimento della Protezione Civile.

Qualche giorno prima del test in Toscana abbiamo pubblicato un tweet, in cui ci auspicavamo che il sistema IT-alert avesse anche un sistema di accesso pubblico e machine readable ai dati di allarme che gestisce.

Successivamente, visto che era partita la fase di test e che nelle pagine pubbliche del progetto non si fa riferimento all'accesso pubblico ai dati raccolti dal sistema, abbiamo riflettuto sull'opportunità di scrivere alla Protezione Civile e chiedere notizie in merito. Perché sono dati di grande interesse.
Il primo obiettivo di IT-alert è ovviamente quello di avvisare le persone nel modo più semplice e diretto. E questo è reso possibile dalla modalità di comunicazione scelta - il cell-broadcast - che consente di "consegnare" un messaggio di allarme al telefono cellulare delle persone vicine all'emergenza, senza che che ci sia da installare alcuna applicazione o dare autorizzazioni.
Ma si tratta di informazioni che possono essere utilizzate anche da chi fa ricerca, da chi fa giornalismo, da chi gestisce il territorio, dalle organizzazioni della società civile, da aziende, dalle persone in generale, per derivare azioni automatiche e non, prendere decisioni, fare delle previsioni di scenari futuri, analizzare serie storiche.

Senza l'accesso a dati aperti e leggibili meccanicamente e ben descritti non si può fare.

Allora, abbiamo scritto al Dipartimento della Protezione Civile e in particolare alla dott.ssa Immacolata Postiglione, che è la Vice Capo Dipartimento.
Con la Protezione Civile abbiamo un dialogo aperto da anni, che nasce tutte le volte ci sembra che ci siano delle informazioni da loro gestite, che riteniamo debbano essere un bene comune. È avvenuto con i dati della pandemia, così come sui dati su accoglienza, soccorso e assistenza alla popolazione proveniente dall’Ucraina (per la guerra). E abbiamo ricevuto sempre risposte pronte e nel merito.

È successo anche questa volta.

La dott.ssa Postiglione ci ha suggerito di rivolgerci al dott. Umberto Rosini, dirigente del servizio sistemi informativi e di comunicazione del Dipartimento. Umberto si sta occupando, con il suo gruppo di lavoro, della gestione informatica di IT-alert.
Lo abbiamo contatto e ci ha risposto subito in modo sintetico e diretto:

È un piacere risentirvi. Mi chiedete se esiste un Alert Hub Italiano: la risposta è affermativa e anche quella è oggetto di sperimentazione. Oggi renderemo pubblico il messaggio CAP (XML firmato) che invieremo su regione Toscana sul repository https://github.com/pcm-dpc/IT-alert-Hub. In futuro saranno pubblicati anche altri formati.

Il Common Alerting Protocol (CAP) è un formato standard per la creazione, la trasmissione e la ricezione di messaggi di emergenza e di allerta. La Direttiva del Presidente del Consiglio dei Ministri del 23 ottobre 2020, è quella in cui si fa riferimento a IT-alert e al "CAP-IT", ovvero al profilo italiano del CAP, configurato secondo specifiche e necessità del Sistema Nazionale della Protezione Civile.

Nella sezione 4.3 della direttiva è prevista la definizione del

canale pubblico “Machine to Machine” (M2M), attraverso il quale altre “App” e altri sistemi per la comunicazione di emergenza utilizzati dalle componenti del Servizio Nazionale della Protezione Civile possono essere alimentate con i messaggi IT-Alert per la loro ulteriore propagazione.

Di questo e di altro ci hanno parlato Umberto Rosini e il suo collega Pietro Giordano, durante una successiva riunione online.
Umberto in particolare ha lavorato e sta lavorando alla definizione del suddetto profilo italiano del CAP e alla progettazione del sistema di gestione (EDXL-IT Hub) dei messaggi di allerta CAP (l'EDXL - Emergency Data Exchange Language - è una famiglia di standard per lo scambio di dati in situazioni di emergenza).
Ci hanno descritto e mostrato questo protocollo, dettagliando come è materializzato in un file XML e in particolare in quello che è stato reso disponibile per l'allarme di test in Toscana.

Alcune note su questo file:

• è un file a cui è stato applicato un meccanismo di firma digitale, al fine di garantire l'integrità e l'autenticità dei dati contenuti nel messaggio;

• contiene - tra le altre cose - delle informazioni su data e ora di invio, sul tipo di messaggio, sullo status (questo è stato classificato come "Alert"), sulle specifiche (qui per l'appunto "CAP-IT:1.0"), sul mittente;

• contiene le informazioni di dettaglio sull'allarme, in due lingue (ad oggi italiano e inglese);

• il messaggio contiene informazioni sulla severità, sull'urgenza, sulla scadenza, ecc. ed è associato ad un titolo, ad una descrizione e a delle istruzioni (cosa fare, vista l'emergenza);

• a ogni messaggio sono correlate delle informazioni geografiche, per definire il contesto spaziale dell'emergenza.

Dal giorno della riunione sono già cambiate diverse cose. I dati sono stati pubblicati anche in formato JSON e in formato Atom.
Il primo è tra i più usati per leggere dati, pensato per renderli "masticabili" subito e bene da chi scrive codice e sviluppa applicazioni.
Il secondo è un vecchio e glorioso standard per la distribuzione di contenuti sul web, che consente alle persone di iscriversi (e leggere) ad avvisi di allarme in tantissime modalità.  È un formato di feed RSS, e la cosa non deve stupire, perché è la modalità standard internazionale per distribuire notizie di allarme.

Non è detto che questo di sopra sarà il repository ufficiale di quando il sistema andrà in produzione. Ma la "forma" dei dati sarà quella già disponibile in questa fase di test del sistema. Quindi chi vuole sviluppare applicazioni, sistemi di analisi, azioni automatiche, può iniziare a farlo, perché al più ci sarà da cambiare qualche URL.
È probabile che siano rese disponibili anche delle API REST, proprio per rendere ancora più comodo e standard, la modalità di accesso a questi dati.
Una volta terminata la fase di sperimentazione a febbraio del 2024, il sistema potrà diventare operativo per i casi d’uso previsti.

In chiusura vogliamo sottolineare come ancora una volta il Dipartimento della Protezione Civile sia stato subito pronto, con grande disponibilità all'ascolto e a metter a fattor comune. 

Un "grazie" alla dott.ssa Postiglione, al dott. Rosini e al dott. Giordano.

I dati sulle ondate di calore

Il Ministero della Salute pubblica - da alcuni anni - tra maggio e settembre i bollettini sulle ondate di calore.

La pubblicazione dei bollettini sul Portale è attiva ogni anno da maggio a settembre. I bollettini vengono aggiornati dal lunedì al venerdì, alle ore 11 e sono consultabili anche dalla App “Caldo e Salute”, disponibile per dispositivi Android su Google Play.

Quattro livelli di rischio:

• Livello 0 (in verde), condizioni meteorologiche che non comportano rischi per la salute della popolazione.

• Livello 1 (in giallo), pre-allerta. Condizioni meteorologiche che possono precedere il verificarsi di un’ondata di calore.

• Livello 2 (in arancione), temperature elevate e condizioni meteorologiche che possono avere effetti negativi sulla salute della popolazione, in particolare nei sottogruppi di popolazione suscettibili.

• Livello 3 (in rosso), ondata di calore. Condizioni ad elevato rischio che persistono per 3 o più giorni consecutivi.

Sono 27 le città per le quali vengono pubblicati i bollettini. Il criterio di scelta dovrebbe essere quello indicato in questa circolare del Ministero: i capoluoghi di Regione e i Comuni con oltre 200.000 abitanti.
Questi dati non sono disponibili anche in formato leggibile meccanicamente (CSV, JSON, ecc.), ma soltanto come tabella HTML (che viene aggiornata tipicamente dal lunedì al venerdì nella mattinata) e come PDF.
Abbiamo inviato una PEC per chiedere che venga fatto.

Nell’attesa abbiamo creato uno script che, a partire da giorno 8 luglio 2023, li estrae ogni giorno e li pubblica su questo repository GitHub. Lo abbiamo fatto per avere dei dati con cui poter costruire delle mappe personalizzate e delle visualizzazioni che facessero vedere gli andamenti nel tempo.
Abbiamo descritto tutto nel dettaglio in questo minisito dedicato.

Alcune note:

• i dati leggibili meccanicamente sono sicuramente disponibili, prova ne sia l’app per smartphone;

• non sono presenti città della Basilicata;

• gli URL dei bollettini in PDF sono in HTTP e non in HTTPS e questo può bloccare il download e quindi l’accesso agli stessi;

• è stato da poco pubblicato il rapporto di sintesi 1-21 luglio 2023 (che contiene proprio una vista “calendario”);

• quasi ogni giorno sentiamo ai telegiornali “oggi dieci città hanno il bollino rosso”. Si fa spesso riferimento a questo insieme ristretto dei bollettini del Ministero; quindi, le città con bollino rosso potrebbero essere molte di più.

Abbiamo realizzato i due esempi della “mappetta” e del calendario, per mostrare degli esempi su quello che consentono di fare i dati grezzi.
Possono fare attivare usi imprevisti, con esiti che creano nuovo valore.
Durano nel tempo, perché non sono sensibili al contesto o al cambio di strumenti.
È possibile costruirci sopra dei processi di automazione.

Sottolineiamo l’interesse per questi dati, perché le ondate di calore in Europa diventeranno più frequenti, intense e dureranno più a lungo. Entro il 2050, circa la metà della popolazione europea potrebbe essere esposta ad un rischio elevato o molto elevato di stress da calore durante l'estate (vedi capitolo 13 del Climate Change 2022: Impacts, Adaptation and Vulnerability).

È stato il mese di luglio più caldo della storia, con un impatto sulla salute e la produttività dei lavoratori.
E proprio per chi lavora e per i datori di lavoro è disponibile anche la piattaforma previsionale Worklimate (a cura ci CNR, INAIL, Servizio Sanitario della Toscana, Consorzio Lamma, DEP Lazio e Università di Bologna) in cui è possibile consultare le previsioni legate al rischio di calore, correlate alle modalità con cui si lavora.
Per tutto il territorio italiano e non soltanto per alcune città.

Anche qui non sembrano pubblicati dati grezzi o è documentata la modalità di accesso tramite API; l’accesso ai dati grezzi sembra possibile con queste modalità che abbiamo verificato tramite browser, navigando sul sito di Worklimate.

Istat: le statistiche sulla popolazione per griglia regolare

Il 28 luglio 2023 l’Istituto Nazionale di Statistica ha pubblicato i risultati provvisori sulla popolazione residente in Italia su una griglia regolare con celle di 1 chilometro quadrato (rilasciata da Eurostat):

• tutte le celle hanno appunto la stessa dimensione e possono essere facilmente confrontate;

• la griglia europea è stabile nel tempo;

• i dati si integrano facilmente;

• la griglia può essere suddivisa e aggregata indipendentemente dalle suddivisioni amministrative.

I dati sono resi disponibili in formato Shapefile e in formato CSV, e sono corredati da una nota metodologica.

Sono dati che probabilmente saranno usati in tantissimi contesti, perché riescono a restituire molto rapidamente visualizzazioni e analisi “pesate” sulla popolazione.

Comunicare l’emergenza: rimuovere le barriere e dare contesto

Questa newsletter è un continuo incrocio di temi tra loro vicini (a volte molto), con momenti di luce e momenti di buio. Il caso dei dati sull’emergenza diossina per i recenti incendi di Palermo, iniziati il 24 luglio 2023, tocca molti dei punti soprastanti.

Uno degli incendi si è sviluppato nella più grande discarica di rifiuti della Sicilia, quella di Bellolampo. La comunicazione del Sindaco in merito agli effetti di questo arriva con l’ordinanza sindacale del 29 luglio 2023 (in formato PDF), con alcune barriere totalmente inadeguate in generale, e a maggior forza se legate a un’emergenza:

1. il PDF viene reso pubblico in questa pagina ed è una collezione di “immagini”, il testo non è accessibile;

2. nel PDF si fa riferimento a una “planimetria allegata”, in cui è definita/tracciata l’area di “attenzione” di 4 km intorno alla discarica. Di questa planimetria, nella pagina soprastante, non c’è traccia;

3. la suddetta planimetria è probabilmente l’immagine JPEG di bassa risoluzione pubblicata sul canale Telegram della Protezione Civile di Palermo. Non è stata pubblicata alcuna cartografia interattiva da esplorare comodamente su qualsiasi terminale.

Ed è importante dare un po’ di contesto. Andrea Borruso ad esempio, non appena uscita l’ordinanza, utilizzando i dati Istat sulla popolazione citati sopra, ha pubblicato una stima della popolazione residente in quell’areale. Il dataset dell’Istat, gli ha consentito di farlo in pochissimi minuti.

Dopo questa pubblicazione la comunità OpenDataSicilia ha pubblicato un articolo a cura di Dennis Angemi, in cui sono stati sottolineati questi aspetti ed è stata resa disponibile una mappa interattiva (realizzata da Giovan Battista Vitrano).

👏 Evviva OpenDataSicilia!!

PNRR: il nuovo impianto è stato adottato senza consultare la società civile

L’Osservatorio Civico PNRR, di cui onData fa parte, ha evidenziato che le recenti modifiche al PNRR sono state spesso fatte senza una chiara valutazione dei loro impatti e senza coinvolgere la società civile.

Il 29 maggio l’Osservatorio, insieme alla campagna Dati Bene Comune, ha inviato delle precise raccomandazioni al governo sul capitolo Repower EU, per le quali ci aspettavamo di essere ascoltati. Ma non è successo.

Le modifiche proposte dal governo toccano temi importanti come l'ambiente, il rischio idrogeologico e l'efficienza energetica, ma sono state discusse a porte chiuse.

Opentusk, il percorso di partecipazione di Regione Puglia dedicato agli open data

Opentusk è un progetto della Regione Puglia dedicato allo sviluppo e alla promozione degli open data.
Uno degli obiettivi è quello di rafforzare la consapevolezza del valore dei dati aperti e abilitare la condivisione di competenze e conoscenze in quest'ambito.

Alcune delle persone associate a onData sono state coinvolte in due webinar.

Il primo è “I dati aperti come strumento delle imprese per lo sviluppo economico”, in cui troverai un intervento di Massimo Zotti, che parla di dati aperti e settore aerospaziale, e uno di Guenter Richter sull’esplorazione di dati complessi con contesto geografico.

Il secondo è “Dati aperti e comunità: un volano unico per lo sviluppo sociale”, in cui c’è un intervento di Ilaria Vitellio, che fa un intervento su Collaborative Mapping & Digital Commons, uno di Andrea Borruso, che parla del valore e della forza delle comunità nel contesto dei dati aperti, e infine uno di Vincenzo Patruno, sull’”essere data driven” e sulla bella esperienza di OpenPuglia.

Sulla pagina dedicata ai webinar del progetto, trovate tutti gli altri (5 in totale) e soprattutto trovate i “testi corali” trascritti in tempo reale.

Segnaliamo infine che sino al 15 settembre 2023 è possibile partecipare alla consultazione pubblica promossa dalla Regione Puglia con l'obiettivo di arricchire il paniere di dataset di competenza comunale e regionale e generare opportunità di sviluppo e benessere.

Grazie a Fedele Congedo, Morena Ragone e Francesco Paolicelli, che sono stati degli ospiti attenti e stimolanti, e un “brava” alla Regione Puglia.

Strumenti/risorse

• 🎓 Report dell'indagine pilota su Digitale e digitalizzazione nei musei italiani (2020-2021): un'analisi e prospettive future;

• 🎓 Le città italiane sono già quelle dei 15 minuti? Una pubblicazione affronta il tema;

• 🪛 Dicopal, una libreria Javascript, per scatenarsi con le palette di colori;

• 🧮 I dati aperti (è così da tempo) del Dipartimento dell'Amministrazione Generale, del Personale e dei Servizi, sono accessibili tramite query SPARQL;

• ⚖️ Wikipedia adotta la licenza CC 4.0;

• 📺 Un webinar del Publications Office of the European Union sull’Open Data Maturity 2022;

• 📖 La maggior parte delle città europee sta diventando più densa grazie a tassi di immigrazione più elevati e a una riduzione dell'uso di terreno per l'edilizia abitativa. Un’analisi pubblicata su CORDIS;

• 🧮 Disuguaglianze nella mortalità per causa in Italia secondo caratteristiche demografiche, sociali e territoriali. A cura di Istat;

• 🧮 Aggiornate la base dati sul monitoraggio delle Opere Incompiute. Purtroppo, pubblicata in modo quasi inutilizzabile;

• 👏 Un emoji di applausi per Lisa Charlotte Muth e il suo articolo sull’uso dei colori per scegliere l’enfasi giusta per le proprie visualizzazioni basate sui dati;

• 📖 La Royal Statistical Society, pubblica la guida “Best Practices for Data Visualisation” (grazie Marco Cortella);

• 👏 Un altro emoji di applausi per l’articolo sulla misura della povertà relativa nel mondo. Spunti molto interessanti e dati per fare altre e nuove riflessioni.

🙏Se vuoi sostenerci, è il momento del 5x1000.

Sostienici con il tuo 5x1000

🔗 twitter | youtube

🧮 Aggiornamento dati aperti sul Piano Nazionale di Ripresa e Resilienza

Il 16 giugno 2023 sono stati aggiornati diversi dati pubblicati nel “catalogo open data” di Italiadomani (il sito ufficiale del Piano Nazionale di Ripresa e Resilienza).

Una cosa che non ci piace è che la pubblicazione non sia stata annunciata nella sezione delle News e che in alternativa non ci sia nemmeno un modo per iscriversi a degli avvisi automatici (come un Feed RSS).
Noi ne abbiamo avuto riscontro perché abbiamo costruito un piccolo sistema di monitoraggio di questa sezione.
Chi si occupa della pubblicazione dei dati su Italiadomani dovrebbe fare come è stato fatto dalla Protezione Civile per i dati COVID-19: documentare le variazioni e farlo con un po’ di anticipo rispetto alla data di pubblicazione.