dades obertes gencat cat

1

Dades obertes gencat

Presentació del projecte al Parc Tecnològic del Vallès

Direcció General d’AtencióCiutadana i DifusióCerdanyola del Vallès, maig de 2011

Projecte d’obertura de dades (open data) de la Generalitat de Catalunya

2 Dades obertes gencat. Direcció General d’Atenció Ciutadana i Difusió. Maig de 2011 CC – BY 3.0

Índex

1. Antecedents

2. Estat actual

3. Estratègia i accions de futur

4. El projecte dadesobertes.gencat.cat

5. Altres iniciatives a Catalunya


1. Antecedents


Què és l’open dataPer desenvolupar les polítiques, els governs han d’obrir les seves dades:

- per ser transparents amb la ciutadania (open Government).

- perquè les empreses hi puguin afegir valor i generar riquesa.

L’objectiu és proporcionar tota la informació pública a la ciutadania, en un format fàcil de manipular, perquè es puguin convertir en serveis públics o privats amb valor afegit. Dades meteorològiques, d’equipaments, estadístiques, de pressupostos, jurídiques i judicials...

De fet, hi ha força dades publicades en webs i diaris oficials, però el seu format de publicació actual en fa més difícil el tractament i reaprofitament fàcil.

El moviment open data s’està estenent per tot el món i l’Administraciós’engloba dins la cultura de canvi en la concepció, gestió i prestaciódel servei públic.


data.gov als EUAPer facilitar l'accés a BD creades pel govern federal dels EUA.


data.gov.uk a Gran BretanyaAmb uns milers de BD i unes quantes desenes d’aplicacions derivades.

A Europa, open data = reutilització

Reutilització de la informació del sector públic (RISP): ús que en poden fer les persones, organitzacions i empreses

Fonamentació:

- Llei 37/2007, de RISP (+ Directiva 2003/98/CE)

- Llei 29/2010 de l’ús dels mitjans electrònics al sector públic de Catalunya


Dades o obres?

Les informacions de l’Administraciósusceptibles de RISP són dades i, en circumstàncies més excepcionals, obres.

Segons el Text refós de la llei de propietat intel·lectual (LPI):

Obra = cal que hi hagi «creació original»

©D

epar

tam

ent d

e Ju

stíc

ia. C

C B

Y


A Catalunya existia ja una certa cultura de reutilització

Tradició en RISP a Catalunya: Servei Meteorològic de Catalunya (Meteocat), Institut Cartogràfic de Catalunya (ICC), Institut d’Estadística de Catalunya (Idescat), Centre de Terminologia (Termcat).

www.flickr.com/photos/jordigraells/475843606 CC BY 2.0


Centre Penitenciari Brians 2

Avís legalAquesta obra està subjecta a una llicència Reconeixement-NoComercial-CompartirIgual 2.5 de Creative Commons. Se'n permet la reproducció, distribució i comunicació pública sempre que se'n citi el titular dels drets (Generalitat de Catalunya. Departament de Justícia) i no se'n faci un ús comercial. Si transformeu aquesta obra per generar una nova obra derivada, heu de distribuir-la amb una llicència igual a la que regula l’obra original. La llicència completa es pot consultar a http://creativecommons.org/licenses/by-nc-sa/2.5/es/legalcode.ca.

© Generalitat de CatalunyaDepartament de Justícia

www.gencat.cat/justiciaPrimera edició: juny de 2007Projecte gràfic i impressió: Arts Gràfiques ...Dipòsit legal: ...

Juny 2007: la Generalitat publica la 1a obra en llicències CreativeCommons


2009: Consell Editorial de la GeneralitatNormativa editorial de la Generalitat (2009): Totes les publicacions de la Generalitat en paper o digitals amb llicències de difusióoberta (Creative Commons BY-NC-ND o qualsevol altra).

http

://bi

t.ly/

fIEX

la


2009: Nou avís legal al web gencat

ww

w.g

enca

t.cat

/web

/cat

/avi

s_le

gal.h

tm


ww

w.g

enca

t.cat

/aco

rdsd

egov

ern/

2010

1109

/01.

htm

09/11/2010: Acord de Govern dades obertes


Altres exemples a l’Estat espanyolOpen data Euskadi, Astúries... Ciutats com Saragossa, Lleida, Barcelona...

http

://op

enda

ta.e

uska

di.n

et


Tipus de dades1. Geogràfiques. Són objecte de propietat intel·lectual si són obres, bàsicament quan hi

ha drets de propietat intel·lectual (DPI) de tercers i de vegades de l’Administració mateixa.

2. Meteorològiques. Ídem

3. Estadístiques

• RISP llevat de les sotmeses a secret estadístic

• Llei 12/1989 de la funció estadística pública

• Llei 23/1998 d’estadística pública de Catalunya

4. Administratives (Oficina Virtual de Tràmits OVT, contractacions, registres...). Tenir en compte: restriccions per Llei RJAPAC, LOPD, anonimitzar dades...

5. Turístiques, culturals, de mobilitat... (BIG, patrimoni...). Són molt aptes per a la RISP. Cal respectar bé LOPD i PI.

6. Jurídiques i judicialsLes sentències i altres resolucions judicials, degudament anonimitzades, són reutilitzables.


Modalitats de reutilització

Segons art. 4 de la Llei 37/2007:

1. Reutilització sense condicions amb avís legal de Llei37/2007 amb requisits bàsics de citació de la font, no alteracióni desnaturalització de la informació i explicitació data última actualització.

2. Reutilització amb subjecció a condicions establertes per llicències tipus. Les dades, a més de justes, han de ser processables electrònicament.


1. Per a les dades generals: RISP sense condicions d’acord amb l’avís legal fonamentat en la Llei 37/2007 (citació de font, no alteració de la informació i menció de la última data d’actualització).

2. Per a les dades considerades obres (amb drets de propietat intel·lectual, sobretot de tercers), RISP amb llicència CreativeCommons de Reconeixement CC BY.

3. Per a les fotografies del BIG (Banc Iconogràfic de la Generalitat), RISP amb llicència Creative Commons de Reconeixement –SenseObraDerivada CC BY-ND

4. Per a dades amb sol·licitud prèvia com per exemple les de l’InstitutCartogràfic de Catalunya www.icc.cat/cat/layout/set/print/Home-ICC/Inici/Condicions-d-us

Modalitats de reutilització (RISP) del portal Dades Obertes de la Generalitat


Pel que fa a formats:

- Disponibles per mitjans electrònics

- Mitjançant plataforma multicanal

- Es pot considerar subministrar les dades en formats propietaris, sempre que estigui justificat per l’ús potencial que se’n pugui fer.

Formats de reutilització

Cd-rom. © Anton Peck. CC BY-NC-ND 2.0


Citació de la font

En qualsevol de les dues modalitats de RISP, la fórmula de citació de la font és:

- Generalitat de Catalunya. [nom organisme o ens autònom]

- Cita en html <p>Font de les dades: <a href="http://dadesobertes.gencat.cat" title="Dades Obertes de la Generalitat de Catalunya">Generalitat de Catalunya</a>.</p>


2. El projecte Dades obertesgencat: estat actual



http://dadesobertes.gencat.cat


Línia ajuts Fundació puntCAT

Dades obertes gencat. Direcció General d’Atenció Ciutadana i Difusió. Maig de 2011 CC – BY 3.0

fundacio.cat


Abredatos


ww

w.a

bred

atos

.es


Open Data Challenge


http

://op

enda

tach

alle

nge.

org


>ww

w.d

ata.

gov/

open

data

site

s

Dades obertes gencat al món


Web de Sant Jordi

gencat.cat/santjordi


Col·lecció Sant Jordi al Clicat

gencat.cat/clicat/santjordi


Idescat a Google Public Data

http://bit.ly/g5xQ3I

http://blocs.gencat.cat


Web dades obertes gencat 1/2

Nombre de visites: 70.056 visites

09/11/2010 – 09/05/2011


Web dades obertes gencat 2/2

Novetats des de novembre 2010> RSS incidències regionals de Rodalies

> El municipi en xifres

> 4 aplicacions fetes per la ciutadania

> Calendari laboral

> RSS de la predicció meteorològica de les 41 comarques catalanes

> Indicadors dels municipis catalans a la plataforma de dades públiques de Google

> Estadístiques sobre convocatòries públiques en matèria d'R+D+I desagregades per sexe.

> Fotografies de Sant Jordi i el Palau de la Generalitat

> Línia d’ajuts de la Fundació puntCAT.

Properament> Organismes de la Generalitat de Catalunya

> Cartografia territorial

> Dades ens locals, població i eleccions

Catàleg de dades actual: 316 fitxers

09/11/2010 – 09/05/2011


Aportacions de la ciutadania90 aportacions fetes a través del formulari “Col·laboreu”

• Tràmits i procediments administratius, dades econòmiques: transparència administrativa

• Licitacions, adjudicacions i contractacions públiques

• Pressupostos per departament i municipis, deutes públics, despesa pública…

• Votacions al Parlament. Poder veure qui està votant què i qui s'absté

• Actes i discussions (i agendes) del Parlament

• Informació estadística

• Generada per les Universitats

• Conjunt de dades de l’idescat

• Dades de l'observatori del treball, empreses per sector - nombre de treballadors - any de creació i fi -volum de negoci…

• Dades de consum energètics i hídrics (per equipaments i poblacions)

• Registres de noms de nadons, actuals i històrics

• Malalites de Catalunya

• Dades de centres educatius

• Dades meteorològiques

• Dades de predicció municipal del meteocat

• Radar de pluja

• Contaminació atmosfèrica

• Cartografia i dades geogràfiques

• Guia de carrers dels municipis de Catalunya

• Xarxa de fibra òptica

• Superfície urbanitzada de cada municipi

• Dades del SIR (per exemple ubicació de granges). D'una altre banda, l'ubicació coordenades dels transportistes i gestors autoritzats per l'ARC estaria molt bé. D'aquesta manera es podrien desenvolupar eines per tal d’agilitzar la gestió d’aspectes relacionats amb les granges.

•Transport públic i mobilitat

• Horaris i itineraris de tot el transport públic (trens, busos, metros, tramvia…). (un usuari volia crear un servei de localització d’amics en el transport públic basat en dades en temps real d’itineraris).

• Horaris de trens de Rodalies i Renfe en temps real de manera que es pugui saber, per exemple, a quina estacióestà el Rodalies que hauria de passar per Arenys a les 17h54. Com a precedents hi ha aplicacions privades de geolocalització de vaixells mercants i avions http://www.localizatodo.com/mapa/

• Afectacions al trànsit

• Seguretat i emergències

• Delictes policials per zones. (Exemple de Chicago).


Aplicacions per a mòbils

Canal de realitat augmentada “Equipaments de Catalunya”

• Canal de realitat augmentada" gratuït i lliure de publicitat sobre la plataforma Layar, amb nom "Equipa-ments de Catalunya" per a usuaris de telèfons Android o Iphone.

• Dóna informació dels equipaments que hi ha en un radi de distància X a la seva posició actual.

• Es poden triar les categories (salut, esport, administració pública, etc.) i visualitzar els equipaments sobre mapa i en llista.

Informació meteorològica de Catalunya per a Android

• Prediccions meteorològiques a 3 dies vista, radar de pluges i informació de temperatures, vent i pluges acumulades.

• També permet posar un giny a la pantalla d'inici per tenir sempre a la vista la predicció i temperatura dels pobles de Catalunya que es vulguin.

• Tota la informació meteorològica es basa en dades obertes de la Generalitat de Catalunya i el Meteocat.

Desenvolupat per Gynoid Apps,

Desenvolupat per Joan Pujol.

Aplicacions fetes per la ciutadania 1/2


Aplicacions web

Aplicacions fetes per la ciutadania 2/2

Rodalies.info – Rodalia.info

• Portal que ofereix en temps real la informaciósobre el servei de Rodalies que aporten els usuaris via Twitter.

• Basat en els RSS d’incidències del web www.gencat.cat/rodalies de les línies dels serveis de rodalia de Barcelona i de regionals.

• També inclou l’estat del servei de les línies de FGC del Vallès i de Llobregat-Anoia.

Desenvolupat perPimpampum.net i Roger Melcior

La festa de Sant Jordi en imatges

•Reportatge fotogràfic aparegut a lavanguardia.comel 23 d’abril de 2011 realitzat amb el fitxer de les 196 fotografies de Sant Jordi de la Generalitat alliberades.

•Amb les mateixes dades, BTV va desenvolupar també un visor de les imatges.


Difusió del projecte 1/2A la ciutadania, empreses i altres administracions

Web dades obertes:- RSS

- Pàgina principal i secció Catàleg

Xarxes socials:- Obertura d’un compte a Twitter de difusió del catàleg: www.twitter.com/opendatacat

- Elaboració d’apunts al bloc gencat


Difusió del projecte 2/2A la ciutadania, empreses i altres administracions

Trobades- W3C (Saragossa: 23/11/2010)

- Trobada Innovation in Public Services: Smart Cities - the case of Open Data (Barcelona, 11 febrer 2011)

- WebCongress (Barcelona, 1-3 març 2011)

- II Congreso Internacional Ciudadanía Digital (Donosti, 14-15 abril 2011)

- Encuentro de iniciativas Open Data en España: retos y soluciones. Proyecto Aporta (Madrid, 9 de juny 2011)

Portal gencat.mobi- Promoció de les aplicacions mòbils

desenvolupades per la ciutadania al portal gencat.mobi


3. Estratègia i accions de futur


Objectius estratègics


1. Impulsar un canvi de model de negoci a la Generalitat en la generació d’informació per promoure:

> Transparència per a la ciutadania

> Valor i riquesa per a les empreses

L’Administració s’ha de dedicar a generar la dada, amb la idea de ser reutilitzada, i a les tecnologies per a l’exposició d’aquestes dades.

El desenvolupament d’aplicacions de negoci sobre aquestes dades ha de correspondre a tercers (empreses i ciutadania).

2. Fomentar la reutilització: prioritzar i obrir aquelles dades que generin un ús social (trànsit, mobilitat, estadístiques, transparència administrativa...).

3. Consolidar i ampliar la difusió i dinamització externes del projecte.


>

> Dades

dades+ format

dades+ format

publica aplicació

€ (pot haver-hi monetitzaciódel servei)

ciutadans

empresa Y

empresa X

ciutadans

Empr

eses

i ciu

tada

ns

Adm

inis

trac

iópú

blic

a

L’empresa i la ciutadania donaran nous usos a les dades de

l’Administració, que utilitzarà en beneficio propi (€) o donarà lliure

accés a les seves aplicacions,

El model de relació entre administracions i empreses pot

canviar cap a models de concurs lliure amb premi econòmic a la millor proposta, en els quals l’Administració

impulsa els productes resultants.

> Tecnologia, publicació(representació i exposició)Servidor central de dades

RDF, SPARQL i web services

Model conceptual estratègic


Actors públics

Dades i tecnologia

Model relacional


Accions 1/3

Nou model de negoci dins l’Administració

Divulgar els objectius del projecte internament a la Generalitat i fomentar la cultura de la reutilització a través de:

> Trobades corporatives> La creació d’un grup de Dades obertes al portal e-Catalunya d’Atenció Ciutadana> Cursos de formació i tallers especialitzats adreçats al personal de l’Administració

Estandardització de les dades:

> Desenvolupar un model tecnològic que permeti fàcilment l’estandardització de les dades.


Ampliar el catàleg de datasets amb prioritats estratègiques i d’ús social i empresarial:

> Licitacions i adjudicacions*> Pressupostos*> Estudis d’Opinió del CEO*> Mou-te amb transport públic*> Nomenclàtor de Catalunya*

Convocar un concurs públic adreçat a desenvolupadors per a la creació de serveis i aplicacions a partir de les dades obertes. Exemples:> Apps for Democracy> Apps for Development> Apps for the Army> Apps for Amsterdam > Abre datos 2011> Europe Open Data Challenge

Accions 2/3

Fomentar la reutilització > Estadístiques Idescat**

> Incidències i càmeres trànsit**> Dades estacions meteorològiques**> Organismes de la Generalitat (SAC organismes)**> Antenes telefonia mòbil i xarxes de cobertures**> Estat de l’aigua a Catalunya**> Allotjaments turístics**> Contaminació ambiental**> Sistema inform. Geogràfica DARPAM**

* Projectes estratègics pendents de consolidació.** Projectes viables a mig termini.

http://dadesobertes.gencat.cat/ca/ajuts.html


Accions 3/3

Difusió i dinamitzaciódel projecte

Pla de comunicació i dinamització que inclogui els diferents canals de difusió de la Generalitat:

> Web gencat> Butlletí electrònic dades obertes> gencat.mobi> Sala de premsa> Xarxes socials (Twitter, Youtube, Facebook)> Bloc gencat> Trobades i sessions dades obertes amb altres administracions, entitats, empreses i especialistes.


4. El projecte dadesobertes.gencat.cat


2010. Naixement del projecte


XML

GRDDL

RDF

REST

API

SPARQL

KMLJSON

URI

OWL

RDFS

SKOS


En què consisteix el projecte?

Consisteix en oferir al ciutadà dades crues de la Generalitat de Catalunya a través d’Internet, mitjançant:

- la publicació de fitxers

- serveis de consulta


Fitxers de dades

- Són fitxers publicats a Internet que contenen informacióno tractada de les dades que es volen difondre, tal comestan emmagatzemades en les bases de dades de l’Administració

- Exemple: Equipaments de Catalunya

Què són?


Fitxers de dadesFormats propietaris

Són formats d’arxiu que requereixen d’ eines propietàriesper ser gestionats.

Microsoft Office WordFormat tancat per transferir textos formatats o sense format. Pot contenir textos, imatges, gràfiques i enllaços.

Microsoft Office ExcelConté files i columnes de cel·les i cadascuna pot incloure dades, que poden ser paraules, números o fórmules que tinguin dades i dinàmicament resoldre equacions.

SHP (ESRI)Format propietari de dades espacials que és l’estàndard per a l’intercanvi d’informació geogràfica entre Sistemes d’InformacióGeogràfica (GIS).


Fitxers de dadesFormats lliures

Són formats d’arxiu basats ens estàndards oberts i que, per tant, poden ser gestionats per eines no propietàries.

PDF (Portable Document Format)El format PDF és a dia d’avui un estàndard formal obert conegut com ISO 32000.

ODF (Open Document Format)Open Document és un format de fitxer estàndard per a l’emmagatzematge de continguts ofimàtics com fulls de càlcul, gràfiques i presentacions.

KML (Keyhole Markup Language)Llenguatge basat en XML per representar dades geogràfiques en tres dimensions.


Fitxers de dadesFormats lliures

Són formats d’arxiu basats ens estàndards oberts i que, per tant, poden ser gestionats per eines no propietàries.

XML (Extensible Markup Language)Metallenguatge extensible, d'etiquetes, desenvolupat pel W3C. No és un llenguatge, sinó una manera de definir llenguatges per a diferents necessitats.

JSON (JavaScript Object Notation)Format lleuger per l’intercanvi de dades. És un subconjunt de la notació literal d’objectes de JavaScript que no requereix l’ús d’XML.

RDF (Resource Description Framework) Llenguatge d’objectiu general per representar informació en la web.

Altres: RSS, CSV, TMX, etc.


- Per a cada origen de dades s’ha aplicat l’estàndard més adient per estructurar la informació:

Equipaments → vCard

Calendari laboral → iCalendar

Tràmits → Tràmits i serveis públics

www.bbc.co.uk/programmes/genres/entertainment

Fitxers de dadesRDF


Tim Berners-Lee, inventor de la World Wide Web, parla de les dades entrellaçades. (8:15m)

www.ted.com/talks/lang/spa/tim_berners_lee_on_the_next_web.html

Fitxers de dadesLinked Data


Març 2008Fitxers de dadesLinked Data


Juny 2009Fitxers de dadesLinked Data


Fitxers de dadesLinked Data Setembre 2010


Fitxers de dadesQuè hem fet?

Equipaments Tràmits

Conversor RDF

Equipaments

Conversor RDF

Tràmits

Catàleg

Conversor RDF

Imatges

ImatgesDades

Organisme 1Dades

Organisme N


Dades publicades en qualsevol format (p.e. Word, PDF)

Dades publicades en formats estructurats (p.e. Excel)

Dades publicades en formats oberts (p.e., CSV, XML, RDF)

Dades enllaçables mitjançant URI

Dades enllaçades amb altres dades del web (Linked Data)

Fitxers de dadesQuantes estrelles tenim?


Serveis de consultaQuè són?

- Són interfícies de consulta sobre les dades obertes que s’ofereixen al ciutadà.

- Exemple: consultar si un dia és festiu a una poblaciódeterminada.


Tipus de serveis Serveis de consulta

SPARQLLlenguatge estandaritzat per a la consulta de dades RDF, normalitzat pel W3C. És una recomanació oficial del W3C des de gener del 2008 per al desenvolupament de la web semàntica.

Serveis Web - API

Els serveis web són sistemes de software dissenyats per donar suport a la interacció interoperable màquina a màquina sobre una xarxa a través d’HTTP.

WMS (Web Map Service)Format que produeix mapes de dades referenciadesespacialment, de manera dinàmica, a partir d’informaciógeogràfica.


www.youtube.com/watch?v=uR_7UkHs0zA

http://api.talis.com/stores/bbc-demo/items/sparql/spared.html

SPARQL

Serveis de consulta

- Permet la consulta sobre dades emmagatzemades en format RDF


Serveis de consultaQuè hem fet?

ServeisOrganisme 1

ServeisOrganisme N


2011. L’evolució


Objectius

1. Permetre la consulta de dades mitjançant serveis web, oferint a ciutadans i empreses un sistema estàndard d’accés dinàmic a la informació

2. Permetre la consulta de dades mitjançant SPARQL, adaptant-se a les recomanacions del W3C

3. Automatitzar i homogeneïtzar la generació de dades, facilitant la incorporació de nous datasets

4. Automatitzar la gestió del catàleg i del web, permetent la descentralització del manteniment dels continguts


Model conceptual tecnològic

Bases de dades Portals

Bus de serveis

dadesobertes.gencat.cat

Serveis web Aplicacions

Catàleg

Motor SPARQL

dades obertes gencat

SPARQLSPARQL gencat

Ciutadans

Empreses i administracions

serveis oberts gencat

SPARQLSPARQL gencat

dades obertes gencat

serveis oberts gencatPortals

gencat.mobi

IntranetDades obertes

5. Altres iniciatives


Dades obertes Lleida

http://cartolleida.paeria.es/lleidaoberta/inici.aspx


Dades obertes Badalona

Open data Badalona


Dades obertes Barcelona

http://bcn.cat/opendata


Dades obertes Illes Balears

www.caib.es/caibdatafront/index?lang=ca



Presentació del projecte al Parc Tecnològic del Vallès

Direcció General d’AtencióCiutadana i DifusióCerdanyola del Vallès, maig de 2011

Projecte d’obertura de dades (open data) de la Generalitat de Catalunya

Gràcies!

dades obertes gencat cat

Business