Open Data

José Manuel Alonso

CC‐BY 2011 CTIC Centro Tecnológico

Índice

• W3C, Web Foundation y CTIC

• De AA.PP.  Ciudadanía a AA.PP.  Ciudadanía

• Open data: qué, porqué, cómo

• Open data en Gencat

Ejemplos, ejemplos, muchos ejemplos

W3C

• Organismo neutro

• Fundado en 1994 por Tim Berners‐Lee

• Actividades y Grupos del W3C– +60 personas en el Team

– aprox. 400 miembros

– 24 Actividades • +60 grupos

• +1.500 investigadores

– +40 acuerdos

Web Foundation

• Fundada por TimBL en 2009– Misión: Advance the Web to Empower People

– The Web is not “technology”, the Web is “humanity connected by technology” (TimBL)

CTIC/W3C/Web Foundation

• CTIC es la sede de W3C en España (2003)

• CTIC funda y lidera W3C eGovernment (2007)

• CTIC aporta 12 investigadores a W3C

• CTIC partner de Web Foundation (Open Data)

W3C e-Government

• +150 miembros• +20 países

– USA, UK, Australia, NZ, Suecia, Finlandia, Holanda,España...

• Chairs (to be updated soon!):– José M. Alonso (CTIC [ES])– Kevin Novak (American Institute of Architects, ex‐Biblioteca del Congreso [USA])

– John Sheridan (OPSI [UK])

W3C e-Government

• Mejora del acceso a las AA.PP. mediante un mejor uso de la Web (Mar 2009)– Participación y compromiso democrático

– Datos del sector público en formatos abiertos

– Interoperabilidad

– Servicios multicanal

– Identificación y autenticación

• Publishing Open Government Data (Sep 2009)

W3C e-Government

• Nuevos proyectos– Government Linked Data

• Outreach

• Techniques and Technologies

• Strategies and Success Stories

• Use Cases, Case Studies and Demos

– Interest Group• Using the Web to Deliver Government Services 

• Government Data Management

• Use of Social Media

Visión de tunel de la AA.PP.

Cambios en la comunicación

Ciudadanía, AA.PP., Web: un follón

• ¿Cómo buscan en la Web los ciudadanos/as?– Tratan de ir al portal

– (muy, muy pocos)

– Al del organismo al cargo– (si lo conocen, aún menos)

– Habitualmente utilizan un buscador

– Encuentran enlaces a sitios no de la Admin.

– Contentos con la información obtenida

El caso Birmingham

http://bccdiy.com/

• Ejemplo:• Library of Congress (USA) + Flickr = Commons

Información donde la buscan

hacia una nube de datos enlazadosY también los servicios

Pero… ¡hay que estar preparados!

Open Government

• De la “tecnificación” de los servicios al cambio en la forma de gobernar

• Principios– Transparencia y rendimiento de cuentas 

– Participación ciudadana

– Colaboración con grupos de ciudadanos capaces de cooperar constructivamente

(popularizado por Obama en su memorando)

Open Data: pilar del Open Government

AA.PP.

Datos

Open Data vs. RISP

“Poner la Información del Sector Público disponible, tal cual es (en bruto) en formatos estándar abiertos, facilitando su acceso y permitiendo su reutilización”

(véanse también los 8 principios)

Marco de trabajo

• Directiva 2003/98/EC

• Ley 11/2007

• Ley 37/2007

• Proyecto Aporta

• ENI

o Documento vs. Dato

o Información afectada

Open data: ¿por qué?

• Objetivos políticas públicas– Transparencia– Participación– Colaboración– Inclusión– Rendición de cuentas

• Reducción de costes– Consolidación de activos, Interoperabilidad

• Liderazgo

Liberar datos públicos significa devolvérselos a sus verdaderos propietarios (la ciudadanía)

Avance: el porqué en Gencat

• Por qué liberar los datos– “Con la libertad de acceso a la información pública, hay la voluntad de avanzar hacia la gobernanza abierta, basada en los valores de transparencia, participación, servicio y eficiencia. Asimismo, se quiere promover la creación de valor con la reutilización de la información pública, facilitar la ordenación interna de los sistemas de información dentro de la Administración y fomentar la interoperabilidad entre servicios del sector público.”

Vistazos a la meta: equipamientos públicos

http://www.oktravel.com.au/science/education/

Vistazos a la meta: estadística

http://www.vic.gov.au/visualplace/

Vistazos a la meta: transporte público

http://www.metroparisiphone.com/

Vistazos a la meta: polución

http://www.intheair.es/

Vistazos a la meta: gasto público

http://it.usaspending.gov/

Vistazos a la meta: Flujos de transporte

Vistazos a la meta: Research Funding Explorer

http://bis.clients.talis.com/

Vistazos a la meta: Zaragoza turismo

http://www.zaragoza.es/turruta/Turruta/es/index_Ruta

Estado del arte

En los medios

RISP en el mundo

http://datos.fundacionctic.org/sandbox/catalog/map

Open data: ¿cómo?

• Estrategia gobierno– Interna y externa

• Metodología– Identificar

– Publicar

– Consumir

• Dinamización– Talleres y concursos

Metodología/Roadmap CTIC

Etapa 1Etapa 2

Etapa 3

Etapa 1Etapa 2

Etapa 3

Ghana, Chile, Caribe, ….

Etapa 1Etapa 2

Etapa 3

Asturias, Pais Vasco, Cataluña, Zaragoza, Gijón, ….

Etapa 1Etapa 2

Etapa 3

UK, USA, Australia, ….

Open Data: ¿Oportunidad / Viabilidad?Contexto económico y empresarial

Estabilidad MacroeconómicaMercado FinancieroMercados de bienes y serviciosEntorno Empresarial

Contexto SocialDemografíaMercado LaboralCalidad de VidaEducación y Alfabetización

Contexto Político e institucionalGobierno y DemocraciaTransparencia y CorrupciónCooperación

Contexto Infraestructuras y científico-técnicoInnovaciónUso TICInfraestructuras

Contexto Open AccessEntorno LegalConcienciacion y SoporteDatos e InteroperabilidadEntorno politico y agentes

Open data: publicarOGD LGD/GLD

•1000s de Excel a la Web(Web 1.0)•La Web como servidor de archivos

•Modelado y enriquecimiento semántico (Web 3.0)•Optimización del uso de la Web•Mejora la interoperabilidad

Las 5 estrellas del Open Data de TimBL

� Cosas disponibles en la Web (en cualquier formato)

�� Datos estructurados (p.e., Excel en lugar de una imagen de una tabla)

��� Formatos no propietarios  (p.e., CSV en lugar de Excel)

���� URLs  que identifiquen cosas

����� Enlazar los datos con datos de otros lugares

http://inkdroid.org/journal/2010/06/04/the-5-stars-of-open-linked-data/

Data.gov (2009)

Open data: OGD vía Excel

Open data: OGD vía Excel

1.Buscar el conjunto de datos

2.Descargarlo

3.Descomprimirlo

4.No hay esquema (modelo de datos)

5.Trabajar en local con el conjunto

6.Duplicarlo en mi Web para utilizarlo

http://powerofinformation.wordpress.com/

Aflorando datos

RDFa: incluyendo RISP en páginas Web

• Google y Yahoo! ya soportan RDFa

RDFa en el Reino Unido

hacia una nube de datos enlazadosEmpleo Público UK

Pequeña lección sobre la Web

hacia una nube de datos enlazadosOne Web (Web Única)

http://…/cosa

Y las “cosas” se enlazan y relacionan

http://…/cosa/21

http://…/cosa/43

http://…/cosa/15

http://…/cosa/37

…cosa/21 es parte de la …cosa/37

…cosa/21 es parte de la …cosa/37

Linked Data y la Web 3.0

1. Use URIs as named for things 

2. Use HTTP URIs so that people can look up those names 

3. When someone looks up a URI, provide useful information 

4. Include links to other URIs, so that they can discover more things 

http://www.w3.org/DesignIssues/LinkedData (TimBL)(presentación, video)

Open data: vía Linked Data

CURSO DE: DISEÑO Y MODIFICACION DE PLANOS EN 2D Y 3D

Open data: vía Linked Data

http://risp.asturias.es/empleo/oferta-formativa/Accion-Formativa/2010_346

hacia una nube de datos enlazadosEjemplo (simplificado)

http://risp.asturias.es/empleo/oferta-formativa/Accion-Formativa/2010_346

CURSO DE: DISEÑO Y MODIFICACION DE PLANOS EN 2D Y 3D

1. http://risp.asturias.es/empleo/oferta‐formativa/Accion‐Formativa/2010_346

2. El vocabulario (modelo de datos) va embebido

3. La licencia (CC‐BY) también

hacia una nube de datos enlazadosLinked Data/Web 3.0 ☺

Oferta formativa (Asturias) - antes

Oferta formativa (Asturias) - después

• Ejemplo: registros judiciales en Europa– Número de interfaces bilaterales potenciales entre 27 estados miembros: 702

• para un soloprocedimiento judicial

Convenir los vocabularios

© SEMIC.EU

Linked Data @ CTIC

Bus Linked DataBus Linked DataRDFRDF

repositorirepositorioo

i1i1 i2i2 i3i3 i4i4

XMLXML BDBD RDFRDFAA

N.EN.EImportadores

e1e1 e2e2 e3e3

Esqu

ema

UR

Is

Esqu

ema

UR

Is

SPARQLE.P. RDF

API, XML, JSON, REST

Exportadores

MashupsMashupsLinked-DATA

Linked-DATA

Open Data: representar y exponer

Representar y exponer

Representar y exponer Consumir/ReutilizarConsumir/Reutilizar

Representar y exponerRepresentar y exponer Consumir/Reutilizar

Consumir/Reutilizar

OGD

LGD

Entonces ¿por qué llegar a las 5*?

• “¿Carreteras? A donde vamos no necesitamos… carreteras”(Dr. Emmett Brown, Regreso al Futuro, 1984)

Open data: consumir

• Componentes/Widgets (y ver visualizaciones)

Asturias: Oferta Formativa

Asturias: Oferta Formativa + Edificios

Calidad de las aguas de baño

La potencia de la Web 3.0

Linked Data Cloud

Reutilización por teceros

La mejor forma de explotar tus datosse le ocurrirá a otro

(principio de las muchas mentes, Rufus Pollock)

Y no se debe subestimar

Y no se debe subestimar

Y no se debe subestimar

Y no se debe subestimarELECCIONES AUTONÓMICAS Y MUNICIPALES 2011ELECCIONES AUTONÓMICAS Y MUNICIPALES 2011 CompárteloCompártelo

RESULTADOS 2011 ir a RESULTADOS 2007ir a RESULTADOS 2007

Estás en: RESULTADOS 2011 » ASTURIAS

CentroCentro OccidenteOccidente OrienteOriente

Asturias ver resultados en municipales » Última actualización: 04.35 CET

RESUMEN DEL ESCRUTINIO DE ASTURIAS

ESCRUTADO: 100 %

ESCAÑOS TOTALES: 45

VOTOS CONTABILIZADOS: 605730 67.15 %

ABSTENCIONES: 296380 32.85 %

VOTOS NULOS: 8792 1.45 %

VOTOS EN BLANCO: 15597 2.57 %

VOTOS POR PARTIDOS EN ASTURIAS

Elecciones autonómicas 2011

Circunscripciones:

I R A POLÍ TI CA »I R A POLÍ TI CA »

Descárgate el widget electoral yconsulta los resultados

2011. ASTURIAS (ESCAÑOS)100% ESCRUTADO100% ESCRUTADO

Actualizado: 23/5/2011 04:35 (CET)

PSOE (15)

Descárgate los datos en xml

Si lo construyes, no vendrán

• Dinamización es muy necesaria– Externa e interna

– Gestión del cambio

• Talleres

• Concursos– Washington DC,UK,Australia,Bélgica…

Ejemplo: Abredatos

Ejemplo: Open Data Challenge

Què és el projecte Dades obertes gencat?

A Catalunya existia ja una certa cultura de reutilització

Tradició en RISP a Catalunya: Servei Meteorològic de Catalunya (Meteocat), Institut Cartogràfic de Catalunya (ICC), Institut d’Estadística de Catalunya (Idescat), Centre de Terminologia (Termcat).

www.flickr.com/photos/jordigraells/475843606 CC BY 2.0

Centre Penitenciari Brians 2

Avís legalAquesta obra està subjecta a una llicència Reconeixement-NoComercial-CompartirIgual 2.5 de Creative Commons. Se'n permet la reproducció, distribució i comunicació pública sempre que se'n citi el titular dels drets (Generalitat de Catalunya. Departament de Justícia) i no se'n faci un ús comercial. Si transformeu aquesta obra per generar una nova obra derivada, heu de distribuir-la amb una llicència igual a la que regula l’obra original. La llicència completa es pot consultar a http://creativecommons.org/licenses/by-nc-sa/2.5/es/legalcode.ca.

© Generalitat de CatalunyaDepartament de Justícia

www.gencat.cat/justiciaPrimera edició: juny de 2007Projecte gràfic i impressió: Arts Gràfiques ...Dipòsit legal: ...

Juny 2007: la Generalitat publica la 1a obra en llicències Creative Commons

2009: Consell Editorial de la GeneralitatNormativa editorial de la Generalitat (2009): Totes les publicacions de la Generalitat en paper o digitals amb llicències de difusióoberta (Creative Commons BY-NC-ND o qualsevol altra).

http

://bi

t.ly/

fIEX

la

2009: Nou avís legal al web gencat

ww

w.g

enca

t.cat

/web

/cat

/avi

s_le

gal.h

tm

ww

w.g

enca

t.cat

/aco

rdsd

egov

ern/

2010

1109

/01.

htm

09/11/2010: Acord de Govern dades obertes

Dades obertes gencat

http://dadesobertes.gencat.cat

Línia ajuts Fundació puntCAT

Dades obertes gencat. Direcció General d’Atenció Ciutadana i Difusió. Maig de 2011 CC – BY 3.0

fundacio.cat

ww

w.d

ata.

gov/

open

data

site

s

Dades obertes gencat al món

Web de Sant Jordi

gencat.cat/santjordi

Col·lecció Sant Jordi al Clicat

gencat.cat/clicat/santjordi

Idescat a Google Public Data

http://bit.ly/g5xQ3I

http://blocs.gencat.cat

Aplicacions per a mòbils

Canal de realitat augmentada “Equipaments de Catalunya”• Canal de realitat augmentada" gratuït i lliure de publicitat sobre la plataforma Layar, amb nom "Equipa- ments de Catalunya" per a usuaris de telèfons Android o Iphone.• Dóna informació dels equipaments que hi ha en

un radi de distància X a la seva posició actual.• Es poden triar les categories (salut,

esport, administració pública, etc.) i visualitzar els equipaments sobre mapa i en llista.

Informació meteorològica de Catalunya per a Android • Prediccions meteorològiques a 3 dies vista, radar de

pluges i informació de temperatures, vent i pluges acumulades.

• També permet posar un giny a la pantalla d'inici per tenir sempre a la vista la predicció i temperatura

dels pobles de Catalunya que es vulguin.• Tota la informació meteorològica es basa en dades

obertes de la Generalitat de Catalunya i el Meteocat.

Desenvolupat per Gynoid Apps,

Desenvolupat per Joan Pujol.

Aplicacions fetes per la ciutadania 1/2

Aplicacions web

Aplicacions fetes per la ciutadania 2/2

Rodalies.info – Rodalia.info• Portal que ofereix en temps real la informació

sobre el servei de Rodalies que aporten els usuaris via Twitter.

• Basat en els RSS d’incidències del web www.gencat.cat/rodalies de les línies dels serveis de rodalia de Barcelona i de regionals.

• També inclou l’estat del servei de les línies de FGC del Vallès i de Llobregat-Anoia.

Desenvolupat per Pimpampum.net i Roger Melcior

La festa de Sant Jordi en imatges

•Reportatge fotogràfic aparegut a lavanguardia.com el 23 d’abril de 2011 realitzat amb el fitxer de les 196 fotografies de Sant Jordi de la Generalitat alliberades.

•Amb les mateixes dades, BTV va desenvolupar també un visor de les imatges.

Model conceptual gencat

Objectius estratègics

Dades obertes gencat. Direcció General d’Atenció Ciutadana i Difusió. Maig de 2011 CC – BY 3.0

1. Impulsar un canvi de model de negoci a la Generalitat en la generació d’informació per promoure:

Transparència per a la ciutadaniaValor i riquesa per a les empreses

L’Administració s’ha de dedicar a generar la dada, amb la idea de ser reutilitzada, i a les tecnologies per a l’exposició d’aquestes dades. El desenvolupament d’aplicacions de negoci sobre aquestes dades ha de correspondre a tercers (empreses i ciutadania).

2. Fomentar la reutilització: prioritzar i obrir aquelles dades que generin un ús social (trànsit, mobilitat, estadístiques, transparència administrativa...).

3. Consolidar i ampliar la difusió i dinamització externes del projecte.

Dades

dades + format

dades + format

publica aplicació

€ (pot haver-hi monetitzaciódel servei)

ciutadans

empresa Y

empresa X

ciutadans

Empr

eses

i ci

utad

ans

Adm

inis

trac

iópú

blic

a

L’empresa i la ciutadania donaran nous usos a les dades de l’Administració, que utilitzarà en beneficio propi (€) o donarà lliure accés a les seves aplicacions,

El model de relació entre administracions i empreses pot canviar cap a models de concurs lliure amb premi econòmic a la millor proposta, en els quals l’Administracióimpulsa els productes resultants.

Tecnologia, publicació(representació i exposició)Servidor central de dades

RDF, SPARQL i web services

Model conceptual estratègic

Dades obertes gencat. Direcció General d’Atenció Ciutadana i Difusió. Maig de 2011 CC – BY 3.0

Actors públics

Dades i tecnologia

Model relacional

Model tecnològic gencat

En què consisteix el projecte Dades obertes gencat?

Consisteix en oferir al ciutadà dades crues de la Generalitat de Catalunya a través d’Internet, mitjançant:

- la publicació de fitxers

- serveis de consulta

Fitxers de dades

- Són fitxers publicats a Internet que contenen informacióno tractada de les dades que es volen difondre, tal comestan emmagatzemades en les bases de dades de l’Administració

- Exemple: Equipaments de Catalunya

Què són?

Fitxers de dadesQuè hem fet?

Equipaments Tràmits

Conversor RDF

Equipaments

Conversor RDF

Tràmits

Catàleg

Conversor RDF

Imatges

ImatgesDadesOrganisme 1

DadesOrganisme N

Dades publicades en qualsevol format (p.e. Word, PDF)

Dades publicades en formats estructurats (p.e. Excel)

Dades publicades en formats oberts (p.e., CSV, XML, RDF)

Dades enllaçables mitjançant URI

Dades enllaçades amb altres dades del web (Linked Data)

Fitxers de dadesQuantes estrelles tenim?

Serveis de consultaQuè són?

- Són interfícies de consulta sobre les dades obertes que s’ofereixen al ciutadà.

- Exemple: consultar si un dia és festiu a una poblaciódeterminada.

Tipus de serveis Serveis de consulta

SPARQLLlenguatge estandaritzat per a la consulta de dades RDF, normalitzat pel W3C. És una recomanació oficial del W3C des de gener del 2008 per al desenvolupament de la web semàntica.

Serveis Web - API

Els serveis web són sistemes de software dissenyats per donar suport a la interacció interoperable màquina a màquina sobre una xarxa a través d’HTTP.

WMS (Web Map Service)Format que produeix mapes de dades referenciades espacialment, de manera dinàmica, a partir d’informaciógeogràfica.

Serveis de consultaQuè hem fet?

ServeisOrganisme 1

ServeisOrganisme N

Objectius tecnològics

1. Permetre la consulta de dades mitjançant serveis web, oferint a ciutadans i empreses un sistema estàndard d’accés dinàmic a la informació

2. Permetre la consulta de dades mitjançant SPARQL, adaptant-se a les recomanacions del W3C

3. Automatitzar i homogeneïtzar la generació de dades, facilitant la incorporació de nous datasets

4. Automatitzar la gestió del catàleg i del web, permetent la descentralització del manteniment dels continguts

Model conceptual tecnològic

Bases de dades Portals

Bus de serveis

dadesobertes.gencat.cat

Serveis web Aplicacions

Catàleg

Motor SPARQL

dades obertes gencat

SPARQLSPARQL gencat

Ciutadans

Empreses i administracions

serveis oberts gencat

SPARQLSPARQL gencat

dades obertes gencat

serveis oberts gencatPortalsgencat.mobi

IntranetDades obertes

Gracias

• http://datos.fundacionctic.org

• http://www.w3.org/eGov

• josema.alonso@fundacionctic.org

• josema@webfoundation.org

• josema@w3.org

• @josemalonso

Agradecimientos

• Jordi Graells– Diapositivas específicas Dades Obertes Gencat