Este documento describe los retos técnicos asociados con la difusión de estadísticas oficiales como datos abiertos. Discuten los principios de los datos abiertos y las leyes relevantes, y proponen una estrategia tecnológica para crear una infraestructura de datos estadísticos que permita a los usuarios acceder, comprender, procesar e intercambiar información estadística y metainformación de manera interoperable. También abordan cuestiones como los formatos y estándares para publicar y compartir datos
JIS2011: OPEN DATA EN CANARIAS - Retos técnicos en la difusión de estadísticas oficiales
1. INFRAESTRUCTURA ESTADÍSTICA
OPEN DATA EN CANARIAS
Retos técnicos en la difusión de
estadísticas oficiales
JIS 2011
OPEN DATA EN CANARIAS: Retos técnicos en la difusión de estadísticas oficiales
2. INFRAESTRUCTURA ESTADÍSTICA
OPEN DATA EN CANARIAS
Retos técnicos en la difusión de
estadísticas oficiales
JIS 2011
Alberto González Yanes
jgonyanp@gobiernodecanarias.org
José Molina González
jmolgon@gobiernodecanarias.org
OPEN DATA EN CANARIAS: Retos técnicos en la difusión de estadísticas oficiales
3. DIFUSIÓN DE ESTADÍSTICAS
Principios de actuación
OPEN DATA EN CANARIAS: Retos técnicos en la difusión de estadísticas oficiales
4. DIFUSIÓN DE ESTADÍSTICAS: Principios de actuación
Difusión de datos estadísticos
OPEN DATA EN CANARIAS: Retos técnicos en la difusión de estadísticas oficiales
5. DIFUSIÓN DE ESTADÍSTICAS: Principios de actuación
UNA IDEA
El OPEN DATA es el cuasi-estado de naturaleza de la
difusión de estadísticas oficiales.
UN RETO
Construir la Infraestructura de Datos Estadísticos que
integre datos, metadatos, servicios e información para
promover el uso de los mismos.
OPEN DATA EN CANARIAS: Retos técnicos en la difusión de estadísticas oficiales
6. DIFUSIÓN DE ESTADÍSTICAS: Principios de actuación
LOS OCHO PRINCIPIOS DEL OPEN DATA
Datos completos Procesables
Datos primarios No discriminatorios
Puntualidad No propietarios
Accesibles Libres de licencia
OPEN DATA EN CANARIAS: Retos técnicos en la difusión de estadísticas oficiales
7. DIFUSIÓN DE ESTADÍSTICAS: Principios de actuación
LOS QUINCE PRINCIPIOS DEL CÓDIGO DE BUENAS
PRÁCTICAS DE LAS ESTADÍSTICAS EUROPEAS
(6)
Imparcialidad y objetividad
Las autoridades estadísticas deben elaborar y difundir estadísticas europeas respetando la
independencia científica y hacerlo de forma objetiva, profesional y transparente, de
modo que se trate a todos los usuarios por igual.
(11)
Pertinencia
Las estadísticas europeas deben satisfacer las necesidades de los usuarios.
(12)
Precisión y fiabilidad
Las estadísticas europeas deben reflejar la realidad de forma precisa y fidedigna.
OPEN DATA EN CANARIAS: Retos técnicos en la difusión de estadísticas oficiales
8. DIFUSIÓN DE ESTADÍSTICAS: Principios de actuación
LOS QUINCE PRINCIPIOS DEL CÓDIGO DE BUENAS
PRÁCTICAS DE LAS ESTADÍSTICAS EUROPEAS
(13)
Oportunidad y puntualidad
Las estadísticas europeas deben difundirse oportuna y puntualmente.
(14)
Coherencia y comparabilidad
Las estadísticas europeas deberían ser coherentes a nivel interno, a lo largo del tiempo
y comparables entre regiones y países; debería ser posible combinar y hacer un uso
conjunto de los datos relacionados a partir de fuentes distintas.
OPEN DATA EN CANARIAS: Retos técnicos en la difusión de estadísticas oficiales
9. DIFUSIÓN DE ESTADÍSTICAS: Principios de actuación
CÓDIGO DE BUENAS PRÁCTICAS DE LAS
ESTADÍSTICAS EUROPEAS
Principio
número
15.-‐
Accesibilidad
y
claridad
“Las
estadís;cas
europeas
deberían
presentarse
de
forma
clara
y
comprensible,
difundirse
de
forma
adecuada
y
conveniente
y
estar
disponibles,
asimismo
se
debería
permi;r
el
acceso
a
las
mismas
de
forma
imparcial,
con
metadatos
y
orientación
de
apoyo”.
ACCEDER
ENTENDER
OPEN DATA EN CANARIAS: Retos técnicos en la difusión de estadísticas oficiales
10. DIFUSIÓN DE ESTADÍSTICAS: Principios de actuación
LEY 11/2007 DE ACCESO ELECTRÓNICO DE LOS
CIUDADANOS A LOS SERVICIOS PÚBLICOS
Interoperabilidad
“La interoperabilidad es la capacidad de los sistemas de
información y de los procedimientos a los que éstos dan soporte, de
compartir datos y posibilitar el intercambio de información y
conocimiento entre ellos.”
Real Decreto 4/2010, de 8 de enero, por el que se regula el Esquema Nacional de
Interoperabilidad en el ámbito de la Administración Electrónica.
PROCESAR
OPEN DATA EN CANARIAS: Retos técnicos en la difusión de estadísticas oficiales
11. DIFUSIÓN DE ESTADÍSTICAS: Principios de actuación
LEY 37/2007 SOBRE REUTILIZACIÓN
DE LA INFORMACIÓN DEL SECTOR PÚBLICO
Reutilización de la información
Se entiende por reutilización el uso de documentos que obran en
poder de las Administraciones y organismos del sector público,
por personas físicas o jurídicas, con fines comerciales o no
comerciales, siempre que dicho uso no constituya una actividad
administrativa pública.
COMPARTIR
OPEN DATA EN CANARIAS: Retos técnicos en la difusión de estadísticas oficiales
12. DIFUSIÓN DE ESTADÍSTICAS: Principios de actuación
ACCEDER
ENTENDER
PROCESAR
COMPARTIR
INFORMACIÓN ESTADÍSTICA
OPEN DATA EN CANARIAS: Retos técnicos en la difusión de estadísticas oficiales
14. ESTRATEGIA TECNOLÓGICA: Objetivos y bases
OBJETIVOS
ACCEDER
ENTENDER
PROCESAR
COMPARTIR
INFORMACIÓN ESTADÍSTICA
Y META-ESTADÍSTICA
OPEN DATA EN CANARIAS: Retos técnicos en la difusión de estadísticas oficiales
15. ESTRATEGIA TECNOLÓGICA: Objetivos y bases
CAPAS CONCEPTUALES
Contenido: En esta capa se incluyen cualquier
recurso de información a difundir por una
Oficina Estadística. (DATOS)
Conocimiento: Se trata de toda la información
que se tiene acerca del contenido o aspectos
relacionados con el mismo. (METADATOS)
Canal: Se trata del elemento más superficial,
que junto al conocimiento será capaz de
mostrar todo el contenido según los principios
de buenas prácticas de la estadísticas
europeas y la Ley 11/2007.
OPEN DATA EN CANARIAS: Retos técnicos en la difusión de estadísticas oficiales
16. ESTRATEGIA TECNOLÓGICA: Objetivos y bases
PRINCIPIOS TECNOLÓGICOS
Interoperabilidad: Los sistemas de información estadística deberán compartir datos y
posibilitar el intercambio de información y conocimiento entre ellos.
Usabilidad: La usabilidad es la facilidad con que las personas pueden utilizar una
herramienta particular con el fin de alcanzar un objetivo concreto. La accesibilidad es una de
las partes contempladas dentro de la usabilidad web.
Inteligencia: La inteligencia web, como suma de metadatos y algoritmos, deberá facilitar a
los usuarios la búsqueda de información estadística. La inteligencia aportada puede ser de
carácter experta, automática (por ejemplo la de buscadores del portal) o colectiva
(directamente relacionada con la web 2.0).
OPEN DATA EN CANARIAS: Retos técnicos en la difusión de estadísticas oficiales
17. ¿QUÉ DIFUNDIMOS?
Datos y metadatos
OPEN DATA EN CANARIAS: Retos técnicos en la difusión de estadísticas oficiales
18. ¿QUÉ DIFUNDIMOS?: Los recursos de información estadística
RECURSOS DE INFORMACIÓN ESTADÍSTICA
INDI-
INDI-
CADOR
CATOR
EXPRES
datos CUBE
CUBO ANALITICO usuarios
INVESTI-
MATRIZ
MATRIX GADOR
metadatos
OPEN DATA EN CANARIAS: Retos técnicos en la difusión de estadísticas oficiales
19. DATOS
OPEN DATA EN CANARIAS: Retos técnicos en la difusión de estadísticas oficiales
20. DATOS >> MATRIZ >> CÓMO
Apertura
respetando
el
INDI- SECRETO
ESTADÍSTICO
CADOR
CUBO Elaboración
de
un
CATÁLOGO
MATRIZ
OPEN DATA EN CANARIAS: Retos técnicos en la difusión de estadísticas oficiales
21. DATOS >> MATRIZ >> CÓMO
ESTRUCTURAR Y DOCUMENTAR
INDI-
CADOR
PC-AXIS
2010
CUBO SDMX-ML
2013-2014
MATRIZ
SDMX-RDF
Sine die
OPEN DATA EN CANARIAS: Retos técnicos en la difusión de estadísticas oficiales
22. FORMATO PC-AXIS > JAXI
¿Qué es un archivo PC-Axis?
METADATOS
DATOS
OPEN DATA EN CANARIAS: Retos técnicos en la difusión de estadísticas oficiales
23. FORMATO PC-AXIS > JAXI
Consulta WEB (2010)
PX – XLS – CSV – DSPL (2011/2012)
OPEN DATA EN CANARIAS: Retos técnicos en la difusión de estadísticas oficiales
24. FORMATO PC-AXIS > JAXI
API (2011-2012)
http://www.gobiernodecanarias.org/istac/jaxi-web/tabla.do?
accion=formato&idConsulta=identificador
SALIDAS JSON
GVIZ:
Google
VisualizaDon
jsonMtd:
Datos
+
Metadatos
OPEN DATA EN CANARIAS: Retos técnicos en la difusión de estadísticas oficiales
25. SDMX (y más)
PROYECTO
METAMAC
1. Desarrollar un modelo de metadatos común que facilitará la
interoperabilidad entre oficinas estadísticas y entre oficinas y otros
organismos.
2. Automatizar los procesos de tratamiento de operaciones estadísticas.
3. Mejorar las capacidades de publicación y difusión de resultados
estadísticos.
4. Facilitar a los organismos consumidores el análisis y post-procesado
de estadísticas.
OPEN DATA EN CANARIAS: Retos técnicos en la difusión de estadísticas oficiales
26. SDMX (y más)
PRODUCCIÓN >> ESTRUCTURAR – NORMALIZAR - METADOCUMENTAR
OPEN DATA EN CANARIAS: Retos técnicos en la difusión de estadísticas oficiales
27. SDMX (y más)
DIFUSIÓN >> COMPARTIR
OPEN DATA EN CANARIAS: Retos técnicos en la difusión de estadísticas oficiales
28. SDMX (y más)
SDMX-RDF
OPEN DATA EN CANARIAS: Retos técnicos en la difusión de estadísticas oficiales
29. DATOS >> INDICADOR >> CÓMO
SISTEMAS DE INDICADORES
municipales, coyuntura económica, género,
regionales, de convergencia, sociales, clave
INDI- del mercado laboral…
CADOR
CUBO
MATRIZ
OPEN DATA EN CANARIAS: Retos técnicos en la difusión de estadísticas oficiales
30. DATOS >> INDICADOR >> CÓMO
2011-2012 Salidas JSON API interna
2012
de consulta de datos
JAXI
Interfaz de lectura y
MODULO OPEN DATA carga de indicadores
CONSULTA DE DATOS ESTADÍSTICOS
(OPEN_CUBE)
DB Indicadores
DB Consultas
API externa
de consulta de indicadores
ISTACbase
REPOSITORIO DE DATOS EN
PC-AXIS
WIDGET
OPEN DATA EN CANARIAS: Retos técnicos en la difusión de estadísticas oficiales
31. DATOS >> INDICADOR >> CÓMO
2011-2012 2012
OPEN DATA EN CANARIAS: Retos técnicos en la difusión de estadísticas oficiales
32. DATOS >> INDICADOR >> CÓMO
2011-2012 2012
OPEN DATA EN CANARIAS: Retos técnicos en la difusión de estadísticas oficiales
33. WIDGET PROPIOS Google > GPDE
GADGET EN iGoogle
APPs para MOVILES
Google > buscador
OPEN DATA EN CANARIAS: Retos técnicos en la difusión de estadísticas oficiales
34. METADATOS
OPEN DATA EN CANARIAS: Retos técnicos en la difusión de estadísticas oficiales
36. CONTEXTO INTERNACIONAL
Generic Statistical Business
Process Model (GSBPM)
OPEN DATA EN CANARIAS: Retos técnicos en la difusión de estadísticas oficiales
37. USO DE METADATOS
Los metadatos permiten que los datos estadísticos
sean bien entendidos, compartidos y explotados
de manera eficaz por todo tipo de usuarios a lo largo
del tiempo; y se utilizan para poder identificar,
acceder y usar los datos.
VOCABULARIOS
COMUNES
GESTOR
DE
GESTOR
DE
GESTOR
DE
GESTOR
DE
CONCEPTOS
CLASIFICACIONES
OPERACIONES
EVENTOS
OPEN DATA EN CANARIAS: Retos técnicos en la difusión de estadísticas oficiales
38. SERVICIOS WEB DE
VOCABULARIOS
COMUNES
CONCEPTOS, LISTAS DE CÓDIGOS,
CLASIFICACIONES Y TESAUROS, OPERACIONES
ESTADÍSTICAS
CALLEJEROS
ALFANUMERICOS
CALLES, DISTRITOS-SECCIONES,
ENTIDADES Y NÚCLEOS, CÓDIGOS POSTALES
OPEN DATA EN CANARIAS: Retos técnicos en la difusión de estadísticas oficiales
39. EL NUCLEO DE METADATOS DOCUMENTALES
El
Núcleo
de
Metadatos
Documentales
de
los
Recursos
de
Información
Estadís;ca
del
Ins;tuto
Canario
de
Estadís;ca
(ISTAC)
establece
el
conjunto
de
metadatos
que
comparten
todos
los
resultados
estadísDcos
de
una
operación
estadísDca,
independientemente
de
su
Dpo
o
formato.
CATÁLOGO
DE
RECURSOS
DE
INFORMACIÓN
ESTADÍSTICA
OPEN DATA EN CANARIAS: Retos técnicos en la difusión de estadísticas oficiales
40. EL NUCLEO DE METADATOS DOCUMENTALES
Estándares
de
referencia
GPE
PC-‐Axis
Dublin
Core
Metadata
IniDaDve
Data
DocumentaDon
IniDaDve
• Estándar
de
• Método
para
• Estándar
de
documentación
meta-‐informar
documentación
de
carácter
archivos
PX.
de
recursos
genérico
estadísDcos
• Contempla
el
• Centrado
en
la
núcleo
parte
del
ciclo
desarrollado
de
de
vida
relaDva
DC.
a
la
producción
de
datos
Más
de
80
metadatos
documentales
OPEN DATA EN CANARIAS: Retos técnicos en la difusión de estadísticas oficiales
41. CICLO DE VIDA DE UN RECURSO
FASES
DE
PRODUCCIÓN
FASES
DE
DIFUSIÓN
Aceptación
Aceptación
Producción
de
de
Publicando
Publicado
Archivado
Producción
Publicación
Técnico
de
Ayuda
a
la
producción
Técnico
de
producción
ROLES
DEL
SISTEMA
Técnico
de
difusión
Administrador
OPEN DATA EN CANARIAS: Retos técnicos en la difusión de estadísticas oficiales
42. BLOQUES DEL NUCLEO DE METADATOS DE U.K. Y U.S.A
OPEN DATA EN CANARIAS: Retos técnicos en la difusión de estadísticas oficiales
43. BÚSQUEDA DE DATASETS
OPEN DATA EN CANARIAS: Retos técnicos en la difusión de estadísticas oficiales
44. CATÁLOGO DE DATASETS
DCAT
CIBERCENTRO
OPEN DATA EN CANARIAS: Retos técnicos en la difusión de estadísticas oficiales
45. GRACIAS POR SU
ATENCIÓN
Más información:
www.gobiernodecanarias.org/istac
slidershare/istac
@istac_es
OPEN DATA EN CANARIAS: Retos técnicos en la difusión de estadísticas oficiales