Este fue el título elegido para la charla que el pasado 21 de octubre tuve el placer de compartir en la Facultad de Derecho de Murcia, en el marco de una nueva edición del Congreso DerechoTics dentro de Sicarm 2015.
Abriendo los datos en la Administración Local: Enseñanzas desde la experiencia
1. Abriendo los datos en la Administración municipal:
algunas enseñanzas desde la experiencia
Antonio Galindo Galindo. Ayuntamiento de Lorca
@antoniogalindog
3. ¿Qué entendemos por Datos Abiertos?
- Datos del Sector Público
- Sin procesar
No agregados, detallados, al máximo nivel de granularidad
- Formatos standar
Abiertos, formatos no propietarios
- Estructurados
Reutilizables de forma autómatica
- Disponibles
Normalmente en un portal
- Sin restricciones
Libres
4. Open data en la Administración Local
Centrando el tema
5. Open data en la Administración Local
Partiremos de una primera premisa:
Open data y administración local
mantienen una relación algo confusa,
no llega a ser transparencia ni llega a
generar negocio
6. Partiendo de esa premisa nos
encontramos con el primer
interrogante: ¿por dónde empezamos?
Nos enfrentamos a retos
– Organizativos
– Metodológicos
– Tecnológicos
Open data en la Administración Local
7. Barreras:
- Desconocimiento absoluto
- Poca cultura del dato
- Silos informativos
- Escaso retorno
- Mantener la tensión a lo largo del tiempo
- En contra de la creencia común necesita
presupuesto
8. Desconocimiento absoluto
Open Data es como el sexo adolescente:
todos hablan sobre él, nadie sabe
realmente cómo se hace y todos piensan
que los demás lo hacen, así que
nosotros decimos que también lo
hacemos
9. Poca cultura del dato
El porcentaje de datos no estructurados en
una organización está alrededor del 80%
Sólo el 0,5% de los datos son sometidos a
análisis.
Gran parte de esos datos no aprovechados
son datos no estructurados y, por
consiguiente, datos inabordables, a un coste
razonable, desde un punto de vista
interpretativo.
La investigación social ante su segunda revolución digital. Pablo Navarro, Antonio
Ariño, en El análisis de la realidad social, métodos y técnicas de Investigación.
Alianza Editorial, 2015
10. Silos informativos
Departamentos con mala o nula
gestión de datos
Departamentos con escasa
informatización
Departamentos que no comparten
información
11. Escaso retorno
Fruto de las anteriores barreras
En la administración local
Escaso retorno político
Escaso retorno ciudadano
12. Mantener la tensión a lo largo del
tiempo
En la mayoría de los casos si el
proyecto no nace de la estratégia
básica de la organización le ocurrirá lo
habitual en muchas ocasiones, que
fruto de una moda nacerá, y fruto de
esta morirá.
13. Necesidades presupuestarias
Aunque se puede hacer Open Data
Low Cost, incluso a coste cero, hemos
de tener en cuenta que contar con algo
de presupuesto siempre viene bien.
Además es signo de su creencia en él
como proyecto.
14. No hay dos iniciativas iguales, ni todas
surgen de la misma manera, tampoco
tienen porqué plantearse los mismos
objetivos.
La iniciativa de datos abiertos en Lorca
surgió de un modo un tanto peculiar,
además de ser una iniciativa de las
llamadas bottom-up.
Open data en la Administración Local
15. Open Data en Lorca
Comenzamos reutilizando datos
16. Todo el proceso cristalizó en un acuerdo de Junta
de Gobierno Local de 4 de octubre de 2013 de
creación del portal de datos abiertos del
Ayuntamiento de Lorca, que difundiría el catálogo
de datos, así como las aplicaciones y desarrollos
creados a partir de él.
18. 21 conjuntos de datos
Federado con el portal gubernamental datos.gob.es
Con alguna visualización de ejemplo de uso de los datos
Con nuestra aplicación turística para móviles
Esta fue nuestra versión alpha
¿Cómo llegamos hasta ella?
datos.lorca.es
19. Teníamos dos retos:
- El tecnológico
- La metodología
Por el dinero no teníamos que preocuparnos, porque
dinero no había. Tampoco lo necesitábamos.
datos.lorca.es
20. Los problemas de una entidad local de tamaño
medio son distintos a los de una administración de
gran tamaño.
Los ayuntamientos medianos como el nuestro
cuentan con los escasos recursos como desventaja,
pero con la manejabilidad organizativa como
ventaja.
Con manejabilidad organizativa me refiero a que su
tamaño ayuda en el proceso
Open data en la Administración Local
21. La mejor manera de llevar a efecto una política
integral de apertura de datos consiste en lanzar un
primer servicio de datos lo antes posible, en versión
beta. Una vez que existe algo tangible, hay que
mantener una conversación permanente con los
agentes internos y externos para avanzar
iterativamente en ciclos de decisión-ejecución-
evaluación.
Open Data Readiness Assessment "Estudio de Preparación para la
Apertura de Datos", Banco Mundial (2013),Nagore de los Ríos y
Alberto Ortiz de Zárate.
Open data en la Administración Local
22. Un programa completo de implantación de un servicio de datos
abiertos y promoción de la reutilización consta de 6 grupos de
tareas, algunas de las cuales son necesarias para la puesta en
marcha del portal, mientras que otras contribuyen al
ecosistema de reutilización.
1. Agenda
2. Preparación
3. Exposición
4. Promoción
5. Supervisión
6. Gestión del cambio
Open Data Readiness Assessment "Estudio de Preparación para la
Apertura de Datos", Banco Mundial (2013),Nagore de los Ríos y
Alberto Ortiz de Zárate.
Open data en la Administración Local
24. Retos
Metodología:
Ver que están haciendo los demás
¿Cuántas iniciativas hay en España?
No nos planteamos mirar en el
extranjero ya que nacemos de un modo
humilde
¿En quién nos fijamos? En aquellos
que mas ruido generan en redes
sociales
25. Iniciativas en España
Como iniciativas locales nos fijamos en:
Gijón
Zaragoza
A nivel autonómico
Euskadi
Catalunya
Castilla y León
Aragón
Baleares
Y por supuesto en datos.gob.es
27. Iniciativas locales
Gijón: Nos gustó mucho su forma de exponer
sus datasets (conjuntos de datos) y los
formatos en los que podias encontrarlos
1º Datasets relacionados con la transparencia: Presupuestos,
contratación pública, subvenciones y convenios...
2º Datasets relacionados con la reutilización comercial:
Turismo, movilidad...
3º Datasets relacionados con estadísticas y estudios en
profundidad: Población, vivienda...
¿Cómo clasificamos nosotros los datasets?
29. Iniciativas locales
Zaragoza: El inteligente uso de los
datos estructurados en su propia web,
la gran cantidad de formatos, el uso de
rdf, el punto sparql...
Rdf se creó en un principio como
modelo de datos para metadatos, pero
evolucionó en algo mucho más grande,
primero como método de modelado de
información sobre recursos web, y
sobre todo acerca de relaciones entre
cosas del mundo real.
33. Dcat
Dcat es un vocabulario basado
en Rdf para la descripción de
catálogos de datos públicos.
Además permite su federación
(integración) con otros catálogos
como podemos ver en
datos.gob.es.
34. Reglas clave para la apertura de datos
Simplicidad
Empieza con algo pequeño y sencillo. Es innovación,
aprende de la experiencia.
Rapidez
Mejor datos crudos ahora que información perfecta en
seis meses
Abordar los miedos e incomprensiones
Esto es fundamental dentro de la AAPP, es necesario
identificar los más importantes y hacerlo lo antes
posible
Open Data Handbook - OKFN
http://opendatahandbook.org/es/
41. Identificación
Auditoria de datos
¿Qué datos son críticos y queremos publicar?
¿Son gestionados directamente por el ayuntamiento o
por una empresa?
¿Tenemos modo de acceder a ellos?
¿Están en servidores municipales o externos?
¿Están en bases de datos?
42. Formato
¿En qué formato publicaremos los datos?
¿Los modelaremos de acuerdo a algún vocabulario
adecuado?
Formatos estructurados, poco complejos: csv, xml
Formatos estructurados complejos: rdf
http://datos.gijon.es
43. Licencias
El problema de la inexistencia de una única licencia
para los portales open data, genera confusión e
inseguridad.
Deben permitir la reutilización con fines
comerciales, así como su agregación, obras
derivadas etc...
Licencia, términos de uso o aviso legal para el
catálogo general, y específica para casos puntuales.
44. Selección
Selección de la información reutilizable NTI RISP
Se considera que un conjunto de datos es de relevancia cuando
este puede ser explotado por un gran número de agentes
reutilizadores o el beneficio potencial de su explotación es
elevado, medido en términos de bienestar social o de impacto
económico. Cada organismo, conocedor del tipo de información
que posee y de su potencial audiencia, deberá realizar estas
consideraciones y determinar qué información es más valiosa
para su reutilización.
http://datos.gob.es/datos/?q=node/2676
45. Los documentos y recursos de información reutilizables serán
primarios, evitando las modificaciones o alteraciones de la
información existente en la fuente
El nivel granular será el más fino posible, evitando agregaciones
adicionales, para posibilitar una reutilización adecuada a cualquier
necesidad
Los documentos y recursos de información reutilizables tendrán
asociada información estructurada que permita su procesamiento
automatizado
Los documentos y recursos de información de elaboración o
recogida periódica puestos a disposición para su reutilización
estarán actualizados a sus últimas versiones y se indicará la fecha
de última actualización, así como el periodo de la misma.
47. Descripción
Descripción de la información reutilizable:
Para la descripción de los documentos y recursos de
información reutilizables puestos a disposición pública se
asociarán los metadatos mínimos
En el anexo III de la NTI se describen el conjunto de
metadatos de documentos y recursos de información del
catálogo.
Ficha de cada conjunto de datos o dataset
+ Nombre
+ Descripción
+ Categoría
+ Etiquetas
+ Fecha de creación
+ Fecha de modificación
+ Frecuencia de actualización
+ Publicador
+ Condiciones de uso
48.
49. Publicación
Puesta a disposición de los documentos y recursos
de información .
Destinar un espacio para la publicación de
información estructurada sobre el catálogo de
recursos reutilizables que se ofrece.
¿Elegimos CKAN o nos quedamos con nuestro
portal?
50. Fomento del uso
Publicitar el portal
Publicar en el portal los casos de reutilización
Reuniones con infomediarios
Concursos de datos
Federación con otros catálogos (datos.gob.es,
datahub.io...)
53. Organización
Recordar las barreras nos servirá para hablar de la
organización.
Somos una iniciativa pequeña, centralizada en la
Concejalía de Sociedad de la Información. Surgen
también preguntas ¿Quién va a realizar cada uno de
los pasos especificados por la norma técnica? ¿Lo
harán siempre las mismas personas?
Identificación: Auditoría de datos. La sección de
informática normalmente sabe dónde están los datos,
pero no sabe cómo, su fiabilidad o utilidad.
Selección: Los departamentos (Siempre deberá ser
así, o por lo menos con su ayuda y consentimiento).
Descripción: Habitualmente lo hace el servicio o
departamento, aunque muchas veces lo hace también
la sección de informática.
54. Organización
Formato: La elección del formato es clara, en un
principio, y si es de una base de datos: csv, xml y
json, por ser los formatos mas usados. Si no es
de base de datos en el formato en que estuvieran
nativamente.
Licencia: Secretaría
Publicación: Sección de informática, aunque
podría hacerlo cualquiera, no hay cultura, y la
mayoría se hacen automáticamente.
Fomento del uso: todos los departamentos,
debería ser así, pero sólo nosotros lo hacemos,
los demás de un modo residual.
60. Teníamos varios problemas:
- Múltiples tipos de bases de datos
- Múltiples formato de archivo para la publicación
- Elaboración del catalogo de datos en formato
RDF-DCAT, para integración con otros portales
(Ej. datos.gob.es)
- Publicación de los datos en el portal web.
- API para desarrolladores
Automatización de la gestión y publicación de datos abiertos. Antonio Ayala López.
http://socinfo.es/contenido/seminarios/1419murcia2/AytoLorca.pdf
61. Solución: Crear una aplicación que fuese
capaz de:
- Gestionar diferentes tipos de bases de datos de una
manera homogénea.
- Adaptación a diferentes roles (administrador base de
datos, gestor de servicios y publicador.)
- Crear consultas sobre diferentes bases de datos
- Generar diferentes tipos de archivo para su
publicación
- Generar el catálogo de datos RDF-DCAT de manera
automatizada
- Automatizar la publicación de los datos
- Crear servicios para desarrolladores
Automatización de la gestión y publicación de datos abiertos. Antonio Ayala López.
http://socinfo.es/contenido/seminarios/1419murcia2/AytoLorca.pdf
62. Portal Web / CKAN
SEPADA
Software de extración y publicación
automatizada de datos abiertos
63. SEPADA
Software de extración y publicación automatizada de datos abiertos
Soporta distintas bases de datos
SQL
SERVER
ORACLE FIREBIRDMYSQL
POSTGRE
SQL ODBC OLDB
Gestionar
conexión
SEPADA
POSTGRESQL
Automatización de la gestión y publicación de datos abiertos. Antonio Ayala López.
http://socinfo.es/contenido/seminarios/1419murcia2/AytoLorca.pdf
64. SEPADA
Software de extración y publicación automatizada de datos abiertos
Genera los ficheros automáticamente mediante
consultas Sql a las bases de datos
Automatización de la gestión y publicación de datos abiertos. Antonio Ayala López.
http://socinfo.es/contenido/seminarios/1419murcia2/AytoLorca.pdf
65. SEPADA
Software de extración y publicación automatizada de datos abiertos
Publica del mismo modo los archivos en un
repositorio, a la vez que genera automáticamente
el catálogo de datos en RDF-DCAT
Automatización de la gestión y publicación de datos abiertos. Antonio Ayala López.
http://socinfo.es/contenido/seminarios/1419murcia2/AytoLorca.pdf
66. SEPADA
Software de extración y publicación automatizada de datos abiertos
Incluye un API para desarrolladores, creando
webservices para el consumo de datos en tiempo real
SEPADA_
MVC
SEPADA
Automatización de la gestión y publicación de datos abiertos. Antonio Ayala López.
http://socinfo.es/contenido/seminarios/1419murcia2/AytoLorca.pdf
67. Tecnología empleada
Lenguajes de programación: .NET y JavaScript
Base de datos: POSTGRESQL
Requisitos:
Windows XP o superior
Microsoft .NET Framework 4
Procesador 32 o 64 bits
IIS 7.0 o superior (SEPADA_MVC)
Automatización de la gestión y publicación de datos abiertos. Antonio Ayala López.
http://socinfo.es/contenido/seminarios/1419murcia2/AytoLorca.pdf
68.
69.
70.
71.
72.
73. Portal de Datos Abiertos Regional
Para que todos los Ayuntamientos y entes públicos de la Región que aún no
dispongan de portal puedan disponer de uno, la Comunidad Autónoma ha
delegado en la Fundación Integra la responsabilidad de crear un Portal de
Datos Abiertos regional en el que tengan cabida todas las entidades públicas
regionales. Cada una de las entidades que se adhiera a esta plataforma,
dispondrá de un catálogo propio, diferenciado de las demás y cumplirá con
todos los requisitos técnicos a que obliga la Ley, incluida la federación con el
portal gubernamental datos.gob.es.
Este portal, si bien aún no está abierto al público, ya se ha desarrollado y la
adhesión a él es gratuita. Además, para simplificar la operación con él, se
dispone de una herramienta gratuita de escritorio llamada SEPADA,
desarrollada por el Ayuntamiento de Lorca, que permite acceder a las bases
de datos de que se disponga con una configuración mínima y generar los
ficheros de datos abiertos y subir los mismos al Portal de Datos Abiertos de
forma automática, periódica y desatendida.
74. ¿Qué haremos en el futuro?
Integrar datos abiertos y transparencia de un modo
más efectivo
Integrar los datos abiertos dentro del paradigma de
Smart City
Hacer que Sepada soporte distintos lenguajes RDF
Continuar con la promoción de la cultura open data
y llevar los datos abiertos a la escuela
75. Bibliografía
Ley 37/2007, de 16 de noviembre, sobre reutilización de la información del
sector público. http://www.boe.es/diario_boe/txt.php?id=BOE-A-2007-19814
Real Decreto 1495/2011, de 24 de octubre, por el que se desarrolla la Ley
37/2007, de 16 de noviembre, sobre reutilización de la información del sector
público, para el ámbito del sector público estatal.
http://www.boe.es/diario_boe/txt.php?id=BOE-A-2011-17560
Open Data Readiness Assessment "Estudio de Preparación para la Apertura de
Datos", Banco Mundial (2013),Nagore de los Ríos y Alberto Ortiz de Zárate.
http://data.worldbank.org/sites/default/files/1/odra-peru-final.pdf
Resolución de 19 de febrero de 2013, de la Secretaría de Estado de
Administraciones Públicas, por la que se aprueba la Norma Técnica de
Interoperabilidad de Reutilización de recursos de la información. https://
www.boe.es/buscar/doc.php?id=BOE-A-2013-2380
Open Data Handbook – OKFN. http://opendatahandbook.org/guide/es/
Planes RISP de la administración pública. http://datos.gob.es/saber-mas/guias-
normas?q=node/27728
Automatización de la gestión y publicación de datos abiertos. Antonio Ayala
López. http://socinfo.es/contenido/seminarios/1419murcia2/AytoLorca.pdf