Los enemigos del open data y la transparencia

Siempre me ha hecho gracia la frase "¡Al suelo que vienen los nuestros!" y en este ámbito aplica perfectamente pues los mayores enemigos del opendata y la transparencia están dentro. No son como pudiera parecer los corruptos, los funcionarios indolentes o los dirigentes impresentables.
En su lugar merece a los propios partidos políticos, ya que parecerá que están a favor e incluirán estos términos y otros afines en sus discursos, pero en cuanto tengan cierto impacto ciudadano lo impulsarán 'a su manera'.

TERGIVERSACIÓN POLÍTICA

Lo primero que harán será confundir sobre si debe ser open data, transparencia, gobierno abierto, gobierno 2.0 u otros términos y empezarán a configurar diversas iniciativas sin el objetivo claro de mejorar la gestión. Empezarán a impulsar medidas donde el denominador común será:
- El claro liderazgo de la propia administración
- La falta de conexión con otras iniciativas tanto ciudadanas como del sector privado.
- La nula definición de objetivos cuantificables
Como reflejaba la máxima del despotismo  ilustrado "todo para el pueblo pero sin el pueblo" y comenzarán a lanzar tecnologías, legislación, portales, etc sin un claro foco en los resultados.

RESISTENCIA INTERNA EN LOS PARTIDOS

Además de forma callada los partidos se harán internamente preguntas como ¿Estamos seguros que la participación directa del ciudadano ¿mejorará la gestión o nos lo pondrá más complicado?, ¿Estamos abriendo las puertas a una democracia asamblearia?. o "¿Que papel nos queda a los propios partidos". E internamente se obtendrán respuestas como "Hasta ahora las cosas 'funcionan'".
Hay que tener en cuenta que la escala de enemistad hay tres grados "opositor, enemigo y compañero de partido". Es esperable que los escépticos de los partidos pongan zancadillas a sus propias iniciativas.

EL SINDROME DE LA PRIMERA PIEDRA

Inaugurar portales de open data es como poner la primera piedra de edificios. Podría suceder que nunca veamos el edificio completo (los resultados) o que no haya actividad reseñable dentro. Pero da igual, hay foto, y foto significa medios y medios significan votantes en la cortoplacista mente de las organizaciones políticas.
No mirarán en otras partes, pensarán que lo suyo es genial y se mostrarán satisfechos aunque no haya nadie que pueda interconectarse. En su lógica, mejor, así no hay ulteriores compromisos.

FOCO EN PRINCIPIOS NO EN RESULTADOS

En cuanto a las preguntas basadas en resultados (¿Cuanto nos vamos a ahorrar en corrupción, en fraude fiscal, en juicios, en desconfianzas, etc? como se analizaba en el retorno de la inversión en opendata) no hay, inicialmente, peligro de que ocurran.
Si existiera tal peligro se analizaría hoy lo que ocurre con los millones de euros en subvenciones y préstamos públicos. Sirven al objetivo de dar visibilidad al político, justificar (basado en principios) pero no se evalúa su impacto real (p.e. empleo creado, nuevos productos o servicios, rentabilidad empresas subvencionadas, continuidad proyectos, etc). Normalmente bajo la excusa, es muy complicado :-DDDD aunque éste realmente fuera su objetivo inicial.

ALGUNAS PREGUNTAS QUE HAY QUE HACERSE

¿Se han preguntado los políticos que lo han impulsado por los resultados que se pueden obtener?. ¿Por los indicadores que muestren el progreso de la iniciativa?, ¿Por un mínimo análisis del coste para invertir en lo más impactante?. Me atrevo a especular que salvo excepciones no. Por que estas medidas están siendo impulsadas por 'principios'. Y hay que tener cuidado por que cuando los partidos políticos impulsan medidas por 'principios', acaban sembrando el país de AVEs inútiles o se hacen aeropuertos sin aviones.
Se necesita, como en toda innovación autocrítica, escucha activa, correciones y humildad para mejorar. Y lamentablemente estos son adjetivos poco comunes entre nuestros últimos gobernantes. Afortunadamente muchos de los funcionarios o de los dirigentes públicos no políticos sí poseen estas virtudes y por lo tanto cuanto menos impulso y posicionamiento político mejor.

EL MALDITO LOCALISMO

Los partidos politicos en el gobierno de distintas administraciones intentarán explicar "Mi transparencia/Gobierno abierto, etc es mejor que el tuyo", por que está localmente adaptada a lo que necesitan mis ciudadanos.
 
Como sufrimos en el caso del software libre hace una década, ya estamos en el mismo pecado. Cuando existe un referente mundial de catálogos de datos, y basado en una tecnología de fuentes abiertas, como CKAN, en España es más bien la excepción su uso.
Ese impulso local impedirá el desarrollo de un sector industrial independiente y no permitirá la creación de una masa crítica que abarate los costes para la propia administración y permita su exportación incluso.

DI ALGO, QUE ME OPONGO

Además las fuerzas políticas en la oposición se apresurarán a clamar por una transparencia que en muchos de sus otros fuedos no impulsan o no han impulsado. Y provocará en los gobiernos en funciones el sindrome "Que se fastidie el sargento que no me como el rancho" y marginarán las iniciativas para no dar armas a su oposición.

Y para que abundar en lo que sucederá cuando haya elecciones.

GURÚS, MESIAS Y OTRAS HIERBAS

Además de los partidos políticos también surgirán (o quizás ya han surgido ya) gurús, mesías, iluminados, que habrán encontrado las respuestas correctas en el fondo de su particular caldero de las esencias (sin contraste con la realidad tampoco) y en lugar de arreglar o impulsar algo descubrirán que pueden vivir de vender vaporware, y que montarán su chiringuito no para implantar nada, sino para contar sus historias y arreglar sus propias cuentas de resultados. Desgraciadamente algunos dirigentes publicos, tal vez deslumbrados estos discursos ágiles invertirán copiosas sumas en 'tontás'.

CONCLUSIÓN

Sirva este post cascarrabias para adelantar los posibles problemas al desarrollo de la modernización de nuestra sociedad por la vía de la participación, la transparencia y de la publicación de datos y para ponerles remedio.
1) Tengamos claro que es muy real la posibilidad de que se carguen el sector y se nos pase la oportunidad de modernizar la sociedad.

2) Hay que tener muy claro que existirá un impulso envenenador (involuntario, pero no menos real) de los partidos políticos, que podrían anular los beneficios de la transparencia, la participación y la publicación de datos.

3) Por tanto impulso público sí, pero politización, la mínima,

ya que la falta de contraste con la realidad, permitirá el dispendio de fondos públicos, la dispersión de iniciativas, y  las acciones sin impacto real sobre la sociedad pero que se justificaránen base a prioridades políticas.

4) Conexión con la sociedad civil y con la iniciativa privada fundamental para alcanzar impacto.

5) Al mismo tiempo la adopción de métricas comunes de impacto real de resultados facilitarían alcanzar la sostenibilidad.

Ranking del #Opendata español

¿Se pueden clasificar los #opendata de España?
Problema: "¿Valen lo mismo todas las iniciativas Opendata? ¿Son igual de buenas? ¿Cómo compararlas desde una base objetiva? ¿Se puede llegar a una cifra que clasifique a las distintas fuentes de datos opendata?".

Aunque todavía son pocas las iniciativas #opendata en España, ya merece la pena tener una forma objetiva de compararlas.

Manos a la obra, ¿Podemos utilizar las 5 estrellas de Berners-Lee?

Incluir las restricciones legales
Es difícil por cuanto, probablemente por optimismo, la clasificación no incluye las restricciones legales que los publicadores (a veces AAPP)  pueden incluir al uso de la información. Por tanto podríamos decir que la clasificación a utilizar debe  adaptarse al estadio y tipo de publicadores en que nos encontramos.

Con 3 dimensiones basta

Dicho y hecho, aplicando metodología KISS, la solución se reduce a sólo 3 dimensiones de análisis, ya que de las  muchas posibles la mayoría no son accesibles, en general, vía web, por tanto:

1) Medir la licencia legal de publicación y los usos que permiten de los datos, buscando el máximo de reutilización.
2) Medir la accesibilidad,  en el sentido de posibilidad automática de acceso para garantizar el máximo uso.
3) Medir la apertura de la tecnología utilizada para publicarla lo que facilite la creación de herramientas que utilicen los datos.

Capturando los datos de las fuentes

Para llegar a nuestro objetivo, una cifra que valore la reutilizabilidad de una  fuente, es necesario asignar un peso a cada uno de estos aspectos y dentro de cada uno establecer una forma como asignar una nota. 

En este formulario de 3 preguntas se  realiza la toma de datos de cada dataset analizado (asignando la respuesta más próxima entre 5 opciones para cada una de las dimensiones) sin tener que realizar ninguna otra operación que se resuelve a partir de los datos introducidos en otras partes de la hoja de cálculo.

Se puede participar
Se puede participar en este análisis sin entrenamiento previo, ya que el formulario para calificar nuevas fuentes está abierto (y moderado por si los spammers).

Respuesta: Un Mapa interactivo
El resultado es un mapa interactivo (hacer click en la imagen) donde en cada punto (correspondiente a una entidad) se promedia la nota de todos sus datasets analizados.

NOTA: Todos los organismos públicos que todavía no publican sus datos son peores que los que aparecen en el mapa.

Resumen PSI Meeting Madrid 2010

El día 9 se ha celebrado en Madrid el PSI Madrid Meeting 2010. Un encuentro muy interesante donde ha habido ciertas reflexiones que o bien fueron compartidas por varios de los ponentes o bien creo que son destacadas por su relevancia y que recojo aquí.

Implantación: qué es necesario

- Liderazgo político. Y convencimiento de la organización. Sorprendentemente se afirmó que parece que los políticos son razonablemente receptivos a estos conceptos por encima de otros colectivos. 

- Mecanismos adecuados de licenciamiento que proporcionen seguridad jurídica a los reutilizadores profesionales.

- Apartarlo de la política partidista, es decir la reutilización debe ser asumida por todos los partidos políticos como un elemento propio de la función pública.

- Simplicidad y accesibilidad para la reutilización. Y recoger la forma de uso y las sugerencias de los reutilizadores.

- Incentivos para las AAPP para que vayan más allá del puro cumplimiento de la ley.

- Feedback. Que haya puntos de contacto para los reutilizadores.

 - Los datos deben proporcionarse al menos en formatos 'crudos' y más adelante mediante API's, webservices o equivalentes.

- No necesario, pero si parece de ayuda la existencia de Una agencia para la reutilización de información del ámbito público y sirva de interlocutor en casos de denegación de peticiones además de fomentar la interoperabilidad de los juegos de datos o servicios puestos a disposición de la sociedad.

Implantación: barreras
- Tasas altas de reutilización, incluso desde los infomediarios se aboga por la tasa gratuita que el País Vaso o adoptó.
- Miedos en los responsables de las AAPP a compartir datos sensibles, a posibles reutilizaciones tergiversadas y a costes no asumibles

Desafíos

- La medida del valor económico es compleja.Y en los pasillos se comentaba la actualización tanto metodológica como de datos el informe MEPSIR, una de las últimas referencias disponible en este ámbito.

- La nueva directiva europea sobre reutilización, que debería recoger conceptos más avanzados que la directiva actual que data de 2002.

Ámbito internacional

Hay consenso que el país de la UE que más adelantadas tienen estas políticas es el reino unido, si bien el reciente cambio de gobierno y los recortes presupuestarios podrían comprometer este liderazgo, España se encuentra entre los países seguidores.

Ambito nacional

Hay casos en las administraciones españolas no proporcionan los datos en condiciones adecuadas para los reutilizadores o directamente no dan respuesta a las peticiones para reutilización.

Frases destacadas
- "La generación de valor público no es un monopolio de la administración". Alberto Ortiz de Zárate

Nos reiremos en 5 años

Publicar los datos en 2015

Nos reiremos dentro de 5 años cuando recordemos que en aquella época, es decir hoy en el año 2010, las administraciones públicas no publicaban sistemáticamente los datos de su funcionamiento.

Información de subcontrataciones

Nos reiremos también de la dificultad actual para saber de forma rápida qué compañías contrataban con las distintas administraciones y por qué importes y cuales eran los resultados. Nos reiremos entonces de las facilidades que esto suponía para los corruptos.

Nuevos servicios

Puestos a reirnos, nos reiremos de como era posible de que hubiera restricciones y dificultades para mezclar los datos públicos con los de nuestra propia empresa y así crear nuevos servicios más interesantes para los ciudadanos y consumidores. Y de la cantidad de empleo e impuestos que no existían por esta falta de publicación.

Control del sector público

Nos reiremos de aquellos miedos de la alta dirección pública a que se conociera con cierta exactitud cada una de sus decisiones y se midiera su impacto desde fuera de la propia administración, incluidos los propios ciudadanos.

Menos manipulación

Nos reiremos finalmente de como era posible que se dieran datos  de la acción pública erróneos, obsoletos o tergiversados.

Desde el principio

Y también nos reiremos de como era posible que cuando se diseñaba un nuevo servicio público no se tuviera en cuenta que había que publicar los datos para los ciudadanos.

Ahorrando tiempo y dinero

Y de lo que más nos reiremos será de la cantidad de dinero  y de tiempo que se desperdiciaba entonces por la falta adecuación de los servicios a las necesidades reales.

¿Nos reiremos verdad?

Criterios de una fuente de datos para RISP (II)

¿Qué criterios mínimos debería pedirse a un dataset (conjunto de datos) para ser considerado una fuente pública reutilizable de datos.? (abreviando una fuente profesional RISP). Como reflexión particular para debate planteo las siguientes

condiciones:

Lo primero tiene que tener todas las condiciones de una fuente de datos ciudadana RISP.

Pero además para una explotación comercial debería incluir:

6) Que sea industrializable, es decir que haya una forma automatizada de acceder a los datos
7) Que tenga unas condiciones legales que permitan la explotación
8) Pago automatizable (en el caso de que lo haya), que no sea necesaria la intervención manual para el pago

9) Interoperable, que el formato de entrega esté adherido a algún estándar que permita el cruce sencillo de los datos


Industrializable

La necesidad de que sea posible una recuperación de datos sin intervención manual es evidente para una explotación profesional. Salvo utilizaciones muy específicas del ámbito profesional, un uso profesional no puede depender de una recuperación manual de datos para generar un cierto volumen de información. Por tanto una fuente donde la recuperación de datos dependa de consultar un formulario online introduciendo los valores en unos campos, es en general no admisible. En estos casos URL permanentes y normalizadas, una API o un web service son ejemplos de vías de distribución que permiten la industralización.

Condiciones legales

Una utilización profesional no puede estar basada en la inseguridad jurídica, por tanto el acceso a los datos debe estar respaldado de unas condiciones legales que fijen explícitamente los posibles usos de los datos. Si es posible deberían fijar también que posibilidades existen de mezcla con datos de otras fuentes y de la comercialización del resultado. Por tanto unas condiciones legales que no delimiten estos aspectos, o que simplemente impidan su reutilización profesional limitan que una fuente sea considerada como profesional.

Una muestra de lo que digo "La reproducción, distribución, comercialización o transformación no autorizadas de dichas obras, a no ser que sea para uso personal y privado, constituye una infracción de los derechos de propiedad intelectual de la ..(entidad).. o de su titular." 

o esta "El ..(entidad).. ha creado este sitio web para facilitar a los usuarios el acceso a la información estadística oficial. Los datos que aquí se contienen provienen de múltiples fuentes. El ..(entidad).. pone este material a disposición de los usuarios de forma individual, como licencia de usuario final. Queda por tanto prohibida toda comercialización de este derecho de acceso."

Unas condiciones legales como las de reutilización de los datos del banco mundial facilitan más la reutilización (en inglés) o estas genéricas de data.gov, el repositorio de datos federal de la administración de los Estados Unidos.

Pago automatizable

Aunque hay indicios de que los precios bajos son los que de forma global podrían fomentar el mayor beneficio para la sociedad, es indiscutible que el acceso a la información pública podría tener cierto coste, especialmente en el uso profesional. En este caso la existencia de 'tarifas planas' de acceso u otros mecanismos que no requieran de intervención manual para realizar las transacciones económicas es un requerimiento.

Interoperable

Que la información se proporcione en formato abierto no garantiza que sea utilizable en un ámbito profesional. Pensemos en cualquier fichero de microdatos como éste ejemplo de una encuesta del INE "1451601000071016511020000 210   1     11  0093  3       666    3                                                                  66 07    641119    30203    1      09  0017403" donde de no tener su significado su utilidad es nula. Se hace por tanto necesaria una estandarización de la semántica para no minimizar los costes de integración de distintas fuentes de datos . Complementariamente lenguajes como el SPARQL, de generalizarse, permitirán esas consultas entre distintas fuentes de datos.  Conjuntamente  permitirían una explotación muchísimo más profunda e interesante de la que actualmente disfrutamos, además de la generación de multitud de nuevos modelos de negocio, que seguramente hoy ni acabamos de imaginar.

En resumen, que la generación de modelos de negocio alrededor de la reutilización de la información del sector público es una enorme oportunidad para nuestras administraciones públicas y para nuestra sociedad en general. Para que ello sea posible es necesario desbrozar el terreno en el ámbito legal y abonarlo un poco en el ámbito técnico para que crezcan estos negocios, una posibilidad bien deseable en estas épocas de crisis.