lunes, 30 de diciembre de 2013

The public sector as a spearhead of the data revolution

A couple of months ago, I had the opportunity give a presentation in some training sessions on open data and the reuse of public sector information. All of them were oriented to disseminate these policies and its legal framework among civil servants and public employees. I usually focus this kind of sessions as an opportunity to convince my colleagues of the economic and social benefits of releasing public sector information. As times goes by and I take part in more training sessions, I begin to think that it would a good idea to introduce in the sessions some remarks about why is important to foster data skills and culture among the society and the role the public sector should play as the spearhead of this dissemination activity.

There is a clear gap between the potential economic value of the reuse of public sector information and its current actual value. While the European Commission has estimated this potential value in 40.000 € million with a spillover of 140.000 € Million, several studies in Member States using different methodologies have reached the conclusion that the actual value is around 10% of the estimations above (see studies in UK and Spain). Of course  one reason for this gap could be the scarcity of valuable public sector information available, but we should not underestimate the lack of capabilities to take advantage of the data available in a valuable manner as another critical cause for this gap.

Maybe you could think the situation described above it is a well known fact. But I´m not talking about the lack of big data and open data professionals highlighted by the experts. The problem is deeper and more spreaded. A data divide is begining to arise, and in the same way that, years ago, digital literacy campaigns were deployed now we need data literacy campaigns if we want to reap as a society the benefits of the data revolution.

The economic reason is important enough, but there are also social reasons for spreading the data culture among the citizens. Crowdsourcing could be a disruption as innovative as the cloud services for the public sector. The latter is technology on demand, the former is human resources on demand. But in a data driven society these human resources will be valuable only if they have a certain command of the data skills. Therefore, the collaboration pillar of the open government model will be impossible to build up within a society that lacks of culture of the value of data. As someone has pointed, this data or digital literacy campaigns should be mixed with civic literacy.

And the data literacy campaigns should start within the public sector. The reason is so obvious. If we provide the front-line civil servants with these needed data skills they would be able to help the community they serve to take full advantage of the open data resources available or they would be able to develop their own services using public datasets or public APIs. Besides beign an efficient manner to spread the data culture, this would imply a great leap in public sector effectiveness.

jueves, 19 de diciembre de 2013

The European Parliament: The #cloud king is naked

According with one of  its most used definitions, a technology is considered a General Purpose Technology (GPT) when it has the following features
  • It is a single, recognisable generic technology
  • Initially has much scope for improvement but comes to be widely used across the economy
  • Has many different uses
  • Creates many spillover effects
Up to a certain degree, Cloud-Computing meets these four features of a GPT, and therefore could be thought a transformational technology of our society in the same level as the steam engine, electricity or the Internet. This rationale is behind the high degree of priorisation given by the governments to the development of a national cloud-computing industry.

However, not all the nations will be able to develop their own cloud-computing industry. There is a need of an strong and big national basis to boost the industry to the transnational level, because, due to its nature,  it is not possible to compete in the international cloud market without this strong national basis. As usual, in the fragmented Europe the only solution is tackling the development of the cloud industry from an European perspective.

Not tackling the development of the cloud.computing industry at the European level has clear economic implications. According with a recent study, only 6% percent of the cloud providers are European, while the USA counts with an 88% share of the market. This fact not only has an impact in terms of value added to the GNP, the same study indicates that 63% of the revenues are generated by USA suppliers and 23% by EU suppliers, it also has an impact in the development of colateral markets (e.g. cloud insurances), employment and the taxes collected by the governments.

Due to this foreseen economic impact, the US industry has accused the EU countries of being obstructionist when they use their legal framework as a reason for not using cloud-computing services in a massive scale. Neither governments nor big companies have migrated to the cloud its IT infrastructure, and cloud services are only a clear success among SME and consumers. But the theorical false excuse have taken a real form with the Snowden case, and the European Parliament (EP)  has published probably the best report ever about how the cloud could be a driver factor to weaken our fundamental rights. Although the driver of the document are the recent PRISM-related revelations, it provides a whole set of details to being taken into consideration for the development of a cloud-computing policy in Europe.

To begin with, the EP document gives an interesting historical background of US surveillance. Perhaps the most revealing detail are the existence of possible secret surveillance treaties between US and UK as a continuation of their II World War partnership against the Nazis. Certainly, a possible secret "no spy" agreement between them could explain the opposition of UK government against the European Commission (EC) proposal for a new Data protection regulation in EU, as well as its petition to "The Guardian" to destroy Snowden files or to hand them back.

Something that also should concern us is the complexity of US regulation related with intelligence surveillance on communications. To begin with, the Fourth Ammendment that protects US citizens rights to privacy it does not seem applicable to EU citizens or any other foreign citizens. But even more, even if it protect them a twisted interpretation of the third party doctrine could have as a consequence not having "a reasonable expectation of privacy" and our transactions in the cloud being inspected without the supervision of an independent judge. Even more, the power of surveillance does not stop in infrastructures deployed inside USA, an 2007 ammendment of the FISA could also be interpretated as a new power targeted at the communications of non-US persons located outside the territory of the US. As cloud infrastructure could be considered as a communication infrastructure, the report concludes, the US legal framework related with intelligence surveillance has a consequence a legal uncertainty over EU citizens fundamental rights in their usage of cloud services provided by US companies.

The report gives in the end some recommendations about how to increase the degree of protection for EU citizen in the usage of cloud services. Perhaps, the most important one is the recommendation to renegotiate the agreements for transfer personal data between USA and EU. The general idea is that if we want that the US companies to fulfill our Data Protection legal framework we need to introduce heavy sanctions in case they do not comply with it. The reason is obvious, cloud computing introduce in the IT providers the need to fulfill with different legal frameworks and now the legal framework in the USA is more strict than the one we have in the EU (e.g. if a US provider does not comply with intelligence surveillance regulation faces prison). The document even critizises the Safe Harbour agreement as a false solution with insufficient safeguards.

Certainly cloud computing looks as a powerful and needed solution for many applications, for instance it is unthinkable to thing in big data applications without cloud storage capabilities. Same could be said about the processing needs for smart cities. But without the trust there will not be a take-up of cloud services, and the document of the EP has had the courage to denounce this need.

sábado, 14 de diciembre de 2013

Políticas públicas de datos

Recientemente, me cruce con el concepto "Lobby de datos" de mano del blog de Borja Adsuara. Ciertamente, y tal como citaba en su post  "el Big Data abre un espacio para que aquellos que participan en la toma de decisiones en una sociedad puedan influir legítimamente"No es nada nuevo que los datos puedan usarse para influir en la toma de decisiones, pero el Big Data nos trae un escenario nuevo en que se puede romper el actual equilibrio de fuerzas en la posibilidad de ejercer influencia social mediante el uso de datos. De cómo los gobiernos afrontan el desarrollo de políticas públicas alrededor de los datos dependerá que el nuevo balance de fuerzas suponga un empoderamiento de mas o menos grupos de ciudadanos.

Analizar el Big Data desde esta perspectiva de balance de fuerzas de poder, sería una extensión muy apropiada del libro de "The Price of Inequality", de Joseph Stiglitz. En el libro, el premio Nobel desarrolla con ejemplos la batalla entre el 1% frente al 99%, y cómo se acrecienta cada día que pasa las diferencias entre la minoría de los más poderosos frente al resto de la sociedad. Según el autor, el 1% acrecienta su dominio mediante la influencia en el desarrollo de políticas públicas que asienten su poder, reconduciendo la fuerza de cualquier innovación social, económica o tecnológica hacia este objetivo. Esta captura de cualquier avance a favor de los intereses del 1%, sería un posible escenario consecuencia del desarrollo del Big Data. Se presentaría el riesgo el 1% acrecentará su capacidad de influencia por ser los únicos que tuvieran las capacidades de navegar el el mundo de datos que se nos avecina. El 99% sólo le quedaría perecer en el diluvio de datos que anunciaba El Roto.

Son tres las palancas de las que depende el equilibrio de poder en este nuevo escenario de la influencia y el lobby que nos trae el Big Data:

  • Capacidades intelectuales para extraer el todo valor de los datos, ser capaz de identificar, seleccionar y combinar los datos disponibles 
  • Acceso a fuentes de datos de calidad 
  • Infraestructura para poder realizar el tratamiento de datos de modo ágil y en tiempo de ejercer la influencia

Estos tres elementos se identifican claramente en "Seizing the data opportunity", el documento estratégico al respecto del mundo de datos de UK.

Una redistribución de la capacidad de influencia bascula, consecuentemente, sobre ofrecer educación de datos al mayor número de personas, el dominio de datos de uso público que se establezca (de origen público o privado) y el grado en que se facilite el acceso y uso de infraestructuras para tratamiento de datos. Vamos necesitando la definición de políticas públicas de datos con un extenso análisis de impactoPo.

miércoles, 11 de diciembre de 2013

#astic Apertura Premios @_ASTIC 2013

En primer lugar, gracias a todos los que hoy habéis podido acercaros a esta celebración de los Premios ASTIC 2013. Quizás el más importante de los eventos en que nos reunimos a lo largo del año, porque en él reconocemos, en particular, el trabajo de nuestros compañeros y, en general, la labor de aquellos que han contribuido al desarrollo y aplicación de las TIC en las AAPP.

Cerramos el año en que se ha iniciado la reforma de la Administración. De aquel documento de propuestas para la CORA que elaboramos, ha habido aspectos que han sido recogidos y que hemos aplaudido: La creación de la figura del CIO o el reconocimiento y mantenimiento de las unidades TIC departamentales son las más importantes. Sin embargo, el proceso de elaboración de las medidas de CORA ha sido opaco y dando pocos espacios a la participación abierta que hubiera enriquecido el proceso. La reforma de la Administración no debería continuar por esa vía.

Ahora es el turno de la creación de la Agencia de servicios comunes TIC. Aunque nuestra apuesta era una Agencia de servicios comunes "y punto", también ofrecemos nuestra colaboración para su diseño. La valoración del talento interno del personal funcionario para sus puestos directivos y operativos deber ser el eje angular de la norma en que se defina su estructura. Pero sobre todo, debe construirse desde el diálogo y contando con los profesionales públicos que van a integrarla. El cambio cultural necesario para el éxito del proyecto sólo tomará raíces sólidas si es un proyecto de todos.

Y para poder colaborar de modo efectivo necesitamos una asociación fuerte. Nuestros nuevos estatutos nos dan una base para crecer, y de acuerdo a los mismos convocaremos para Febrero las elecciones para renovación de la junta directiva en las próximas semanas. Os animo a participar de modo activo y presentar candidaturas. Para mi ha sido un honor haber sido presidente durante este tiempo, y seguiré a disposición de quien dirija la junta que salga del proceso electoral. 

Y sin más, agradecer a los patrocinadores su colaboración y empezamos con la ceremonia.

miércoles, 4 de diciembre de 2013

#BigData : Organizaciones basadas en datos y profesionales de los datos

En un discurso hace unos meses, la Comisaria de Sociedad de la Información, Neelie Kroes, mostraba su convencimiento de nuestra entrada en la era del Big Data. La generación de datos alrededor nuestro es imparable, y en ese mismo discurso mencionaba el hecho de que estamos creando cada dos días tanta información como habíamos creado hasta 2003. Las organizaciones, entre ellas las Administraciones, no les queda más remedio que cambiar el modelo de trabajo y organización para poder explotar este caudal de información. En definitiva, y como indicaba en un anterior post, hacer crecer las capacidades de la organización alrededor de los datos.

Se habla de crear organizaciones cuya actuación ha de estar guiada por los datos. Quizás sea éste un objetivo erróneo, y sea más correcto hablar de organizaciones cuya actuación se base en las evidencias que pueden deducirse de los datos. Unas organizaciones caracterizadas por 
  • Tener capacidades internas tanto humanas como tecnológicas
  • Inviertan de modo constante en ampliar sus fuentes de evidencias y saquen partido del stock que han acumulado a lo largo de los años
  • Se apoyen mediante redes de buenas prácticas en el avance hacia la extracción de valor de la marea de datos
El punto más débil para habilitar la construcción de este futuro de organizaciones apoyadas en los datos es el factor humano. Es el discurso antes mencionado, Neelie Kroes indicaba que en los últimos 20 años la demanda de profesionales de datos se ha multiplicado por 12. Simplificando, se habla de la necesidad de científicos de datos, pero en realidad son más variados los perfiles de profesionales de la información que necesitan las organizaciones. Se habla hasta cinco los perfiles de tratamiento de datos que necesitamos:
  • Limpiador de datos, encargado de asegurar la calidad y coherencia de los datos recibidos de fuentes externas
  • Explorador de datos, que identifique las fuentes de datos más útiles para una organización en cada momento
  • Arquitecto de datos, que haga accesible la información disponible a cada miembro de la organización de acuerdo a sus necesidades
  • Analista de datos, creador de algoritmos de explotación sofisticada de la información disponible
  • Experto de negocios, que transforme las conclusiones extraídas de la información en acciones y campañas del negocio de la organización
Estas personas habrían de proporcionarla nuestro sistema educativo. Una vez más, como en toda revolución de negocio existe una carencia de entornos académicos apropiados para formar a los profesionales que necesitamos. Los programas son aún inmaduros y carecen de un contenido práctico real, pero sólo dando el primer paso del apoyo a su creación podrán existir (como en el caso de la Agenda Digital para España).

Transitar hacia la economía de los datos ha de basarse en organizaciones que hagan de la información el combustible de su negocio. Sólo será posible con una base de profesionales que estén formados en la explotación de los mismos.

palyginti kainas