Open (&Big) Data Challenges for Smartcity

Dr. Victoria LópezGrupo G-TeC

www.tecnologiaUCM.esUniversidad Complutense de Madrid

Objetivos

• ¿Qué es Open Data?

– De Big Data a Open Data

• ¿Cómo trabajar con Open (&Big) Data?

• Proyectos Open Data para Smarcity

Big Data

DATOS

VOLUMEN

VELOCIDADVARIEDAD

Cada vez hay más cantidad de datos…

…nuevostipos y fuentes…

…y hay que procesar más datos en menor cantidad de tiempo.

BIG DATA

NUEVAS FORMAS DE USAR LOS

DATOS

NUEVAS FORMAS DE USAR LOS

DATOS

NUEVA INFORMACIÓN

(VALOR AÑADIDO)

NUEVA INFORMACIÓN

(VALOR AÑADIDO)

GENERACIÓN DE NUEVOS

SERVICIOS

GENERACIÓN DE NUEVOS

SERVICIOS

Open Data“Open data is data that can be freely used, reused and redistributed by anyone –

subject only, at most, to the requirement to attribute and sharealike.” OpenDefinition.org -

“Open data is data that can be freely used, reused and redistributed by anyone – subject only, at most, to the requirement to attribute and share alike.” OpenDefinition.org

Availability and Access: the data must be available as a whole and at no more than a reasonable reproduction cost, preferably by downloading over the internet. The data must also be available in a convenient and modifiable form.Reuse and Redistribution: the data must be provided under terms that permit reuse and redistribution including the intermixing with other datasets. The data must be machine-readable.Universal Participation: everyone must be able to use, reuse and redistribute – there should be no discrimination against fields of endeavour or against persons or groups. For example, ‘non-commercial’ restrictions that would prevent ‘commercial’ use, or restrictions of use for certain purposes (e.g. only in education), are not allowed.

4

Open Data

5

6

Open Data

Open Data

Open Data es una iniciativa mundial que pretende que los datos de las Administraciones Públicas se expongan y sean accesibles de forma que estén disponibles para su redistribución, reutilización y aprovechamiento por parte de los ciudadanos y las empresas.

“Open data is data that can be freely used, reused and redistributed by anyone – subject only, at most, to the requirement to attribute and share alike.” OpenDefinition.org

Big Data y Open Data

Big Data

Open Data

Open GovernmentSmart City

Aplicaciones

Datos abiertos

Datos del gobierno(dominio público)

Eco-sostenibilidad

NTICs

BeneficioTerceros

(Ciudadanos, empresas…)

Terceros(Ciudadanos, empresas…)

Sistema Open Data

Sistema Open Data

Desarrollo de nuevos servicios y

aplicaciones

Desarrollo de nuevos servicios y

aplicaciones

Open Data. Características1. Acceso y disponibilidad: datos descargables mediante

aplicaciones Web

2. Reutilización y distribución: El formato de los datos

debe permitir no solo su lectura sino también su

tratamiento informático.

3. Participación universal: Todo el mundo debe poder

acceder a los datos en igualdad limitando el uso comercial

y ciertos propósitos no permitidos.

Sistemas Open Data

Sistemas OpenData: Promoción de la creación de sistemas Opendata por los usuarios y lasorganizaciones.

Ejemplo EMT-Madrid: “Sistema Opendata: Cualquier sistema telemático propiedad de EMT a través del cuál se suministra información a sus cesionarios para que alimenten sus Aplicaciones Finales” (Acuerdo de cesión de datos, EMPRESA MUNICIPAL DE TRANSPORTES DE MADRID, S. A.)

Ejemplos de sistemas Open Data

Ejemplos de sistemas Open Data

Crear un Sistema Open Data

Gestor de contenidos de datos

Comprehensive Knowledge Archive Network

◦ Desarrollado por Open Knowledge

◦ Código abierto ◦ Tecnología madura◦ Soporte◦ Participan UK y USA◦ API REST

13/24Sistemas Open Data: Aplicaciones de Medio Ambiente - UCM 2013-2014

Crear un Sistema Open Data

Tecnologías usadas por CKANSitio Web

o Backend: Python

o Frontend: CSS3, HTML5 y JavaScript

Gestor de bases de datos

PostgreSQL

Mapeo objeto-relacional (ORM):

Buscador

14/24Sistemas Open Data: Aplicaciones de Medio Ambiente - UCM 2013-2014

15

Crear un Sistema Open Data

16

Crear un Sistema Open Data

17

Crear un Sistema Open Data

Una ejemplo con Recycla.me y Recycla.te!

Patrón Cliente/Servidor

PÚBLICOS PÚBLICOS O PRIVADOS

Web Service

Aplicaciones Open Data

Una ejemplo con Recycla.me y Recycla.te!

GENERA NUEVOS DATOS Y PRODUCE

UN SERVICIO

Aplicaciones Open Data

• Big Data Collection– Monitoring– Data cleaning and integration– Hosted Data Platforms and the Cloud

• Big Data Storage– Modern Data Bases– Distributed Computing Platforms – NoSQL, NewSQL

• Big Data Systems– Security– Multicore scalability– Visualization and User Interfaces

• Big Data Analytics– Fast algorithms– Data compression– Machine learning tools– Visualization & Reporting

20

The MIT proposal stage listto deal with Big Data

Sistemas Big & Open Data

Traducir en valor los datos recabados de diversas fuentes

Sistemas Big & Open Data

Ejemplos de Aplicaciones Open DataUn ejemplo con Open Data Euskadi

Un ejemplo con Open Data Euskadi

PRINCIPALMENTE APPS PARA DISPOSITIVOS MÓVILES

Ejemplos de Sistemas Open Data

Smartcity - Internet of the things

24

Desarrollo de Aplicaciones Open Data

Mariam SaucedoPilar TorralboDaniel Sanz

Recycla.meAna Alfaro

Sergio BallesterosLidia Sesma

Héctor Martos

Álvaro Bustillo

Arturo Callejo

Belén Abellanas

Jaime Ramos

Ignacio P. de Ziriza

Victor Torres

Alberto Segovia

Miguel Bueno

Mar Octavio de Toledo

Antonio SanmartínCarlos Fernández

MAPA DE RECURSOS

RECYCLA.TE

Visita auto-guiada por los diversos estilos de jardinería del Parque delBuen Retiro de Madrid

Ofrece información, curiosidades, imágenes antiguas, locuciones dellugar y una guía para llegar a ellos.Es un recurso educativo y cultural

27

MAPA DE RECURSOS EN LA CIUDAD DE MADRID

MAPA DE RECURSOS EN LA CIUDAD DE MADRID

• Parques y jardines• Aparcamientos

• Coches• Motos• Bicicletas

• Puntos Limpios• Fijos• Móviles• Contenedores de ropa

• Puntos de Suministro• Bioetanol• GNC• GLP• Eléctrico

• Rutas de Bicis• Vías ciclistas• Calles seguras

• Áreas de Prioridad Residencial

Madrid – Smart CityAplicación Mapa RecursosAplicación Mapa Recursos

Recycla.me(Premio Sopra 2013 y Finalista

Premios eMadrid 2013)

Demostración RECYCLA.ME

GENERA NUEVOS DATOS Y PRODUCE

UN SERVICIO

• Adaptación de la guía a dispositivos móviles

• Repositorio interactivo de Trucos y Consejos

• Adaptación de la guía a dispositivos móviles

• Repositorio interactivo de Trucos y Consejos

Proyecto Recycla.te - Funcionalidades

• Juego RecyclaDOS

• Difusión en Redes Sociales• Disponible en varios idiomas• Acceso a los puntos limpios fijos

• Juego RecyclaDOS

• Difusión en Redes Sociales• Disponible en varios idiomas• Acceso a los puntos limpios fijos

Proyecto Recycla.te - Funcionalidades

Demostración RECYCLA.TE

Camino seguro al cole

Objetivo: Fomentar la autonomía de los niños en la ciudadCamino seguro al cole es una herramienta de aprendizaje para

los niños y recogida de datos para los colegios en su dispositivo y padres e hijos ganen juntos en seguridad y

autonomía.

Consultar la araña de movilidadde cada colegio sobre un mapa yGuiar al niño desde el punto enque se encuentre hasta el puntomás cercano de entrada a laaraña de movilidad.

Valoración de la ayudaprestada por un comercioamigo de los niños en unintervalo de 1 a 5 estrellas,permitiendo visualizar lavaloración media y suposición en un mapa.

Notificación de una incidenciaen el Camino seguro al coledirectamente al Ayuntamientode Madrid a través de su páginade Gestiones y trámites.

Recogida de las rutas que losescolares siguen desde sucasa al colegio para lageneración o actualización dela araña de movilidad.

Vídeo de demostración

GENERA NUEVOS DATOS Y PRODUCE

UN SERVICIO

12 Julio 2013, Palacio de CibelesAna Botella, alcaldesa de Madrid, presenta nuestras aplicaciones para la Smart City de Madrid

Primeros Premios SOPRA y eMadrid2012 2013

Smart Access: plataforma Open Data sobre datos de movilidad en Madrid

MyConference (Conferencia Gerencia - UCM)

Open Data (Ayuntamiento de Madrid)

Apps Multiplataforma (Ayuntamiento de Madrid)

Camino Seguro (ONCE)

Social Sport (rectorado UCM)

Otros proyectos

Open (&Big) Data Challenges for Smartcity

Dr. Victoria LópezGrupo G-TeC

www.tecnologiaUCM.esUniversidad Complutense de Madrid