Big y Open Data para las Smart Cities

BigyOpenDataparalasSmartCi3es

GuadalupeMiñ[email protected]

2

BigData

Opendata

Públicos•  Procesosinternosdelasadministraciones•  Datosdesensores(IoT)delasciudadesinteligentes•  DatosCienAficos•  Patrimoniocultural:Galerías,Museos,Archivosy

Bibliotecas

Privados•  TwiGerdejael10%delostuiGencadaáreageográfica•  Googlemaps•  Algunoscentrosdeinves>gaciónprivados•  …

OpenData

§  Elconceptodatosabiertos(opendata)§  Esunainicia3vamundialquepretendequelosdatosdelasAdministraciones

Públicasseexponganyseanaccesiblesdeformaqueesténdisponiblesparasuredistribución,reu>lizaciónyaprovechamientoporpartedelosciudadanosylasempresas

3

OpenData

§  Ideadelaquesurge:§  Losdatosqueungobiernohaobtenidoconlosimpuestosdelosciudadanosy

quepuedenserú3lesparaorganizaciones,empresaseindividuosdeberíanestaraccesiblesdadoquesetratadeinformaciónquepertenecealasociedad

§  Ejm:elgenoma,informacióngeográfica,cartográficaometeorológica,…

§  Organismospromotoresdeestemovimiento

4

OpenData

hGp://globalopendataini3a3ve.org

DeclaracióndelopendataInicia3valideradapororganizacionesdelasociedadcivil

§  Todoslosgobiernosporcues>onesdetransparenciahandecididocrearsupropioOpenData

§  En2013,losmiembrosdelG-8firmaronunacuerdocomprome3éndoseaadoptarpolí3casdeopendataensusrespec3vospaíses§  Eslibreaccesoparaqueotrospaísesuorganizacionesloanalicenytambiénpuedan

implementarlo§  Tieneunanexotécnicoenelqueseincluyenlasmejoresprác>casyaccionescolec>vascon

lafinalidaddedarcumplimientoacadaunodelosprincipios

hGps://www.gov.uk/government/publica3ons/open-data-charter/

OpenData

5

§  Caracterís3casquedebecumplirunsistemaopendata

§  Accesoydisponibilidad§  DatosdescargablesmedianteaplicacionesWeb§  Informaciónfácilaccederyfácildeencontrar§  Cumpliendounosestándares

§  Reu3lizaciónydistribución§  Elformatodelosdatosdebepermi3rsutratamientoinformá3co§  Lascondicionesdeusodebenpermi3rtratarymodificarlosdatosparacrear

nuevosserviciosqueaumentenelvalorsocialycomercialdelasociedad§  Debeserposibleredistribuirlosdatosquesurjanapar>rdelosdatosoriginal

§  Par3cipaciónuniversal§  Losdatosdebenestardisponiblesparatodaslaspersonasquedeseenu>lizarlos

§  Lascondicionesenlasqueseliberanlosdatosnodebenestablecerrestriccionesdeusoenfuncióndelcolec>voquelosvayaausar

§  Porejemplo,noseconsideraríacomo“datosabiertos”aaquellosdatoscuyousosolosepermiteenelámbitodelainves>gaciónoenelámbitodelaeducaciónoenelámbitoprivado

OpenData

6

Tercerafase:Retos•  Obtenerindicarosymétricasparaevaluar:

•  Elimpactosocialyeconómicoqueproducelapublicacióndedatos

•  Lareu>lizacióndelosdis>ntosconjuntosdedatos•  Valorarlaexperienciadelusuariodedatosparamejorarlas

plataformas

Primerafase§  Leydetransparencia§  Principalmentepolí>casquepromuevenla

publicacióndedatosmásquesuuso§  Desarrollodeportalesdedatosabiertos

Segundafase•  Reu3lizacióndelosdatos•  Facilitarquetercerospuedanusarlosdatosparaañadirvalor

mediantelacreacióndenuevosproductososerviciosqueaportenbeneficiosocialyeconómico

•  Conver>rlosportalesenplataformasdedatosabiertosquepermitandesarrollarproductos

Madurez

OpenData

7

8

CrearunsistemaOpenData

Analizaryseleccionarlos

conjuntosdedatospublicables

Crearunsistemadecatalogaciónorientadoalareu3lización

Construirunsistemade

integracióndelasfuentesdedatos

Selección Portaldedatosabiertos Sistemaintegradoyautoma3zado

§  Existenpropuestasdeconjuntosdedatosquedebenserpublicados

§  LaONG,TransparenciaInternacionalysus80indicadores

§  OpenKnowledgeFounda>oniden>fica10conjuntosdedatos

§  LanormaAENOR,“UNE178301CiudadesInteligentes.DatosAbiertos”,(2015)Habladeunaseriedeconjuntosdedatosquetodaciudaddebepublicar

§  Lastemá>casdealtoimpactoiden>ficadasporelG8

§  LaleydeTransparenciahabladepublicarunaseriedeinformación,presentementeenformatoreu>lizable

9

Analizaryseleccionarlosconjuntosdedatos

10

Analizaryseleccionarlosconjuntosdedatos

§  OjoalData100§  Obje>vo:Iden>ficarlos100conjuntosdedatosabiertosmásrelevantesparauna

administraciónlocal§  Losresultadosdeesteprocesopuedenserdeu>lidadparaaquellosequiposdegobierno

localinteresadosenimpulsarpolí>casdeDatosAbiertos§  ConvocatoriapromovidaporelPortaldeDatosAbiertosdelAyuntamientodeMadrid.Enel

marcodelencuentroLosretosdelBigData:compar>endoexperiencias

SeformounEquipomul>disciplinar

 Gestordecontenidosdedatos ComprehensiveKnowledgeArchiveNetwork


§  Nohayqueolvidarquehayunainfraestructuradetrásdetodoesto§  SevacreandounatecnologíaalrededordelOpenData(lamayoriaopnesource)

§  Losdatoshayquealmacenarlosenalgúnsi>o:basesdedatosdocumental,norelacional,comoMongoDB…

§  Hayquecrearunservidordeaplicacionesparapoderaccederaesosdatosydescargarlos

§  DesarrolladoporOpenKnowledge§  Códigoabierto§  Tecnologíamadura§  Soporte

11

§  Redtemá3caespañoladeOpenDatayCiudadesInteligentes(2014)§  Obje>vodefacilitarelintercambioytransferenciadeconocimientoseneláreadelosdatos

abiertosysuaplicaciónaciudadesinteligentes§  Par>cipangruposdeinves>gaciónnacionalesasociadosaUniversidades,Centros

Tecnológicos,administracionespúblicasyempresas

12


hGp://opencitydata.es

13

EjemplosdeOpenData

13

§  OpendatadelBancoMundial§  ProporcionaraccesoalosdatosdelBancoMundialsobreagricultura,desarrollorural,urbano

ysocial,cambioclimá>co,cienciaytecnología,comercio,deudaexterna,educación,pobreza,salud,deudaexternayotrosagrupadosporpaíses

EjemplosdeOpenData

14

EjemplosdeOpenData

16

EjemplosdeOpenData

EjemplosdeOpenData

17

18

ComunidadesyAyuntamientocondatosabiertos La apuesta RISP en las AAPP de España

ComunidadesAutónomas§ GobiernodelPaísVasco.OpenDataEuskadi§ GobiernodeCataluña.DatosAbiertosGencat§ GobiernodelPrincipadodeAsturias.Catálogodedatos§ GobiernodeCas>lla-LaMancha.PortaldeDatosAbiertosdeJCCM§ GobiernodeNavarra.Inicia>vaOpenDataNavarra§ GobiernodelasIslasBaleares.DadesObertesCAIB§ GobiernodeExtremadura.Reu>liz@§ JuntadeAndalucíaAyuntamientos§ AyuntamientodeBadalona.OpenData§ AyuntamientodeBarcelona.OpenDataBCN§ AyuntamientodeCórdoba.OpenDataCórdoba§ AyuntamientodeGijón.PortaldeDatosAbiertos§ AyuntamientodeLleida.DadesobertesdeLleida§ AyuntamientodeZaragoza.

Ayuntamientos CCAALeyenda:

§  Europeana§  Bibliotecadigitaleuropea,deaccesolibre,comenzóafuncionarel20/11/2008§  Reúnecontribucionesyadigitalizadasdereconocidasins>tucionesculturalesdelos

28EstadosmiembrosdelaUniónEuropea§  Susfondosincluyenlibros,películas,pinturas,periódicos,archivos

sonoros,mapas,manuscritosyotrosarchivos§  Obje>vo:uniraEuropaatravésdelacultura,poniendonuestropatrimonioal

alcancedetodosparausarloanivelprofesional,educa>vooporplacer

EjemplosdeOpenData

19

hGp://www.europeana.eu

§  Hispanaesundirectorio,unrecolectoryelpuntodeaccesocomúnalosobjetosdigitalesdelasbibliotecas,museosyarchivosespañoles

20

EjemplosdeOpenData

hGp://hispana.mcu.es

Reu>lizacióndelainformación

Definición

22

§  Seiniciaconunaleyenelaño2007promovidaporlaunióneuropea§  En2015seintroducenmodificaciones

Eluso,porpartedeterceros,dedatosgeneradosycustodiadospordis3ntosorganismosdelsectorpúblico,paraañadirvaloralosdatosmediantelacreacióndenuevosproductososerviciosqueaportenbeneficiosocial,económico…

Reu3lizacióndelainformacióndelsectorpúblico(RISP)

Haciaunaculturadereu3lización

Persiguetresobje3vosbásicos

23

Periodismodedatos-Ciudadanosmásinformados-Ciudadanosmásimplicados

Empresasinfomediarias

Reu3lizacióndelosdatos

CreacióndeAplicaciones

Beneficioeconómico- Retornoeconómico

- Motordelaeconomía- Ejm:Sectorturís3co-Des3nosinteligentes

- …

Beneficiosocial-MejorarlaCalidaddevidaenlaciudad

- Ciudadesinteligentes- …

...

Dis3ntasformasdereu3lización

24

§  CIVIOintermediariosentrelafuenteoficialdeinformación(datospúblicos)ylosciudadanosponiendoencontextoyanalizandolainformacióndetemascomplejos

Periodismodedatos

25

“Lagentenoconsumedatoslagenteconsumehistorias”

26

ClayShirky

Periodismodedatos

§  ¿Dóndevanmisimpuestos?Proyectoquesurgedeintentarentenderlospresupuestosgeneralesdelestadoparapoderentenderno>ciascomo

27

Estoes:Mucho? Poco?

Periodismodedatos

§  Elindultómetro§  LeydelsigloIXX:elgobiernopuedeindultaracualquierayno>enequejus>ficarlo

28

ü Númerodeindultosalaño:500ü Losdelitosmasindultados(ennúmerosrela3vos)son:

ü Funcionarioscontralalibertadindividual,(policíasquede>enenilegalmente)ü Delitoscontraelmedioambienteü Delitosdelaadministración:Prevaricación,malversaciónyrevelacióndesecretos

ü …

Almacenamientotodoslosindultosdesdehace20años Búsquedadelasentencia

NombredelcondenadoPorquélohabíancondenadoCuánto3empotardaronenindultarleQuéministrolehabíaindultado..

Tipodepersonapersonajepolémico

oconconexiones

polí>cas…

Análisis

Visualización Beneficiodeesteanálisis

Periodismodedatos

29

Periodismodedatos

30


30

31


§  APIparadesarrolladores

32


33


33

PRINCIPALMENTEAPPSPARADISPOSITIVOSMÓVILES


34

§  Conveniodecolaboración(2013)§  Losdatosqueusannoestabanabiertos§  LosdatosenformatoNOnormalizados

§  Generanvalor:§  Mejoralacalidaddevidadelciudadano§  HacendeMadridundes3nointeligente§  Ademáslasaplicacionesgenerandatosparahacerestadís3cas

MariamSaucedoPilarTorralboDanielSanz

Recycla.me AnaAlfaro

SergioBallesterosLidiaSesma

HéctorMartosÁlvaroBus>lloArturoCallejo

BelénAbellanasJaimeRamos

IgnacioP.deZiriza

VictorTorresAlbertoSegoviaMiguelBueno

MarOctavioToledoAntonioSanmarrnCarlosFernández

MAPA DE RECURSOS

Recycla.te


§  Víasciclistas§  Callesseguras

§  Bioetanol§  GNC§  GLP§  Eléctrico

§  Fijos§  Móviles§  Contenedoresderopa

§  Coches§  Motos§  Bicicletas

Mapaderecursos§  Informadelosdis>ntosrecursosyservicios

municipalesdisponiblesenlaciudaddeMadrid

§  Muestraenunmapalosmascercanosenbasealaubicaciónactualdelusuarioounadirecciónproporcionadaporelmismo


36

HábitatMadrid§  Losciudadanospuedeninformarsedetodaslas

ac>vidadesmedioambientalescomocursos,talleres,visitasguiadas,jornadas,etc.,queorganizaelAyuntamientodeMadrid

§  Ademáspuedenrealizarreservas


37

12Julio2013,PalaciodeCibelesAnaBotella,alcaldesadeMadrid,presentanuestrasaplicacionesparalaSmartCitydeMadrid


38

§  Empresasinfomediarias(mediadorasdelainformación)§  Obje3vo:eluso,reu3lizaciónydistribucióndelainformación,creando

productosdevalorañadidoquecontribuyenadarunamayorseguridadaltráficoMercan>lglobalimpulsandolaeconomíamediantelaaplicacióndemétodosquefavorezcanlafiabilidadytransparenciadelastransaccionescomercialesenelámbitoempresarial

39

Empresasinfomediarias

leyesdeproteccióndedatos,privacidadycompetenciadesleal

TerceraetapaProveedoresdeconocimiento

PrimeraetapaProveedoresdedatos

SegundaetapaProveedoresdeinformación

Evolución

§  Empresasinfomediarias(mediadorasdelainformación)§  Reu3lizanlainformación,tomanlosdatoslostransformanylosrevenden

§  Accedenalainformaciónenbruto(alasfuentesdedatosabiertos)§  Realizanprocesosconellos

§  Lostransforman,losdepuran,loslimpian,losvinculanlesañadenvalor,losenriquecen…

§  Producenunproductodevalorañadidoqueesloquedemandanlosclientes

Losclientesnoquiereninformaciónenbruto,haymuchainformaciónenelmercado,quiereninformacióntratada,manejableyqueseadapteasusnecesidades

EmpresasInfomediarias

40

Fuente:“CaracterizacióndelsectorInfomediarioenEspaña”,ProyectoAporta,Junio2011

La norma3va se conoce, pero 3enelagunas en lo referente a laresponsabilidaddesuaplicación

Elsectorinfomediarionosindicacuálessonlospuntosdemejora

Existe una can3dad razonable deinformación disponible, peropodemosmejorarendarlaaconocer

La información es de calidad, laslicenciasdeusonoestánclaras

Notamedia:2,83

Empresasinfomediarias§  Lacolaboracióndeestasempresasconlaadministraciónestáayudandoa

mejoraryorganizarlainformación§  Laadministraciónnosabetodalainformaciónque>eneensusbasesdedatos,a

veces>eneninformaciónduplicada,noconocentodaslasleyessobrelosdatos

41

§  Principalobje3vodeEuropeanapara2015-2020§  Pasardeunportalaunaplataforma:que”lagentereu>liceyjueguenconel

material,quepuedaninteractuarconotraspersonasypar>ciparenlacreacióndealgonuevo”

Usuariosdelosdatosculturales

Industriascrea3vas

Proveedoresdedatosculturales

Reu3lizacióndelosrecursosdelpatrimoniocultural

42

Reu3lización:Retornoeconómico

43

13,1%descendieronlosingresoshospitalariosunañodespuésdela

publicacióndelosdatosdeinspeccionessanitariasdelosrestaurantes

Granahorroensanidad

Fuente:hsp://kuafu.umd.edu/~ginger/research/JEH-final.pdf

Reu3lización:Retornoeninves3gación

§  Esunámbitodelopendataencrecimiento

§  Doslíneasprincipales:

§  Usarlosconjuntosdedatosqueyaestánabiertos,parainves3gar§  Sociología,Humanidades,Bioinformá>ca,…

§  AbrirlosdatosquesegeneranenexperimentoscienAficos§  Seempiezaacontemplarlosdatosdelasinves>gacionescomounafuentede

conocimiento

§  Unposibilidadesqueseanges>onadosporlasbibliotecas

44

§  Ins3tutoEuropeodeBioinformá3ca§  Pionerosdedatosabiertoseninves>gación§  PertenecealLaboratorioEuropeodeBiología

Molecular(EMBL)§  Elgenomasehadesarrolladograciasaque

centrosdeinves3gaciónabrieronsusdatos

45


§  OpenAccess(accesoabiertoaloscontenidosdelainves3gación)esunrequerimiento/recomendaciónenaquellasinves>gacionessoportadasporlosfondospúblicosdelprogramaHorizonte2020

46Fuente:GuidelinesonOpenAccesstoScien3ficPublica3onsandResearchDatainHorizon2020.Version16December2013


Cómoevaluarlossistemasopendata

§  Seechanenfaltaestudiossistemá3cosquemidanlahuelladelopendataenelmundo§  Estudiosquesebasenenejemplosverdaderosdereu>lizaciónnoenconjeturase

hipótesis

§  Importantedesarrollarindicadoresymétricasquenospermitan:§  Saberelgradodereu>lizaciónque>enecadadataset

§  Indicadoresquenosdiganlascaracterís>casque>enenquetenerlosconjuntodedatosparaserreu>lizados

§  Evaluarelimpactogeneradoporlareu>lizacióndelosdatos

§  Conocerlosmecanismosdecreacióndevalor

48

Medirelimpactodelosdatosabiertos

49

Madurezdelosportalesdedatosabiertos

hGp://www.europeandataportal.eu/en/content/open-data-maturity-europe

§  OpenDataBarometer§  Analizaelavancedelestadodelosdatosabiertosgubernamentalesen92paísesbasándose

entresparámetros:§  Avancedelasinicia3vas§  Implementacióndelosprogramas§  Impactoeconómico,polí3coysocial

50

Terceraedición,abril2016

hGp://opendatabarometer.org/data-explorer


Medirelimpactodelosdatosabiertos§  OpenData’sImpact:nacecontresmetasprincipales

§  Ofrecerunanálisisrigurosodelosprocesosyfactoresqueinfluyenenlademanda,distribución,publicación,reu3lizacióny,porúl>mo,impactodelosdatosabiertos

§  Evaluaryproporcionarpruebasdelpotencialqueencierraelopendataparalasociedad

§  Brindarconocimientosprác3cosalosresponsablesdelaspolí>casdedatosabiertos,alasorganizacionesciviles,emprendedores,inves>gadoresydemásinteresadosenlareu>lizacióndelopendata

51hGp://odimpact.org/


§  OpenData’sImpactestableceunataxonomíaparaclasificarelimpacto

52

Métricas

§  Las5estrallas:TimBerners-Lee,elinventordelaWeb§  UNAESTRELLA

§  Losdatosestánatrapadosenundocumento.Esdiucilextraerlosdatosdeldocumento

§  DOSESTRELLAS§  Datosenformaestructurada.Paraextraerlosdatosesnecesariounsovwarepropietario

§  TRESESTRELLAS§  Publicalosdatosenformaestructuradau>lizandoformatosnopropietarios

§  CUATROESTRELLAS§  Losdatosmásimportantes>enenunaURIypuedensercompar>dosenlaweb

§  CINCOESTRELLAS§  Ademásenlazadosaotrosdatos

53hGp://5stardata.info/es/

Datospublicadosenlaweb

Losdatosintegradosenlaweb

§  MétricaMEDOLAversión3.10§  4dimensionesdeanálisis§  Variosnivelesencadadimensión§  Cadanivelestáponderado

54Fuente:Abella,A.Or3z-de-Urbina-Criado,M.De-Pablos-Heredero,C.(2014)“Meloda,métricaparaevaluarlareu3lizacióndedatosabiertos:”Elprofesionaldelainformación23(6),582-588

Métricas

§  MétricaMEDOLA§  ProcesodeEvaluación

55Fuente:Abella,A.Or3z-de-Urbina-Criado,M.De-Pablos-Heredero,C.(2014)“Meloda,métricaparaevaluarlareu3lizacióndedatosabiertos:”Elprofesionaldelainformación23(6),582-588

Nivel

Nivel

Nivel

Nivel

Métricas

§  MétricaMEDOLAversión4.0§  Añaden2dimensionesqueafectanmuchoa

lareu>lización

56

Métricas

CIUDADNºDATASETPUBLICADOS

5DATASETSMÁSIMPORTANTES ACCESIBILIDAD Nºdereferenciasenwebexternas

NºdeAplicacionesgeneradas

FORMATO WEBDATASET F.CREACION NºDescargas

57

§  Propuestaparaobtenerindicadoresparaevaluarcuántoseestáu>lizando,gradodereu>lizaciónreal,unconjuntodedatosdadoysuimpacto§  IgnacioMelendrezMoretoTrabajoFinMaster“Auditoriaydiseñodeunametodologíade

OpendataparaSmartci>es”

Métricas

NormaAENORCiudadesinteligentes§  NormaelaboradaporelcomitétécnicoAEN/CTN178Ciudadesinteligentes

§  Definición,atributosyrequisitosparapoderconsiderarunaciudadinteligente

58ImagenrealizadaporIgnacioMelendrezMoretoTrabajoFinMaster“AuditoriaydiseñodeunametodologíadeOpendataparaSmartci>es”

§  DefineparacadaunodelosDominios,susDimensionesyMétricas§  Todoslosnivelesdeunamétrica>enenelmismovalor

59

NIVEL

NormaAENORCiudadesinteligentes

TablarealizadaporIgnacioMelendrezMoretoTrabajoFinMaster“AuditoriaydiseñodeunametodologíadeOpendataparaSmartci>es”

GuadalupeMiñanaropero

60

Big y Open Data para las Smart Cities

Data & Analytics

Transcript of Big y Open Data para las Smart Cities