SlideShare une entreprise Scribd logo
1  sur  54
Télécharger pour lire hors ligne
H E L S I N K I • E S P O O • V A N T A A • K A U N I A I N E N
hri.fi
Datan avaamisen perusteet
23.11.2022 | KOULUTUS
Hami Kekkonen ja Kaisa Voipio
Helsingin kaupunginkanslia
Koulutuksen ohjelma
Klo 9.00 Esittelykierros: tutustutaan osallistujiin
Mitä on avoin data?
Mikä on Helsinki Region Infoshare?
Parikeskustelu
Klo 10.30 15 min tauko
Klo 10.45 Mikä on ohjelmointirajapinta?
Klo 11.00 Tietosuoja datan avaamisessa
Klo 11.30 Lounas (omakustanteinen)
Klo 12.30 Datan avaaminen Helsingin kaupunkitietoyksikössä / Ari Jaakola
Klo 12.50 Taulukkodatan hyödyntäminen (tauko sopivassa välissä)
Klo 14.20 Datan hyödyntäminen Metropoliassa / Hannu Markkanen
Klo 14.40 10 min tauko
Klo 14.50 Paikkatiedon hyödyntäminen / Antti Ahola, Geosprint Oy
Klo 15.40 Loppukeskustelu
Klo 16.00 Koulutus päättyy
Esittelykierros
Mitä sinulle tulee mieleen termistä avoin data?
Mitä toivot koulutukselta?
Onko sinulla jo nyt joitakin kysymyksiä?
Avoin data
Valtavasti dataa
Sosiaali- ja
terveydenhuolto
Energia
Maankäyttö
Rakentaminen
Päätökset
Väestö
Päivähoito ja
koulutus
Julkinen liikenne
Tapahtumat
Kulttuuri
Pysäköinti
Asuminen
Avoin data pähkinänkuoressa
Julkista tietoa
Lupa käyttää
Maksutta saatavilla
Rakenteisessa muodossa
Julkista tietoa, mutta ei avointa dataa
Liikenneonnettomuudet Helsingissä 2014-2016 -julkaisu (pdf)
Julkisesta tiedosta avoimeksi dataksi
Liikenneonnettomuudet Helsingissä -aineisto HRI:ssa
Avoimen datan hyötyjä
JULKISHALLINTO
Hallinnon sisäinen
tehokkuus
KUNTALAINEN
Läpinäkyvyys ja
demokratia
YRITYKSET
Liiketoiminta ja
innovaatiot
KORKEAKOULUT
Opetus ja tutkimus
Avoimen datan hyödyntäminen
Lukuisia mahdollisuuksia
Liiketoiminta Osallistuminen Datajournalismi
Opetus ja tutkimus Läpinäkyvyys Taide
Läpinäkyvyyttä
visualisoinneilla
Vantaan, Kauniaisten,
Espoon ja Helsingin
kaupunkien sekä HUS:n ostot
Handata-sovellus
Paikkatietovisualisointeja Twitterissä
Topi Tjukanovin tekemiä pieniä paikkatietovisualisointeja:
• pääkaupunkiseudun rakennusten ikä
• Helsingin kasvu vuosien saatossa
• matka-aikoja
Pääkaupunkiseudun rakennusten ikä
Helsingin kasvu
Topi Tjukanovin Twitter-tili
Kurkistus
menneisyyteen ja
muutokseen
Helsingin ortoilmakuvat eri
vuosikymmeniltä
Helsinki ilmakuvina 1932 alkaen-
sovellus
Ilmakuvia myös Espoosta,
Kauniaisista ja Vantaalta HRI:ssä
ja kaupunkien karttapalveluissa
Datojen yhdistely luovasti
Helsinki 1943 3D -sovellus
Vertaile historiaa ja nykyhetkeä
Helsinki ennen ja nyt -sovellus HRI:n sovellusäänestyksen voittaja oli viikonlopun urakka
Sovelluksilla uutta liiketoimintaa ja
innovaatioita
HSL:n avoin data
Helsinki Public Transport Visualized
ReittiGPS
Blindsquare
Nysse
Uusia palveluja nopeasti
HSL:n Reittiopas API -data
Tellinkibotti-sovellus
Paikat, tapahtumat ja aktiviteetit
MyHelsinki Open API -data
Tutkimusmateriaalia
HY:n Quantitative methods for sustainable land use planning
I: Accessibility & mobility analyses -kurssin lopputöitä
Sovellusgalleria
• HRI:n sovellusgalleria
• Pääosin kaupunkien
ulkopuolisten tahojen tekemien,
avointa dataa hyödyntävien
sovellusten, visualisointien ja
ohjeistuksien esittelyä
• Sovellusideoiden kerääminen
käyttäjiltä
Helsinki Region Infoshare
Pääkaupunkiseutu – avoimen datan
edelläkävijä
Helsinki Region Infoshare on Suomen monipuolisin avoimen datan palvelu ja kansainvälistä
kärkeä.
Perustettu 2011
Helsingin, Espoon, Vantaan ja Kauniaisten kaupunkien yhteinen avoimen datan palvelu.
Palvelusta löytyy pääkaupunkiseudun kaupunkeja ja koko seutua koskevaa tietoa
kaikkien vapaasti ja maksutta hyödynnettäväksi.
HRI auttaa kaupunkitiedon avaajia ja tukee tiedon hyödyntäjiä.
Helsinki Region Infoshare – hri.fi
Datakatalogi
Sovellusgalleria
Uutisia
Blogikirjoituksia
Ohjeistuksia
Koulutuksia
Konsultaatiota
Kehittäjätapaamisia
Korkeakoulu-
yhteistyötä
HRI käytännössä
• Autamme pääkaupunkiseudun
kaupunkeja mm.:
• Avattavien datojen tunnistamisessa
• Datan julkaisukelpoisuuden
arvioimisessa
• Teknisissä ja juridisissa kysymyksissä
• Datan avaamisessa
• Avaamisesta viestimisessä
• Yhteydenpidossa datan hyödyntäjiin
Sähköpostitse / puhelimitse /
palavereissa / infotilaisuuksissa /
koulutuksissa /
kehittäjätapaamisissa…
Dataa kaikilta elämän aloilta
ASUMINEN
47
HALLINTO JA
PÄÄTÖKSENTEKO
48
KARTAT
170
KULTTUURI JA
VAPAA-AIKA
62
LIIKENNE JA
MATKAILU
88
VÄESTÖ
147
OPETUS JA
KOULUTUS
37
RAKENNETTU
YMPÄRISTÖ
112
TALOUS JA
VEROTUS
39
TERVEYS JA
SOSIAALIPALVELUT
25
TYÖ JA
ELINKEINOT
39
YMPÄRISTÖ
JA LUONTO
88
Datojen lukumäärät syyskuulta 2022
Datan metatiedot HRI:ssa
Nimi
Lisenssi
Käyttötilastoja
Lisätietoja
Datasta tehtyjä
sovelluksia
Sanallinen kuvaus
Datan latauslinkki /
linkki rajapintaan
Mahdollisuus kysyä,
keskustella, antaa
palautetta
Tervetuloa!
HRI Loves Developers
TAPAHTUMIA
10.11. Tekoäly kaupungeissa
26.1. Liikkumisen digitaalisella
kaksosella älykkääksi
talvikaupungiksi
Helsinki Loves Developers -ryhmä Facebookissa & Kehittäjäyhteistyöstä HRI:ssa
Korkeakouluyhteistyötä
Artikkeli vuoden 2019 opiskelijayhteistyöstä
Yhteistyötä
moneen suuntaan
• Suomen suurimmat kaupungit
• Valtion avoimen datan palvelu avoindata.fi & VM
• Kansainvälistä mielenkiintoa (esittelyjä)
• Kansainvälinen yhteistyö
• Mitä tehdään?
• Edistetään yhteneväisiä data-avauksia
• Luodaan avoimia ja standardoituja ohjelmointirajapintoja
• Edesautetaan datojen löydettävyyttä ja hyödyntämistä
• Jatkokehitetään yhdessä avoimen datan portaaleja
Avaamisen perusteet käytännössä
Datan avaaminen käytännössä
Julkisuus ja maksuttomuus
Tiedon oltava julkista
• Julkisuuslaki (laki viranomaisten toiminnan julkisuudesta)
• Muu lainsäädäntö mm. EU:n tietosuoja-asetus, yleinen turvallisuus
Tieto ei saa sisältää henkilötietoja eikä yleistä turvallisuutta
vaarantavia tietoja
• Julkaistaan vain tietoa, jossa ei ole henkilötietoja
• Tarvittaessa tiedon anonymisointi / karkeistus
Julkaisijalla on oikeus julkaista tieto
• Tekijän- ym. immateriaalioikeudet
• Sopimukset ym.
Maksuttomuus
• Valtuusto päättää palveluista ja muista suoritteista perittävien maksujen
yleisistä perusteista (Kuntalaki 410/2015, 14 § )
Lisenssi
• Datan omistaja antaa käyttöoikeuden eli lisenssin datansa:
• Kopiointiin, levitykseen, muokkaukseen, yhdistelyyn ym. sekä ei-
kaupallisessa että kaupallisessa käytössä
• Datan käyttäjä kantaa vastuun sovelluksestaan
• Lisenssisuositus (JHS 189): Creative Commons BY 4.0
• Suositeltava lähdeviittaus sovelluksessa:
Lähde: MyHelsinki Open API – paikat, tapahtumat ja
aktiviteetit. Aineiston ylläpitäjä on Helsingin kaupunginkanslia /
Matkailuyksikkö. Aineisto on ladattu Helsinki Region Infoshare -
palvelusta 30.5.2022 lisenssillä Creative Commons Attribution 4.0.
Koneluettavuus eli rakenteisuus
Ihminen hahmottaa datasta nopeasti esim. otsikot, väli- tai loppusummat, lisätiedot, jne.
Koneelliseen tulkintaan tarvitaan rakenteinen, systemaattinen muoto.
Missä muodossa avata dataa?
Tiedostona
• Tiedosto, jossa data ylläpidetään
(xlsx / csv / shp / …)
• Otetaan tieto manuaalisesti ulos
järjestelmästä
• Otetaan tieto automatisoidusti ulos
järjestelmästä
Rajapinnan kautta
• Tehdään ohjelmointirajapinta
(Application Programming
Interface, API) järjestelmästä
automatisoidusti ulos otettavaan
tietoon
• Tehdään järjestelmään / sen
kopioon ohjelmointirajapinta
Kysymyksiä, joita on hyvä pohtia
• Kuinka usein data päivittyy / päivitetään?
• Kuinka suuri datamäärä on?
• Onko data reaaliaikaista vai esim. vuosittaista tietoa?
• Kuinka paljon käsityötä datan muokkaaminen vaatii?
• Mihin dataa voisi käyttää?
• Onko standardeja?
• Onko jokin muu taho jo avannut vastaavan datan? Miten se on
tehty? Olisiko data mahdollista avata vastaavassa muodossa?
Datan julkaiseminen
• Metatiedot kuntoon
• Sanallinen kuvaus: mitä data pitää sisällään, miten se on tehty, mitä
käyttäjän tulee huomioida ja tietää siitä (mieluusti myös englanniksi)
• Aineiston jakelualusta:
• Viraston oma palvelin / HRI:n datastore / kaupungin verkkojulkaisujärjestelmä
• Julkaisu
• HRI auttaa joka askeleella!
Jatkotoimenpiteet
• Avauksesta tiedottaminen
• Kenelle ja missä avaamisesta on hyvä tiedottaa?
• Datan ylläpito
• Muutoksista tiedottaminen
• Datan / metadatan muutokset
• Palautteen kerääminen ja keskustelu
• Seuraa, millaisen vastaanoton data saa, kerää palautetta, keskustele!
• Järjestä kehittäjätapaaminen tai hackathon yhteistyössä HRI:n kanssa
• Datan päivittäminen
• Päivitä dataan uusimmat tiedot ilmoitetun päivitystiheyden mukaisesti esim. kerran
vuodessa. Päivitysrutiinit on hyvä sopia ja vastuuttaa jo dataa avattaessa.
Datan avaamisen oppaita
• HRI:n Opas datan avaamiseen, Datan avaajan pikaopas ja Ohje kyselydatojen
avaamiseen
• Kansallisen avoimen datan portaalin Avoindata.fi:n Datan avaajan opas ja Tiedon
jakamisen toimintamalli
• Espoon kaupungin Datan tietosuoja ja tietoturvallinen avaaminen -opas
Verkko-
oppimateriaaleja
• Valtiovarainministeriön tiedon hyödyntämisen ja
avaamisen hanke julkaisi toukokuussa 2022 uusia
eOppiva-koulutuksia tiedon jakamiseen, laatuun ja
yhteentoimivuuteen
• Kaikille avoimia, kesto 30-60 min
Mallia muualta Suomesta / maailmalta
Lista avoimen datan portaaleista
Videoita avoimesta
datasta
• Esittelyvideo HRI:sta ja avoimesta
datasta
• Video avoimista rajapinnoista
• Opetusvideoita paikkatiedon
hyödyntämisestä HRI:n Youtube-
kanavalla
• HRI:n marraskuussa 2021 pidetyn
10-vuotisjuhlawebinaarin tallenne
Paritehtävä
Mitä hyötyä avoimesta
datasta olisi sinulle?
• Mitä dataa tuotat työssäsi?
• Voisiko tätä dataa avata?
• Mitä dataa käytät työssäsi?
• Mitä dataa tarvitsisit työssäsi?
• Millainen sovellus auttaisi sinua
työssä tai arjessa?
Mikä on ohjelmointirajapinta?
Mikä on API?
Ohjelmointirajapinta (engl. application programming interface, API)
on määritelmä, jonka mukaan eri ohjelmat voivat tehdä pyyntöjä ja vaihtaa
tietoja eli keskustella keskenään.
https://fi.wikipedia.org/wiki/Ohjelmointirajapinta
API kioskin luukkuna
Tietojärjestelmä Dokumentaatio
Rajapinta
Pääkaupunkiseudun palvelukartta rakentuu
rajapinnoille
Avoin rajapinta
Avoimen datan
hyödyntäminen
Avoin
lähdekoodi
Api-lähtöinen
arkkitehtuuri
Pääkaupunkiseudun palvelukartta Pääkaupunkiseudun palvelukartan rajapinnat HRI:ssä
Datarajapinta vs. toiminnallinen API
Rajapinnat voi jakaa kahteen ryhmään:
• Datarajapinnat, vain tarjoilevat dataa pyynnöstä
o Palvelukartan toimipisterajapinta (http://www.hel.fi/palvelukarttaws/rest/index_en.html,
http://dev.hel.fi/servicemap)
• Toiminnalliset rajapinnat, joiden läpi voi tallentaa järjestelmään tietoja
o Palautejärjestelmän rajapinta (Open311) (http://dev.hel.fi/apis/issuereporting)
o Tapahtumarajapinta (Linked events) (http://dev.hel.fi/apis/linkedevents)
API-lähtöinen- vs. monoliittiarkkitehtuuri
Monoliittinen arkkitehtuuri, jossa komponentit tiukasti yhteenliitetty (“tight coupling”)
● muutokset kalliita ja vaikeita tehdä
● yleensä se yksi käyttöliittymä ja siihen on tyytyminen
● toimittajariippuvuuden vaara suuri
API-lähtöinen arkkitehtuuri, jossa komponentit liitetty toisiinsa rajapintojen avulla (“loose
coupling”)
● muutokset komponentteihin vaivattomampia tehdä
● komponenttien vaihtaminen kokonaan mahdollista
● komponenttien kehityksen hajautus eri toimittajille mahdollista
Avointen rajapintojen edut tiedostoihin
verrattuna
● Rajapinnasta saatava tieto on aina ajan tasalla
● Rajapinnasta saatavaa tietoa ei kenenkään tarvitse päivittää käsin, vaan
rajapinnassa näkyvät suoraan alkuperäisestä tietolähteestä ne tiedot, jotka
halutaan nähtäville
● Rajapinnassa voidaan esittää hyvin monimutkaista ja monimuotoista dataa
● Rajapinta voidaan tehdä aivan millaiseksi tahansa sen mukaan, mikä on
käyttäjälle ja datalle sopivinta
● Rajapinnasta käyttäjä voi pyytää vain sen datan, mitä tarvitsee
APIen käyttö vaatii osaamista: miten
mahdollistaa niiden käyttö myös muille?
• Datasette-työkalu, jonka avulla
käyttäjä voi tarkastella
Palvelukartan avointa APIa
selaimessa taulukkomuodossa
ja ladata sisällön CSV-
tiedostona
• HRI:n sivuille on koottu
tietopaketti teettämäämme
työkaluun liittyen
H E L S I N K I • E S P O O • V A N T A A • K A U N I A I N E N
hri.fi
Kiitos!
PROJEKTIPÄÄLLIKKÖ
Hami Kekkonen | 040-334 4780
hami.kekkonen@hel.fi
SUUNNITTELIJA
Kaisa Voipio | 040-358 0647
kaisa.voipio@hel.fi
hri@hel.fi

Contenu connexe

Similaire à Datan avaamisen perusteet -koulutus 23.11.2022

Hri infotilaisuus hgin_tyontekijoille_14012014
Hri infotilaisuus hgin_tyontekijoille_14012014Hri infotilaisuus hgin_tyontekijoille_14012014
Hri infotilaisuus hgin_tyontekijoille_14012014
Helsinki Region Infoshare
 
HRI-esittely Kuntaliiton sisäisessä Avoin data -tilaisuudessa 20.3.2014
HRI-esittely Kuntaliiton sisäisessä Avoin data -tilaisuudessa 20.3.2014HRI-esittely Kuntaliiton sisäisessä Avoin data -tilaisuudessa 20.3.2014
HRI-esittely Kuntaliiton sisäisessä Avoin data -tilaisuudessa 20.3.2014
Helsinki Region Infoshare
 
HRI-esitys Avoimen datan mestarikurssilla 10.4.2014
HRI-esitys Avoimen datan mestarikurssilla 10.4.2014HRI-esitys Avoimen datan mestarikurssilla 10.4.2014
HRI-esitys Avoimen datan mestarikurssilla 10.4.2014
Helsinki Region Infoshare
 

Similaire à Datan avaamisen perusteet -koulutus 23.11.2022 (20)

Data hyötykäyttöön - avoin data kaupungin työntekijän arjessa -koulutuksen es...
Data hyötykäyttöön - avoin data kaupungin työntekijän arjessa -koulutuksen es...Data hyötykäyttöön - avoin data kaupungin työntekijän arjessa -koulutuksen es...
Data hyötykäyttöön - avoin data kaupungin työntekijän arjessa -koulutuksen es...
 
Data hyotykayttoon -koulutuspaiva 09122016
Data hyotykayttoon -koulutuspaiva 09122016Data hyotykayttoon -koulutuspaiva 09122016
Data hyotykayttoon -koulutuspaiva 09122016
 
Hri infotilaisuus hgin_tyontekijoille_14012014
Hri infotilaisuus hgin_tyontekijoille_14012014Hri infotilaisuus hgin_tyontekijoille_14012014
Hri infotilaisuus hgin_tyontekijoille_14012014
 
Data hyötykäyttön - avoin data kaupungin työntekijän arjessa 5.2.2018
Data hyötykäyttön - avoin data kaupungin työntekijän arjessa 5.2.2018Data hyötykäyttön - avoin data kaupungin työntekijän arjessa 5.2.2018
Data hyötykäyttön - avoin data kaupungin työntekijän arjessa 5.2.2018
 
Data hyötykäyttöön – avoin data kaupungin työntekijän arjessa
Data hyötykäyttöön – avoin data kaupungin työntekijän arjessaData hyötykäyttöön – avoin data kaupungin työntekijän arjessa
Data hyötykäyttöön – avoin data kaupungin työntekijän arjessa
 
Metropolia hri-luento-05092013-ok-share
Metropolia hri-luento-05092013-ok-shareMetropolia hri-luento-05092013-ok-share
Metropolia hri-luento-05092013-ok-share
 
Hri infotilaisuus espoossa_300914
Hri infotilaisuus espoossa_300914Hri infotilaisuus espoossa_300914
Hri infotilaisuus espoossa_300914
 
Data hyötykäyttöön - avoin data kaupungin työntekijän arjessa
Data hyötykäyttöön - avoin data kaupungin työntekijän arjessaData hyötykäyttöön - avoin data kaupungin työntekijän arjessa
Data hyötykäyttöön - avoin data kaupungin työntekijän arjessa
 
Hri geoinformatiikka-23052013-ok
Hri geoinformatiikka-23052013-okHri geoinformatiikka-23052013-ok
Hri geoinformatiikka-23052013-ok
 
Aalto mediatekniikka-hri-luento-14032012-final-1
Aalto mediatekniikka-hri-luento-14032012-final-1Aalto mediatekniikka-hri-luento-14032012-final-1
Aalto mediatekniikka-hri-luento-14032012-final-1
 
HRI-esittely Kuntaliiton sisäisessä Avoin data -tilaisuudessa 20.3.2014
HRI-esittely Kuntaliiton sisäisessä Avoin data -tilaisuudessa 20.3.2014HRI-esittely Kuntaliiton sisäisessä Avoin data -tilaisuudessa 20.3.2014
HRI-esittely Kuntaliiton sisäisessä Avoin data -tilaisuudessa 20.3.2014
 
Luento Helsingin työväenopistolla 5.10.15
Luento Helsingin työväenopistolla 5.10.15Luento Helsingin työväenopistolla 5.10.15
Luento Helsingin työväenopistolla 5.10.15
 
Hri helsingin info_110216
Hri helsingin info_110216Hri helsingin info_110216
Hri helsingin info_110216
 
HRI-esitys Avoimen datan mestarikurssilla 10.4.2014
HRI-esitys Avoimen datan mestarikurssilla 10.4.2014HRI-esitys Avoimen datan mestarikurssilla 10.4.2014
HRI-esitys Avoimen datan mestarikurssilla 10.4.2014
 
HRI-esittely-kesäkuu2011
HRI-esittely-kesäkuu2011HRI-esittely-kesäkuu2011
HRI-esittely-kesäkuu2011
 
Hri helsingin info_110215
Hri helsingin info_110215Hri helsingin info_110215
Hri helsingin info_110215
 
HRI Kaupunkiakatemian aamukahveilla 23.10.2015
HRI Kaupunkiakatemian aamukahveilla 23.10.2015HRI Kaupunkiakatemian aamukahveilla 23.10.2015
HRI Kaupunkiakatemian aamukahveilla 23.10.2015
 
OKRoadshow Mikkeli 13.10.2014: Avoin tieto Lappeenrannassa
OKRoadshow Mikkeli 13.10.2014: Avoin tieto LappeenrannassaOKRoadshow Mikkeli 13.10.2014: Avoin tieto Lappeenrannassa
OKRoadshow Mikkeli 13.10.2014: Avoin tieto Lappeenrannassa
 
HRI-esitys Nice Tuesday -tilaisuudessa 9.2.16
HRI-esitys Nice Tuesday -tilaisuudessa 9.2.16HRI-esitys Nice Tuesday -tilaisuudessa 9.2.16
HRI-esitys Nice Tuesday -tilaisuudessa 9.2.16
 
Hri vantaa-avoin tieto-joulu2012-valmis
Hri vantaa-avoin tieto-joulu2012-valmisHri vantaa-avoin tieto-joulu2012-valmis
Hri vantaa-avoin tieto-joulu2012-valmis
 

Plus de Helsinki Region Infoshare

Plus de Helsinki Region Infoshare (11)

Open Helsinki - Enhancing the urban development with open data
Open Helsinki - Enhancing the urban development with open dataOpen Helsinki - Enhancing the urban development with open data
Open Helsinki - Enhancing the urban development with open data
 
HRI-esitys matkailun sovellukset -tilaisuudessa 10.6.2019
HRI-esitys matkailun sovellukset -tilaisuudessa 10.6.2019HRI-esitys matkailun sovellukset -tilaisuudessa 10.6.2019
HRI-esitys matkailun sovellukset -tilaisuudessa 10.6.2019
 
Smart Logistics event in Vantaa on 14th May 2019
Smart Logistics event in Vantaa on 14th May 2019Smart Logistics event in Vantaa on 14th May 2019
Smart Logistics event in Vantaa on 14th May 2019
 
Korko-hanke 8.5.2019
Korko-hanke 8.5.2019Korko-hanke 8.5.2019
Korko-hanke 8.5.2019
 
Tip to implement open data policy
Tip to implement open data policyTip to implement open data policy
Tip to implement open data policy
 
Open Data in Helsinki Region
Open Data in Helsinki RegionOpen Data in Helsinki Region
Open Data in Helsinki Region
 
Avoin data ja HRI -esitys 17.11.2016 Hel<3Dev Turvallisuus -avokonttorissa
Avoin data ja HRI -esitys 17.11.2016 Hel<3Dev Turvallisuus -avokonttorissaAvoin data ja HRI -esitys 17.11.2016 Hel<3Dev Turvallisuus -avokonttorissa
Avoin data ja HRI -esitys 17.11.2016 Hel<3Dev Turvallisuus -avokonttorissa
 
Open Data in Helsinki Region, EuroPCom 2016
Open Data in Helsinki Region, EuroPCom 2016Open Data in Helsinki Region, EuroPCom 2016
Open Data in Helsinki Region, EuroPCom 2016
 
Avoimen datan hyödyntäminen -koulutus 25.4.2016 (taustoitus)
Avoimen datan hyödyntäminen -koulutus 25.4.2016 (taustoitus)Avoimen datan hyödyntäminen -koulutus 25.4.2016 (taustoitus)
Avoimen datan hyödyntäminen -koulutus 25.4.2016 (taustoitus)
 
HRI presentation for Umeå delegation 1.12.2015
HRI presentation for Umeå delegation 1.12.2015HRI presentation for Umeå delegation 1.12.2015
HRI presentation for Umeå delegation 1.12.2015
 
Open data in Helsinki - reSITE conference in Prague on 18th June 2015
Open data in Helsinki - reSITE conference in Prague on 18th June 2015Open data in Helsinki - reSITE conference in Prague on 18th June 2015
Open data in Helsinki - reSITE conference in Prague on 18th June 2015
 

Datan avaamisen perusteet -koulutus 23.11.2022

  • 1. H E L S I N K I • E S P O O • V A N T A A • K A U N I A I N E N hri.fi Datan avaamisen perusteet 23.11.2022 | KOULUTUS Hami Kekkonen ja Kaisa Voipio Helsingin kaupunginkanslia
  • 2. Koulutuksen ohjelma Klo 9.00 Esittelykierros: tutustutaan osallistujiin Mitä on avoin data? Mikä on Helsinki Region Infoshare? Parikeskustelu Klo 10.30 15 min tauko Klo 10.45 Mikä on ohjelmointirajapinta? Klo 11.00 Tietosuoja datan avaamisessa Klo 11.30 Lounas (omakustanteinen) Klo 12.30 Datan avaaminen Helsingin kaupunkitietoyksikössä / Ari Jaakola Klo 12.50 Taulukkodatan hyödyntäminen (tauko sopivassa välissä) Klo 14.20 Datan hyödyntäminen Metropoliassa / Hannu Markkanen Klo 14.40 10 min tauko Klo 14.50 Paikkatiedon hyödyntäminen / Antti Ahola, Geosprint Oy Klo 15.40 Loppukeskustelu Klo 16.00 Koulutus päättyy
  • 3. Esittelykierros Mitä sinulle tulee mieleen termistä avoin data? Mitä toivot koulutukselta? Onko sinulla jo nyt joitakin kysymyksiä?
  • 6. Avoin data pähkinänkuoressa Julkista tietoa Lupa käyttää Maksutta saatavilla Rakenteisessa muodossa
  • 7. Julkista tietoa, mutta ei avointa dataa Liikenneonnettomuudet Helsingissä 2014-2016 -julkaisu (pdf)
  • 8. Julkisesta tiedosta avoimeksi dataksi Liikenneonnettomuudet Helsingissä -aineisto HRI:ssa
  • 9. Avoimen datan hyötyjä JULKISHALLINTO Hallinnon sisäinen tehokkuus KUNTALAINEN Läpinäkyvyys ja demokratia YRITYKSET Liiketoiminta ja innovaatiot KORKEAKOULUT Opetus ja tutkimus
  • 11. Lukuisia mahdollisuuksia Liiketoiminta Osallistuminen Datajournalismi Opetus ja tutkimus Läpinäkyvyys Taide
  • 12. Läpinäkyvyyttä visualisoinneilla Vantaan, Kauniaisten, Espoon ja Helsingin kaupunkien sekä HUS:n ostot Handata-sovellus
  • 13. Paikkatietovisualisointeja Twitterissä Topi Tjukanovin tekemiä pieniä paikkatietovisualisointeja: • pääkaupunkiseudun rakennusten ikä • Helsingin kasvu vuosien saatossa • matka-aikoja Pääkaupunkiseudun rakennusten ikä Helsingin kasvu Topi Tjukanovin Twitter-tili
  • 14. Kurkistus menneisyyteen ja muutokseen Helsingin ortoilmakuvat eri vuosikymmeniltä Helsinki ilmakuvina 1932 alkaen- sovellus Ilmakuvia myös Espoosta, Kauniaisista ja Vantaalta HRI:ssä ja kaupunkien karttapalveluissa
  • 16. Vertaile historiaa ja nykyhetkeä Helsinki ennen ja nyt -sovellus HRI:n sovellusäänestyksen voittaja oli viikonlopun urakka
  • 17. Sovelluksilla uutta liiketoimintaa ja innovaatioita HSL:n avoin data Helsinki Public Transport Visualized ReittiGPS Blindsquare Nysse
  • 18. Uusia palveluja nopeasti HSL:n Reittiopas API -data Tellinkibotti-sovellus
  • 19. Paikat, tapahtumat ja aktiviteetit MyHelsinki Open API -data
  • 20. Tutkimusmateriaalia HY:n Quantitative methods for sustainable land use planning I: Accessibility & mobility analyses -kurssin lopputöitä
  • 21. Sovellusgalleria • HRI:n sovellusgalleria • Pääosin kaupunkien ulkopuolisten tahojen tekemien, avointa dataa hyödyntävien sovellusten, visualisointien ja ohjeistuksien esittelyä • Sovellusideoiden kerääminen käyttäjiltä
  • 23. Pääkaupunkiseutu – avoimen datan edelläkävijä Helsinki Region Infoshare on Suomen monipuolisin avoimen datan palvelu ja kansainvälistä kärkeä. Perustettu 2011 Helsingin, Espoon, Vantaan ja Kauniaisten kaupunkien yhteinen avoimen datan palvelu. Palvelusta löytyy pääkaupunkiseudun kaupunkeja ja koko seutua koskevaa tietoa kaikkien vapaasti ja maksutta hyödynnettäväksi. HRI auttaa kaupunkitiedon avaajia ja tukee tiedon hyödyntäjiä.
  • 24. Helsinki Region Infoshare – hri.fi Datakatalogi Sovellusgalleria Uutisia Blogikirjoituksia Ohjeistuksia Koulutuksia Konsultaatiota Kehittäjätapaamisia Korkeakoulu- yhteistyötä
  • 25. HRI käytännössä • Autamme pääkaupunkiseudun kaupunkeja mm.: • Avattavien datojen tunnistamisessa • Datan julkaisukelpoisuuden arvioimisessa • Teknisissä ja juridisissa kysymyksissä • Datan avaamisessa • Avaamisesta viestimisessä • Yhteydenpidossa datan hyödyntäjiin Sähköpostitse / puhelimitse / palavereissa / infotilaisuuksissa / koulutuksissa / kehittäjätapaamisissa…
  • 26. Dataa kaikilta elämän aloilta ASUMINEN 47 HALLINTO JA PÄÄTÖKSENTEKO 48 KARTAT 170 KULTTUURI JA VAPAA-AIKA 62 LIIKENNE JA MATKAILU 88 VÄESTÖ 147 OPETUS JA KOULUTUS 37 RAKENNETTU YMPÄRISTÖ 112 TALOUS JA VEROTUS 39 TERVEYS JA SOSIAALIPALVELUT 25 TYÖ JA ELINKEINOT 39 YMPÄRISTÖ JA LUONTO 88 Datojen lukumäärät syyskuulta 2022
  • 27. Datan metatiedot HRI:ssa Nimi Lisenssi Käyttötilastoja Lisätietoja Datasta tehtyjä sovelluksia Sanallinen kuvaus Datan latauslinkki / linkki rajapintaan Mahdollisuus kysyä, keskustella, antaa palautetta
  • 28. Tervetuloa! HRI Loves Developers TAPAHTUMIA 10.11. Tekoäly kaupungeissa 26.1. Liikkumisen digitaalisella kaksosella älykkääksi talvikaupungiksi Helsinki Loves Developers -ryhmä Facebookissa & Kehittäjäyhteistyöstä HRI:ssa
  • 30. Yhteistyötä moneen suuntaan • Suomen suurimmat kaupungit • Valtion avoimen datan palvelu avoindata.fi & VM • Kansainvälistä mielenkiintoa (esittelyjä) • Kansainvälinen yhteistyö • Mitä tehdään? • Edistetään yhteneväisiä data-avauksia • Luodaan avoimia ja standardoituja ohjelmointirajapintoja • Edesautetaan datojen löydettävyyttä ja hyödyntämistä • Jatkokehitetään yhdessä avoimen datan portaaleja
  • 33. Julkisuus ja maksuttomuus Tiedon oltava julkista • Julkisuuslaki (laki viranomaisten toiminnan julkisuudesta) • Muu lainsäädäntö mm. EU:n tietosuoja-asetus, yleinen turvallisuus Tieto ei saa sisältää henkilötietoja eikä yleistä turvallisuutta vaarantavia tietoja • Julkaistaan vain tietoa, jossa ei ole henkilötietoja • Tarvittaessa tiedon anonymisointi / karkeistus Julkaisijalla on oikeus julkaista tieto • Tekijän- ym. immateriaalioikeudet • Sopimukset ym. Maksuttomuus • Valtuusto päättää palveluista ja muista suoritteista perittävien maksujen yleisistä perusteista (Kuntalaki 410/2015, 14 § )
  • 34. Lisenssi • Datan omistaja antaa käyttöoikeuden eli lisenssin datansa: • Kopiointiin, levitykseen, muokkaukseen, yhdistelyyn ym. sekä ei- kaupallisessa että kaupallisessa käytössä • Datan käyttäjä kantaa vastuun sovelluksestaan • Lisenssisuositus (JHS 189): Creative Commons BY 4.0 • Suositeltava lähdeviittaus sovelluksessa: Lähde: MyHelsinki Open API – paikat, tapahtumat ja aktiviteetit. Aineiston ylläpitäjä on Helsingin kaupunginkanslia / Matkailuyksikkö. Aineisto on ladattu Helsinki Region Infoshare - palvelusta 30.5.2022 lisenssillä Creative Commons Attribution 4.0.
  • 35. Koneluettavuus eli rakenteisuus Ihminen hahmottaa datasta nopeasti esim. otsikot, väli- tai loppusummat, lisätiedot, jne. Koneelliseen tulkintaan tarvitaan rakenteinen, systemaattinen muoto.
  • 36. Missä muodossa avata dataa? Tiedostona • Tiedosto, jossa data ylläpidetään (xlsx / csv / shp / …) • Otetaan tieto manuaalisesti ulos järjestelmästä • Otetaan tieto automatisoidusti ulos järjestelmästä Rajapinnan kautta • Tehdään ohjelmointirajapinta (Application Programming Interface, API) järjestelmästä automatisoidusti ulos otettavaan tietoon • Tehdään järjestelmään / sen kopioon ohjelmointirajapinta
  • 37. Kysymyksiä, joita on hyvä pohtia • Kuinka usein data päivittyy / päivitetään? • Kuinka suuri datamäärä on? • Onko data reaaliaikaista vai esim. vuosittaista tietoa? • Kuinka paljon käsityötä datan muokkaaminen vaatii? • Mihin dataa voisi käyttää? • Onko standardeja? • Onko jokin muu taho jo avannut vastaavan datan? Miten se on tehty? Olisiko data mahdollista avata vastaavassa muodossa?
  • 38. Datan julkaiseminen • Metatiedot kuntoon • Sanallinen kuvaus: mitä data pitää sisällään, miten se on tehty, mitä käyttäjän tulee huomioida ja tietää siitä (mieluusti myös englanniksi) • Aineiston jakelualusta: • Viraston oma palvelin / HRI:n datastore / kaupungin verkkojulkaisujärjestelmä • Julkaisu • HRI auttaa joka askeleella!
  • 39. Jatkotoimenpiteet • Avauksesta tiedottaminen • Kenelle ja missä avaamisesta on hyvä tiedottaa? • Datan ylläpito • Muutoksista tiedottaminen • Datan / metadatan muutokset • Palautteen kerääminen ja keskustelu • Seuraa, millaisen vastaanoton data saa, kerää palautetta, keskustele! • Järjestä kehittäjätapaaminen tai hackathon yhteistyössä HRI:n kanssa • Datan päivittäminen • Päivitä dataan uusimmat tiedot ilmoitetun päivitystiheyden mukaisesti esim. kerran vuodessa. Päivitysrutiinit on hyvä sopia ja vastuuttaa jo dataa avattaessa.
  • 40. Datan avaamisen oppaita • HRI:n Opas datan avaamiseen, Datan avaajan pikaopas ja Ohje kyselydatojen avaamiseen • Kansallisen avoimen datan portaalin Avoindata.fi:n Datan avaajan opas ja Tiedon jakamisen toimintamalli • Espoon kaupungin Datan tietosuoja ja tietoturvallinen avaaminen -opas
  • 41. Verkko- oppimateriaaleja • Valtiovarainministeriön tiedon hyödyntämisen ja avaamisen hanke julkaisi toukokuussa 2022 uusia eOppiva-koulutuksia tiedon jakamiseen, laatuun ja yhteentoimivuuteen • Kaikille avoimia, kesto 30-60 min
  • 42. Mallia muualta Suomesta / maailmalta Lista avoimen datan portaaleista
  • 43. Videoita avoimesta datasta • Esittelyvideo HRI:sta ja avoimesta datasta • Video avoimista rajapinnoista • Opetusvideoita paikkatiedon hyödyntämisestä HRI:n Youtube- kanavalla • HRI:n marraskuussa 2021 pidetyn 10-vuotisjuhlawebinaarin tallenne
  • 45. Mitä hyötyä avoimesta datasta olisi sinulle? • Mitä dataa tuotat työssäsi? • Voisiko tätä dataa avata? • Mitä dataa käytät työssäsi? • Mitä dataa tarvitsisit työssäsi? • Millainen sovellus auttaisi sinua työssä tai arjessa?
  • 47. Mikä on API? Ohjelmointirajapinta (engl. application programming interface, API) on määritelmä, jonka mukaan eri ohjelmat voivat tehdä pyyntöjä ja vaihtaa tietoja eli keskustella keskenään. https://fi.wikipedia.org/wiki/Ohjelmointirajapinta
  • 48. API kioskin luukkuna Tietojärjestelmä Dokumentaatio Rajapinta
  • 49. Pääkaupunkiseudun palvelukartta rakentuu rajapinnoille Avoin rajapinta Avoimen datan hyödyntäminen Avoin lähdekoodi Api-lähtöinen arkkitehtuuri Pääkaupunkiseudun palvelukartta Pääkaupunkiseudun palvelukartan rajapinnat HRI:ssä
  • 50. Datarajapinta vs. toiminnallinen API Rajapinnat voi jakaa kahteen ryhmään: • Datarajapinnat, vain tarjoilevat dataa pyynnöstä o Palvelukartan toimipisterajapinta (http://www.hel.fi/palvelukarttaws/rest/index_en.html, http://dev.hel.fi/servicemap) • Toiminnalliset rajapinnat, joiden läpi voi tallentaa järjestelmään tietoja o Palautejärjestelmän rajapinta (Open311) (http://dev.hel.fi/apis/issuereporting) o Tapahtumarajapinta (Linked events) (http://dev.hel.fi/apis/linkedevents)
  • 51. API-lähtöinen- vs. monoliittiarkkitehtuuri Monoliittinen arkkitehtuuri, jossa komponentit tiukasti yhteenliitetty (“tight coupling”) ● muutokset kalliita ja vaikeita tehdä ● yleensä se yksi käyttöliittymä ja siihen on tyytyminen ● toimittajariippuvuuden vaara suuri API-lähtöinen arkkitehtuuri, jossa komponentit liitetty toisiinsa rajapintojen avulla (“loose coupling”) ● muutokset komponentteihin vaivattomampia tehdä ● komponenttien vaihtaminen kokonaan mahdollista ● komponenttien kehityksen hajautus eri toimittajille mahdollista
  • 52. Avointen rajapintojen edut tiedostoihin verrattuna ● Rajapinnasta saatava tieto on aina ajan tasalla ● Rajapinnasta saatavaa tietoa ei kenenkään tarvitse päivittää käsin, vaan rajapinnassa näkyvät suoraan alkuperäisestä tietolähteestä ne tiedot, jotka halutaan nähtäville ● Rajapinnassa voidaan esittää hyvin monimutkaista ja monimuotoista dataa ● Rajapinta voidaan tehdä aivan millaiseksi tahansa sen mukaan, mikä on käyttäjälle ja datalle sopivinta ● Rajapinnasta käyttäjä voi pyytää vain sen datan, mitä tarvitsee
  • 53. APIen käyttö vaatii osaamista: miten mahdollistaa niiden käyttö myös muille? • Datasette-työkalu, jonka avulla käyttäjä voi tarkastella Palvelukartan avointa APIa selaimessa taulukkomuodossa ja ladata sisällön CSV- tiedostona • HRI:n sivuille on koottu tietopaketti teettämäämme työkaluun liittyen
  • 54. H E L S I N K I • E S P O O • V A N T A A • K A U N I A I N E N hri.fi Kiitos! PROJEKTIPÄÄLLIKKÖ Hami Kekkonen | 040-334 4780 hami.kekkonen@hel.fi SUUNNITTELIJA Kaisa Voipio | 040-358 0647 kaisa.voipio@hel.fi hri@hel.fi