Toelichting CKAN

Waarom beheer?

Benodigde beheerprocessen

Hou het open!

Samenvattend

De aanschaf en het onderhoud van deze systemen is kostbaar. Extra uitgaven om de informatie op nieuwe manieren te ontsluiten zijn daardoor meestal niet welkom; een veelgebruikt argument om terughoudend om te gaan met de wens om Open Data. Gelukkig is die vrees voor extra kosten ongegrond. Maak juist gebruik van de systemen die je al hebt en van de contacten met bestaande leveranciers.

Een aantal opties

Dat kan op verschillende manieren:

Moderne systemen, de meeste CMS’en, bieden de mogelijkheid om elke informatiestroom die wordt bijgehouden in het systeem om te zetten in het formaat RSS. Daarmee is snel gerealiseerd dat de informatie als Open Data wordt aangeboden.

Een raadsinformatiesysteem levert op eenzelfde wijze een geparametriseerde RSS feed aan, waarmee een zoekveld gemaakt kan worden die na het invoeren van een zoekopdracht een resultatenlijst terug geeft.

Je kunt ook nog een stap verder gaan en niet de RSS via het systeem opmaken, maar direct naar de bron gaan. De bron, een database met informatie, kan altijd gestructureerde informatie aanleveren, bijvoorbeeld als XML of eenvoudiger, als CSV. Ook deze beide formaten zijn open formaten.

Vraag hulp van experts

Vanzelfsprekend zijn dit klussen waar enige kennis voor nodig is. Het is dus goed voor te stellen dat de leveranciers van deze systemen het ontsluiten van informatie als Open Data als nieuwe service aanbieden. Zij zorgen er dan voor dat naast de traditionele manier van online ontsluiten, de informatie ook als Open Data beschikbaar komt.

Centrale vindplaats

Nu is het alleen nog zaak dat burgers deze RSS, XML of CSV kunnen vinden op een duidelijke, centrale plaats. Om dit te bereiken is het Nederlandse CKAN initiatief gestart, waarmee druk wordt gewerkt aan een Nederlandse Open Data catalogus, de Nederlandse versie van Data.gov.uk.

Ook voor leveranciers is dit interessant. Naast het ontsluiten van Open Data is het mogelijk de dienstverlening uit te breiden richting de directe koppeling (open API) met de CKAN catalogus. Ontsloten informatie wordt dan namens de overheidsorganistie direct in de catalogus geregistreerd. Geen extra werk voor de overheid en een mooie service van leveranciers.

Samenwerken

Vandaag hebben we met een aantal leveranciers gesproken en over het algemeen staan zij hier zeer welwillende tegenover. Een goede en belangrijke voorwaarde voor Open Data in Nederland.

Natuurlijk hopen we meer en nieuwe leveranciers te ontmoeten en de mogelijkheden te bespreken. Is dit iets voor jouw bedrijf of heb je vragen? Aarzel dan niet om contact op te nemen.

Het Open Data/WidgetPlatform

Het bouwen van het Open Data/Widgetplatform is begonnen met een opdracht van Gemeente Delft voor Wijkwebs2.0. Doelstelling van het platform is om als overheidsorganisatie eenvoudig portals te bouwen, op basis van een nationale bibliotheek met widgets. Bezoekers van de portals kunnen eenvoudig de widgets meenemen naar eigen websites, of op de portalwebsite een eigen dashboard maken.

Veel widgets profiteren van Open Data. Daarom voorziet het platform ook in oplossingen om databanken binnen de gemeente te ontsluiten als Open Data. Door widgets en Open Data aan te bieden, hoopt de gemeente Delft dat de aangeboden informatie meer en beter verspreid wordt over de diverse doelgroepen.

Het door Verse Overheid ontwikkelde platform is volledig gerealiseerd in de cloud. Voor het bouwen en beheren van de widgets en de portals hebben we:

• een schaalbare Linux, Apache, MySql en PHP (LAMP)servers ingericht bij Amazon Webservices (AWS). We hebben daarbij volop geprofiteerd van beschikbare Amazon Machine Images (AMI);
• samen met onze partner Jibes, ook binnen AWS, servers ingericht met een MashupCenter AMI en een DB2-AMI van IBM. Met behulp van dit onderdeel van het platform kunnen we eenvoudig interne data filteren en combineren (mashen) en als feeds en RESTservices online ontsluiten;
• voor datasets van bijvoorbeeld statistiek, ook binnen AWS, een beveiligde Storage-omgeving ingericht. Geautoriseerde gebruikers binnen overheidsorganisaties kunnen hier datasets plaatsen;
• een koppeling gerealiseerd met een Open Data Catalogus. Deze catalogus, CKAN, dat ook gebruikt wordt door bijvoorbeeld Groot-Brittannië, is online ter beschikking gesteld door de Open Knowledge Foundation (OKFN).

De ervaringen tot nu toe

Het werken in de cloud is bijzonder gebruiksvriendelijk. Zonder al te veel technische kennis kan je een produktieomgeving inrichten. Door goed te zoeken binnen het grote aanbod van AMI’s profiteer je optimaal van het uitzoekwerk van anderen. Dit zorgt ervoor dat ik als relatieve leek binnen een week een robuust serverpark kon realiseren. Voor het fijn afstellen van de omgeving is ondersteuning van technische partners wel gewenst.

Dankzij de cloud heb ik servers kunnen inrichten zonder dat Verse Overheid direct grote investeringen moest doen in licenties voor MashupCenter en DB2. Dankzij het pay-as-you-go principe betaal je slechts voor de tijd dat je de servers echt gebruikt. Als je nog volop aan het ontwikkelen bent een ideale oplossing.

Hobbels

Nu we naar produktie gaan, lopen we tegen enkele hobbels aan. Het pay-as-you-go principe is niet zo voordelig als het lijkt, als je applicaties 24/7 in de lucht hebt. AWS biedt de mogelijkheid om een eigen licentie mee te nemen, waardoor de kosten per uur lager worden. Dit vraagt weer wel een investering upfront. Een simpele rekensom leidde er bij ons toe dat we hiervoor hebben gekozen.

Een tweede hobbel is dat je wilt voorkomen dat servers permanent op volle kracht draaien. Als er bezoekers zijn, wil je goede performance bieden. Zijn er geen bezoekers, dan wil je liever niet betalen voor overcapaciteit.

Binnen AWS kan je inregelen dat servers automatisch bijschalen bij bezoekers en terugschalen als er geen verkeer is. Dit heet AutoScaling en zorgt ervoor dat de kosten laag blijven. Het inregelen hiervan is een kwestie van wat parameters invullen, toch is de ondersteuning van technische mensen gewenst. Al is het omdat een fatsoenlijke gebruikersinterface binnen AWS hiervoor ontbreekt.

Tot slot zijn de kosten van servers toch nog steeds redelijk fors. Een dedicated server, zonder autoscaling of applicatie met licentie, kost al gauw 120euro per maand. Deze maandlasten zijn verder te verlagen door voor een langere periode alvast capaciteit in te kopen. Hiermee zakken de kosten per maand naar ongeveer 60euro.

Kortom,

De investeringen voor een robuuste produktie-omgeving, inclusief loadbalancers en storagecapaciteit zijn veel lager door te kiezen voor een cloudoplossing, dan wanneer ik dit zou inrichten met eigen hardware. Investeringen in licenties voor applicaties kan ik spreiden over een meerdere jaren, in plaats van het bedrag ineens upfront te moeten ophoesten.

Door te profiteren van autoscaling kan ik extra profiteren want buiten kantooruren kan ik de server uitzetten. Tot slot hoef ik mij geen zorgen te maken over prestaties en beschikbaarheid. Door de opzet van de cloud ben ik van verzekerd dat ik hoge prestaties krijg en (nagenoeg) geen uitval.

Robuust en betaalbaar productieplatform

Na wat initieel uitzoekwerk beschik ik nu als niet-techneut over een professioneel robuust en betaalbaar productieplatform, zonder dat ik heb moeten investeren in eigen hardware, technisch personeel en abonnementen. Om de maandlasten verder te drukken, heeft Verse Overheid wel geïnvesteerd in licenties en het inkopen van capaciteit. Overigens, ook zonder deze investeringen hadden we een zeer betaalbaar platform gehad.

Het Open Data/Widgetplatform gaat vanaf september volop in productie. Zaken waarop ik mij komende periode richt, zijn prestaties, beschikbaarheid en vanzelfsprekend veiligheid.

Wat betekent dit voor overheden?

De cloud lijkt een uitstekende kans voor overheden. Zeker waar het gaat om internetoplossingen, zoals websites, zakenmagazijn, midoffices, etc. is het de moeite waard de kansen van de cloud te onderzoeken. Ik schat in dat de investeringen en beheerkosten sterk kunnen dalen door de inzet van de cloud.

Minder voor de hand ligt de inzet van de cloud voor backoffice- of kantooroplossingen. Met name vraagstukken ten aanzien van beveiliging zijn nog onbeantwoord. Hopelijk kan ik hierover over enkele maanden u verder informeren.

Overweegt u de cloud?

Wilt u als Overheidsorganisaties de inzet van de cloud eens (laten) onderzoeken, neem gerust contact met Verse Overheid op!

Eurlings geeft namelijk ook aan dat de OVdatabank de data zal delen, op dezelfde wijze als de Nationale Databank voor Wegverkeer (NDW) dat doet. En daar zijn we niet blij mee.

Het gebruik van de NDW kost namelijk een goede €6.000 per jaar. En dat is als je niet al te gekke dingen doet. Daarmee stimuleer je geen innovatie. Daarmee stimuleer je dat alleen usual suspects als TomTom met de data aan de slag gaan.

Als je als overheid innovatie en economische groei wilt bevorderen, dan moet je deze publieke data vrij beschikbaar stellen. Kleine bedrijven of creatieve solisten kunnen dan uitstekende innovaties maken met de dan kosteloze informatie, zoals bijvoorbeeld deze Onebusaway door studenten.

Diverse initiatieven proberen nu de Tweede Kamer te bewegen deze kans voor Open Data te grijpen. In de luwte is een drukke lobby opgezet richting diverse fracties. Vanuit dezelfde groep mensen die ons OpenKVK.nl bracht, komt het initiatief OpenOV.nl. Tot slot is de LinkedIngroep Open Data Nederland een initiatief gestart om een Open Brief op te stellen richting de politiek.

Goede initiatieven die hopelijk ertoe leiden dat de politiek deze kans op de eerste substantiële stap naar Open Data grijpt.