NS api - hij is er!

First published on
Al enige tijd gingen er geruchten dat er een NS treinreizigers-api zou komen. Voor mijn Android-app SnelTrein deed ik wat onderzoek naar de concurrentie. Daartoe gebruikte ik mijn Desire Z op mijn eigen wifi accesspoint, via een oude hub verbonden naar de router. Door de computer daarna aan de hub te koppelen is het mogelijk het netwerkverkeer vanaf de telefoon af te luisteren (ik deed dat op mijn Ubuntu machine met WireShark). Wat blijkt:

Als u nu naar http://webservices.ns.nl/ gaat dient u een wachtwoord in te voeren. Helaas voor de NS gebruikt hun applicatie geen https, waardoor het wachtwoord dat de Android applicatie gebruikt ook af te luisteren is. De gebruikersnaam "android" en wachtwoord "mvdzig" worden open en bloot verstuurd en zijn ook gewoon bruikbaar vanuit uw browser.

Vervolgens kunt u een XML bestand downloaden url's als:


Dat dit handig is hoef ik u niet te vertellen. Enigszins jammer is wel dat ik een parser heb geschreven om alle informatie van de normale m.ns.nl website te lezen, en dat kostte wel even tijd.

Comments

  1. Frank de WegerMarch 29, 2011 at 4:59 PM

    Is er ergens iets van een WSDL te vinden?

    ReplyDelete
  2. AnonymousMarch 29, 2011 at 4:59 PM

    NS gaat dit waarschijnlijk niet fijn vinden. Ze kunnen om dit tegen te gaan ten minste 2 dingen doen:
    - een nieuwe versie uitbrengen van NS ReisPlanner Xtra, met een nieuw wachtwoord (en https...) en vervolgens na een tijd de oude versie uitrangeren
    - of, simpeler, filteren op bijvoorbeeld User-Agent om wel erg simpele scripts de deur te wijzen.
    Daarom: zou je kunnen aangeven of de Android-applicatie nog specifieke headers meestuurt in de http requests?

    ReplyDelete
  3. AnonymousMarch 29, 2011 at 5:11 PM

    Dit was al een maand bekend hier: http://websvn.chozo.nl/filedetails.php?repname=dump&path=%2FPython%2Fnsdat.py

    ReplyDelete
  4. AnonymousMarch 29, 2011 at 5:28 PM

    Beetje jammer dat NS alsnog niet de gegevens geeft die waarisdetrein wel geeft: treinnummers ;-)

    ReplyDelete
  5. JannickMarch 29, 2011 at 6:26 PM

    Hahah, heerlijk dit. De app van Connexxion is de volgende opdracht? ;-) Lastig om nu via 9292 te werken...

    ReplyDelete
  6. Niels KootstraMarch 29, 2011 at 8:45 PM

    @Jannick

    Werkt op basis van longitude and latitude (als ik het goed heb):
    http://mobiel.9292ov.nl/KML.asp?FeedTypeID=32705&MyLat=52.4547&MyLon=6.00244

    Lijst:
    http://mobiel.9292ov.nl/app_webservices/stations.aspx?action=getlist

    Versie nummer:
    http://m.9292ov.nl/app_webservices/stations.aspx?action=getversion

    Zo zie je maar weer dat dit geen prestatie is.

    ReplyDelete
  7. Jouke WalesonMarch 29, 2011 at 10:56 PM

    @Frank
    Nee vast niet, alleen intern bij NS.

    @Anon nr 1
    Voorlopig geen tijd voor, misschien over een paar weken.

    @Anon nr 2
    Ja die vond ik ook toen ik het wachtwoord opzocht bij google ;) Had het nog niet eerder gehoord en was voor mij dus niet bekend.

    @Anon nr 3
    Dat vind ik ook een groot gemis, ik wil alleen de maker van waarisdetrein niet belasten met de queries van mijn app.


    @Niels Kootstra

    Ah interessant, dat kan ik misschien wel gebruiken in mijn app. Het is inderdaad niet echt een prestatie en ik weet ook niet waarom mensen er zo moeilijk over doen. Het was alleen nogal slordig van de ns om het over http te doen.

    Bovendien waren er berichten uitgekomen zoals deze: http://www.emerce.nl/nieuws/de-ns-geeft-reisdata-vrij . Verder bleef het stil, en ik denk dus dat de api best wel eens vrijgegeven zou kunnen worden.

    ReplyDelete
  8. KoenMarch 29, 2011 at 10:56 PM

    Ik had dit inderdaad twee maanden geleden al achterhaald en op internet gezet, zoals gezegd paar reacties hierboven. ;)

    Ik hoop alleen niet dat deze publicatie (gezien het nu ook op Tweakers staat) leidt tot een betere beveiliging aan de kant van NS...
    Waarom het überhaupt beveiligd is ontgaat me ook, trouwens.

    ReplyDelete
  9. Jouke WalesonMarch 30, 2011 at 12:11 AM

    @Koen, ha ik had jouw site gevonden toen ik op het wachtwoord zocht. Het lijkt erop dat de NS de data gaat vrijgeven over niet al te lange tijd: http://www.emerce.nl/nieuws/de-ns-geeft-reisdata-vrij

    ReplyDelete
  10. RHarmsenMarch 30, 2011 at 1:49 PM

    @Jouke

    Begrijp ik goed dat je, door gebruik te maken van de 9292 stations locatie api en NS reisinformatie api een App wil proberen te maken welke automatisch voor het dichtstbijzijnde station de reisinformatie geeft.

    Zou een erg mooie App zijn denk ik!

    Eventueel dat combineren met een route planner welke de kortste loop route naar het station kan berekenen en eventueel ook gebruik kan maken van Bus, Tram, enz... maakt een mooie OV reis planner!!!

    Zo een planner, is voor vele partijen interessant denk ik!? Misschien kun je er met een beetje geluk nog wel ondersteuning/geld voor krijgen vanuit de overheid oid.

    ReplyDelete
  11. Jouke WalesonMarch 30, 2011 at 7:48 PM

    @Rharmsen
    Voorlopig houd ik het bij treinen, maar zit wel te denken om gebruik te maken van gps locatie om zo het dichtstbijzijnde station te vinden.

    De app die ik heb gemaakt heet overigens SnelTrein en is te vinden in de Android Market.

    ReplyDelete
  12. AnonymousMarch 31, 2011 at 7:10 PM

    NS heeft nu een API:
    http://www.ns.nl/cs/Satellite/reizigers/api

    ReplyDelete
  13. Jouke WalesonMarch 31, 2011 at 11:51 PM

    @Anon
    Zag het vanmiddag inderdaad. Beetje jammer van de limiet van 50.000 requests per dag. Ben wel benieuwd of ze de oorspronkelijke publicatie-datum vervroegd hebben door de publicatie.

    ReplyDelete
  14. RHarmsenApril 4, 2011 at 2:52 PM

    @Jouke
    Heb sinds vandaag 'pas' een Android telefoon.
    Gelijk net de App geinstalleerd.

    Ziet er goed uit, en werkt veel beter dan de 9292, NS Reisplanner Xtra of andere vergelijkbare Apps die ik wel eens geprobeerd heb.

    Optie om dichts bijzijnde station automatisch te 'laten' zou een erg mooie aanvulling zijn.

    ReplyDelete
  15. Jouke WalesonApril 4, 2011 at 2:53 PM

    dat staat op stapel ;) Evenals het gebruik van de NS api nu die is vrijgegeven.

    ReplyDelete
  16. Koen HoutmanJune 19, 2011 at 2:10 PM

    Wat ik kan bedenken is dat we als programmeurs eigenlijk zelf een reisplannert moeten bouwen. Waarin we de data van de ns manipuleren of overnemen, weet niet of het legaal is en het is een shitload aan werk, maar als we zelf die api kunnen bouwen en gratis beschikbaar te stellen... zou je kunnen zeggen dat je een soort reisplanner lite hebt gebouwd, onderhouden door 1 database en wat slim programmeerwerk. Lijkt me niet een hele lastige klus om eerlijk te zijn. Wie ziet er heugenis in dit project, en wie zou het leuk vinden om zoiets te bouwen, mail dan even naar info@ikoen.nl en we kunnen eens kijken of we een look-a-like kunnen bouwen en verspreiden. Ik weet dat we niet voor de 2e keer het wiel uit moeten vinden, maar als er zoveel gezeik ontstaat rondom het gebruik van de ns api en de regeltjes die ns er aan stelt, beter zelf doen.

    ReplyDelete
  17. Jouke WalesonJune 19, 2011 at 7:12 PM

    Waar heb je dan bijvoorbeeld last van bij de NS planner? Er is overigens al een alternatief: treinfan.waarisdetrein.nl.

    ReplyDelete
  18. AnonymousNovember 10, 2012 at 11:07 AM

    Verder heb je natuurlijk ook nog de Somda API en de 9292ov api: http://goo.gl/g7Tls

    ReplyDelete

Post a Comment

Popular posts from this blog

"Security Is Our Top Priority" is BS

First published on
A couple of years ago I was asked to give a conference talk about software security. Well, actually I wasn't really asked, my company bought a sponsorship package with a speaker slot and I replied to the internal email asking for volunteers  🤣  Anyway, while preparing my talk, I realized a couple of important points about security that have not left my mind since: Security is limitless . You can always spend more effort to make things more secure. The same goes for quality, safety, employee happiness, etc. The needs of security are opposed to the needs of a convenient user experience . Improving one typically hurts the other. Now some organizations say "Security is our #1 priority". Really? You want to make something that has no limits your number one priority? I mean security is a good thing, but this seems a bit too simple? In fact, hollow marketing claims like that can make me a bit angry. In this post I'll help you understand what to make of statements like that...
Read more

AI programming tools should be added to the Joel Test

First published on
Here's a wake-up call to all CTOs: AI programming tools are getting freaking amazing and if you don't allow your teams to use them somehow, it will bite you in the ass in a couple of years. You will be slower and you will lose your best people. The infamous Joel Test is a list from the year 2000 of 12 things all great software companies do. Since then most companies have implemented Git and CI/CD, checking of three items, so we have some space left in the 2024 update ;) I believe "Do you allow your developers to use AI assisted development environments?" is a necessary addition. I get that you don't want your source code to end up on some OpenAI / Microsoft / Github server somewhere, sure, but find a way to use your own models or learn to live with it. Note that this is often not the same as "#9 - Do you use the best tools money can buy?" as blocking AI tools is about data security, not money. So why do I think developers need AI programming tools? I...
Read more

The long long tail of AI applications

First published on
Image
Last year multiple companies asked me for advice. " We are evaluating this AI powered product, but do you think it makes sense at all? It seems a bit niche and we think ChatGPT might make this entire thing obsolete soon. " Long tail - credit to Wikipedia My answer so far has always been: "No, bare LLMs are not going to compete with this product." I think that people are failing to understand the distinction between different classes of AI companies. I see it like this: Foundational AI - creating models like GPT-4 (text), Sora (video) etc. Applied AI - using existing models to create smart applications. Note that there are also companies not focusing on AI - they will start lagging behind, let's forget about them ;) There are orders of magnitude  (!)   more companies that will deal with Applied AI than Foundational AI, and they will be very busy for decades to come. Here's why: To get the most out of LLMs, you have to ask the right questions. LLMs have acc...
Read more