GRIP 4 (storing KPN) Wilhelminakade - Rotterdam 27-07-2011

[nrkvbdnh]

Rotterdam - Naar aanleiding van de KPN-storing van dinsdag op woensdagnacht in de regio Rotterdam laat het ministerie van Veiligheid en Justitie onderzoek doen.



Het ministerie wil van alle partijen weten welke oorzaken, gevolgen en consequenties de storing had op de hulpverleningscommunicatie.

Dit eerste onderzoek zal in de loop van de week beschikbaar zijn. Tevens zal de Inspectie Openbare Orde en Veiligheid onderzoek doen naar deze KPN-storing. De Inspectie is toezichthouder op het C2000 netwerk. Dit onderzoek zal eind augustus gereed zijn.

Deze onderzoeken zijn nodig om alle feiten op tafel te krijgen en lessen te kunnen trekken voor de toekomst. Hulpdiensten zijn afhankelijk van het C2000 netwerk en het functioneren van het netwerk is van fundamenteel belang voor hun werk.

bron :blik op het nieuws

[sylvester1986]

Kapot kastje oorzaak KPN-storing

DEN HAAG -  Een kapot 'cross-connectkastje' is de oorzaak van de storing in het communicatienetwerk van de hulpdiensten in Rotterdam-Rijnmond en Zuid-Holland Zuid van woensdagochtend. Dat heeft telecommaatschappij KPN gemeld.

Het kastje maakt deel uit van de KPN-centrale in de Rotterdamse Waalhaven. Op dit knooppunt komen 6200 lijnen bij elkaar. Door het falende kastje vielen verbindingen weg en daarmee communicatiesystemen uit. Van de kastjes bestaat geen back-up.
Door de telefoonstoring konden de hulpdiensten elkaar minder goed bereiken. Vooral de communicatie tussen de meldkamer en de hulpverleners en wagens op straat liep spaak.
Tienduizenden reizigers konden woensdagochtend niet met de metro reizen, omdat bestuurders van de voertuigen niet konden communiceren met de verkeersleiding. De RET besloot daarop uit veiligheidsoverwegingen geen enkele metro te laten rijden.
Het ministerie van Veiligheid en Justitie en de Inspectie Openbare Orde en Veiligheid stellen een onderzoek in naar de problemen.

Bron: telegraaf

[RAdeR]

'Onderzoeksuitslag C2000 storing later'
De resultaten van het onderzoek naar het uitvallen van het communicatiesysteem C2000 in Rotterdam worden pas over enkele weken bekend. De resultaten zouden eerst afgelopen vrijdag al gepubliceerd worden.
"Er zou nog niet over de uitslag van het onderzoek mogen worden gesproken omdat er Kamervragen over zijn gesteld.", aldus een woordvoerder van het ministerie van Veiligheid en Justitie.
Om die reden zou het nog wel drie weken kunnen duren voordat iets bekend wordt over de C2000-storing in Rotterdam.
http://rijnmond.nl/Homepage/Nieuws?view=%2FNews%2FDefault%2F2011%2Faugustus%2FOnderzoeksuitslag%20C-2000%20storing%20later

[Live]

KPN vervangt falende klok in 88 telefoonswitches
 
http://webwereld.nl/nieuws/108995/kpn-vervangt-falende-klok-in-88-telefoonswitches.html
Aanbevelen Gepubliceerd: Vrijdag 23 december 2011
Auteur: Andreas Udo de Haes

KPN vervangt alle klokkaarten van de 88 cruciale cross-connect knooppunten in zijn netwerk. Een flippende klok veroorzaakte in juli een zeer ernstige storing.

Na bijna een half jaar onderzoek zijn KPN en netwerkleverancier Alcatel Lucent eruit: de klokkaarten van de 88 zogenaamde cross-connect switches in het KPN-netwerk moeten worden vervangen. De huidige klokken zijn niet meer te vertrouwen, nadat er in juli eentje het begaf.

Grip 4 calamiteit
Dit euvel veroorzaakte een nachtelijke storing op ruim 6000 cruciale verbindingen in en rond Rotterdam. Die trof onder meer C2000 en P2000, het communicatiesysteem van de hulpdiensten, de Rotterdamse metro's en de luchtverkeersleiding van Rotterdam Airport. In de regio was hierdoor sprake van een Grip 4 crisis.

In een van de cross-connects disfunctioneerde op een cruciaal moment de klok. Cruciaal, omdat er op dat moment onderhoud werd gepleegd na een eerder mankement in de voeding van dezelfde switch. De cross-connect is redundant uitgevoerd, maar niet tijdens de reparatie. Toen de klok in het primaire systeem flipte, was er dus geen back-up en ging het systeem plat.

Alle klokken vervangen
KPN heeft nu besloten dat alle klokkaarten van de 88 cross-connects die in bedrijf zijn worden vervangen. Dat zal volgend jaar gebeuren. Naast het technische onderzoek van Alcatel lopen er nog twee onderzoeken van de overheid.


KPN-systeem Rotterdam faalde dubbel

http://webwereld.nl/nieuws/107446/kpn-systeem-rotterdam-faalde-dubbel.html
Gepubliceerd: Donderdag 28 juli 2011
Auteur: Loek Essers

De KPN-storing in Rotterdam werd veroorzaakt door het falen van cross connect-systemen. Werkzaamheden aan het ene systeem veroorzaakten een storing in het backup-systeem. Beide gingen offline.

De hulpverleningssystemen p2000 en c2000 werkten dinsdagnacht tussen 1 uur 's nachts en half 8 's ochtends niet, door een fikse storing in een KPN-knooppunt in de Waalhaven van Rotterdam. Ook de Rotterdamse metro urenlang niet omdat de metrobestuurders geen contact konden houden met de centrale en het daarom onverantwoord was om te rijden.

Een sluitende verklaring voor de problemen gaf de telecomoperator niet direct. Eerst zou het gaan om een defecte computer. Later werd er gesproken over een kapot "verbindingskastje' in het netwerk.

Dubbel falen
Die laatste verklaring komt het dichtst bij de waarheid. "De oorzaak van de storing ligt in een zogenaamd 'cross connect' systeem. In de berichtgeving komt het woord 'kastje' veelvuldig voor. Enige verduidelijking is op zijn plaats", stelt de telco in een e-mailverklaring. Cross connect systemen zijn complex maar "zeer robuust en betrouwbaar", aldus KPN.

Deze kritieke systemen zijn dan ook dubbel uitgevoerd om storingen te voorkomen. Maar bij werkzaamheden in Rotterdam vielen ze alle twee uit. "In dit geval leidden onderhoudswerkzaamheden aan het ene deel tot een storing in het andere deel van de cross connect", meldt de operator. "Volgens leverancier Alcatel-Lucent komt een dergelijke storing zeer zelden voor." KPN stelt niet eerder getroffen te zijn door een dergelijke storing.

Over het algemeen betrouwbaar
Een telecomexpert die sprak met Webwereld maar liever anoniem wil blijven, legt uit dat de cross connect systemen essentieel zijn voor het in stand houden van het netwerk: "Een cross connect is een apparaat waarmee circuit geschakelde verbindingen gemaakt kunnen worden. Je hebt elektrische en optische varianten. Het is het telecom-equivalent van een spooremplacement tsjokvol wissels", e-mailt hij.

"Over het algemeen betrouwbare spullen. Maar soms gaat er wel eens wat mis. De vraag is hoeveel geld je wilt uitgeven aan redundantie. Maar dan nog hou je kans op menselijke bedieningsfouten. Bijvoorbeeld bij preventief onderhoud, in het geval dat er een handmatige failover moet plaatsvinden voor een software-upgrade ofzo. Gegeven het tijdstip zou het me niets verbazen als er in een onderhoudswindow wat mis is gegaan."

Onderzoek
Technici van KPN zijn samen met Alcatel-Lucent een onderzoek gestart naar de oorzaak van de storing om herhaling te voorkomen. "Zodra de uitkomsten van het onderzoek beschikbaar zijn, zullen we hierop terugkomen. Hangende de uitkomsten van dit onderzoek worden overigens geen werkzaamheden gepleegd aan de andere cross connect knooppunten", voegt KPN nog toe.

Er lopen ook twee onderzoeken van het ministerie van Veiligheid en Justitie (VenJ) naar het uitvallen van het KPN-netwerk. De eerste resultaten moeten nog deze week bekend zijn. Er wordt ook een breder onderzoek gedaan naar mogelijk structurele problemen met deze cross connect punten. Voor het ministerie is een dergelijke storing onacceptabel.

[Shire]

Rapport van het Ministerie van Veiligheid en Justitie is gereed:

http://www.rijksoverheid.nl/ministeries/venj/documenten-en-publicaties/rapporten/2012/07/16/rapport-storing-telecommunicatienetwerk-waalhaven-rotterdam.html