Kihúzták a dugót
1232914474
Születésnapi bulink másnapján (hé, elvégre mégis az én blogom) kómásan idomítottam édesanyámat a bittorrent kliens használatára, amikor megszakadt az internet kapcsolat. Drága anyum persze pánikolt egyet miközben végigcsináltam a rutin hibaelhárítást (utólag belegondolva a router log elég sok mindent elárult már az elején). Mikor úgy tűnt, hogy helyben minden rendben hívni akartam az ügyeletes kollégámat. Mint kiderült, égtek a vonalak, ezért a vezetékes számunkon nem volt sok esélyem. Kollégáimmal mobil telefonon beszéltük meg az akkor még csak sejtett problémát. Kis idő múlva meseszerűen ment újra (hol volt, hol nem volt). Egy jobb pillanatában rögtön utánajártam a dolognak a weben.

Elsőként a Webisztán és a HUP foglalkozott a témával, előbbit hamar főcímre emelte anyukája amíg elkészült a saját cikkje. Az index a (megszokottak szerint) hangzatos Meghalt a fél magyar internet címen írt először a jelenségről. A Hungarian Unix Portalt T hálózattól független felhasználók sem érhették el, ugyanis a HUP otthona az adatpark. A hírportálok közül az [Origo] volt a legkellemetlenebb helyzetben. Egyrészt az adatpark kiesés miatt ők is elérhetetlenek voltak, másrészt a T leányvállalataként érzékeny téma, hogy mit írnak anyuról. Gondolhatnánk emiatt szinte házon belüli infóként kéne ismerniük a részleteket, mégis az ő első bejegyzésük volt a legkarcsúbb. Hétvégén megáll az internet is (hát még ha rá is segítenek, szó szerint) ezért van olyan nagy hírportál ami egyszerűen átvette az MTI információit. A HVG online várhatóan holnap részletesebben is beszámol a történtekről.

Mi is történt az eddigi információk szerint?
Már az első pletykák is gerinchálózati kábel szakadásról szóltak (T ügyfélszolgálat információ szerint Baranya megyében történt). Ezt később megerősítették, az M6-os autópálya építése közben, Szekszárd és Tolna között vágták el az optikai kábelt. Azonban nem közvetlenül a kábelszakadás okozta a leállást, mivel nincs statikus routing és a rendszer redundáns (gerinckábel szakadást bírnia kell a hálózatnak). A kieső adatforgalom elterelése volt az igazi probléma. Az Adatpark hálózatának hibája az ott hosztolt webszervereken túl az authentikációs szerverek kiesését okozta. Emiatt a Telekom hálózaton szolgáltató összes ISP érintve volt, a PPPoE auth már az első Radius szervereknél elbukott.

718-as hiba
Az esetek 99,8%-ában ez általános szolgáltató oldali hibára vezethetõ vissza.
- Legtanácsosabb ilyenkor várni egy kicsit a csatlakozással
- amennyiben egy-két óra után se múlik el a probléma érdemes a szolgáltatót felhívni
ihd.hu

145.236.226.248 WE (bsr1-tapolca.net.telekom.hu)
T-Com radius monitoring szerver felől nézve

Sunday, 25/01/2009
ON 15:46 ping PING: OK - response time is 6.654 ms
OFF 15:16 ping PING: CRITICAL packet loss 100%>50%
ON 15:06 ping PING: OK - response time is 6.859 ms
OFF 15:01 ping PING: CRITICAL packet loss 100%>50%
ON 14:51 ping PING: OK - response time is 8.962 ms
OFF 14:36 ping PING: CRITICAL packet loss 100%>50%
ON 14:31 ping PING: OK - response time is 6.111 ms
OFF 14:26 ping PING: CRITICAL packet loss 80%>50%
ON 14:21 ping PING: OK - response time is 7.798 ms
OFF 13:06 ping PING: CRITICAL packet loss 100%>50%

Mivel vasárnap van, illetve a T-com érintet osztályain VoIP telefonok vannak, elég nagy volt a homály. Nem volt internet, intranet, a dolgozók a céges/saját mobillal próbálták egymást elérni, de ugye a telefonszámokat tartalmazó adatbázis szerver se volt elérhető, és a monitoring szoftverekkel is gondok voltak. A hibás eszközöket kicserélték, bekonfigurálták aztán szépen visszaálltak a főbb szolgáltatások. Részletes hibajelentés valószínűleg holnapra várható.

Bár a Telekom oldalán nincs kint hivatalos sajtóanyag, a megjelent interjúk szerint egyedülálló volt az eset. Tüdős András kommentárjait érdemes elolvasni, egyszerre szakszerű és a sajtó számára megnyugtató nyilatkozatokat tett. A műszaki vezérigazgató-helyettes, Maradi István (mekkora irónia ilyen névvel egyáltalán IT/telco cégnél dolgozni) viszont durván félrebeszél, amikor azt mondja, hogy teljesen egyedi eset:

"Olyan váratlan dolog történt, amit csak az élet tud produkálni. Több egymástól független hiba összeadódása okozta a példátlan zavart"

Pár kísértetiesen hasonlító korábbi eset:
2005. 09.22. 12:01
Átmeneti leállás a T-Online-nál

2006. 05.03. 12:53
Kieses? Adatpark?