2013年2月27日のTwitter通信障害時のtracerouteログ
昨年のイー・モバイル通信障害に続くtracerouteシリーズ第二弾。
Twitterがつかえなくなったが、今回はTwitterがおかしかったのではなく日米間のどこかで経路障害がおこったようで
つながるプロバイダとつながらないプロバイダがあったのでいろいろ比較してみた。
単なる記録として残しているだけなので、見てもぜんぜん役に立たないです。
状況
フレッツ光ネクスト、@niftyでつながらなかったときのtracerouteログ
192.168.24.1は自宅のルータ。
＊.ntt.netというところを何個か通過した後引っかかっている。
最後通れたところはレスポンス速度からして国内とおもわれる。
この一個先が米国のルータかどうかは不明だが復帰後の状況を見るに一個先は米国ルータだったとおもわれる。
$ traceroute www.twitter.com
traceroute: Warning: www.twitter.com has multiple addresses; using 199.59.150.7
traceroute to twitter.com (199.59.150.7), 64 hops max, 52 byte packets
1 192.168.24.1 (192.168.24.1) 2.271 ms 1.862 ms 0.804 ms
2 133.160.150.52 (133.160.150.52) 7.293 ms 7.610 ms 5.634 ms
3 133.160.150.49 (133.160.150.49) 6.422 ms 5.869 ms 6.652 ms
4 133.160.163.105 (133.160.163.105) 5.599 ms 5.712 ms 5.712 ms
5 133.160.127.230 (133.160.127.230) 11.611 ms 11.063 ms 11.441 ms
6 xe-7-2.a14.tokyjp01.jp.ra.gin.ntt.net (61.213.160.137) 12.103 ms 12.917 ms 12.203 ms
7 ae-8.r24.tokyjp01.jp.bb.gin.ntt.net (61.213.160.241) 11.989 ms
ae-8.r25.tokyjp01.jp.bb.gin.ntt.net (203.105.72.149) 11.469 ms
ae-8.r24.tokyjp01.jp.bb.gin.ntt.net (61.213.160.241) 49.453 ms
8 ae-2.r00.tokyjp03.jp.bb.gin.ntt.net (129.250.2.5) 14.426 ms
ae-3.r00.tokyjp03.jp.bb.gin.ntt.net (129.250.4.233) 15.004 ms
ae-2.r00.tokyjp03.jp.bb.gin.ntt.net (129.250.2.5) 12.624 ms
9 * * *
10 * * *
11 * * *
12 * * *
13 * * *
14 * * *
15 * * *
16 * * *
17 * * *
18 * * *
19 * * *
20 * * *
auの3G回線、つながらなかったときのtracerouteログ
フレッツ光ネクスト/@niftyはNTTのルータっぽいところで止まっていたが、こちらはさすがauとあってKDDIの回線を通っている模様。
3Gだからというのもあるが全体的にレスポンス速度が遅めでどこまでが日本かわかりにくい
Traceroute to www.twitter.com (199.59.150.7), 64 hops max.
1 *
2 172.23.134.114 (172.23.134.114) time=143 ms
3 172.23.204.34 (172.23.204.34) time=470 ms
4 172.23.204.141 (172.23.204.141) time=113 ms
5 tm4bbac01.bb.kddi.ne.jp (111.86.159.177) time=100 ms
6 otejbb205.int-gw.kddi.ne.jp (111.87.242.145) time=95 ms
7 pajbb001.int-gw.kddi.ne.jp (203.181.100.2) time=478 ms
8 ix-pa4.int-gw.kddi.ne.jp (111.87.3.50) time=257 ms
9 199.16.159.189 (199.16.159.189) time=467 ms
10 *
11 *
12 *
13 *
14 *
15 *
終始ちゃんとつながっていたi-revoアクセスからtraceroute
IIJはオッケーだったようだ。192.168.8.1は自宅のルータ。
$ traceroute www.twitter.com
traceroute: Warning: www.twitter.com has multiple addresses; using 199.59.150.39
traceroute to twitter.com (199.59.150.39), 64 hops max, 52 byte packets
1 192.168.8.1 (192.168.8.1) 9.172 ms 4.433 ms 1.222 ms
2 aichi06-n01.flets.2iij.net (203.180.195.114) 60.094 ms 64.468 ms 64.513 ms
3 ngy003lip30.iij.net (203.180.195.113) 65.316 ms 62.826 ms 65.106 ms
4 ngy003ipgw10.iij.net (210.138.115.77) 64.436 ms 64.263 ms 62.160 ms
5 ngy003bb11.iij.net (58.138.108.65) 62.608 ms 65.028 ms 66.140 ms
6 osk004bf00.iij.net (58.138.81.245) 65.805 ms 72.341 ms 69.777 ms
7 lax002bf00.iij.net (206.132.169.117) 173.410 ms
lax002bb10.iij.net (216.98.96.65) 176.882 ms
lax002bf00.iij.net (206.132.169.117) 175.765 ms
8 sjc002bb10.iij.net (206.132.169.90) 182.823 ms 184.494 ms 189.108 ms
9 eqix1.cr1.sjc2.twttr.com (206.223.116.94) 178.899 ms 187.248 ms
eqix2.cr2.sjc2.twttr.com (206.223.116.101) 192.116 ms
10 ae53.smf1-er1.twttr.com (199.16.159.37) 186.884 ms 194.229 ms
ae53.smf1-er2.twttr.com (199.16.159.41) 188.891 ms
11 r-199-59-150-39.twttr.com (199.59.150.39) 190.033 ms 189.822 ms 198.246 ms
ちなみに@niftyでwww.twitter.comを引いたときに出てきたIP宛に直接打ったがこれもオッケー
$ traceroute 199.59.150.7
traceroute to 199.59.150.7 (199.59.150.7), 64 hops max, 52 byte packets
1 192.168.8.1 (192.168.8.1) 7.214 ms 1.733 ms 1.204 ms
2 aichi06-n01.flets.2iij.net (203.180.195.114) 57.078 ms 55.501 ms 55.521 ms
3 ngy003lip30.iij.net (203.180.195.113) 64.365 ms 59.428 ms 58.841 ms
4 ngy003ipgw10.iij.net (210.138.115.77) 56.065 ms 58.557 ms 60.879 ms
5 ngy003bb10.iij.net (58.138.108.57) 68.704 ms 70.633 ms 67.726 ms
6 osk005bf00.iij.net (58.138.81.253) 72.251 ms
osk004bf01.iij.net (58.138.82.109) 58.281 ms 61.410 ms
7 lax002bf00.iij.net (216.98.96.53) 188.466 ms 187.637 ms
lax002bf01.iij.net (216.98.96.190) 178.083 ms
8 sjc002bb10.iij.net (206.132.169.94) 200.600 ms
sjc002bb10.iij.net (206.132.169.98) 193.531 ms
sjc002bb10.iij.net (206.132.169.94) 184.409 ms
9 * eqix2.cr2.sjc2.twttr.com (206.223.116.101) 209.286 ms 193.979 ms
10 ae53.smf1-er1.twttr.com (199.16.159.37) 195.958 ms
ae53.smf1-er2.twttr.com (199.16.159.41) 207.311 ms 190.489 ms
11 r-199-59-150-7.twttr.com (199.59.150.7) 191.693 ms 207.789 ms 195.741 ms
同一時間帯につながっていたとおもうSoftbank LTE回線のtracerouteログ
ソフトバンクはODNが出てきよる、当然と言えば当然なんだろうがiPhoneはパンダワールド一色だとおもっていたので
ここでODNの名前を見るのはちょっと意外だった
だが、これをやっていたときはもしかしたら既に復活していたかもしれない点には注意したい
Traceroute to www.twitter.com (199.59.148.10), 64 hops max.
1 192.168.100.1 (192.168.100.1) time=57 ms
2 192.168.100.2 (192.168.100.2) time=30 ms
3 192.168.100.36 (192.168.100.36) time=33 ms
4 192.168.100.33 (192.168.100.33) time=33 ms
5 192.168.100.33 (192.168.100.33) time=36 ms
6 192.168.100.44 (192.168.100.44) time=29 ms
7 *
8 pw126211148098.5.panda-world.ne.jp (126.211.148.98) time=83 ms
9 pw126211148110.5.panda-world.ne.jp (126.211.148.110) time=45 ms
10 *
11 pw126211148209.5.panda-world.ne.jp (126.211.148.209) time=78 ms
12 pw126211148122.5.panda-world.ne.jp (126.211.148.122) time=31 ms
13 pw126211147130.5.panda-world.ne.jp (126.211.147.130) time=32 ms
14 pw126211144161.5.panda-world.ne.jp (126.211.144.161) time=40 ms
15 pw126211144041.5.panda-world.ne.jp (126.211.144.41) time=56 ms
16 101.110.0.233 (101.110.0.233) time=31 ms
17 10.0.194.213 (10.0.194.213) time=37 ms
18 10.0.191.1 (10.0.191.1) time=41 ms
19 10.9.193.154 (10.9.193.154) time=43 ms
20 93.143090232.odn.ne.jp (143.90.232.93) time=36 ms
21 stoac-01te0-1-0-3.nw.odn.ad.jp (143.90.47.5) time=45 ms
22 pax-gw1-te3-1.gw.odn.ad.jp (210.142.161.38) time=168 ms
23 twitter.gw.odn.ad.jp (210.142.160.154) time=173 ms
24 ae52.smf1-er2.twttr.com (199.16.159.55) time=176 ms
25 r-199-59-148-10.twttr.com (199.59.148.10) time=196 msTraceroute at destination ***
というようなことをやっていて、NTT Docomo (Xi)はどうか、なんてことを思い始めた頃
22時まわらないぐらいの時間にいきなり全回線復活した。
なので、上のSoftbankは経路復活後かもしれない。
フレッツ光ネクスト、@niftyで経路復活後のtracerouteログ
８番目までの経路は多分同じで、先ほど出てこなかった９番目のルータが出てきている。
８番目のルータが13msとかでレスポンスしてきているのに対して
９番目のルータは186msなのでおそらく米国側のルータなんじゃないかと思う。
$ traceroute www.twitter.com
traceroute: Warning: www.twitter.com has multiple addresses; using 199.59.150.7
traceroute to twitter.com (199.59.150.7), 64 hops max, 52 byte packets
1 192.168.24.1 (192.168.24.1) 1.122 ms 1.645 ms 0.686 ms
2 133.160.150.52 (133.160.150.52) 5.937 ms 6.596 ms 8.055 ms
3 133.160.150.49 (133.160.150.49) 6.450 ms 10.172 ms 5.936 ms
4 133.160.163.105 (133.160.163.105) 5.423 ms 5.467 ms 5.750 ms
5 133.160.127.230 (133.160.127.230) 11.571 ms 10.844 ms 11.062 ms
6 xe-7-2.a14.tokyjp01.jp.ra.gin.ntt.net (61.213.160.137) 12.361 ms 12.895 ms 12.478 ms
7 ae-8.r24.tokyjp01.jp.bb.gin.ntt.net (61.213.160.241) 12.733 ms
ae-8.r25.tokyjp01.jp.bb.gin.ntt.net (203.105.72.149) 11.361 ms
ae-8.r24.tokyjp01.jp.bb.gin.ntt.net (61.213.160.241) 11.808 ms
8 ae-2.r00.tokyjp03.jp.bb.gin.ntt.net (129.250.2.5) 11.988 ms
ae-3.r00.tokyjp03.jp.bb.gin.ntt.net (129.250.4.233) 13.908 ms
ae-2.r00.tokyjp03.jp.bb.gin.ntt.net (129.250.2.5) 13.062 ms
9 xe-0-2-0-10.r00.tokyjp03.jp.ce.gin.ntt.net (61.213.145.166) 186.727 ms 186.270 ms 187.108 ms
10 xe-1-0-0.sin1-cr1.twttr.com (199.16.159.12) 193.822 ms 192.624 ms 305.592 ms
11 xe-0-3-0.sjc2-cr2.twttr.com (199.16.159.23) 187.074 ms 186.725 ms 187.041 ms
12 ae53.smf1-er2.twttr.com (199.16.159.41) 194.140 ms 191.865 ms 197.857 ms
13 r-199-59-150-7.twttr.com (199.59.150.7) 193.291 ms 194.834 ms 192.021 ms
auの3G回線で経路復活後のtracerouteログ
KDDI系というかモロKDDIのauはどうなったか。
６番目のotejbb205.int-gw.kddi.ne.jpまでは同じだが、
７番目が障害発生時pajbb001.int-gw.kddi.ne.jp (203.181.100.2)となっていたのが
ix-ote207.int-gw.kddi.ne.jp (106.187.6.74)に変更されている。
多分oteというのは東京大手町のIXのことを指しているんだろう（と推測）
さらにそっから先８〜１１はDNS名はひけないので深く追っていないが
１２からはNTTのルータが出てきている。
そしてこの１２に出てきているNTTのルータは@niftyで障害回復後通っている
xe-0-2-0-10.r00.tokyjp03.jp.ce.gin.ntt.net (61.213.145.166)である。
じゃあ、この１２番目のルータがトラブったことで@niftyとauがだめになったのか、という話だが
少なくともauに関しては途中の経路がかわっているので、もしかすると自社設備がおかしくなったので
NTTのほうに間借りしているのかもしれない。
いつもやってみてるわけじゃないからワカランけど、KDDIの回線でNTTが出てくるモンなのか？
Traceroute to www.twitter.com (199.59.150.7), 64 hops max.
1 *
2 172.23.134.114 (172.23.134.114) time=75 ms
3 172.23.204.34 (172.23.204.34) time=75 ms
4 172.23.204.141 (172.23.204.141) time=82 ms
5 tm4bbac01.bb.kddi.ne.jp (111.86.159.177) time=91 ms
6 otejbb205.int-gw.kddi.ne.jp (111.87.242.145) time=113 ms
7 ix-ote207.int-gw.kddi.ne.jp (106.187.6.74) time=114 ms
8 210.163.230.217 (210.163.230.217) time=87 ms
9 122.28.104.173 (122.28.104.173) time=84 ms
10 60.37.27.153 (60.37.27.153) time=96 ms
11 210.163.230.238 (210.163.230.238) time=473 ms
12 ae-7.r24.tokyjp01.jp.bb.gin.ntt.net (61.213.162.165) time=124 ms
13 ae-2.r00.tokyjp03.jp.bb.gin.ntt.net (129.250.2.5) time=111 ms
14 xe-0-2-0-10.r00.tokyjp03.jp.ce.gin.ntt.net (61.213.145.166) time=124 ms
15 xe-1-0-0.sin1-cr1.twttr.com (199.16.159.12) time=184 ms
16 xe-0-3-0.sjc2-cr2.twttr.com (199.16.159.23) time=474 ms
17 ae53.smf1-er2.twttr.com (199.16.159.41) time=473 ms
18 r-199-59-150-7.twttr.com (199.59.150.7) time=471 msTraceroute at destination ***
もう数日したら、KDDIに戻ってるとかあるのかしらん？
