朝、勤怠システムのページが開きません。机の下をのぞくと、外れているLANケーブルが1本ありました。
これだ、と空いているポートに差し込みます。それでも勤怠は開きませんが、PCの差し込み口のランプは点滅しているので、ネットワーク自体の不具合だろうとそのままにしました。
次に起きたのは、大部屋の100台近いPCのネットワーク障害です。インターネットも社内イントラネットも、ネットワークプリンターも使えません。movinowさんのnoteが2024年に振り返った、10年以上前の勤務先の朝でした。
原因は、どのPCにもつながっていない1本。PCを別の場所へ移したときに残されたものらしく、ハブに刺さったまま床にあった先端が、同じハブの別のポートに差されて輪ができていました。
片づけ忘れと親切が重なると、こうなります。注意書きだけでは減らしにくいので、席替えの段取りとハブの選び方まで見直す価値があります。
人は、空きポートを見ると挿したくなる
Qiitaでネットワークの珍事を供養したtak_hamさんの、2021年の一文です。
人は片方が接続されていないLANケーブルと空きポートがあるととりあえず接続したくなる生き物らしい。
出典: tak_ham「情シスと愉快なネットワークたち」(2021年7月28日)
挙がっている例は、会議室でノートPCをつなぐために出しておいたケーブルと、机に立ち上げておいたケーブルです。どちらもハブの空きポートに刺されました。
元情シスのhmatsu47さんが2022年に振り返る話は、登場人物がもう少し増えます。複数の拠点からLANがつながらないと連絡が入り、全拠点を切り離して1つずつ戻していると、ある拠点の偉い人から電話がかかってきました。「仕事にならんからネットを切るな」。ところが調査を続けると、怪しいのはまさにその拠点です。ガジェット好きのAさんが、ぶら下がったケーブルを見つけていました。
「たぶんこの HUB から外れたんだろうな。刺しておこう。ヨシ!」
出典: hmatsu47「切れたらキレられた話」(2022年12月10日)
本人は直後に外出し、障害には気づいていなかったそうです。
設定屋さんの2019年のブログでは、お客さまからの連絡が「何もしていないのに、インターネットが繋がらなくなった」でした。激しく点滅するハブは、その連絡をくれた人の手の届く所にあります。書き手の結論は「勝手にLANケーブルを挿すのはやめましょう」です。ただ、そのケーブルは一度OAフロアの下に潜り、ハブのすぐ近くから出ていて、抜けたように見える配線でした。「うーん、挿してしまう気持ちもわかる。。。」。同感です。
悪意のある人は、どの話にも出てきません。みんな、直そうとしただけに見えます。
「机を動かしたせいかも」が、いちばんの手がかり
電話を受ける側も楽ではありません。ぴょん吉さんの2021年のnoteによると、職場では以前、異動の季節になるとループがよく起きていました。そのころの電話がこちらです。
「あの、とくに何もしてないんですけれど、急につながらなくなって、でも机を動かしたせいかもしれなくて。。。」
「どのフロアですか?」
「あの、本当に何もしてないんですが、助けてください!」
出典: ぴょん吉「ループと情シス」(2021年3月10日)
必死さが伝わってきます。慣れてくると、ぴょん吉さんは余計なことを聞かず「はい、行きます」で現地へ向かうようになったそうです。
笑える場面ですが、手がかりはもう出ています。机を動かした、の一言です。社内ヘルプデスクの思考法を書いたQiitaの記事も、有線LANの不調で「昨日席替えをする前までは問題なく使えていた」と聞ければ、PC本体より移動先のケーブルまわりを疑えるそうです。
ただ、「何か触りましたか」と聞くと、相手には「あなたのせいですか」と聞こえるかもしれません。ぴょん吉さんは、何とかしようとして別の口につないだら被害が広がった、という例も挙げました。手を止めてもらいながら話してもらうには、聞き方を変えるのが近道でしょう。
| 聞くこと、頼むこと |
言い方の例 |
ねらい |
| 止まった範囲 |
「周りの席の方も、つながりませんか」 |
1台の話か、ハブから先の話か |
| 場所 |
「どのフロアの、どの島ですか」 |
行く先と、見るハブ |
| 今朝の変化 |
「今朝か昨日、机やケーブルを動かした方はいませんか。直すために聞いています」 |
最初に抜くケーブルを絞る |
| 待ってもらうこと |
「いったん、どこにも挿さずにお待ちください」 |
これ以上広げない |
大部屋の朝でも、決め手は聞き取りでした。フロアのリーダーを集めて抜き差しをした人を探してもらうと、朝礼の前にハブへ挿した人が1人見つかり、そのハブのケーブルを全部抜いたところで障害は解消しました。
激しく点滅するハブを探す
ランプの話は、3つの体験談でそろっています。movinowさんの現場では、障害が起きたPCがつながる島ごとのハブがどれもLink/ActのLEDを激しく点滅させ、hmatsu47さんはサーバー室の装置のACTランプが激しく点滅するのを見ました。設定屋さんが見つけたループ検知機能付きのハブは「ものすごい勢い」で点滅していました。
根拠はこうした体験談で、NTT東日本のコラムにランプの話は出てきません。点滅だけでループとは決められず、movinowさんの現場のように何台も点滅していれば、原因のハブも絞れません。それでも、部屋ごとつながらない朝の目安にはなります。
余った1本が輪になるまでの3コマと、現場に頼む手順、席替えで足すこと、ハブの動きの違い作成: 編集部 / 出典: 情シスの相棒編集部(NTT東日本のコラム、メーカーの製品ページ、公開の体験談をもとに作成)
1本で部屋ごと止まる理由は、NTT東日本のコラムで分かります。1本のケーブルの両端が1台のハブにつながる形は「1台ループ」と呼ばれ、データが輪の中を回り続けて帯域を使い果たし、ループしているネットワーク全体がダウンします。同じコラムが調査と対策の最初に挙げるのは「直前に接続したケーブルを抜く」こと。これなら現場の人にも頼めます。
どこまで止まるかは、ネットワークの分け方で変わります。大部屋の朝は同じフロアの別の部屋が無事でしたが、複数の拠点で同じサブネットを使っていたhmatsu47さんの職場では、連絡が複数の拠点から届きました。のちの見直しでは、1拠点の障害が波及しないように分け直しました。
情シスが遠い拠点なら、抜いてもらえるかどうかで時間が大きく違います。ぴょん吉さんの先輩は新幹線で別の事業所に呼ばれ、ケーブルを抜いたら直ったそうです。5分のために3時間の移動でした。次の手順を拠点の担当者に渡しておけば、その3時間は減らせるかもしれません。
- 止まっている範囲を見て、情シスに電話します(席か、部屋か、フロアか)。
- その範囲のハブで、ランプが激しく点滅しているものを探し、抜く前の配線を写真に撮ります。
- 今日挿したケーブルが分かれば、情シスに伝えてから抜きます。分からなければ、情シスの指示で、点滅しているハブのケーブルを1本ずつ抜きます。
- 通信が戻ったら、写真を見ながら情シスと1本ずつ戻します。今日挿した1本は戻しません。
ほかのハブや壁の口へ延びるケーブル、電話やサーバーにつながるケーブルは、抜くと別の場所まで止まることがあるので、必ず聞いてから触ってもらいます。見分けが付くように札を付けておくと、電話口の説明も短くなります。
「ループ検知」のハブでも、ポートを止めるとは限らない
ハブを買い替えれば安心、とは言い切れません。同じ「ループ」の語でも、メーカーが説明する動きは分かれます。
| 製品の例 |
ループのときの動き(メーカーの説明) |
読み取れること |
| バッファローのLSW6-GT-8NS/BK(家庭・小規模オフィス向けと説明) |
ループ検知のランプが赤く点滅し、発生したポートのランプも点滅して知らせる |
ランプで場所を探せる。製品ページの説明は通知までで、遮断には触れていない |
| バッファローのBS-GS2024P/HP(Business Switch) |
該当ポートを自動的に無効にし、DIAG LEDが赤く点滅する |
全体のダウンを防ぐ説明。無効になったポートの戻し方は製品ページにない |
| パナソニックEWネットワークスのMNOシリーズ |
発生したポートを遮断してLEDで知らせ、3日以内の発生ポートも後から表示できる |
解消したあとも原因のポートを追える |
足元の島ハブを「ループ対策済み」のつもりで選ぶなら、見るのは機能の名前より、ポートを止めるかどうかです。表の3機種は用途も規模も違い、動きの違いを示す例で、優劣やおすすめではありません。どれもメーカーの説明を読んだ範囲の話で、編集部は実機では試していません。書かれていない動きが、ないと決まったわけでもありません。お使いの機種は仕様書やメーカーへの問い合わせで確認してください。
止める機種にも後始末はあります。ぴょん吉さんの職場のスイッチはループになるとポートが切断される仕様で、空きポートへ差し替えてメモを貼り、保守ベンダーに復旧を頼んでから、もう一度現地で元に戻していたそうです。
機能に頼りきれない話もあります。hmatsu47さんは、ループ検出と遮断の機能があったはずの接続装置が、対向側だけのループには効かなかったと振り返ります。「ループ防止機能を過信してはダメです」とのこと。設定屋さんも、ループ状態を起こさせない機能では原因の解決にならないとして、用途で使い分けるよう勧めています。
それでも、置き換えの効き目を語る声はあります。ぴょん吉さんによると、ループ防止のハブが主流になってから、利用者からの通報はめっきり減りました。
席替えの前に総務と確認すること
席替えやレイアウト変更を決めるのは、多くの会社で総務や各部署でしょう。情シスが知るのは障害のあと、では遅すぎます。ぴょん吉さんの職場は「レイアウト変更するときは事前に情シスに相談してください」と社内に告知していました。告知に加えて、総務の手順に組み込むと抜けにくくなります。
- 総務のレイアウト変更の手順に、「座席表が決まったら情シスへ連絡」の1行を足します。
- 動かす前に、ハブの周りを写真に撮ります。構成を変える前に写真や配線図を残す方法は、NTT東日本のコラムにもあります。
- 移動が終わったら、先がどこにもつながっていないことを確かめて、そのケーブルをハブから抜いて回収します。大部屋の朝は、この1本から始まりました。
- 空きポートをふさぎます。ポートキャップはNTT東日本も挙げる方法で、設定屋さんの評価は「地味ながら効果絶大」です。
- 島ハブの電源に目印を付けます。tak_hamさんの例では、座席の引っ越しでPCの電源と一緒に島ハブの電源まで抜かれ、「抜いたら死ぬ」というマーキングタイが効いたそうです。
規模の大きな引っ越しには、オフィス移転の分担表が使えます。
社内に出す文面は、責めない言い方にしておきます。
席替えとレイアウト変更の前に(情シスより)
・座席表が決まったら、情シスに知らせてください。
・先の抜けたLANケーブルを見つけても、挿さずに連絡してください。
・つながらないときは、挿し直す前に連絡をお願いします。
・「今朝ケーブルを触りました」の一言で、復旧が早くなります。責めることはありません。
情シスの席でも、ループは起きる
ぴょん吉さんの話には続きがあります。ループ防止のハブが行き渡ったころ、久しぶりにループが起きました。
でも先日ループがありまして、、、どこだと思いますか?
情シス。
出典: ぴょん吉「ループと情シス」(2021年3月10日)
サポートデスクのチームがPCを増やしたくて、捨てる予定だったループ防止なしのハブを持ち込み、接続は忙しくて人に任せたのだとか。インフラの担当が不在だったので、開発のメンバーがあやしいケーブルを全部抜き、隣の島からつないで復旧しました。ケーブルは床にガムテープで留められ、3日ほどそのままだったそうです。
分かっている人の集まりでも、忙しい日はこうなります。
だから窓口で先に聞きたいのは、誰が挿したかではなく、いつ何を挿したかです。あの大部屋で原因にたどり着けたのも、朝礼の前に挿したと話してくれた人がいたから。叱られた職場では、次の朝、誰も手を挙げないでしょう。