Skip to content

MikaNeTEL において発生した障害に関する報告(MikaNeTELab 廃局のお知らせ)#53

Open
KusaReMKN wants to merge 3 commits intomainfrom
ripMikaNeTEL
Open

MikaNeTEL において発生した障害に関する報告(MikaNeTELab 廃局のお知らせ)#53
KusaReMKN wants to merge 3 commits intomainfrom
ripMikaNeTEL

Conversation

@KusaReMKN
Copy link
Contributor

No description provided.

@KusaReMKN KusaReMKN self-assigned this Mar 4, 2026
@KusaReMKN KusaReMKN added the documentation Improvements or additions to documentation label Mar 4, 2026
@KusaReMKN KusaReMKN changed the title [WIP] MikaNeTEL が死亡しました MikaNeTEL において発生した障害に関する報告(MikaNeTELab 廃局のお知らせ) Mar 9, 2026
@KusaReMKN KusaReMKN marked this pull request as ready for review March 9, 2026 11:29
@KusaReMKN
Copy link
Contributor Author

よろしくおねがいします

@s-mats
Copy link
Contributor

s-mats commented Mar 9, 2026

障害対応、お疲れ様でした。
依頼いただいたレビューについて、以下のとおりです。
ご確認ください。

  • 「 なお、この不具合を受け、MikaNeTELab は廃局となります。」とありますが、廃局に至る経緯が記載されていないため、記載いただきたいです。
  • なぜ今までバックアップを取得していなかったのかを掘り下げていただきたいです。

以下はcommitに対する指摘ではありませんが、可能であればお答えいただきたく。

  • 「NFS を利用して yude 氏による記憶領域を間借りすることとしました。」とありますが、どのような接続方式だったのでしょうか。

@KusaReMKN

Copy link
Contributor

@IchikawaYukko IchikawaYukko left a comment

Choose a reason for hiding this comment

The reason will be displayed to describe this comment to others. Learn more.

👩🏻‍💻執っ筆、ふっきうさぎお、お疲れ様でしたっっっ

ンピュータ dekopon(以下、単に dekopon とする)の記憶装置に不具合が
発生したことに由来します。

なお、この不具合を受け、MikaNeTELab は廃局となります。
Copy link
Contributor

Choose a reason for hiding this comment

The reason will be displayed to describe this comment to others. Learn more.

廃局すんの? 復元じゃなくて? あるいは破壊からの再建立じゃなくて?


3.3. サルベージされたデータの修復

LVM の一部の領域を手動で修復する必要があると言われていますから、こ

This comment was marked as off-topic.

$ sudo mount /dev/pve/vm-106-disk-0 /mnt

2. 必要なデータを再配置します。rsync(rsync パッケージ)を用いると
便利ですから、これを利用します。受け側にも rsync のインストール
Copy link
Contributor

Choose a reason for hiding this comment

The reason will be displayed to describe this comment to others. Learn more.

東国民特有の言い回し
(直さなくていいですw)


2. 必要なデータを再配置します。rsync(rsync パッケージ)を用いると
便利ですから、これを利用します。受け側にも rsync のインストール
が必要です。SSH の公開鍵を指定するためには -e オプションを用いま
Copy link
Contributor

Choose a reason for hiding this comment

The reason will be displayed to describe this comment to others. Learn more.

公開鍵を指定するコマンドではないことに、ちうい!!

This option allows you to choose an alternative remote shell program to use for communication between the local and remote copies of rsync.

試験用コンテナ内で MikaNeTEL のサービスを再開できることを確認。

- 2026-03-07 12:15 ごろ
ピザパーティー開始。けものフレンズを全話見通す。
Copy link
Contributor

Choose a reason for hiding this comment

The reason will be displayed to describe this comment to others. Learn more.

🍕👩🏻‍🍳くぅなw

Comment on lines +354 to +355
度もバックアップされていませんでした。今後、定期的なバックアップを行
うことを計画しています。
Copy link
Contributor

Choose a reason for hiding this comment

The reason will be displayed to describe this comment to others. Learn more.

ちなみにバックアップの定期取得だけでは次回の停止を許容することになりますが、それは本当に許容されていますか?

※バックアップはフェイルセーフであって、フォールトトレラントではない

Comment on lines +366 to +369
東京広域電話網と mikopie とは、網の発足からの約 1.5 年間を共に歩み
ました。今日までこき使われ続けたコンテナ及びコンピュータに対し、謝意
と敬意を表するとともに、このタイミングで不具合を発生させたことを心よ
り恨み申し上げます。
Copy link
Contributor

Choose a reason for hiding this comment

The reason will be displayed to describe this comment to others. Learn more.

🪦🤦🏻‍♀️💦

Copy link
Contributor

@s-mats s-mats left a comment

Choose a reason for hiding this comment

The reason will be displayed to describe this comment to others. Learn more.

コメントのとおりです

ンピュータ dekopon(以下、単に dekopon とする)の記憶装置に不具合が
発生したことに由来します。

なお、この不具合を受け、MikaNeTELab は廃局となります。
Copy link
Contributor

Choose a reason for hiding this comment

The reason will be displayed to describe this comment to others. Learn more.

廃局に至る経緯が記載されていないため、記載いただきたいです。

不慮の事故を防ぐことはできません。しかし、事故からの復旧を迅速に行
うための備えを行うことはできます。mikopie は、これを稼動して以来、一
度もバックアップされていませんでした。今後、定期的なバックアップを行
うことを計画しています。
Copy link
Contributor

Choose a reason for hiding this comment

The reason will be displayed to describe this comment to others. Learn more.

なぜ今までバックアップを取得していなかったのかを掘り下げていただきたいです。

$ sudo ddrescue -n --idirect /dev/nvme0n1p3 \
/mnt/rescuemkn/broken-lvm.bin /mnt/rescuemkn/mapfile

しかし、この操作中に iperf3 を用いたスループットの計測を行ったとこ
Copy link
Contributor

Choose a reason for hiding this comment

The reason will be displayed to describe this comment to others. Learn more.

MikaNET-yudeNET間の接続は、どのような接続方式だったのでしょうか。(趣味の範疇での質問です)

Sign up for free to join this conversation on GitHub. Already have an account? Sign in to comment

Labels

documentation Improvements or additions to documentation

Projects

None yet

Development

Successfully merging this pull request may close these issues.

4 participants