データセンターをワイヤレス化する試み 59
ストーリー by hylom
電波の塔 部門より
電波の塔 部門より
taraiok 曰く、
データセンター内の配線は有線ケーブルで行われるのが一般的だ。しかし、有線による配線では配線コストがかかる上、ネットワーク障害時の原因究明や交換対応にも時間がかかるといった問題を抱えている。そこでMicrosoftおよびコーネル大学の研究チームが、データセンターにおける無線でのネットワーク接続について研究を行ったそうだ。研究チームは、条件さえ合えば完全ワイヤレスのデータセンターの構築は理にかなっているという結論を出したという（SlashDatacener、本家/.）。
考案されたワイヤレスデータセンターは上から見ると円筒状をしている。この円筒を三角形上に分割し、その部分にブレードサーバを置くラックを設置する。こうした形状になっているのは、60GHzワイヤレス帯（IEE 802.15.3cと802.11ad、WiGigなどが候補）を限られた空間で効率的に使用するためだという。見積もりでは、60GHz無線通信システムのコストが90ドル以下になった場合、無線データセンターは有線データセンターよりも低コストで運営できるようになるという。
どう考えても (スコア:3, すばらしい洞察)
無線の方が
＞ネットワーク障害時の原因究明
が大変になるように思うのですが。
Re:どう考えても (スコア:2)
天井や床下の配線を調査したり切断されたりスパゲティだったり切断されたりというのを考えると、無線の方が楽かなぁ。
と思っているぐらいには先人の配線はファックです……
Re: (スコア:0)
データセンタにおいて「配線が物理的に切断される」トラブルってそんなに多いんですか？
利用者視点だとあまり聴かないトラブルなのですが、
Re:どう考えても (スコア:1)
私の周りでは切断はあまり聞きませんが、他のケーブルが邪魔で撤去できなくなったケーブルが次第に堆積していくというのはよく聞きます。
特に年季の入ったデータセンターで。
Re:どう考えても (スコア:1)
データセンターではないですが。
工事業者が床を開けて作業してて、床板や工具を落とした時にLANケーブルを押しつぶしてたり、絡まったケーブルが引きずられて末端が抜けるとかいうことは過去にありました。
下請けさんはそういう事故を起こしてもあまり気が付かないし、気がついたとしても元請けの管理者に報告すると怒られるのでやった瞬間の現場を押さえていないとまず何も言ってこない。
Re:どう考えても (スコア:1)
同軸ケーブルだのなんだのは撤去するには切断するしか無いので誤切断は珍しくないでありますよ。
まだ生きてる同軸ケーブルや全部同じ色でごっちゃになっているのも珍しくないでありますし。
ただしそんな作業は日中にはやらないし、クリティカルなシステムはネットワークも別系統になっていたりするので、そうそう影響は出ないであります。
#停電は本当にイレギュラー過ぎる……
Re: (スコア:0)
LANケーブルを踏み付けて断線させた計算機管理者を知っています．
# 大学の学生なので，実質素人なのですけどね．
## ケーブルは自分のサーバ用のものだったので，よそ様には迷惑をかけずに済みました．
Re: (スコア:0)
床下開けようとして、床パネルを床下に落としたらFC断線したことはある
Re:どう考えても (スコア:2)
つーか障害どころか、構築でも泥沼になりそう。
しかも導波管じゃなくてアンテナで飛ばすんだよなあ、正気の沙汰とは思えんが。
ちょっと前はSHFとかでもRF周りなんてシビアだったが、
ミリ波なら逆にRFもオンチップにできたり、上手い接続方法とかあるのかな？
##つーかどういう風に試算したのかな、ファイバやメタルの配線長を出して
無線に置き換えると安いじゃん！みたいな気がしてならない。
##無線屋は絶対絡んで無いと見た。
Re:どう考えても (スコア:1)
みたいな気がしてならない。
どう考えても気のせいです。 出してきたのがその辺のコンサルだったらちょっとはそう疑うかもしれないけどね。
Re: (スコア:0)
Re: (スコア:0)
>ファイバは曲げに気を遣うし、コネクタが繊細すぎる。
具体的に並べるのが大変なので書きませんが、世の中はだいぶ進化していますよ
JANOGの過去のミーティング資料のうち100GbE関係のものを見るとよいでしょう
Re: (スコア:0)
技術者は上からあの穴の中に入るのかな
すごく大変そうだ
混信とか考えてるのかなぁ (スコア:2, すばらしい洞察)
同一チャンネルにすると、リピーターハブに全部つなぐようなもの（CSMA/CAはCSMA/CDより更に効率悪い？）だし、チャンネルを分けると、別のチャンネルに属してるサーバ同士が通信するときに、どこかしらで変換しないといけない。
物理的なモノが減るのはいいのかもしれませんが、内部外部に限らず、通信速度は目も当てられないようなレベルになりそう。
Re:混信とか考えてるのかなぁ (スコア:5, 参考になる)
論文によると、指向性アンテナを使って限られたサーバとのみ通信するようにしています。
実験ではホーンを付けたアンテナを使った古い機器を使っていますが、アレイアンテナを使えばさらにサイドローブは抑えられるとしています。
その古い機器を使った実験でも20度アンテナの向きを変えると信号はほぼ0となっています。
余談:
ラック内で通信する場合、ラック内の全てのサーバと直接通信できる訳ではなく、向かい合った小数のサーバとしか通信できないので、隣りのサーバとかと通信する場合は他のサーバにリレーしてもらうらしい。
Re:混信とか考えてるのかなぁ (スコア:4, 参考になる)
通信速度については「WiGig 7Gbps standard with beam-forming」とか、「ECMA-387/ISO DS13156 6.4Gbps spec」とかの文字がありますね。
# 10Gbase-T が離陸できれば多分お話にならないとは思いますが、これまたいつになることやら。
Re:混信とか考えてるのかなぁ (スコア:1)
Re: (スコア:0)
そう思うならそれをマイクロソフトさんに教えてあげなよ。感謝されるかもよ。
Re: (スコア:0)
前から思うんだけど、こういう書き込みをする人って、考案者はこのレベルの基本的なところを全く考えずに提案してると思ってるんだろうか？
Re: (スコア:0)
考案者はこのレベルの基本的なところを全く考えずに提案してると思ってるんだろうか？
恐らく考えているのだろう、だとするならその解は何なのだろうか？という興味からの発言に見えるけどね。
Re: (スコア:0)
本当に興味のある人ならソース読むと思うけどね。
既に検討済みでソースにも明記されてることをわざわざ否定的に書くのは考えてないとしか思えない。
Re: (スコア:0)
＞通信速度は目も当てられないようなレベルになりそう
なんて書かずにそう書くだろう
Re: (スコア:0)
いや、何も考えてなくて、「考案者も気づかなかったこの問題に気づいた俺スゲー」にしかみえないけど。
お値段は？ (スコア:2)
電子レンジ (スコア:2)
データセンタのサイズで チン するのか
やめろ馬鹿 (スコア:1)
これ以上脆弱性を増やしてどうするんだ・・・
＃原因を特定させないことで責任の追及先をあやふやにするのが目的か？
Re: (スコア:0)
クローズドネットワークですら情報漏えいが問題になっている、というのは、
それを運営する側（人間）の問題ですよね。
そのことと今回の有線と無線のコストに関する話は関係ないんじゃないかなあ。
Re: (スコア:0)
そこらのデータセンターなんてメじゃないくらいに
ケーブルまみれ（＋スイッチ類も多数）のオフィスで働いています。
やむを得ず使っている検証用環境ではなく普通の開発環境です。
無線化の話をするとセキュリティが…情報漏えいが…と訳の分からない声が降ってくるので
今回のような事例が増えることを祈っています。
Re: (スコア:0)
ケーブルにまみれて開発してるけど、開発中ってセキュリティ適当なんだよね。
トラブったら暗号化なしで通信しそうな気がする。
というか、不具合の切り分けに暗号化なし通信を想定せざる得ない。
有線環境ならケーブル交換で済むような場面でも無線は気をつかう。
テストデータならいいけど、客に借りてる実データが漏れたら言い訳できないなあ。
タレコミのデータセンターも、通常運用時のセキュリティは万全なんだろうけど
トラブったときの切り分けはどうすんだろうと思う。
まわるまわるよ (スコア:1)
http://ja.wikipedia.org/wiki/Cray-1
Re:まわるまわるよ (スコア:1)
Cayley graph [wikipedia.org]もよろしく。
Re:まわるまわるよ (スコア:1)
そうか! 無線にすれば中心部の配線のために技術者を即身仏にしなくてもよくなるんだ.
三角形上？ (スコア:0)
扇型かと
Re:三角形上？ (スコア:1)
初期のクレイのスパコン型ですね.
あの形状も配線を最適化するためだったような.
Re: (スコア:0)
それよりまず最初に「上から見ると円筒形」というのが分からないです。
円筒形というのは3次元形状だから、どこから見るかに関係なく円筒形だし。
3次元形状をある特定の方向から見たときの形状は2次元形状で表現すべきだし。
Re:三角形上？ (スコア:2)
四次元とか
Re: (スコア:0)
切れ目の入ったバームクーヘンみたいなもんなんでしょ
Re: (スコア:0)
>それよりまず最初に「上から見ると円筒形」というのが分からないです。
上から見ると円筒形、建屋としては120°区切りの三角形、というと
東京都江東区にあるテプコ豊洲ビル(ビッグドラム)を連想します。
http://goo.gl/maps/BAIqH [goo.gl]
まあここは中心部は吹き抜けの受付ロビーですが
Re: (スコア:0)
ですなあ．三角よりは扇形の方が確かに近い．
他の人は
http://slashdot.org/topic/datacenter/is-a-wireless-data-center-possible/ [slashdot.org]
に図があるので見るといいと思うんだ．
# 元の単語は shaped like prisms だけど，プリズムみたいな形と言われてもピンと来ない．
# 図とあわせて考えると，う～ん，バームクーヘンの切れ端みたい？
Re:三角形上？ (スコア:1)
「プリズムのカタチ」と言われると三角形を連想すると思いつつ、リンク先の図を見ると三角形が円周上に並んでるのでたしかに "shaped like prism"だと思った。
適切な日本語が思いつかなかったんでしょうけど、翻訳に無理がありますね。
Re:三角形上？ (スコア:1)
もう一回見たらこれってラックを円周状に並べてるだけで、ラック間の空間が三角形(prism)に見えた。
アクセス面と具体的な空間の大きさがわからないけど、エアフローと人のメンテナンススペースはちゃんと考慮してるのかな。
ブレードサーバーは放熱が凄いのもあるからみちっと実装すると背面空間の温度がすんごいときあるし、前面が狭いとCEさんがメンテナンスしにくくて時間かかったりするし。
#コレを真似て冷却効率とメンテナンス性とか追加して適当にでっちあげて特許申請したら通るかな。
Re:三角形上？ (スコア:1)
＞prism
＞【名】
＞《光学》プリズム
＞《数学》角柱
原文の意味としては「角柱」か。
4次元データセンター完成のお知らせ？ (スコア:0)
| 上から見ると円筒状
円筒形なのは (スコア:0)
データセンターではなくラックでは？
Re:円筒形なのは (スコア:2)
ですよね。
円筒の内側をサーバ間通信に使って外側をラック間通信に使うように読めます。
配線コスト (スコア:0)
人工衛星の内部信号を無線化して軽量化しよう！ [aerospacebiz.jaxa.jp]なんてのを宇宙研の一般公開でやってましたね。
サイズやノード数など、直接比べるようなものじゃないんでしょうけど、同じようなことを考える人はいるんですねぇ。
簡単クラッキング (スコア:0)
コロケーションサービス（ラック貸し）なんかだと、第三者がラックに近寄るのは容易です。
ラック内の線を切断するのは大変ですが、妨害電波出すのは簡単ですよねぇ。
Re: (スコア:0)
んー (スコア:0)
電気代はどうなんだろう。
Re: (スコア:0)
発熱量が増えるのなら、余分な冷却に必要な電気代も考慮が必要ですね。常時強力な電磁波にさらされた機材の経年劣化が早まるとかないのかな？