Agile Cat — in the cloud

Storage の調査: Long-Term Low-Cost のコールド・ストレージは 5 PB へと向かうのか?

Posted in .Selected, Facebook, On Monday, Open Compute, Storage by Agile Cat on April 7, 2014

Storage: Long-Term Low-Cost COLD Storage Solutions
http://wp.me/pwo1E-7nI

By Dick Weisinger – April 4, 2014
http://formtek.com/blog/storage-long-term-low-cost-cold-storage-solutions/

_ formtek

Recently at the Open Compute Summit, Facebook VP of Engineering, Jay Parikh described how Facebook has rigged together a system based on 10,000 Blu-ray discs that fit into a single cabinet, capable of storing 1 petabyte of data.  Facebook plans to improve on this first attempt and be able to reach 5 petabytes per cabinet.  Compared to existing hard disk solutions, Parikh says that the Blu-ray solution will be 50 percent cheaper and use 80 percent less energy. It will also provide 50 years worth of durability for data stored on the discs.

先日の Open Compute Summit で Facebook VP of Engineering である Jay Parikh が説明したのは、1万枚の Blu-ray ディスクをベースにしたシステムを単一の筐体に収め、1 Peta Byte のデータをストアするという、Facebook で試している方式である。また、Facebook は、この試みを改善することで、キャビネットあたりに 5 Peta Byte をストアしようと計画している。Parikh が言うには、既存のハード·ディスク·ソリューションと比較して、この Blu-ray ソリューションでは、コストが 50% も低減され、また、電力消費量は 80% もカットされるようだ。そして、ディスクに保存されたデータに対しては、50年の耐久性という価値も提供される。

Sony, original creator of Blu-Ray technology, and Panasonic have also recently teamed up to address the need for finding a robust long-term low-cost solution for archiving content.  They’ve recently announced that they would jointly produce a 300 GB optical disc for long-term archival.  The product family is to be named “Archive Disc” and should become available in 2015.  The target is to create Blu-Ray optical discs with a 1 TB capacity and to then package them into a disc cartridge containing 12 discs.

Blu-Ray テクノロジー の発案者である Sony と、つい先日に Panasonic が提携したが、アーカイブ・コンテンツのたための、堅牢な Long-Term Low-Cost ソリューションが、そこでの取り組みとなる。 そして、Long-Term アーカイブのために、300 GB の光ディスクを、恊働で生産すると発表している。このプロダクト・ファミリーは、“Archive Disc” と命名され、2015年には利用が可能になるはずだ。そのターゲットは、1 TB の容量を持つ Blu-Ray ディスクを開発であり、また、ディスク・カートリッジ内に、12枚のディスクをパッケージ化することである。

Not everyone is buying into the Facebook strategy.  Mark Peters, a senior analyst at Enterprise Strategy Group, commented that “some of what Facebook was doing was laying out a challenge to storage vendors.  I think what they were really communicating was that there is a need for low cost reliable storage.”

誰もが、Facebook の戦略に与するわけではない。Enterprise Strategy Group のシニア・アナリストである Mark Peters は、「 たしかに、Facebook における幾つかの取り組みは、ストレージ・ベンダーへの挑戦を提起した。そして、実際に彼らが発信したことは、低コストで高信頼性のストレージに、大きなニーズがあるということだったと、私は理解している」と述べている。

Bruce Kornfeld, Interim CMO at Spectra Logic, questions the logic of using Blu-Ray for commercial purposes.  Kornfeld said that “over the last 20 years the commercial data storage industry has attempted to commercialize multiple consumer technologies including CD ROM, CD Writeable, DVD writeable, 4mm Digital Audio Tape, 8mm video tape, and VHS video tape – with mixed results.  Consumer technologies offer high-volume and typically low cost storage media. The ‘low cost’ strengths of these technologies have also led to their downfall as they lack the device robustness and data reliability required by commercial data storage applications. In addition, consumer grade drives and media just don’t last very long. Blu-ray disc drive load mechanisms are probably good to a few thousand load/unload cycles. This compares with an LTO tape drive that is rated to 250,000 load/unload cycles. As you can see – the difference in durability is substantial!”

Spectra Logic の Interim CMO である Bruce Kornfeld は、Blu-Ray の商用目的での利用に対して、論理的に無理があると、異を唱えている。 そして、「 これまでの20年間において商用データ・ストレージ業界は、複数のコンシューマ・テクノロジーを商用化しようと試みてきた。そこに含まれるのは、CD ROM/CD Writeable/DVD Writeable/4mm Digital Audio Tape/8mm Video Tape/VHS Video Tape であり、また、それらの組み合わせである。たしかに、コンシューマ・テクノロジーは、一般的にみて大容積で低コストな記憶媒体を提供する。 しかし、それらのテクノロジーにおける低コストの強みは、商用データ・ストレージ・アプリケーションで必要な、デバイスの堅牢性とデータの信頼性を欠いているため、意味を持つものになり得ない。また、コンシューマ向けのドライブやメディアは、きわめて寿命が短い。Blu-Ray ディスク・ドライブのロード・メカニズムは、おそらく数千回の Load/Unload サイクルをサポートするだけだ。250,000回の Load/Unload サイクルに対応する、LTO テープ・ドライブの仕様と比較して欲しい。 誰もが分かるように、 耐久性が段違いなのだ!」と述べている

ーーーーー

この コールド・ストレージについては、すでに「 Blu-ray ディスクを 10000枚:Facebook が考えるペタ/エクサ時代のコールド・ストレージとは? 」という抄訳でお伝えしていますが、Sony と Panasonic が提携して、新たなソリューションを展開するというのは、とても嬉しい話ですね。 文中で、Mark Peter さんが述べているように、Open Compute の目的は、ユーザーが本当に欲しいものを、すぐれたベンダーに安価に提供してもらうことです。その意味で、Sony と Pnasonic の提携は、とても素晴しいことです。 なお、Bruce Kornfeld さんには、No Comment です :)  __AC Stamp 2

ーーーーー

<関連>

Cloud の調査:エンタープライズがクラウドを導入する5つの大きな理由
IoT の調査:テック・ベンダーたちは、一般顧客へのアプローチを模索する
Hybrid File の調査:エンタープライズに必須なのは、パブリックとオンプレミスのブレンドだ!
Web Programming の調査:Google の Dart は Javascript をリプレースできるのか?
Mobile Security の調査:エンタープライズ と Android と フリー・アプリ

Facebook は Open Compute のおかげで、この3年で 1200億円も節約できた!

Posted in .Selected, Data Center Trends, Facebook, Green IT, Open Compute by Agile Cat on March 12, 2014

Facebook: Open Compute Has Saved Us $1.2 Billion
http://wp.me/pwo1E-7j5

January 28th, 2014 – By: Rich Miller
http://www.datacenterknowledge.com/archives/2014/01/28/facebook-open-compute-saved-us-1-2-billion/

_ DC Knowledge

SAN JOSE, Calif. – Over the last three years, Facebook has saved more than $1.2 billion by using Open Compute designs to streamline its data centers and servers, the company said today. Those massive gains savings are the result of hundreds of small improvements in design, architecture and process, write large across hundreds of thousands of servers.

Facebook は直近の 3年間において、データセンターやサーバーを効率化する Open Compute のデザインを使用しすることで、$1.2 Billion 以上のコスト削減を達成したと述べている。この、膨大なコストの削減は、デザイン/アーキテクチャ/プロセスにおける小さな改善の集大成であり、それらは、無数のサーバー群をまたぐかたちで顕在化している。

Facebook CEO Mark Zuckerberg, at left, discusses the company’s infrastructure with Tim O’Reilly of O’Reilly Media yesterday at the Open Compute Summit in San Jose, Calif. (Photo: Colleen Miller)

The savings go beyond the cost of hardware and data centers, Facebook CEO Mark Zuckerberg told 3,300 attendees at the Open Compute Summit in San Jose. The innovations from Open Compute Project have saved Facebook enough energy to power 40,000 homes, and brought carbon savings equivalent to taking 50,000 cars off the road, Zuckerberg said.

ハードウェアやデータセンターにおける、こうしたコストの削減は、Facebook の収益性を超えたところでも意味を持つと、San Jose で開催された Open Compute Summmit で、CEO である Mark Zuckerberg は 3300人の参加者に語っている。Open Compute Project から始まったイノベーションは、Facebook が消費するエネルギーから、40,000 戸分の電力を削減している。それは、路上を走行する自動車で換算すると、5万台分の二酸化酸素を削減することになると、Zuckerberg は述べている。

The innovations created by Open Compute provide a major opportunity for other companies to achieve similar gains, he said “People are spending so much on infrastructure,” said Zuckerberg, who discussed Facebook’s initiatives with technology thought leader Tim O’Reilly of O’Reilly Media. “It creates a pretty broad incentive for people to participate.”

Open Compute がもたらすイノベーションにより、それぞれの企業が同様のメリットを得るという、チャンスが提供される。この Facebook の取り組みについて Zuckerberg は、「 人々はインフラストラクチャに、あまりにも多くの労力を費やしている。 そして、Open Compute は、そこに参加する人々に対して、きわめて広範囲におよぶインセンティブをもたらす」と、O’Reilly Media の思想的リーダーである Tim O’Reilly に説明していた。

An Open Legacy for Facebook

The focus on open hardware was a logical outgrowth of the way the company views the world, according to Zuckerberg. “Facebook has always been a systems company,” he said. “A lot of the early work we did was with open systems and open source.”

Zuckerberg によると、オープンなハードウェアにフォーカスすることは、世界を見据える Facebook にとって論理的な帰結となる。そして、彼は、「 Facebook は、常にシステムの企業であり続けてきた。そして、私たちが取り組んできた、その初期における成果の多くは、オープンなシステムとなり、オープンソースとなってきた」と続けている。

The $1.2 billion in savings serves as a validation of Facebook’s decision to customize its own data center infrastructure and build its own servers and storage. These refinements were first implemented in the company’s data center in Prineville, Oregon and have since been used in subsequent server farms Facebook has built in North Carolina, Sweden and Iowa.

$1.2 Billion というコスト削減は、データセンターのインフラを独自にカスタマイズし、また、独自のサーバーとストレージを構築していくという、Facebook の判断における妥当性を確認するものでもある。これらの洗練された発想は、最初に Prineville, Oregon のデータセンターに実装された後に、North Carolina および Sweden、Iowa の Facebook サーバファームに適用されてきた。

“As you make these marginal gains, they compound dramatically over time,” said Jay Parikh, Vice President of Infrastructure Engineering at Facebook.”We’re actually saving a ton of money.”

[ こうした、小さなメリットの積み上げを、長期間に渡って継続していくことで、劇的な融合が生じる。現実に、私たちは、膨大なコスト削減を達成した 」と、Facebook の Vice President of Infrastructure Engineering である Jay Parikh は述べている。

The designs for Facebook’s servers, storage units and data centers have since been contributed to the Open Compute Project, the non-profit community organization driving the open hardware movement.

Facebook の サーバとストレージのユニットおよび、データセンターのデザインは、オープンなハードウェアのムーブメントを促進する、非営利コミュニティである Open Compute Project に、ずっとコントリビュートされ続けてきた。

This happened, Parikh said, because Facebook was willing to set aside the conventional ways that servers and data centers were built, and try something new. The Open Compute Project can extend these savings to other companies, he said.

Facebook は、サーバーやデータセンターを構築する、従来からの方法と平行して、新しいことに挑戦したいと望んできたので、こうした変化が生じた、と Parikh は発言している。そして、Open Compute Project により、その他の企業でも、同じようなコストの削減が達成される。

“You really should be looking at OCP,” said Parikh. “You could be saving a lot of money.

「 ぜひ、OCP に注目してほしい。そうすれば、膨大なコストの削減が可能になる」と、Parikh は述べている。

RELATED POSTS:

Open Compute Summit, 2014
Open Compute Reports Progress on Open Network Switch
Facebook Adapts Open Compute for Colo Space
Facebook Brings Open Compute into its Colo Space
Closer Look: Facebook’s Open Compute Servers

ーーーーー

TAG indexそれにしても、$1.2 Billion というのは大きいですね。 100円で換算しても 1200億円ですから、メガ・データセンターの構築費に相当するくらいのコストが浮いたことになります。ちょうど 3年前に、Oregon のデータセンターがオープンしていますから、年間で 400億円くらいの計算になりますね。 そして、その後も Noth Carolina と、Sweden、Iowa が構築されているのですから、この数値は年々拡大していくことになります。自然環境へ影響を考えても、素晴らしいことです! 今月は、台北に OCP サーティフィケーション・センターがオープンしました。 アジアにも、このような事例がほしいですね。image

ーーーーー

<関連>

Facebook が選んだ CA の DCIM:どのように ハイパー・スケールを管理するのか?
Blu-ray ディスクを 10000枚:Facebook が考えるペタ/エクサ時代のコールド・ストレージとは?
Open Compute Project : ついに Microsoft も参加を表明した!
2013年 : Open Compute Project の マトメ
2013年 : 世界の データセンターの マトメ

Blu-ray ディスクを 10000枚:Facebook が考えるペタ/エクサ時代のコールド・ストレージとは?

Posted in Data Center Trends, Open Compute, Storage by Agile Cat on January 29, 2014

Facebook has built a prototype system for storing petabytes on Blu-ray
http://wp.me/pwo1E-79F

By Derrick Harris – Jan 28, 2014
http://gigaom.com/2014/01/28/facebook-has-built-a-prototype-system-for-storing-petabytes-on-blu-ray/

_ Giga Om

Summary: During the Open Compute Summit in San Jose, Facebook VP of Engineering Jay Parikh shared some big statistics for the company’s cold storage efforts, including those for a protoytpe Blu-ray system capable of storing a petabyte of data today.

Summary: San Jose で開催中の Open Compute Summit において、Facebook VP of Engineering である Jay Parikh は、同社におけるコールド・ストレージに関する、いくつかの情報を共有したが、そこには、すでにペタバイト・データをストアできる、Blu-ray システムを用いるものが含まれていた。

ーーーーー

At last year’s Open Compute Summit, Facebook VP of Engineering Jay Parikh suggested the company might consider Blu-ray discs as a medium for improving durability and cutting costs for its long-term cold storage efforts. Now, Parikh said Tuesday during a keynote at this year’s event, the company is actually doing it.

昨年の Open Compute Summit でも、Facebook VP of Engineering である Jay Parikh は、Blu-ray ディスクが活用されるかもしれないと発言していたが、このメディアを用いることで、これまでの長期間において取り組んできた、コールド・ストレージの耐久性が向上し、また、コストが低減されることを示唆する内容であった。そして、今年のイベントのキーノートでは、同社が実際に、それを推進していることを発表した。

Facebook has built a prototype Blu-ray system capable of storing 10,000 discs and 1 petabyte of data in a single cabinet, with plans to scale it to 5 petabytes per cabinet. Blu-ray storage would save the company 50 percent in costs and 80 percent in energy usage over its existing hard-disk-based cold storage methods, Parikh said, and will provide 50 years worth of durability for data stored on the discs.

Facebook が開発しているプロトタイプは、10000 枚のディスクをシングル・キャビネットに格納し、1 Peta Byte ストレージを構築する Blu-ray システムのことであり、キャビネットごとの容量を 5 Peta Byte にスケールする計画も進んでいるという。そして、この Blu-ray ストレージは、同社における既存の HDD ベースのコールド・ストレージと比べて、50% のコストを低減し、80% の電力を削減し、また、ディスクに保存されたデータに対して 50年の耐久性を提供するものになると、Parikh は発言している。

That’s not the only tidbits Parikh shared about the company’s cold storage efforts, though. He said that the first site is now in production and storing 30 petabytes of data, but a second will be coming online soon. Within a couple months, Facebook expects to have 150 petabytes of data in cold storage, which is just a fraction of the 3 exabytes each facility is designed to house.

しかし、Parikh が共有したものは、同社のコールド・ストレージに関する、ちょっとしたトピックというものではない。彼が言うには、30 Peta Byte のデータをストアする最初のサイトが、すでにプロダクション・システムとして運用されており、2番目のサイトも近々に運用に入るらしい。そして Facebook は、数ヶ月以内に 150 Peta Byte のデータをコールド・ストレージに取り込む予定だが、その容量については、それぞれのファシリティで設定している、3 Exa Byte の一部に過ぎないとしている。

One other nugget worth noting from the morning as it relates to Facebook’s innovation on the storage front: In order to save money over data center-grade SSDs but still speed up the process, Facebook is now booting web servers using netbook-grade SSDs, hardware executive Matt Corddry said.

また、今日の午前中に Facebook が明らかにした、ストレージのイノベーションに関連する、もう1つの貴重な情報は、データセンター・グレードの SSD に対するコストを削減しても、プロセスの処理速度をスピード・アップできるというものだ。具体的には、ネットブック・グレードの SSD の活用であり、Facebook では、それを用いて Web サーバーをブートしていると、Hardware Executive である Matt Corddry が発言している。

Related research

The fourth quarter of 2012 in cloud January 2013
How direct-access solutions can speed up cloud adoption December 2012
The role of converged infrastructure in the data center December 2012

ーーーーー

TAG indexこういう発想は、プロダクトを売る側では、絶対に生まれてこないものなのでしょうね。文中にもあるように、これまで通りに、HDD をコールド・ストレージに使ってもらえるなら、単純に考えて、売上が2倍になるのですから。。。 しかし、ペタやエクサのレベルで、大量のデータをストアしなければならない、ユーザーのニーズを考えれば、このような方式が優れていることが一目で分かります。そして、さらに素晴らしいのが、電力コストを 80% も削減できるという点です。イイですね! これ! image

ーーーーー

<関連>

Open Compute Project : ついに Microsoft も参加を表明した!
SAP と HANA が、Open Compute に恋する理由
Linaro が OCP に参加 : Linux on ARM in DC が加速していく!
OCP オープン・スイッチ仕様を Broadcom と Intel と Mellanox が提出
2013年 : Open Compute Project の マトメ
2013年 : 世界の データセンターの マトメ

Open Compute Project : ついに Microsoft も参加を表明した!

Posted in .Selected, Facebook, Microsoft, Open Compute by Agile Cat on January 28, 2014

Microsoft joins Facebook-founded Open Compute Project, touts its ‘unprecedented’ contributions
http://wp.me/pwo1E-79A

By Kaylene Hong, jan 28, 2014
http://thenextweb.com/microsoft/2014/01/28/microsoft-joins-facebook-founded-open-compute-project-touts-its-unprecedented-contributions/

_TNW

The fifth summit of the Open Compute Project is happening on Tuesday, and Microsoft has revealed that it is the latest member to join the group, a Facebook-founded initiative that sees the company and its partners commit to developing and sharing designs for data center infrastructure.

Open Compute Project5回目のサミットが、この火曜日(1/28)に開催されるが、このグループに参加する、最も新しいメンバーの中に、Microsoft がいることが明らかになってきた。つまり、同社とパートナーたちが、データセンター・インフラストラクチャに関する成果やデザインを、この Facebook が設立/主導するイニシアチブと、共有していくことをコミットするわけだ。

Bill Laing, Microsoft’s corporate vice president for cloud and enterprise, says in a blog post that Microsoft will contribute what it calls its “cloud server specification” to OCP — referring to the designs for server hardware in Microsoft data centers that are being deployed for its largest global cloud services including Windows Azure, Bing, and Office 365.

Microsoft の Corporate VP for Cloud and Enterprise である Bill Laing は、「 Microsoft は、同社における Cloud Server Specification と呼ばれるものを、OCP にコントリビュートする」と、自身のブログ・ポストで述べている。 つまり、それは、Miicrosoft のデータセンターにおける、サーバー・ハードウェアのデザインを指し示すものであり、Windows Azure および、Bing、Office 365 などの、世界でも最大級のクラウド·サービスをディプロイするためのハードウェアが含まれる。

Microsoft says these servers are built to deal with the “enormous availability, scalability and efficiency requirements” of Windows Azure, its cloud platform. It says that compared to traditional enterprise server designs, the data center servers it has built to deliver its cloud services bring “up to 40 percent server cost savings, 15 percent power efficiency gains and 50 percent reduction in deployment and service times.”

Microsoft の発言によると、それらのサーバーは、同社のクラウド·プラットフォームである Windows Azure の、 「 きわめて大規模な環境における可用性/拡張性/効率性の要件」に対応するために構築されたものとなる。そして、従来からのエンタープライズ・サーバーのデザインと比較して、クラウド・サービスのために構築されたデータセンター・サーバー」は、最大で 40% のサーバー・コストの削減をもたらし、15% の電力効率の向上を達成し、さらには、デプロイメントとサービスに費やされる時間を 50% も削減するという。

Laing notes that Microsoft is the only other cloud service provider, other than Facebook, to publicly release its server specifications, and says the depth of information it is sharing with OCP is “unprecedented.”

Laing は Microsoft の取り組みについて、Facebook 以外のクラウド·サービス·プロバイダーとして、サーバーの仕様を公開していく唯一の存在であり、OCP と共有される情報は、「これまでにない、奥行き持つものになる」と指定している。

To show its commitment, Microsoft Open Technologies is also open sourcing the software code it created for the management of hardware operations including server diagnostics, power supply and fan control. The code is available on GitHub from today onwards.

このコミットメントを示すために、Microsoft Open Technologies も、ハードウェア運用におけるマネージメントのために作成された、ソフトウェア·コードをオープン・ソースにしている。それらは、サーバーの診断や、パワー・サプライ、ファン・コントロールを含むものである、今日から GitHub で提供されている。

“The Microsoft cloud server specification for OCP will help drive hardware innovation for cloud computing, which strengthens the Cloud OS vision to give customers a consistent platform for better IT efficiency and economics,” Laing says.

そして Laing は、「 OCP にコントリビュートされる Microsoft のクラウド・サーバー仕様は、クラウド・コンピューティングのためのハードウェア・イノベーションを促進するものになる。それは、顧客に提供される、Cloud OS のビジョンを強化するものとなり、より優れた IT のために、効率性と経済性を考慮した、一貫性のあるプラットフォームを実現していく」と述べている。

Headline image via Eric Piermont/AFP/Getty Images

ーーーーー

TAG indexアメリカ時間の 1月28日に開催される、OCP Summit に参加するため、San Jose に来ています。いまは、夜中の3時ですが、時差で眠れないので、OCP 関連の情報を探していたら、こんなニュースが提供されていました。 昨日には、登録を済ませてきたので、イベントのスケジュールも受け取って入るのですが(クリックで拡大)、詳細は明日にならないと分からないそうです。それにしても、Microsoft も OCP に参加するというのは、とても良いニュースですね。おそらく、9時から始まるキーノートで紹介されるのだと予測していますが、どんな話が出てくるのか、それが楽しみで、ワクワクしています。image

ーーーーー

<関連>

SAP と HANA が、Open Compute に恋する理由
Linaro が OCP に参加 : Linux on ARM in DC が加速していく!
OCP オープン・スイッチ仕様を Broadcom と Intel と Mellanox が提出
2013年 : Open Compute Project の マトメ
2013年 : 世界の データセンターの マトメ

2013年 : Open Compute Project の マトメ

Posted in .Chronicle, Data Center Trends, Open Compute by Agile Cat on December 28, 2013

アジアが重視される OCP コミュニティなのです ・・・
http://wp.me/pwo1E-73N

Agile_Cat_Loupe

_  space

早いもので、Open Compute Project(OCP)が立ち上がってから、この春で 2年が経ちます。正直なところ、2011年の時点で、このハードウェアに関するオープンソース・プロジェクトが、ここまでのパワーを持つとは思いもしませんでした。 OCP のチェアマンである Frank Frankovsky さんは、折に触れ、とても骨太な考え方をシンプルに語ってくれるのですが、 その中でも耳に残っているのは、以下の2つです。

・ ソフトウェアにおける OSS のメリットを、ハードウェアでも享受できるはずだ。

・ サーバーもデータセンターも、ユーザーがデザインすべきものである。

前者に関しては、GNU や Linux といった成功体験に基づいたものであり、それをソフトウェアに限定せずに、もっと柔軟に考えようという話です。 後者に関しては、クラウド・プロバイダーやデータセンター事業者といった、実際の運用を知っている者でなければ、そこでのニーズを形にできないという話です。 そして、何が OCP なのかと言えば、この 2つが OCP なのだというのが、いまの Agile_Cat の理解です。今年の OCP には、もっとたくさんのトピックがあり、その一部となってしまいますが、以下のリストを ご参照ください。

_  space

1/18: Open Compute Summit 2013 : エコロジーと Asia Pacific
1/18: Agile_Cat 空撮隊 – Facebook Prineville データセンターを捕捉せり
1/21:
Open Compute Summit 2013 – Directory
2/05:
Facebook と Open Compute は、$55B のサーバー市場を解体/再生する
2/09:
Open Compute Japan の FB ページが始まりました!
2/14:
OCP Summit 2013 キーノート : モノリスを破壊する!
3/04:
無印 サーバー は 22% UP : ブランド サーバー は DOWN – Gartner
3/05:
Intel と Facebook が実現する、100 Gbps でラックを貫く光学素材とは?
3/14:
OCP データセンターと、高温多湿気候との関係について
8/03:
Open Compute と Quanta : 台湾の無印サーバーが 米国マーケットを席巻
4/24:
Facebook が Iowa にもデータセンターを作る? これも デカイ!
4/25:
Facebook の空母のようなデータセンターを Web モニタリング!
5/14:
Facebook の Open Compute Project がオープン・スイッチに挑戦だ!
5/21:
Open Compute について、知っておくべき 10 の事柄
5/23:
Intel の Open Compute にかける意気込みがスゴイ : 100G Photonics
7/18:
Open Compute 台湾 が 立ち上がった!
8/27:
Intel の 1.6 TB/秒 転送 : その秘密を解く
8/28:
Google や Facebook は、サーバー用の カスタム CPU に取り組むだろう
9/19:
Facebook の DCIM : 独自のデータセンター管理システムを構築
9/20:
OCP の Rack Solution : Quanta QCT が Intel Dev Forum で発表!
10/01:
Intel が OpenStack を絶賛 : イノベーションに OSS は欠かせない
10/11:
Facebook Hardware Labs は、エンジニアにとって夢のような空間だ
11/12:
Quanta と OCP : Server/Storage/Switch/Rack などがデビュー!
11/13:
Facebook の Dragonstone : これは memcached の SSD 実装なのだ!
11/14:
Linaro が OCP に参加 : Linux on ARM in DC が加速していく!
11/26:
SAP と HANA が、Open Compute に恋する理由
11/27:
OCP:オープン・スイッチ仕様を Broadcom と Intel と Mellanox が提出

_  space

TAG indexシンプルであるが故に、OCP は人々の心をつかみ、その求心力を高め続けています。今年の 3月に Gartner が発表したレポートによると、2012年 Q4 における無印サーバーのシェアは 18% に至ったそうです。 もちろん、そこには Google や Amazon がデザインしたサーバーも含まれるため、すべてが OCP というわけではありません。 しかし、ソフトウェアと同様に、イニシアティブがベンダーからユーザーへと、徐々に移行している様子が見えてきます。

そして、Asia Pacific の OCP ですが、今年の 1月に Japan が立ち上がり、5月には Taiwan が立ち上がりました。 また、3月には Hong Kong で、11月には Korea で、ワークショップが開催されています。 OCP Japan の山口事務局長からのメールによると、現時点の会員数は 100に達しているそうです(法人+個人)。 よろしければ、以下の関連サイトも、ぜひ ご覧くださ~い!image

<関連>

Open Compute Japan Org
OCP Japan の Facebook ページ

四強の 2013年 : Facebook の マトメ

Posted in .Chronicle, .Selected, Facebook by Agile Cat on December 26, 2013

なぜ、このソーシャル・メディアは、インフラを重視し続けるのか・・・
http://wp.me/pwo1E-73w

image

_  space

IPO から株価の急落と、めまぐるしい展開が続いていた昨年でしたが、終わってみれば、しっかりとモバイル広告で利益を上げるまでに至った Facebook でした。 そして、今年の夏には、IPO 時の株価まで戻し、さらに成長し続けています。 しかし、単にマネタイズが上手いとか、ユーザー数が多いとかいう、ソーシャル・メディアとしてスポットライトが当たる部分でだけで、Facebook を評価してはイケないというのが、Agile_Cat の持論なのです。もう、3年前の話になりますが、High ScalabilityPingdom が以下のように、Fcebook のスケール感覚について、とても興味深い記事を提供していました。

Facebook のスケール感覚に驚愕!
Facebook : どのようなソフトウェアでスケールを達成しているのか

つまり、Facebook は、並外れたインフラを、その当時から自分たちで考えながら、運用しながら、このケタ違いのスケールを持つソーシャル・メディアを運営してきたのです。また、そこで培われたノウハウを、Open Compute Project として他者と共有していくという発想もユニークです。 そして、この 2013年には、Internet.org という新しい団体を立ち上げ、途上国におけるインターネット接続を改善するという取り組みに着手し始めています。 これも、注目です!

_  space

1/09: 次に来る Facebook ブランドは、 ジジ・ババ たちがターゲットだ!
1/16: Facebook が 検索 と PV で 二冠を 達成 : 2012年のアメリカ市場
1/16: Facebook の Graph Search について、簡単だが説明したい : GigaOM
1/18: Agile_Cat 空撮隊 – Facebook Prineville データセンターを捕捉せり
1/29: Facebook の偽アカウント対策は、どうなっているのか?
1/23: iOS アプリ 調査 : No.1 は Facebook だ!
1/29: Facebook が モバイル広告の 首位に! たった1年で 18.4% を支配
1/31: Facebook が1位で、Google Maps が2位:モバイル・アプリ 2012 ランク
2/11: iPhone と Facebook があれば 誰でも タダトモ: ただしアメリカの話です
2/12: Facebook が目指すのは、FB フォンではなく、FB チップなのだ!
2/17: Facebook の本が出る:Zuck の姉さん Randi が書き手だ
2/25: FB 国勢調査 2013 : 中国とインドを抜いて 2016 年には世界のトップか?
3/04: Facebook と Atlas 広告サーバー:Microsoft から買収し、Googleを追撃!
3/08: Facebook の News Feed : こんなふうに変わるらしい
3/08: Facebook が写真を重視する理由 : それを示す1枚のチャート
3/09: HTC の 次期 Facebook Phone : これがスペックだ!
3/12: Facebook の Open Graph:すでに 4000 億回 の インタラクションを達成
3/13: モバイル・インターネットにより、これまでの広告産業は崩壊するだろう
3/15: Facebook のモバイル広告は、2012 Q4 だけで $300 Million も稼いでた
3/27: Facebook が Open Graph API を遮断 : 外れてしまった Yandex の狙い
3/29: Facebook が 4月4日に、Android に関する計画を発表する

4/03: スマホ で Facebook : その使い方を、1枚のチャートで分析する
4/04: モバイル Facebook が 他のソーシャルを圧倒 : それを示す1枚のチャート
4/04: Facebook の Open Graph により、SEO に大変革が訪れる
4/05: Facebook の Home for Android では、Chat と Cover が主役だ!
4/05: Facebook の Home は、Google の Android 戦略を破壊するのか?
4/07: 米議会超党派グループの TechNet が、IT 人材の発掘/確保に乗り出す
4/08: Facebook ページのコメント欄に、Reply ボタンが付いた
4/11: Facebook の Open Graph により、マーケティングに質的変化が訪れる
4/15: Facebook Home をハックせよ! Zuck と ヤギ が 友情出演!
4/18: Facebook と Open Graph : 小売業が活用すべき理由
4/22: Facebook の Open Graph を用いる、素敵な 5つのモバイル・アプリとは?
4/24: Facebook が Iowa にもデータセンターを作る? これも デカイ!
4/25: FB の空母のようなデータセンター: 効率/温度/湿度 をモニタリング!
4/26: Facebook が買収した、Mobile BaaS の Parse とは?
4/29: Mark Zuckerberg の確定申告 : 昨年は $2.3 Billion なり!
5/02: FB はプライバシー保護のために、10%のコンピューティング・リソースを
4/15: Facebook Messenger for Android に ステッカー機能 がついたよ!
5/10: Facebook の モバイル広告が絶好調 : それを示す1枚のチャート
5/09: Facebook が Nokia を救うって?
5/19: Facebook が 新 HQ を建設 : グリーン と エコ がテーマ?
5/22: Facebook の IPO から1年が経った : その後の株価をチャートで!
5/28: Facebook の Open Graph とは? その歴史から説明しよう
5/31: Facebook は Open Graph へと ユーザーを誘う
6/04: Facebook がシェアを落としている? それを示す1枚のチャート
6/14: Facebook が RSS サービスを始めるかもしれない?
6/18: Google 対 Parse の戦いが始まる : Mobile BaaS 最前線
6/20: Facebook – Parse 連合 : 10万タイトルのクラウド・アプリを生み出す
6/21: モバイル広告予測:Google が 50% のシェアを維持し、FBは 333% 成長
6/23: Facebook のバグで、600万人のユーザー情報が流出
6/24: Facebook のプライバシー : 知っておくべき 5つのポイント!
6/25: Facebook のハッシュ・タグは、いまのところ広告には開放されていない

7/09: Facebook が発表した TAO : これで MySQL と Memcached を接続する
7/14: Facebook ステッカーが、Web にも攻めこんでくる!
7/18: Facebook の超高速ストレージ : TAO の詳細を説明しよう
7/24: Facebook が提供する、Open Graph のベスト・プラクティスとは?
7/25: Facebook 株が 30% も上昇: 証券界の評価は New King of Phones だ!
7/29: Facebook モバイル・アドの 高速突破力 : それを示す1枚のチャート
7/31: Facebook がトップの国々:世界 137カ国中 127カ国を数える
8/02: Facebook の 超絶 Web パフォーマンス : その秘密を解析する
8/13: Facebook の News Feed は、どう 変わったのか? なぜ 変わったのか?
8/17: Facebook が セレブたちを支援 : VIP アカウントとは?
8/23: Facebook とモバイルの巨人たちが、Internet.org を立ち上げた!
8/29: Google や Facebook は、サーバー用の カスタム CPU に取り組むだろう
8/30: FB が Wall Street に愛される理由:モバイル・アドの 16%をゲット!
9/13: Mark Zuckerberg と Internet.org : コネクティビティと社会経済
9/16: Facebook For Win Phone:ベータ・リリースは 256MBデバイスもサポート
9/17: モバイル・アドを支配する Google : それを示す1枚のチャート
9/19: Facebook の DCIM : 独自のデータセンター管理システムを構築
9/22: FB の OpenTable:レストランの予約まで、時代はオープンなのです!
9/25: Facebook の有償プロモーション : アメリカ政府も御用達だ!
9/27: 中国で Facebbook が解禁される ? ただし 上海の経済特区のみ ?

10/04: アメリカの職場 : Facebook 禁止は 20% に過ぎない!
10/05: アメリカの職場 : 従業員の 29% が仕事中に Facebook を使っている!
10/11: Facebook Hardware Labs は、エンジニアにとって夢のような空間だ
10/16: モバイル・アドが倍増したが、まだ 全体の 15% に過ぎない
10/19: Facebook を活用する、日産 Note のソーシャル・プロモーションとは?
10/30: Facebook と DCIM : オープンな議論を期待できるのか?
10/31: ソーシャルからの参照数は Facebook がブッチギリで、PI と TW が追う
11/01: ソーシャルのログイン時間を比較してみる:インフォグラフィクス
11/13: Facebook の Dragonstone : これは memcached の SSD 実装なのだ!
11/14: FB の IPO は狂気の世界であった:Twitter と一緒にしてはイケない
11/21: Facebook の 2013-Q3 収支報告: Zuck がテンコ盛りの質問に答える!
11/24: インターネット か ワクチン か? Bill Gates が FB の Internet.org を批判
11/29: Facebook ユーザーの 47% は、このソーシャルから News を得ている
11/29: Twitter と Facebook のユーザー層を比較する: 性別/年齢/収入/学歴
12/03: Facebook が キャリアの協会に参加 : 狙いは Internet.org だ!
12/06: ソーシャル と 年齢層: 若さの TW、平均的な FB、老成の LinkdIn

_  space

big-4facebook-55aいまのソーシャル・メディア市場には、メッセージングを主体とする、若くて新しいサービスが、次々と誕生しています。 そして、特定の局面では、Facebook が出し抜かれるような状況も、よく見かけるようになりました。 ただ、今年に IPO を達成した Twitter と比較してみると、その規模の違いを再認識させられます。 この何年かにおける Facebook の素晴らしいところは、ものすごいスピードで拡大していくビジネスを、独自のソフトウェアとハードウェアで、しっかりとサポートし、そこで必要となる経済力も着実に強化している、バランス感覚なのだと思うようになりました。 そして、ライセンスとプロダクトを軸とする、従来型の企業が最も重視する数値が、売上高と利益であるのに対して、Facebook が重視する指標は、ユーザーが生み出すトラフィックなのでしょう。 来年も Facebook は、何かを見せてくれるはずです。 とても楽しみですね。Image(221)

Data Centers の調査 : データセンターの効率を多角的に考える

Posted in .Selected, Data Center Trends, Energy, Research by Agile Cat on December 2, 2013

Data Centers: A New Generation of Denser, More Power-Efficient Computing Centers
http://wp.me/pwo1E-6Yh
By Dick Weisinger – November 25th, 2013
http://formtek.com/blog/data-centers-a-new-generation-of-denser-more-power-efficient-computing-centers/

_ FormTek

“A 10-megawatt (MW) data center can use the energy of a small town at a cost of around $300,000 a month. Couple that with the fact that there are over 500,000 data centers in the world, and we’re talking about 2% of all electrical energy used globally. So, running the internet uses upwards of 406 terawatts per year, assuming 20.3 petawatt-hours as the world’s annual electrical energy consumption,” reports CleanTechnica.

「10 MW のデータセンターは、小さな町が消費する全電力に相当する、$300,000 という対価を 1ヶ月に支払っている。地球上には 50万ヶ所以上のデータセンターが存在するという事実と、その事を組み合わせると、この世界で消費される全電力の 2% が、この産業に費やされていることになる。つまり、世界中の年間での電力消費量が 20.3 Peta Watt/H であり、また、インターネットを運用することで 406 Tera Watt/H の電力が消費されると想定すると、そのような比率になる」と、CleanTechnica がレポートしている。

Making data centers more efficient can save tremendous amounts of both electric power and money. Increasingly data centers are focusing on reducing their size and improving kilowatt-per-hour performance. This is leading to a strong focus on creating energy-management information systems which can monitor performance and promote efficiency.

データセンターの効率化を図ることで、途方もない電力と、膨大なコストを、両面から節約できる。これからも、増設されていくデータセンターにおいて、その規模は縮小されるべきであり、また、より以上の性能を、同量の電力から引き出せるようにすべきである。そのためには、パフォーマンスを監視し、効率化を促進するための、エネルギー・マネージメントに関する情報システムの開発が、強い意志のもとで推進されなければならない。

In order to become more energy efficient, data centers are increasingly refreshing the servers that they house at a faster rate. Typically servers are refreshed about every four years, but when potential energy cost savings are factored in, it is actually better to instead replace servers every two years. Doing that, provides more CPU horsepower for the same amount of power and cooling within the same footprint.

電力効率を高めるために、データセンターは、これまで以上に速いサイクルで、ハウジングしているサーバーをリフレッシュしていく。一般的にみて、サーバーは 4年ごとに交換されているが、潜在的なエネルギー・コストの削減を織り込んでい場合には、2年ごとにサーバーをリフレッシュするほうが、実質的に優れた選択となる。そうすることで、より多くの CPU パワーを同量の電力から引き出すことが可能になり、また、同じ設置面積に対するクーリングの効率も高まる。

David Cappuccio, chief of research for infrastructure teams at Gartner, said that “many times, datacenter managers or facilities teams start with the following assumption: We are out of (or near) capacity in our datacenter, therefore when we build next we will need more space. If we have 5,000 square feet today we must need at least 7,500 or more to sustain our growth. The error is that the focus is on square footage, not compute capacity per square foot (or per kilowatt)… A data center manager who rethinks his organization’s floor plans, cooling and server refreshes can house the increased computing capacity in the original floor space, and help meet growing business needs indefinitely. We will witness small data center environments with significant computing growth rates maintaining exactly the same footprint for the next 15 to 20 years.”

Gaetner の  Chief of Research for Infrastructure Teams である David Cappuccio は、「 データセンター管理者や、ファシリティ・チームは、いつも、以下を前提として考え始めてしまう:いまのデータセンターでは、キャパシティが足りなくなっているので、次のものを構築するなら、より広いスペースが必要になる。 今後の成長を維持するには、いまの 5000 平方フィートに換えて、少なくとも 7500 平方フィート以上が必要となる。・・・ こうした間違えは、面積だけにフォーカスし、面積あたりのコンピューティング容量(もしくはキロワットあたりの容量)を、計算していないところから生じる ・・・ 対象となるフロアと、クーリング、サーバー更新サイクルのプランについて、再考するデータセンター・マネージャであれば、同じだけの床面積に、増大するコンピューティング容量を収容し、そのビジネス・ニーズを満たすだけの成長を、永続的に達成していける。今後の 15年〜20年 において、まったく広がらない床面積を維持しながら、また、データセンターとしては小規模でありながら、コンピューティング容量が大幅に成長していくという歴史の、私たちは目撃者となる」と発言している

ーーーーー

TAG indexこれまでにも、サーバーの交換サイクルは 3年が良いと言われていましたが、それを 2年に短縮すべきという話ですね。先月にソウルで開催された OCP のワークショップでは、Oregon および、North Carolina、Lulea、Iowa で進められている Facebook のデータセンターが、それぞれ 3棟ずつの構成になるという資料が提示されていましたが、その中の 1棟は、つねに改装中という考え方なのかもしれませんね。そして、改装が行われるたびに、消費電力とコンピューティング密度が、段階的に改善されていくのでしょう。それは、フロント・パネルなどの飾りをサーバーから無くしていこうという、最近のトレンドの論理的な裏付けだとも言えるのです。__AC Stamp 2

ーーーーー

<関連>

Hybrid の調査 : ベスト・クラウド は Private と Public のブレンドから
Data Center の調査 : DC 内 IP トラフィックが 2017年には 3倍に増大する
VPC の調査 : プライベート・クラウドの仮想化は、新しいトレンドになり得るのか?
Hybrid の調査: プライベートはハイブリッドへと変異する宿命にある
Mobile の調査 : 無償アプリが支配する モバイルの市場

Facebook と OCP : オープン・スイッチ仕様を Broadcom と Intel と Mellanox が提出

Posted in .Selected, Data Center Trends, Facebook, Network, Open Compute by Agile Cat on November 27, 2013

Facebook Likes Broadcom, Intel, Mellanox Switches
http://wp.me/pwo1E-6WG

Rick Merritt – 11/11/2013
http://www.eetimes.com/document.asp?doc_id=1320052

_ ee times

SAN JOSE, Calif. — Broadcom, Intel, and Mellanox have developed competing specifications for datacenter switches, responding to a call from the Facebook-led Open Compute Project.

SAN JOSE, Calif. — Broadcom および、Intel、Mellanox の各社は、Facebook が主導する Open Compute Project からの要請に応えるかたちで、データセンター・スイッチの仕様コンペに取り組んでいる。

OCP called earlier this year for open specs for software-agnostic leaf and spine switches to complement its existing specs for streamlined servers. The specs aim to speed innovation in networking hardware, "help software-defined networking continue to evolve and flourish," and give big datacenter operators more flexibility in how they create cloud computing systems, said Frank Frankovsky, a Facebook datacenter executive and chair of the OCP Foundation in a blog posted Monday.

今年の初めOCP は、既存のスイッチ・プロダクツを補完し、その合理化されたサーバーに順応させる、ソフトウェアを選ばない Leaf and Spine スイッチの、オープン仕様について呼びかけを行った。その仕様とは、ネットワーク・ハードウェアにおけるイノベーションのスピードを高め、また、「SDN の進化と普及を促進」し、さらには、大規模データセンター事業者によるクラウド·コンピューティング·システム開発に柔軟性を提供するものであると、Facebook データセンター部門のトップと、OCP Foundation 議長を兼任する Frank Frankovsky が、自身のブログ・ポストで発言している。

The project’s goal is to deliver a switch that can be rebooted to handle different jobs as needed. So far the OCP group received more than 30 proposals for systems or components.

このプロジェクトの目標は、異なるジョブを必要に応じて処理するための、リブートが可能なスイッチを提供することである。そして、これまでに、30種類を超えるシステムやコンポーネントの提案を、OCP グループは受け付けている。

Intel posted online a full reference design for its proposal for a 48×4 10/40G switch (below). The design uses Intel’s FM6764 switch acquired with Fulcrum Microsystems and two of Intel’s own SoCs — the Crystal Forest control plane processor and the Cave Creek chipset for daughter cards. Quanta and one other OEM built systems based on the design.

Intel からは、48×4 10/40G Seitch(以下)に関する提案のフル・リファレンス·デザインが、オンラインでポストされている。このデザインで用いられる Intel の FM6764 Switch は、Fulcrum Microsystems と Intel 自身の 2つの SoC と連携するが、後者に関しては、ドータ·カード用の Crystal Forest プロセッサと、 Cave Creek チップセットとなる。Quanta と、別の OEM によるシステムは、このデザインをベースに構築されている。

クリックで拡大 ⇒
Intel’s switch proposal uses three types of its chips.

Broadcom said it has delivered a spec and a working system based on its Trident II switching chip that meets OCP needs. However the company declined to release further details.

また、Broadcom からは、その Trident II Switch をベースにして、OCP のニーズを充たす仕様と稼働システムが提供されるようだ。ただし、同社は、その詳細についてリリースを行っていない。

Mellanox proposed a switch based on its SwitchX-2 switch and an x86 processor running the Open Network Install Environment (ONIE) software from Cumulus Networks. The switch supports either 48 SFP+ ports and 12 QSFP ports or 60 10GbE server ports when using QSFP+ to SFP+ breakout cables.

Mellanox からの提案は、その SwitchX-2 Switch と x86 プロセッサにより、Cumulus Networks から提供される Open Network Install Environment (ONIE) ソフトウェアを走らせるというものである。このスイッチは、48 SFP+ ポートと 12 QSFP ポートをサポートするが、SFP+ Breakout Cable を用いる際には、60 10GbE サーバー・ポートがサポートされる。

Separately, Cumulus submitted to OCP its ONIE software, a boot loader for installing software on network switches. It enables a generic switch to run a variety of networking software environments.

それとは別に Cumulus は、各種のネットワーク・スイッチ上にソフトウェアをインストールするための、ブート・ローダーとしてソフトウェアを OCP にサブミットしている。それにより、各種のソフトウェア・ネットワーク環境を実行するための、汎用的なスイッチが実現されるという。

Further work on networking specs and proposals continues at an OCP event this week in San Antonio.

今週に San Antonio で開催される OCP イベントにおいて、このネットワークに関する、さらなる仕様と提案が、明らかになるだろう。

— Rick Merritt, Silicon Valley Bureau Chief, EE Times

Related posts:

ーーーーー

open-computeOCP の Open Switch について詳しく説明しているのは、Facebook Tech Director Reveals Open Networking Plan というドキュメントだと思います。 その中で、Facebook の Najam Ahmad は、「私たちが取り組んでいる仕様は、本質的にコンピューティングのように振る舞うスイッチとなる。診断と試験のための BIOS 環境が起動した後に、実行可能なものが検索され、オペレーティング・システムが見つけ出される。つまり、一般的なオペレーティング・システムのように、どのように振舞い、なにを実行するのかを、それに伝えることができる」と説明しています。一言でいって、脱アプライアンスとなるわけですが、サーバーと同様に、無印スイッチが活躍できるのかどうか、とても興味深いテーマだと思います。image

ーーーーー

<関連>

やったぜ! Facebook の Open Compute Project がオープン・スイッチに挑戦だ!
Quanta と OCP : Server/Storage/Switch/Rack などがデビュー!
Cisco が占有する スイッチ と ルーターの世界 : それを示す1枚のチャート
Facebook の Dragonstone : これは memcached の SSD 実装なのだ!
SDN はテクノロジーではない : ユースケースとして捉えるべきだ
Intel の 1.6 TB/秒 転送 : その秘密を解く

 

%d bloggers like this: