Car-tech

Facebookは膨大なデータを扱うために「コールドストレージ」を使う準備をしている

不要嘲笑我們的性

不要嘲笑我們的性

目次:

Anonim

Facebookは、ソーシャルネットワークのユーザーが毎月アップロードする7ペタバイトの新しい写真に対処するためにデータを保存する方法を再考しています。同社のインフラストラクチャエンジニアリング担当副社長によると、Facebookは写真の数が増えるにつれて、安価で電力を必要とする方法を探し出す必要があるという。

ユーザーは1日に約3億枚の写真をアップロードし、 FacebookのJay Parikh氏は、アムステルダムで開催されたStructure Europeカンファレンスで語った。 「ハロウィンは今年最大の写真アップロード日の1つであり、1日にアップロードされる写真は約1億〜20億枚になるだろう」と彼は言った。

ハロウィーンで撮られたもののような写真は、 「ユーザーとの契約は、アクセスしていないときにデータを削除することができないということだ。データを保存する必要がある」と同氏は述べた。これは、写真を一種の「コールド・ストレージ」に入れるという考えにつながったとParikhは述べています。

[さらに読む:最高のテレビストリーミングサービス]

Facebookは新しいデータセンターをサーバーの応答時間を変更することなく、消費電力が少なく、既存のデータセンターよりもコストがかからない、さまざまなタイプのストレージ、サーバーハードウェア、ネットワーク機器などがあります。

データをテープに保存するなど、消費電力は削減されますが、データアクセスが大幅に遅くなります。

Amazon Web Servicesがフォローしています氷河のクラウドストレージサービスを備えた中間の道路で、これはテープの代わりに使われます。このサービスは、頻繁にアクセスされず、数時間の検索時間が許容されるデータに対して最適化されています。

Parikhによれば、それはFacebookにとって非常に遅いです。 「5年前から10年前にアクセスした写真を撮ることはできません。私には、「ねえ、24時間後にもう一度やり直してみませんか?」というバナーがユーザーに表示されます。

低消費電力ニーズ:

画像:オレゴンのデータセンターナレッジ・ブックデータ・センター

今日使用されているほとんどのデータセンターは、多くの用途に最適化されています。大きなコンピューティングパワーを必要とするタスクを処理する能力Facebookが考えている "コールドストレージ"技術は、他の極端なところにある、とParikhは言います。 「たくさんのスペースが必要だが、それほどの力は必要ない」と同氏は、Facebookが直面している規模で問題を処理するためには、データセンターに関するすべてのことを考え直す必要があると付け加えた。

Facebookは、インフラストラクチャーにコンテンツを保存する方法と場所を把握するソフトウェアを開発中だと、Parikh氏は述べている。これは、データのコピーが時間の経過とともに移動し、コンテンツの時代に最適化されるさまざまなインフラストラクチャを利用することを意味します。彼は、ソフトウェア層の発明の中には、Facebookがまだ迅速に対応できる一方で、データをより費用対効果の高い方法で保存することができると述べている(

)。Cold Storageは、今後1〜2年でFacebookのインフラストラクチャの一部となるだろう。 Facebookは、オープンソースのソフトウェア共同作業モデルをデータセンターハードウェアの世界に適用するためにFacebookが始めたイニシアチブであるOpen Compute Projectを通じて、関連性があると思われる部分を公開し、共有する計画を立てている。