ウェブサイト

YahooがIITボンベイがHadoopクラスターラボをセットアップするのを支援

therunofsummer

therunofsummer
Anonim

ヤフーは、インド工科大学のボンベイが、オープンソースのHadoopソフトウェアを実行するサーバーのクラスタを寄贈して、ムンバイのHadoopクラスターラボを設立するのを手伝ってくれました。

Apache Hadoopはオープンソースの分散コンピューティングプロジェクトです。 YahooがサポートしているApache Software Foundation。

ヤフーはHadoopを使用して多数の重要業務を運営しており、Hadoopの周りで必要とされるすべての調査を行うことはできないと、Yahoo LabsのPrabhakar Raghavan

Yahooは、昨年6月、Hadoopの配布をApache Hadoopコミュニティから公開し、Hadoopのバージョンを公開し、独自の大クラスターに展開することを発表した。 Mのラボumbaiは、検索技術、情報抽出、自然言語処理など、研究所の研究分野の研究者を支援します。

Web関連の問題を研究したいと思っている学術研究者は、通常、コンピューティングリソースやRoghavan氏は、カーネギーメロン大学のHadoop研究者に2007年に4000プロセッサーのスーパーコンピューターを提供することから、米国の他の大学がHadoopを立ち上げる手助けをしているラトハバン氏は、IITにインストールされているクラスタについて詳しくは触れていないが、数百のCPUを搭載し、テラバイトのデータを処理する能力を備えたサーバがそこに配備されているということだけを指摘している。

IIT Bombay、Yahoo Raghavanは、ドイツとシンガポールの学術機関で同様のクラスターを構築するのを手助けしている、と語った。 Yahooは米国外の最初の3つの学術機関で、Yahooがこのようなクラスタを構築するのを手伝っている、と彼は付け加えた。Yahooは、後に、より大きなユーティリティを作成するために世界中のクラスタの一部をネットワーク化する予定だ。 Raghavanは、Yahooが2008年にComputational Research Laboratories(CRL)と提携し、インドの研究所が運営しているチームと協力して、Hadoopのシステム管理機能を強化して、タタ・グループは、大規模なコンピューティング、特にHadoopを研究しているインドの学術機関にスーパーコンピューティング施設を無料で提供しています。 Raghavanによれば、Hadoopの学術機関と提携することで、Hadoopプラットフォームに精通したエンジニアをヤフーが構築することができるとRaghavan氏は述べています。 Yahooは、Hadoopを使って研究を行っている学術機関からのアイデアから利益を得た、とRaghavan氏は付け加えた。しかし、彼は学術機関とのこのコラボレーションから得られたアイデアの具体例を挙げていませんでした。