オープンデータプラットフォームとは何で、Hadoopとの関係は何ですか?

著者: Roger Morrison
作成日: 19 9月 2021
更新日: 11 5月 2024
Anonim
なぜ、今、アナリティクスはHadoopを求めるのか
ビデオ: なぜ、今、アナリティクスはHadoopを求めるのか

コンテンツ


取り除く:

Open Data Platformは、Apache Hadoopと連携できるビッグデータを処理する比較的新しい方法です。

Open Data Platform(ODP)は、Apache Hadoopエコシステムの採用を強化し、ビッグデータソリューションがエコシステムで繁栄できるようにすることに焦点を当てた業界レベルのイニシアチブです。 Apache Hadoopフレームワークの長所に基づいています。

明らかに、ODPの支持者は、ODPを採用する人々に多くの利益をもたらすと主張していますが、全員が確信しているわけではありません。 ODPとApache Hadoopを選択することは、まるで完全に異なるテクノロジーまたは概念であるかのように、多くの混乱があるようです。 ODPはまだ比較的新しいものであり、業界がODPをどのように採用する(または採用しない)かを見るのは興味深いことです。

Open Data Platformとは何ですか?

ODPのコアコンポーネントには、Hadoop分散ファイルシステム(HDFS)、YARNクラスター管理テクノロジー、Hadoop管理コンソールAmbariが含まれます。 ODPカーネル用にこのコアを確立することにより、Hadoopスタック上に構築されたOPDでアプリケーションを実行することを目的としています。さらに、ODPコアは、ソフトウェアコンポーネントとソリューションを構築するためのベースとなるオープンソーステストを組み合わせたものです。

モノのインターネット(IoT)の出現により、現在最も必要なのは、データ自体です(構造化データ、非構造化データ、または生データ)。むしろ、増大するオブジェクトのネットワーク間の通信を強化する必要があります。それを促進するために、Open Data PlatformはHadoopエコシステムを活用するため、ここで重要な領域です。

ソリューションの提供

自由に利用できるオープンデータは、ほとんど誰でも使用および配布できます。これは、社会が直面している既存の一連の問題を解決するという点で、将来性のある分野です。それは社会の1つの分野に限定されるだけでなく、以下にも影響します。


  • 政府
  • 教育
  • 健康管理
  • サプライヤー交換
  • バイヤーの予測行動

そのため、問題領域に関する解決策にアプローチする方法は、次のように構成できます。

  • 問題領域—現在のニーズと制限のセットで問題領域を特定します。
  • 解決策—オープンデータと分析ツールを使用してソリューションを探します。
  • 主要プレーヤー—ユースケースの鍵となるプレーヤーを特定します。プレーヤーであろうと受益者であろうと。
  • 包含—すべてのオープンデータプレーヤーを関与させて、解像度の有効性を高め、ODPやApache Hadoopエコシステムなどの業界レベルのイニシアチブに従います。
  • ビジネス価値—それがテーブルにもたらすビジネスの前置詞を評価します。例えば、それがどのように関連するコストを削減するか。

ゲームチェンジャー:ポジティブ

OPDイニシアチブを招いている大きな勢力は、GE、Hortonworks、IBM、Infosys、Pivo​​tal、SAS、AltiScale、Capgemini、CenturyLink、EMC、Teradata、Splunk、Verizon、VMwareなどの主要企業です。主要な目的は、Apache Hadoopをさらに高速化し、ビッグデータを次のレベルに引き上げるために、オープンソースとオープンコラボレーションを活用することです。

このイニシアチブは、ベンダーだけでなくエンドユーザーのニーズにも対応しているため、まさにゲームチェンジャーです。言うまでもなく、Apacheプロジェクトへの貢献を活用してさらに強化するため、Apache Software Foundation(ASF)プロセスと密接に連携しています。 ODPは、全体として多様なコミュニティに参加するためのオープンプラットフォームを提供しています。

バグやストレスなし-あなたの人生を破壊することなく人生を変えるソフトウェアを作成するためのステップバイステップガイド

誰もソフトウェアの品質を気にしない場合、プログラミングスキルを向上させることはできません。


Apache Hadoopの主要ベンダー、サービスプロバイダー、およびユーザーとの連動により、Apache Hadoopエコシステム全体の断片化を減らし、開発の牽引力を獲得することが最大の課題です。

ODPの目的は、特定のApacheプロジェクトと直接連携し、アイデアとコードを提供する方法に関するApache Software Foundationのガイドラインを順守することです。目的は、互換性を強化し、準拠システムでアプリまたはツールを実行する方法を標準化することです。

もう1つの興味深い側面は、Hadoopまたはその他のビッグデータテクノロジー上に構築されたソリューションの展開の標準化です。

ODPが取り組んでいる主な重点分野は次のとおりです。

  • ビッグデータ向けのオープンソースエコシステムの開発
  • Hadoopおよびビッグデータ採用の触媒として機能
  • Apache Hadoopエコシステムの標準化
  • アプリケーションの展開モードを標準化する
  • データ駆動型アプリケーションをサポートするための最高のビッグデータと分析ソフトウェアの採用

ODPを使用すると、次の利点が得られます。

  • ベンダーとソリューションプロバイダーのR&Dコストの削減
  • 相互運用性の向上
  • 将来のHadoopディストリビューションの標準化されたベース

市場のネガティブな話題:フリップサイド

ただし、市場の他のプレーヤーはODPを異なって見ます。これらのプレーヤーによると、ODPは次のとおりです。

  • Apache Software Foundationとの冗長性— Apache Software Foundationは、Hadoopディストリビューション間で情報を接続、交換、および使用できるアプリケーションを使用して、Hadoop標準に導きました。 Hadoopは、業界全体で事実上の標準になっています。したがって、発生する問題は、ODPが提供する価値は何ですか?
  • Hadoopリーダーによる参加の欠如— MapR、Amazon Web Services、Clouderaなどの一部の主要なHadoopプレーヤーは、このイニシアチブにも参加していません。
  • 相互運用性とベンダーのロックインは問題ではありません— Gartnerの調査によると、相互運用性とベンダーのロックインが実際に問題であると感じている企業はわずかです。さらに、プロジェクトとサブプロジェクトの相互運用性は、無料配布と有料配布の両方で保証されています。したがって、ODPが努力と時間を費やすべき領域ではありません。
  • ガバナンスに関する質問—ガバナンスモデルに関して、主要なHadoopディストリビューションには同等の投票権が付与されていないため、質問が提起されました。ガバナンスモデルはまだ公開されていません。
  • 真にオープンではありません— Hortonworksをパートナーとして、ODPは単一ベンダーのパッケージでオープンデータプラットフォームを確立しています。これは、Open Data Platformの「オープン性」に疑問を投げかけています。

選択の問題

ODPの前進方法は標準化モデルです。標準化には独自の利点がありますが、選択がエンパワーメントにつながります。健全な競争を引き起こすのは選択であり、関係者全員がより良い品質を目指して努力するようになります。

標準化されたモデルを前提に、業界がODPをどのように受け入れているかを見てみましょう。手数料構造、ガバナンスモデル、議決権など、未回答の質問はまだ多くあります。より大きな問題は、ODPが顧客の主要な質問に効果的に対処しているかどうかです。このイニシアチブがどのように前進し、コミュニティに利益をもたらすかは、時が経てばわかります。

結論

1つの考え方はApache Hadoopとそのフレーバーに傾いており、もう1つの考え方はODPの開発と採用に備えています。全体的に言えば、ODPとHadoopは2つの異なる概念であると言い、もう1つは互いに補完し合うと言います。 ODPはApache Hadoopに対する脅威であると言う人もいれば、Apache Hadoopをさらに活用する大きなチャンスだと言う人もいます。市場にはあらゆる種類の理論があり、それぞれのプレーヤーは、組織に持ち帰ることを約束する未来に基づいて、未来を異なって知覚します。

したがって、ここでの最大の問題は、これら2つの概念が異なる方法で出現するのか、ある時点で結合するのかということです。これら2つの巨人がビッグデータ空間でお互いを受け入れるかどうかを発見するために、ビッグデータの岐路を一緒に目撃しましょう。いずれにせよ、これら2つの異なる概念が互いに重なり合って、最終的にエンドユーザー全体に利益をもたらすことは避けられないようです。