Hortonworks から最新情報をメールで受け取る

月に一度、ビッグデータに関する最新のインサイト、トレンド、分析情報、ナレッジをお届けします。

行動喚起

始める

クラウド

スタートのご用意はできましたか?

Sandbox をダウンロード

ご質問はありませんか?

クローズクローズボタン
行動喚起

モノのインターネット( IoT )のビッグデータで、移動中のデータの価値を最大化

動画を動画ボタン再生

スタートのご用意はできましたか?

HDF をダウンロード
Hortonworks DataFlow (HDF)

Hortonworks DataFlow (HDF)

Hortonworks DataFlow( HDF )は、データの収集、キュレーション、分析、およびデータに作用する唯一のエンドツーエンドプラットフォームを、リアルタイム、オンプレミス、またはクラウドで、ドラッグ アンド ドロップで利用できるビジュアル インターフェースと共に提供します。HDF は、Apache Nifi / MiNifi、Apache Kafka、Apache Storm、Druid との統合ソリューションです。

HDF のリアルタイムストリーミングデータ分析プラットフォームには、データフロー管理システム、ストリーム処理、エンタープライズサービスが含まれています。

Powering the Future of Data
サブスクリプションを開始
HDF 3.1 Platform
Kafka Storm NiFi minifi Ranger Ambari

Hortonworks DataFlow の 3 つの主要コンポーネント

アドミニストレーター

簡単、安全、信頼性の高いデータフローの管理方法 

モノのインターネットのビッグデータフローを安全かつ効率的に収集、操作すると同時に、操作のリアルタイムな可視性、制御、管理を実現します。

アドミニストレーター

即時的かつ連続した洞察  

鮮度の落ちやすい洞察をリアルタイムで捉えるため、コードを 1 行も記述する必要なく、ストリーミング解析アプリケーションを数分で作成します。

詳細はこちら
アドミニストレーター

コーポレートガバナンス、セキュリティ、操作 

プロビジョニング、監視、ガバナンスのための包括的な管理パネルを用いて、HDF と HDP のエコシステムを管理します。

詳細はこちら

データソースにとらわれない、統合されたコレクションプラットフォーム

HDF のフル機能のデータ収集能力は、ストリーミングデータにとらわれず、220 以上のプロセッサーと統合されます。モノのインターネットのビッグデータを、フォーマット、スキーマ、プロトコル、スピード、サイズが異なるマシン、地理位置情報デバイス、クリックストリーム、ファイル、ソーシャルフィード、ログファイル、動画など、動的で分散されたソースから収集できます。

詳細:

  • データソースにとらわれないリアルタイムのデータフロー管理は、どのようにしてデータ移動を容易にするのでしょう。
    動画を見る
    詳細を見る ログ分析の最適化のために HDF に何ができるのかをご覧ください。詳細を読む
強力なデータ収集

移動中のデータへのリアルタイム応答

HDF があれば、データ収集が楽になりますソースの調整、ストリームの結合および分割、データフローの優先順位付けをするためのビジュアル コントロールパネルを用いて、データの完全管理を実現できますHDF では、より完全な解析結果と洞察を得るために、ご自身のストリームにコンテキストデータを追加することもできます。常にデータ上にある来歴と監査証跡は、セキュリティとガバナンス コンプライアンス、トラブルシューティングを必要に応じてリアルタイムで提供します。Apache NiFi、Apache MiNiFi、Apache Kafka、Apache Storm と統合され、HDF は高ボリュームのイベント処理即時解析とアクションができます。Kafka はデータの作成や配信の異なるレートに適応します。一方、Storm のリアルタイムストリーミング分析は、大規模スケールで洞察を即座に導き出します。

詳細:

  • Apache NiFi のリアルタイムビジュアルユーザインタフェースで管理したストリーミングデータが運用効率を向上させます。
    動画を見る
リアルタイムのデータフロー管理

送信元から送信先まで万全のセキュリティ 

HDF は個別のユーザー認証とリアルタイムの詳細な追跡管理により、送信元から送信先まで、エンドツーエンドのデータフローやルーティングを保護します。HDF のビジュアルユーザーインターフェースを利用して、ストリーミングデータを暗号化して Kafka にルーティングし、バッファを設定して輻輳管理することにより、データが動的に優先化され、安全に送信されます。HDF は役割ベースのデータアクセスを実現することにより、エンタープライズが選択した関連データを動的かつ安全に共有できるようにします。HDF は、運用コストをかけることなく、Kerberos 環境にてフロー管理やストリーミングアプリケーションを容易にデプロイします。

詳細:

  • 細分化されたデータへのアクセスが、役割ベースのアクセスより優れている様子をご覧ください
    動画を視聴する
エンタープライズ クラスのセキュリティ

コードなしでストリーミング解析アプリケーションを作成

HDF には、完全なストリーミング解析モジュール、ストリーミング解析マネージャー ( SAM )、イベントコリレーション、コンテキスト拡充、複雑なパターンマッチング、分析集計、洞察発見時の警告 / 通知の作成をおこなうストリーミング解析アプリケーションの作成が含まれています。SAM により、アプリケーション開発者、DevOps、ビジネスアナリストにとってストリーミング解析は容易になり、アプリケーションの作成、、開発、共同作業、分析、配置、管理を、コードを 1 行も記述せずに数分で行うことができます。アナリストは既成図を使用して速やかに分析およびダッシュボードを作成します。一方、DevOps は、使い始めからすぐにアプリケーションのパフォーマンスを管理できます。

Developers can experiment in the creation of SAM apps using mock data and create unit tests for SAM Apps using the new SAM “Test Mode”. The new SAM Operations Module gives users the ability to easily test, debug, troubleshoot, and monitor the deployed applications, making the operations of a running application as easy as building the application.

詳細:

スキーマ レジストリによる、より効率の高い運用

HDF に含まれるスキーマレジストリは、中央スキーマリポジトリにより、分析アプリケーションが相互に柔軟なやりとりを行えるようにします。そのため、ユーザーは必要なデータの保存、編集、スキーマの取得が可能です。また、追加コストを負担することなく各データにスキーマを容易にアタッチできるため、運営効率が向上します。スキーマのバージョン管理により、データコンシューマーとデータプロデューサーは異なるレートで展開できます。また、スキーマ検証のおかげでデータ品質が大幅に向上します。中央スキーマレジストリは、データがどのように使われているのかについて、優れたガバナンスも提供します。スキーマレジストリは Apache Nifi および HDF ストリーミング分析マネージャーにより統合されています。

詳細:

APACHE NIFI REGISTRY

Apache NiFi Registry, a new Apache sub-project now included within HDF Enterprise Management Services, facilitates the development, management and portability of data flows. Core to its functionality is the ability to abstract data flow schemas and programs to enable users to track and monitor data flow changes at a more granular level. Data flow schemas are stored in a shared repository that allows for easy sharing on a global basis as well as versioning of schemas.

Through this, the export and import of data flows allow easy porting and enables smooth migration of data flows from one environment to another. The functionality significantly improves the storage, control, and management of versioned flows, further shortening the software development life cycle and accelerating application deployment to achieve faster time to value.

HDF の新機能

Speed up data flow management, development and operations

*

Develop, manage and port data flows easily using Apache NiFi Registry

*

Track and monitor data flow changes at a more granular level

*

Share and version schemas using the shared repository for data flow schemas

*

Export and import data flows easily from one environment to another

Increase developer productivity

*

Improve streaming data operations in Hortonworks Streaming Analytics Manager (SAM)

*

Create SAM apps or unit tests for SAM apps using the new SAM “Test Mode”

*

Test, debug, troubleshoot, and monitor deployed applications with the new SAM Operations module

Experience tight integration with Kafka 1.0

*

Install, configure, manage, upgrade, monitor, and secure Kafka 1.0 clusters with Ambari

*

Enhance data governance and lineage by managing access control policies with Apache Ranger

*

Leverage new processors in NiFi and SAM to use Kafka 1.0 features including message headers and transactions

HDF ユーザーガイド

HDF に関するリリースノートや、ユーザー、デベロッパー、初心者のためのガイドです。

サポート

エンタープライズにおける Apache NiFi、Kafka、Storm に業界最高のサポートをご提供しています。弊社の専門家チームがあなたの旅をお手伝いします。

トレーニング

ビッグデータの専門家からの実践的なトレーニングです。個別またはオンデマンドで、必要なときに利用できます。