Name: Apache NiFi, Kafka, Stormを利用したリアルタイムデータ処理
Start: 2017-02-15T03:00:00Z
End: 2017-02-15T04:02:20.000Z
Location: BrightTALK

Hortonworksは、Apache Hadoop、Spark、Storm、Kafka、NiFiなどのオープンソースをベースにした「次世代データプラットフォーム」を提供するソフトウェア企業です。昨今、データ駆動型アプリケーションやサービスの開発に、ビッグデータを効率よく取り扱うプラットフォームが必要になってます。このウェブセミナーでは、Hortonworks、そのエコシステムの紹介をいたします。

2017年版ガートナー社ビジネス・インテリジェンス及びアナリティクスのマジック・クアドラントで「ビジョナリー」に位置づけられた「Zoomdata」は、多種多様なデータソースに対応し、Apache Sparkを内蔵しメモリにデータをキャッシュさせる事により、データのロードを高速化しているBIプラットフォームです。Hortonworks Data Platform (HDP)との連携により、ビッグデータの可視化や分析を行うことが可能です。このウェビナーでは、Zoomdataの基本的な解説と、HDPとの連携について紹介します。

話題のセルフサービスBIではじめるビッグデータの可視化と分析

ビッグデータ時代といわれる今、企業は既存の情報資産を分析し、新たな価値を発見し、新しいビジネスをスタートさせるチャンスと言われています。データレプリケーション製品、Attunity Replicateはそんなデータ分析をスタートさせるための特効薬です。データベースに眠る既存の情報資産をクリック操作だけで、リアルタイムで、Hadoopやデータウェアハウスに転送する事ができ、すぐにデータ分析を開始する事が可能です。このウェビナーでは、データベース、DWH、Hadoopなどの異なるソース/ターゲット間において、高速で簡単なリアルタイム・データ・レプリケーションを可能にする「Attunity Replicate」と、次世代データプラットフォーム「Hortonworks Data Platform」と「Hortonworks DataFlow」についてご紹介します。

Attunity、Hortonworksを利用した データのリアルタイム同期と分析について

Azure HDInsight は、Spark、Hive、MapReduce、HBase、Storm、Kafka、R Serverのようなオープンソースベースの、99.9%のSLAが保証されたマネージドクラウドサービスで、Hortonworks Data Platform (HDP)ベースに開発されています。データアプリケーション開発者は、Visual Studio、Eclipse、IntelliJ などのお好みの開発環境で、Hadoop および Spark を利用したアプリケーションを開発できます。データ サイエンティストの方は、JupyterとZeppelinという人気のブラウザベースのインタラクティブな環境でデータを分析可能です。このセッションでは、AzureのData関連サービスとHDInsightについて紹介します。

Azureではじめるデータ分析プラットフォームの構築

AWS Marketplaceで、「Hortonworks Data Cloud for AWS」が公開されました。これにより、AWS上で簡単にApache Hadoop、Sparkをベースにしたデータ分析用プラットフォームを展開する事ができます。このWebinarでは「Hortonworks Data Cloud for AWS」の概要とデモをお見せしながら、どのようにApache HadoopやSparkのクラスタを展開するのかについて解説します。

AWSではじめるデータ分析プラットフォームの構築

Apache Hadoop, Sparkをベースにした「Hortonworks Data Platform (HDP)」により、セキュリティ、ガバナンスを重視しながら蓄積されたデータを分析する基盤を構築可能です。このWebinarでは、HDPの基本について解説し、爆発するデータを蓄積・分析する基盤をどのようにコストをかけずに実現するかについて説明します。さらに、HadoopにデータやETL処理を移行することでコストを削減し、データウェアハウスの投資効率向上し、意思決定における判断のスピードアップを実現するソリューションについても紹介します。

Hadoopを利用したデータウェアハウス最適化ソリューションの紹介

Hortonworks Data Cloud for AWSのご紹介

Apache Hadoop, SparkをベースにしたHortonworks Data Platform (HDP)により、セキュリティ、ガバナンスを重視しながら蓄積されたデータを分析する基盤を構築可能です。このWebinarでは、Hortonworks Data Platformの基本について解説し、爆発するデータを蓄積・分析する基盤をどのようにコストをかけずに構築可能かについて解説します。

初めての Hortonworks Data Platform 〜 Apache Hadoop, Sparkをベースにデータの蓄積、分析基盤を構築しよう 〜

Apache NiFi、Kafka、Stormを備えたHortonworks DataFlow (HDF)は、IoTデバイスやソーシャルデータ、Webサーバーのログなどからオンプレミスやクラウドのデータストアまで、リアルタイムにデータを収集、分析、配信することができる統合プラットフォームです。このWebinarでは、Hortonworks DataFlowの基本について解説します。

初めての Hortonworks DataFlow 〜 Apache NiFi, Kafka, Stormを利用してデータを収集しフローを制御しよう 〜

このWebinarでは、Hortonworksの「Connected Data Platforms」とEMCのデータレイクが実現する、柔軟性、低コスト、データ保護やセキュリティに優れたモダンデータアプリケーション基盤についてご紹介します。
 
また、どれくらい簡単に分析プロジェクトを開始し、成果を得ることができるかについても
ご説明致します。

HortonworksとEMCの組み合わせで、ビッグデータを最大限活用しよう！

今回はHortonworks Data Platform(HDP)のクラスタマネージャであるApache Ambariをご紹介します。Ambariを利用するとクラスタの構築やノード・サービスの追加や削除、各種サービスの設定の管理を容易に実現することができます。本Webinarでは主にAmbariの機能群をご紹介していく予定です。

Apache Ambari

このセッションでは、前半でApache Sparkの概要・仕組みと、ユースケースや使い所などをご紹介していきます。後半では、YARN上でSparkを動かす際のスケーラビリティや柔軟性についてのメリットについてお話します。これからSparkを始めたいと思っている方、Sparkは知っているけれども知識についての整理をしたい方、バッチ処理の高速化、ストリーム処理、機械学習などに興味のある方が対象です。Hadoopの知識は不要です。

Spark at Scale

今回のウェビナーでは、Hadoop1.xからみなさまに深く親しまれてきたApache Hiveが昨今、どのような形で高速化されてきたかについて話します。MapReduceからTezに変わった実行エンジン、インデックスを持ったカラムナーファイルフォーマットであるORC、モダンなCPUを最大限に活用するVectorization、Apache Calciteを利用したCost Based Optimizerによる実行計画の最適化、そして1秒以下のクエリレスポンスを実現するLLAPについて説明します。いずれの機能も数行の設定やコマンドで活用可能なものばかりですが、今回はそれらの背景でどんな仕組みが動いているのか、どんな仕組みで実現されているのかということについて話します。

Apache Hiveの今とこれから

このセッションでは、Hadoopを取り巻く最新事情や事例をまとめてお伝えするとともに、Hortonworks​ Data Platform (HDP) の最新版であるHDP2.4を始めとし、データフローの管理ソフトウェアパッケージであるHortonworks DataFlow (HDF)、クラウド環境へのHDPのデプロイを簡単に行うCloudBreakなど、Hortonworksの提供するソフトウェアをひと通りご紹介いたします。Hadoopについて知りたい方から、普段Hadoopを触っている方にもお楽しみいただけるよう、できるだけ技術的な話を中心に説明いたします。

HADOOP最新事情と HORTONWORKS DATA PLATFORM

Apache NiFi, Kafka, Stormを利用したリアルタイムデータ処理

apache

nifi

kafka

storm

hortonworks

Welcome to the big data and data management community on BrightTALK. Join thousands of data quality engineers, data scientists, database administrators and other professionals to find more information about the hottest topics affecting your data. Subscribe now to learn about efficiently storing, optimizing a complex infrastructure, developing governing policies, ensuring data quality and analyzing data to make better informed decisions. Join the conversation by watching live and on-demand webinars and take the opportunity to interact with top experts and thought leaders in the field.

Big Data and Data Management

As an IT professional, many of the problems you face are multifaceted, complex and don’t lend themselves to simple solutions. The information technology community features useful and free information technology resources. Join to browse thousands of videos and webinars on ITIL best practices, IT security strategy and more presented by leading CTOs, CIOs and other technology experts.

Apache NiFi, Kafka, Stormを利用したリアルタイムデータ処理

Presented by

About this talk

More from this channel