Amazon Kinesis Data Firehoseとは?

 

Amazon Kinesis Data Firehoseとは?

Kinesis Data Firehoseを利用してS3にログを蓄積し、Athenaを利用してログ解析を行うことができます。

Amazon Kinesis Data Firehose は、ストリーミングデータをデータレイクやデータストア、分析ツールに確実にロードする最も簡単な方法です。

ストリーミングデータをキャプチャして変換し、

  • Amazon S3
  • Amazon Redshift
  • Amazon Elasticsearch Service
  • Splunk

にロードして、現在お使いのビジネスインテリジェンスツールやダッシュボードでほぼリアルタイムに分析できます。

ログの蓄積場所としては大量ログをコスト効率よく蓄積するためS3を選択することが最適です。

Amazon Athena はインタラクティブなクエリサービスで、Amazon S3 内のデータを標準 SQL を使用して簡単に分析できます。

Amazon S3 にあるデータを指定し、スキーマを定義し、標準的な SQL を使用してクエリの実行を開始するだけです。

多くの場合、数秒で結果が出てきます。Athena を使用すると、分析用データを準備するための複雑な ETL ジョブは不要になります。

これによって、誰でも SQL のスキルを使って、大型データセットをすばやく、簡単に分析できるようになります。

 

広告
・ここからは記事で取り上げた商品紹介リンクになります

・各ページ共通でするので予めご了承ください

・悩み解決や他人と差をつけやすくするため(自己成長)の商品を抜粋して紹介しています。

AWSプログラミングを学習するなら(自己投資)
契約が決まるまえに
電子印鑑ならGMOサイン
無料で使える クラウド請求書・見積書・納品書管理サービス Misoca(みそか)