ビッグデータ分析 【入門】Apache Hive とは？メタストアや HiveServer を解説
Apache Hive Apache Hive とは、分散ストレージ（Hadoop など） のデータセットに対して、SQL クエリで「読み取り・書き込み・管理」するソフトウェアです。最初に本記事は、以下のビッグデータ分析基盤シリーズの「スト...
ほげてく
ビッグデータ分析 
ビッグデータ分析 Apache Spark とは【入門】
初めに本記事は、以下のビッグデータ分析基盤シリーズの Apache Spark 編です。【ビッグデータ入門１】ビッグデータ分析基盤【ビッグデータ入門２】ストリーム処理【ビッグデータ入門３】fluentd【ビッグデータ入門４】Elastics...
ビッグデータ分析 【入門】fluentd (td-agent) とは？インストールと使い方
fluentd (td-agent) fluentd (td-agent) とは、ログ収集ソフトウェアです。アプリケーションや各 IoT 機器のログを１箇所に集約するために利用します。初めに本記事は、以下のビッグデータ分析基盤シリーズの f...
ビッグデータ分析 【入門】ストリーム処理とは？ OSS のエンジンを紹介
ビッグデータの分析基盤、機械学習を導入するにあたり、「ストリーム処理」という言葉をよく目にするようになりました。一方で「ストリーム処理」に関する説明が抽象的でイメージが掴みにくいのが実情です。そこで今回は以下の項目について「ストリーム処理」...
ビッグデータ分析 【入門】Hadoop とは？MapReduce の使い方やエコシステム一覧
Apache Hadoop Apache Hadoop とは、並列分散処理を実現するミドルウェアです。「ビッグデータを１台のコンピュータで処理すると時間がかかりすぎるため、コンピューターをいっぱい並べて高速に処理しよう。」というのが Had...