「 月別アーカイブ:2017年10月 」 一覧

no image

「会社では教えてもらえない 生産性が高い人の思考整理のキホン」の読書メモ

2017/10/30   -読書
 

メモ 整理とは、不要なものを取り除くこと 「5W1H」は、計画や企画を立てる際に、何から手を付ければよいか分からないときに使える 目的と、いま取り組んでいる内容が合っているかを確認するタスクをスケジュ …

no image

「Greenplum」について調べてみた

https://www.scutum.jp/information/waf_tech_blog/2016/02/waf-blog-045.html オープンソース 並列処理可能なRDBで、SQL処理を …

no image

「DWH」について調べてみた

https://boxil.jp/mag/a1657/ 複数システムから必要なデータを収集し時系列に保管したデータベース 4つの定義 サブジェクト指向 特定の目的別ではなく、サブジェクト(主題)別に分 …

no image

「Apache Drill」について調べてみた

対話型分析 多様なデータソースをサポート HBase, MongoDB, MapR-DB, HDFS, MapR-FS, Amazon S3, Azure Blob Storage, Google C …

no image

「Apache Avro」について調べてみた

http://dev.classmethod.jp/cloud/aws/amazon-redshift-emr-avro/ http://kakakazuma.hatenablog.com/entry …

no image

「ORC」について調べてみた

https://www.slideshare.net/imaifactory/apache-hive-2016 https://www.slideshare.net/uprush/hive-prese …

no image

「Hive Metastore」について調べてみた

http://swimmingpython.net/ja/?p=919 テーブル定義、パーティション、Index定義などの情報を管理する Local/Embedded Modeは、Hive CLIやH …

no image

「Apache Parquet」について調べてみた

http://nagix.hatenablog.com/entry/2015/12/08/235512 CSVといったテキストファイルは、データが行方向に沿って格納されるのに対し、Parquetは列志 …

no image

「Amazon Athena」について調べてみた

https://www.slideshare.net/tetsutarowatanabe/aws-athena-30tbweb インタラクティブなクエリサービス Amazon S3内のデータをSQLを …

no image

「Apache NiFi」について調べてみた

データフローオーケストレーションツール Web UIによりデータフローを定義できる 自前でプロセッサを開発できる 複数プロセスをクラスタリングすることでスケールアウトできる