Glueとは AWS GlueとはETLを行うマネージドサービス ETLとはExtract/Transform/Load 抽出、変換、読み込み 使い所 DWH・データ分析環境を構築する上で手間の掛かる作業を簡略化・効率化する つまりRedShiftと相性がよい 用語 クローラーがある データカタロ…

ビッグデータの処理 RedShiftとEMRの違い EMR - Hadoopクラスタの運用構築 これは、Mysqlに対するRDSと同じイメージで捉えててもよいのだろうか？ EMRは「分散アプリケーション」 - マスターをもち、n個のスレーブを持ち、それらを並列処理してSQLとかを高速…

S3のコスト最適化 4つのストレージクラスを選択 Standard [NEW!!] Intelligent-Tiering Standard-IA One Zone-IA Glacier 連続30日間アクセスされていないデータを低頻度のアクセス階層に移動 性能の影響なく、運用のオーバーヘッドもなく、データ取り出しの…

何？ Chef や Puppet を使って運用を自動化する ライフサイクルイベント Setup Configure Deploy Undeploy Shutdown OpsWorks スタック CloudFormation -CodeDeploy Elastic Beanstalk OpsWorks 似ているような各種のシステムの違いを把握する必要がある。 d…