AWS

EMRが自動でクラスターの大きさを考えてくれて、“最適な台数”に調整してくれる機能。自分で細かくルールを書かなくても、使用状況を見て無駄を減らしつつ速度を保つから、手動管理よりラクでコスパも良くなるんだ。

大切なデータをスナップショットに保存し、間違って消したときに元通りにできる機能だよ。自動スナップショットもあり、履歴をとっておけば過去の状態への巻き戻しもOK。データ破損のリスクをぐっと減らせるんだ。

暗号化や認証などのルールをまとめて“ひとパック”で設定する仕組み。クラスターを作るたびに毎回細かい項目を指定しなくても、この設定を一気に適用すれば、ミスなく安全な環境が用意しやすいんだ。

“定期的に写真を撮る”ようにクラスターの状態をバックアップしておく機能。時間が経つと新しいスナップショットを取って古いのを消すなど、ルールを決めて運用できる。人間がいなくても自動でやってくれるから安心だね。

クラスターの起動時に“最初に自動でやってほしい作業”を指定できる機能。必要なソフトをインストールしたり、設定ファイルを上書きしたりして、ユーザーが手動でやる手間を省き、すぐに目的の環境を整えられる。

Redshiftを自分の専用ネットワーク(VPC)の中に置けるから、ほかのサービスやデータベースと安全に連携できる。インターネットにさらさず閉じた環境で運用できるのは、セキュリティ的にも大きな安心ポイントなんだ。

分析や処理を“ステップ”に分けて順番に実行する仕組みだよ。一つのステップが終わったら次へ進むから、複雑なワークフローも管理しやすい。実行結果に応じてステップを追加したり飛ばしたりできるんだ。

特定のクエリが長すぎたり、リソースを使いすぎる場合に自動で対処する仕組み。例えば“5分以上かかるクエリはキャンセルする”などのルールを作っておくと、意図せずシステムが重くなり続けるのを防げるんだ。

EMRが作る“HadoopやSparkの集まり”そのものだよ。マスターノードとワーカーノードで構成され、大量のデータを分割して並列で処理する。終わったらクラスターを消せるから、使い捨てでも大規模分析が気軽にできるんだ。

同時に来るクエリをグループ分けして、“速く返すグループ”と“重い集計向けグループ”などを設定できる機能。これでみんなが一斉に大きなクエリを投げても、優先度をコントロールして遅延を減らせるんだ。