make
Amazon Redshiftのクエリがなぜかたまに遅くなる原因
始めに 弊社では、膨大なデータの夜間バッチ処理にRedshiftを採用しています。 適材適所でサービスを選択しており、夜間以外はお役御免で停止しておき、費用面を抑えるよう工夫しています。 メンテナンスウィンドウも設けて運用していて概ね問題なく稼働しています。...
top of page
検索
toshiki nishio
- 5月22日
- 2 分
QuickSightでユーザ公開中データセットの参照元テーブルに列を追加する時の手順
はじめに Quicksightでユーザに公開中のデータセットの参照元テーブルに列を追加することがありました。その時の手順についてまとめたいと思います。 列追加する時の考慮事項 更新対象のテーブルはユーザーが参照しているテーブルのため、ダウンタイムなしで項目追加後のテーブルに...
閲覧数：42回0件のコメント
toshiki nishio
- 2月2日
- 4 分
S3上のcsvファイルをデータソースとしてGlue Data catalogを作った時にハマったポイント
はじめに S3ファイルをデータソースとして Glue Data catalogを作った時のハマりポイントを共有します。その前にGlueとはなんぞやといったことから紹介していきます。 Glueとは？ 抽出（Extract）、変換（Transform）、ロード（Load）（略称...
閲覧数：708回0件のコメント
a k
- 2023年12月29日
- 2 分
Redshiftとソートキー
はじめに Redshiftのソートキーはすっごく重要です。 最速JOINはマージJOIN Group byでもソートキーが使用される WHEREでレコードを絞り込むときにも有効 どの場合もソートキーの項目順をちゃんと合わせてないといけません。特に夜間バッチでよく使われる全件...
閲覧数：177回0件のコメント
BLOG一覧
bottom of page