AWSの請求アラート(Billing Alerts)をAWS CLIで設定する

[toc] [2017/07/21 13:10 アラームの設定が一部誤りがありましたので修正しました。] AWSは便利な機能が豊富ですが、従量課金なので翌月頭に届く領収書(もしくは請求書)を見て、料金に驚くことも多々あります。そのため、料金が想定よりも上回った場合に、C…

2017-05-31

S3バケット作成時に自動的にタグをつける(CloudWatch Events + AWS Lambda)

AmazonWebServices aws cloudwatch lambda S3

[toc] AWSでタグ付けによるコストの割り当て(コストアロケーション)をしている方が多いと思います。私が所属する組織でもタグ付けによってAWS料金を分けることをしています。コストの分割をやりやすくしてくれるので嬉しい機能ですが、ついついタグ付けを忘…

2016-09-04

AWS Lambda Based Amazon Redshift Database Loader を使ってみた(3) 〜ファイルサイズの上限〜

AmazonWebServices aws lambda Redshift redshift

連日 AWS Lambda Based Amazon Redshift Database Loader (以下、Redshift Loader)の内容です。 Redshift LoaderはS3にアップロードされたイベントを検知してAmazon Lambdaが実行されてRedshiftへデータロードされるのですが、1つ気になるのがS3へアップロー…

2016-09-03

AWS Lambda Based Amazon Redshift Database Loader を使ってみた(2) 〜失敗したバッチの再実行〜

AmazonWebServices aws node.js Redshift redshift

前回はAWS Lambda Based Amazon Redshift Database Loader(Redshift Loader)の使い方を紹介しました。今回はデータロード時に失敗した時の挙動やリカバリ方法について紹介します。 Redshiftへのデータロード失敗の挙動試しにRedshiftクラスターをリサイズし…

2016-09-02

AWS Lambda Based Amazon Redshift Database Loader を使ってみた(1)

AmazonWebServices aws lambda node.js Redshift redshift

[toc] アプリケーションログをRedshiftにロードしたいという案件があったので色々調べていたところ、AWS Lambda Based Amazon Redshift Database Loader というのがあったので使ってみました。 AWS Lambda Based Amazon Redshift Database Loader とは (名称…

2016-01-15

スケジュールドリザーブドインスタンスがリリースされた

AWS AmazonWebServices aws ec2 EC2

日次や週次、月次などずっとは稼働させないけれど、定期的に実行するEC2インスタンスに対してリザーブドインスタンスが買えるようになったとのことです。一日数時間しか動かさないEC2インスタンスでもオンデマンドよりも概ね5〜10%ぐらい安くなるとのこと。 …

2016-01-07

FluentdからAmazon Elasticsearch Serviceへログ転送する時の注意点

Amazon Elasticsearch Service AmazonWebServices aws elasticsearch fluentd

昨年10月にAmazon Elasticsearch Service(Amazon ES)がリリースされました。今まではEC2インスタンスにElasticsearch をインストールして運用していましたが、AWS側でマネージドしてくれるということでとても便利そうだなと思い使ってみました。動作環境は…