本日も乙

ただの自己満足な備忘録。

aws

負荷テストの目的とツール

仕事で新機能における負荷テストを実施していました。 負荷テストとは、システムに対して高負荷をかけることでアプリケーションの性能を確認するテストのことです。なぜ負荷をかけるのかというと主な目的は4つあります。 1つ目は想定したユーザー数やアク…

AWS Data ExportsとAWS CUR 2.0について

Zennで記事を書きました。 zenn.dev

前払いなしのリザーブドインスタンスの請求タイミングを勘違いしていた件

Zennで記事を書きました。 zenn.dev

AWS Cost and Usage Report(CUR)をTerraformで作成する

Zennで記事を書きました。 zenn.dev

Amazon API Gateway by Terraformでファイル変更時に再デプロイする

AWS

Zennで記事を書きました。小ネタです。 API Gatewayデプロイメントをterraform applyした後に再デプロイできなかったので対応できるようにした内容です。 zenn.dev

Amazon Athena, BigQuery, SnowflakeにおけるDATE型の範囲の違い

Zennでブログ書きました。 zenn.dev

Software Design 2022年5月号「AWSコスト管理の極意」に寄稿しました

4月18日販売のSoftware Design 2022年5月号 第1特集の第2章を寄稿させていただきました。 gihyo.jp 特集は「AWSコスト管理の極意 コストの見える化&分析で予想外の請求を防ぐ!」。AWSは従量課金ゆえにリーズナブルに使える反面、意図しない請求が発生する…

AWS Organizations配下のメンバーアカウントのクローズができるようになりました

AWS

AWS Organizationsのススメ的な記事を以前に書いた際に、デメリットの一つにAWSアカウントの削除が面倒ということを書きました。 blog.jicoman.info 先日のアップデートでアカウントのクローズが簡単にできるようになったとのことです。 AWS Organizations n…

個人でもAWS Organizationsを使ったほうが良い理由

AWS

技術書典11で「Amazon Web Servicesコスト最適化入門 マルチアカウント編」を頒布中です。 techbookfest.org BOOTHでも購入できますが、送料(370円)がかかってしまうので、7/25までであれば技術書典のオンラインマーケットだと送料がかからずお得かと思い…

技書博5で「AWSコスト最適化入門 マルチアカウント編」を頒布します

6/19(土)に開催される第五回 技術書同人誌博覧会(技書博)で「Amazon Web Servicesコスト最適化入門 マルチアカウント編」を新刊として販売します。 https://gishohaku.dev/gishohaku5/circles/ovDqdeDyuuKr4k1GF3j5gishohaku.dev どんな本なのか 前著「A…

VPCフローログを利用したNAT Gatewayのトラフィックコストの分析とVPCエンドポイントとの使い分けに関する考察

VPCフローログの設定 Athena テーブルの作成 クエリ例 ケース1 ケース2 ケース3 コスト最適化ポイント S3、Dynamo DB は VPC エンドポイントを設定する NAT Gateway にするか PrivateLink(VPC エンドポイント)にするか 参考URL AWS NAT Gateway(以下、NAT…

AWS Cost and Usage Reportを分割してメンバーアカウントに共有する(2)

前回の記事の続きです。 blog.jicoman.info AWSリソース CURの作成 メンバーアカウント共有用S3バケットの作成 オブジェクトACLを書き換えるLambda関数用の作成 IAMポリシーの作成 IAM ロールの作成 Lambda 関数の作成 S3 バケット通知の設定 過去の CUR デ…

AWS Cost and Usage Reportを分割してメンバーアカウントに共有する(1)

実現したいこと メンバーアカウントからCURを利用するのは簡単? AWSから提供されているソリューション 構成 参考URL AWS Cost and Usage Report(AWSのコストと使用状況レポート、以下 CUR)は、AWS のコストやリソースの使用状況を S3 や Redshift にアッ…

JAWS DAYS 2021に登壇&参加してきました

3月20日に開催された JAWS DAYS 2021 に参加と登壇したので参加レポートです。 視聴したセッション 登壇 感想 視聴したセッション 午前中は子供の面倒を見ていて、午後は登壇前の練習をしていたので、最後の方のセッションしか見れませんでした。気になった…

インフラエンジニアBooksに登壇しました

3月16日にインフラエンジニア Books というイベントで、以前に執筆した「Amazon Web Services コスト最適化入門」についてお話させていただきました。 https://infra-eng-books.connpass.com/event/201291/infra-eng-books.connpass.com 登壇資料は Speakerd…

GitHub Actions から AWS CodePipeline のパイプラインを実行する

AWS CodePipeline(以下、CodePipeline)は GitHub と連携した場合、通常は Push 時にパイプラインが実行されますが、Push 以外のイベント時にパイプラインを実行したい場合もあります。例えば、特定のタグを付けたり、Pull Request 作成時やコメントをつけ…

Amazon Elastic Inference(EI)について調べてみた

AWS

ずっと前に調べていたメモをブログ用に書き起こしてみました。 Amazon Elastic Inference(EI)とは 料金 制限 GPU インスタンスとの違い Amazon EI を使うためにやること セキュリティグループのルール追加 AWS PrivateLink エンドポイントを作成 IAM ロー…

AWS Copilot をひと通り使ってみた

AWS

Amazon ECS のデプロイツールを調査した際に AWS Copilot をひと通り触ってみたのでそのメモです。 AWS Copilot とは Getting started コンセプト Application Environments Service Jobs Pipelines Manifest Advanced ドメインの設定 既存の VPC、サブネッ…

ECS GPU-optimized AMI で Docker ランタイムを変更する

本記事では、ECS GPU-optimized AMI をカスタマイズして Docker のランタイムを変更する方法について紹介しますが、そもそもなぜランタイムを変更しなければならないのかについて説明します。 ECS で GPU を扱うことによる問題点 Docker のランタイムを変更…

AWS SDK for Goのテストの書き方(ec2metadata)

net/http/httptest とは サンプルコード 参考URL 以前にAWS SDK for Goを使ったテストの書き方を紹介しました。 blog.jicoman.info EC2 や S3 などのサービスは Interface が提供されているのでモックを使ったテストを書くことができます。しかし、EC2メタデ…

「Amazon Web Servicesコスト最適化入門」の商業誌版が刊行されました

技術書典8および9で頒布した「Amazon Web Servicesコスト最適化入門」(通称 AWS コスト本)がこの度インプレス R&D 様から商業誌として出版されることになりました。前著の「Spinnaker入門」に続いて2作目となります。 nextpublishing.jp AWS コスト本とは …

S3のストレージクラスを一括で変更するとクラウド破産するかもという話

S3 のストレージコストを最適化する際に、S3 オブジェクトのストレージクラスを用途に合わせて変更するのがプラクティスのひとつとして提唱されています。ストレージクラスは「S3 Standard」「S3 Standard-IA」「S3 OneZone-IA」「S3 Glacier」「S3 Glacier …

AWS主要サービスのストレージ暗号化についてのまとめ

AWS

セキュリティ、コンプライアンスの要件によってはデータの暗号化が必要な場合があります。データ転送やデータ保管時も暗号化の対象です。AWS は一部のサービスを除いてデータ保管時の暗号化はデフォルトで有効になっておらず、明示的に有効にする必要があり…

Amazon ESの基本的な使い方を学べるワークショップ「Amazon Elasticsearch Service Intro Workshop」をやってみた

AWS

Amazon Elasticsearch Service(以下、Amazon ES)をキャッチアップするために、先日「これから始める Amazon Elasticsearch Service セミナー」に参加してきました。そのなかでワークショップの宣伝がされたのですが、Amazon ES の基本的な使い方を手で動か…

ECS GPU-optimized AMIでECSを構築する

ECS で GPU インスタンスを使うときに、以前は自分で NVIDIA ドライバを入れたり、ECS エージェントを入れたりする必要がありましたが、最近(といっても昨年2月ですが)ECS GPU に最適化された AMI が出たことで ECS で GPU が使いやすくなりました。 aws.a…

BigQuery Transfer ServiceでAmazon RedshiftからBigQueryにデータ移行する

Amazon Redshift(以下、Redshift)にあるデータを BigQuery に移行して活用する案件があったので、調べたところ、BigQuery Data Transfer Service で Redshift からのデータ移行がベータ版ですがサポートされていました。 cloud.google.com 本記事では Reds…

Auroraクラスタを他のAWSアカウントに複製したい場合、リストアとクローンのどちらがいいのか

AWS

知っている人にとっては当たり前の話かと思いますが、知らない人にとっては知っておいた方が良い話です。 Amazon Aurora クラスタを別の AWS アカウントに複製したい場合に、リストアとクローンの両方が使えますがどちらが良いでしょうか。 結論からいうとク…

【書評】AWSでクラウドネイティブな開発と運用をキャッチアップできる「クラウドネイティブファーストストーリー」

技術書典 応援祭で購入して積んでいた「クラウドネイティブファーストストーリー」を読んでとても良かったので本記事で紹介します。 booth.pm なぜ読んだのか 章立て 第1章 第2章 第3章 第4章 よかったところ プロダクションレディなアーキテクチャ 「何…

「これから始める Amazon Elasticsearch Service セミナー」に参加してきました

AWS

AWS公式のオンラインセミナー「これから始める Amazon Elasticsearch Service セミナー」に参加してきたのでそのレポート記事です。 参加動機 アジェンダ Introduction to Amazon Elasticsearch Service Elasticsearch とは Amazon ES の概要 Amazon Elastic…

【書評】AWSコスト最適化の知識・運用を学べる「Mastering AWS Cost Optimization」

技術書典 応援祭で Amazon Web Servicesコスト最適化入門という技術同人誌を出しました。出した後に AWS コストについて扱った本がないかを調べたところ、「Mastering AWS Cost Optimization」という本がとても良かったので紹介します。 Mastering AWS Cost …