AWS
6月末に O'Reilly から出版された「サーバーレスシングルページアプリケーション」を読んだ．ただ読むだけじゃ理解度が浅くなってしまうかもしれないなと感じて，今回は全ての実装を写経してみた．そのため少し時間はかかってしまったけど，フロントエンドに…
今日は「AWS Solution Days 2017 ~ AWS DB Day ~」に参加をして「第2回 Aurora 事例祭り」で発表もしてきた．すぐに資料公開をして良いとのことだったので，参加レポートをまとめる． AWS Solution Days 2017 ～AWS DB Day～（2017 年 7 月 5 日開催） | AWS…
最近仕事で必要になり，CircleCI + Apex を使って，Lambda を複数環境 (prd / stg / dev など) にデプロイできる仕組みを作ったので，実現したかったこと，工夫したことなどを紹介したいと思う．ちなみに，以前も似たような事例で CloudWatch Events + Lambd…
re:Invent 2016 で発表されたけど，オンプレ関連だと勝手に思い込んでいて，今まで試していなかった Amazon EC2 Systems Manager の中に「パラメータストア」というサービスがあり，試してみたらこれが非常に便利だった．簡単に言うと，任意のパラメータをパ…
AWS Summit Tokyo 2017 の先行発売でゲットした「実践 AWS Lambda」をさっそく読んだ．Lambda の解説だけではなく，サーバレスの文脈で導入事例が増えてきたアーキテクチャ（ユースケース）の紹介がされていたり，サーバレスのデプロイツールとして AWS SAM …
2017/05/30(火) ~ 2017/06/02(金) の期間で，計4日間開催されていた AWS Summit Tokyo 2017 に参加してきた．僕は後半2日間に参加して，非常に満足度が高く，もっともっと AWS を使い倒さなきゃ！とモチベーションが上がった．セッションを聞くだけではなく…
今日は Data Migration Night に参加してきた & LT 枠で登壇してきた！ atnd.org ChatWork がデータマイグレーションに使った技術の話 CQRS + Event Sourcing System Aurora にある17億メッセージを HBase にマイグレーションする 基本マイグレーションと差…
前回書いた記事に続き，Mackerel を使って ECS のメトリクスを取得する方法を検証していて，今回は「パターン2 : コンテナインスタンスに mackerel-agent をインストールする」の検証結果をまとめる．前提としては前回と同じで，ALB の動的ポートマッピング…
最近 Mackerel を使って ECS のメトリクスを取得する方法を検証している．ポイントとしては，ALB の動的ポートマッピングを使うところで，コンテナインスタンスの中で複数のタスク（コンテナ）が起動されるため，全てのタスクのメトリクスを取得する必要があ…
3月末に参加した「JAWS-UG コンテナ支部」で知った ECR (Amazon EC2 Container Registry) の便利ツール Amazon ECR Docker Credential Helper を試した．Amazon ECR Docker Credential Helper を使うと ECR のログインを省略できる． kakakakakku.hatenablog…
引き続き ECS のデプロイを調査していて，今回は導入された話を比較的よく聞く ecs-deploy を試した．AWS CLI と jq に依存しているけど，Shell 100% で実装されているため，実行環境の構築が不要という手軽さが1番のメリットだと思う． github.com ちなみに…
3/30(木) に参加して既に3週間もたってしまったけど，ECS の事例を聞きたいなと思って「JAWS-UG コンテナ支部 入門編 #4」に参加してきた．今回は「入門編」だったので，僕のレベル的にちょうど良いなと思った．あと JAWS 系のイベントは “19-21時” でサクッ…
AWS CLI で ELB 配下のインスタンスをローリングデプロイする方法は去年にまとめた．aws elb deregister-instances-from-load-balancer と aws elb register-instances-with-load-balancer を使うだけじゃなく，aws elb describe-instance-health を使って w…
CircleCI を使って，ECS に Docker コンテナをデプロイする方法を調べていたら，CircleCI が公開しているサンプルプロジェクト circleci/go-ecs-ecr の存在を知ったので，さっそく試してみた． circleci/go-ecs-ecr を動かすと，Golang の API が動く Docker…
PHP から Elasticsearch を操作するために Elastica というライブラリを使っている．今まで EC2 で運用していた Elasticsearch を Amazon ES に移行する話があり，Elastica から Amazon ES を操作するときに悩むことが多かったため，まとめておこうと思う． …
今日は社内の別プロダクトと合同勉強会があって，Lambda + Apex 便利だよ！という発表をしてきた． タイトルは「Lambda + Apex 事例紹介 ~ 全ては AWS コスト削減のために ~」で，発表内容としては，大きく3点にフォーカスした． CloudWatch Events + Lambda…
先週，プロダクトで開発合宿を企画して実施してきた．今回のテーマは「開発効率／運用効率の改善」だったので，僕はインフラチームとして先輩と一緒に開発に取り組んだ．お題は「AWS コスト削減」にした．開発合宿で開発したツールで学んだことを簡単にまと…
GitHub で awslabs のリポジトリを眺めてたら git-secrets という便利なツール（シェルで実装されてる）を発見した． どんなものかを簡単に説明すると，アクセスキーなどを誤ってコミットすることを Git の hooks を使って未然に防ぐツールで，誤って GitHub…
既にサービスで稼働している MySQL on EC2 を Aurora に移行するために，以下のようなレプリケーション環境を検証用に構築して試した．Percona Xtrabackup でリストアをすると高速にできるらしいけど，今回は環境の制約もあって mysqldump 経由でリストアを…
最近 Aurora の検証をしているので，今後は Aurora 関連の記事を書く機会が増えそう． 前提 RDS (Aurora MySQL) インスタンスタイプ : db.t2.medium DBInstanceClassMemory とは RDS のパラメータグループでは，特定の変数と演算子を使った動的な値設定がで…
今日は CloudWatch の話を書こうと思う．既に活用してる人も多いと思うけど，2016年11月の新機能リリースで各種メトリクスの「パーセンタイル統計」を可視化できるようになった． 「パーセンタイル統計」は凄く重要で，平均値だけをモニタリングしていると気…
AWS を運用しているエンジニアなら読んだ人も多いであろう，2015年10月に公開された "AWS Well-Architected Framework" に実は大幅なアップデートが入っていることに気付いた．時期的には AWS re:Invent 2016 の直前で，AWS re:Invent 2016 で発表された新サ…
AWS re:Invent 2016 で発表されてからもう1ヶ月も過ぎてしまったけど，今さらながら Amazon Athena を実際に試してみた．検証記事は既に多く出てて，積極的に読んでいたけど，実際に動かしてみようと思った． 現在まだ東京リージョンには対応して無く，今回…
「Amazon Web Services Advent Calendar 2016」20日目の記事を書くぞー！ 最近 Amazon Elasticsearch Service を本番環境で運用していて，そこそこに運用経験がまとまったので，どこかで LT でもしようと思って先に発表資料だけを作っていたんだけど，年内に…
自動スナップショットと手動スナップショット Amazon Elasticsearch Service でクラスタのスナップショットを取得する場合，「自動スナップショット」と「手動スナップショット」の2種類がある． AWS 側で自動的に日次取得してくれるものを「自動スナップシ…
木曜日に Codenize Meetup に参加してきた．Codenize.tools には様々なツールがあって，有名なものだと Roadworker（Route 53 の設定をコード化） / Piculet（セキュリティグループの設定をコード化） / Miam（IAM の設定をコード化）など．タイミング良く R…
最近試していた Piculet に続き，Codenize.tools の中でも特によく使われてそうな Roadworker を試した．セキュリティグループほどの複雑さはないけど，ドメイン設定も管理コンソールで運用するのではなく，宣言的にコード化を進めて，レビュープロセスを通…
前回は Piculet を使ってセキュリティグループ設定と Groupfile の比較を CircleCI でチェックできるところまで試した．興味があったら是非以下の記事を見てもらえると！ kakakakakku.hatenablog.com 今回は前回の続きで，主に --apply オプションを使った反…
管理コンソールでセキュリティグループ設定を管理するのは限界があると思っていて，例えば以下のような状態になってしまうことがあると思う． 必要に応じて日々増えていくルール設定（無意識にポチポチと追加してしまう） 使って無さそうだから消したいけど…
今日は社内勉強会で「知っておくと便利な Exponential Backoff」という発表をした．前回の「知っておくと便利な Bloom Filter」に続いてのタイトルで「知っておくと便利な」シリーズを確立していきたい． 実は Exponential Backoff という名称を知ったのは結…
