ぺい

渋谷系アドテクエンジニアの落書き

2018-06-01から1ヶ月間の記事一覧

ServerlessでAWS Lambdaのデプロイをいい感じにする

Serverless Frameworkとは github.com 通常AWS Lambdaを使う上で面倒な手順としてある。 関数を作成する AWS マネジメントコンソールからLambdaの管理画面にアクセスする 関数をアップロードする(圧縮するとかもある) トリガーとなるイベントの設定など 上…

AWS Athena + Glueを使ったデータ分析(パーティション自動化)

ログは見れる状態にして価値が出る ログは雑に集めてるんだけど、見れる状態になっていないというのは、ストレージ料金を食ってるだけのゴミなので、破棄するか見れるようにするのですが、見れるようにするのは、そもそも結構大変だったりする。そこでFireho…

Amazon Kinesis Data Firehose 使い方

Amazon Kinesis Data Firehose(長いのでFirehoseとします) aws.amazon.com どういうものかというのは、公式の素晴らしい説明文で大体わかります。 ストリーミングデータをデータストアや分析ツールに確実にロードする最も簡単な方法です。ストリーミングデ…

Packerで作成されたSnapshotを消す

便利なんだけど放置しがちなAMIたちを消す Packerはイメージの管理に非常に便利です。弊社でも、AWSのAMIの作成時に使っています。 tikasan.hatenablog.com ただ、AMIは放置していると無限に作成されてしまうので、いくら安いストレージ料金であっても、結構…

PackerでAWS AMIを自動で作成する

AWS AMIの管理は面倒 AWSでEC2(IaaS)使ったアプリケーションを構築する時に、AMIの管理が地味に面倒です。例えば、AWS側から提供されているAMIをそのまま使うと、OSがデフォルトに近い状態なので、アプリケーションの実行に必要なものを準備する必要があり…

毎日目標を立てないから、頑張れる

毎日目標立てると未達になった時だるい 社会人生活を始めると、結果を出さなきゃーとか、自分で立てた目標達成しなきゃーとか色々あると思います。例えば自分は以下のような日々の目標があります。 早寝早起き(22:00 ~ 06:30) 朝勉強(1~2時間くらい) 定…

AWS EC2バックアップ

EC2でよくやるアレ 検証したい時とかによくやるので、自分のためにメモがてらにまとめた。 SnapshotからAMI バックアップしたいインスタンスIDをメモしておく 該当のEBSを見つけて スナップショットを取る 適当な名前をつける(日付とか用途を入れるとgood)…

AWS備忘録

俺用メモ 業務や勉強で出てきたキーワードやメモを雑にまとめている記事。(随時更新するかも) VPC AWS上に好きな構成のネットワークを構築出来る。 使い方 1. VPCのトップへ 2. メニューからVPCを選択する 3. VPCの作成 サブネット VPCで作成したプライベ…

分からないを認識して、分からないと言う話

なんとなく知っているは知らない 社会人になって色々出来ないことはあるだろうけど、絶対これだけはやろうって考えていたのが、「分からないを認識して、分からないと言う」でした。 というのも、学生時代やりがちだったのが、「なんとなく知ってる」話を、…

インフラのボトルネックについて知る

インフラのボトルネックを理解する コードはもちろん、リリースしてから安定して動かせるように面倒を見るまでが仕事というのが、弊社の開発スタイルなので、そこで最近学んだことについて、文献や自分の実体験からボトルネックに関する考え方をまとめてみた…