AWS上でビッグデータ処理を行っている(行おうとしている）ユーザを中心としたグループです。
技術やユースケースの共有や、日々の悩みを相談をすることを目的としています。
以下のテーマを想定しています。
- 分散集計(RedShift、EMR、Athena等)
- 機械学習(EMR、Amazon Michine Learning等)
- ストリーム・マイクロバッチ(Kinesis)
- 分散KVS(DynamoDB)
- データフロー制御・スケジューリング(SWF,DataPipeline,Glue等)
- データマイグレーション(ネットワーク周り、スノーボール等）
- BI (QuickSight)
現在かっこいいロゴを作ってくれる方を募集しています！
月に1回の頻度で勉強会を実施する予定です。
勉強会は発表者からの一方向の技術紹介やユースケース紹介ではありません。
参加者の相互の情報共有を前提としています。
ハッシュタグ #bdjaws
- 第1回勉強会〜今回はEMRとRedShiftがメイン〜(2016/07/22) 資料ページ
- 第2回勉強会〜Embulk/DigdagとRedshift、クックパッドの権限管理〜(2016/09/26) 資料ページ
- 第3回勉強会〜Kinesis Analytics/Apache Nifi/AWS最新アップデート〜(2016/11/18) 資料ページ
- 第4回勉強会〜EMR祭り！Embulk+EMR、スポットインスタンス自動入札、基幹業務利用等〜(2016/12/12) 資料ページ
- 第5回勉強会〜新サービスAthena使ってみた×２と EMR deep dive〜(2017/02/01) 資料ページ
- 第6回勉強会〜Kinesis祭り〜(2017/04/04) 資料ページ
- 第7回勉強会〜Redshift Spectrum, カラムナストレージ, 大規模データフロー〜(2017/05/18) 資料ページ
- 第8回勉強会〜Quick Sight、Redshift運用、AWS Summit Tokyo 2017 まとめ〜 (2017/08/09) 資料ページ
- 第9回勉強会〜リアルタイムアクセスログ分析、Redshift運用、クラウドワークスの分析基盤〜 (2017/10/11) 資料ページ
- 第10回勉強会〜AWS Glue 祭り〜 (2017/11/24) 資料ページ
- 第11回勉強会〜snowflake、Cloudera on AWS vs EMR、re:Invent前後のサービスアップデート〜 (2018/02/06) 資料ページ