第19回 AWS User Group - Japan 東京勉強会 『クリスマス直前ストレージ祭り』
- 日時: 2013/12/13 (金) 19:00 - 21:00
- 開催場所: 株式会社ビットアイル セミナールーム
東京都品川区東品川2-2-28 タチバナビル1F - 参加者:120名
参加者
既に顔なじみな方が懇親会ではほとんどだったが、名刺交換したほとんどの方はJAWS東京初。
上司命令や自発的に技術コミュニティに触れたいという方、熱く語る方々。
様々だった。
名刺交換数:11名
まとめ
- 古くからこの業界にいる人間としては、AWS Storage Gateway VTLがイケてると思った。バックアップ設計が捗る!
- 全体を通してS3は使い勝手がよいサービス。これを使いこなしてこそという感じ。
- NASソリューションなどが花盛り。やはりWindowsも共存環境に考慮が必要と感じた。
- コストダウンを追求することが、AWSアーキテクトの基本。そこには技術者本来の探究心とそうせざるを得ない事情がある。
- 支部が40突破!
- 懇親会はこの場所でうまいピザ!!!
- JAWS-UGのロゴ変わりました!(鮫の口がAmazonのロゴNG)
PONPONうぇいうぇいストレージゲートウェイVTL
クラスメソッド 大瀧さん
- jawsug初
- AWSトレーニング講師
- 好きなAWSサービス Route53
AWS Storage Gatewayとは
- S3とかGlacierをHTTP/HTTPS以外で利用するためのG/Wサービス
- EC2の他、オンプレのVMWARE、Hyper-Vに対応
- オンプレのバックアップ、DRに最適
- ゲートウェイアプライアンスとAPIで提供される(OVF、VHD、AMIで提供)
VTL概要
-
アプライアンス登録時に2つのタイプ
- ボリューム(iSCSI)
- 仮想テープライブラリ(Virtual Tape Liblary)←VTL
-
テープドライブを仮想で提供
- iSCSIのIBM UTL3580-T5テープドライブ
-
ライブラリ機能も有する(最大1500本、150TB)
-
100G,200GB,400GB,800GB,1.5TB,2.5TB
- カートリッジ数上限なし
-
バックアップデータはS3の堅牢性
-
NetBackup以外は鋭意動作検証中
- mt/mtx、tar/dumpも操作出来る
VTLの料金体系
- ゲートウェイアプライアンス
月額$125 60日無料 - 仮想テープライブラリ(S3)
月額 $0.1/1GB - 仮想テープシェルフ(Glacier)
月額 $0.012/1GB- 復帰に24h
- 費用 約36,000円/1TB
※通常のGlacierと違う点に注意!
月額$125 60日無料
- 仮想テープライブラリ(S3)
月額 $0.1/1GB -
仮想テープシェルフ
-
消すとき
- シェルフにあるカートリッジは配置後3ヶ月以内の場合課金あり
まとめ
- 激安アーカイブとして利用で居る
- サポートはまだ先
- 復帰とか削除の独特な要件に注意!
APIもDirect Hostingで配信してみた
リクルート大井さん
情報配信系APIをDirect Hostingを使ってみた
- 静的ホスティング以外に使えないかな?
- おしゃれ天気(朝7時に集中的にアクセスがある)
- 天気予報JSONファイルを置いてみた(1700ファイル)
- RDSのコストが半分!
- S3のコスト91%
- 天気予報JSONファイルを置いてみた(1700ファイル)
- RDSのコストが半分!
- S3のコスト91%
まとめ
- 月額10円にならない
- サーバ管理が楽になった
マルチAZ対応!AWS上で稼働するスケールアウトNASストレージ Red Hat Storage
RedHat平さん
- 商用ではREDHAT STORAGEという名前
ソフトウェアベンダーがAWSを活用して急にSaaSを始めた話
HDE 小椋さん
HDEメールサービス
- googleapps/office365
- アーカイブツールシェア1位 77.4%
-
440社
-
処理:3億/月
- 保管:1億/月
- 300TB
- インスタンス 850
メインストレージに何を使うか?
- 無限に増加するデータの安全な保管場所
- 現実的なパフォーマンスで検索可能にする
- 可用性 99.99%
- S3を採用!
- 使いたかった!
- S3を採用!
- I/O性能
- HTTPベースのAPI:単体でのアクセスは遅い
- 並列化(書き)
- キャッシュ(読み)
- Rは並列化が得意(採用)
- ElastiCashe(採用)
検索インデックス
- 全文検索エンジンをゼロから開発
- 作りたかった!
- SQSで分散
- 予測可能なメール流量なのでスポットインスタンスを使用
弱点
- インデックスストレージ
- S3だとパケ死する
- MongoDBを使用(疲弊した)
- 更新終わればS3に移せばいいかも!!!(EMRを使用)
- 圧縮して更に安くしよう!
まとめ
-
S3+SQSで大抵のことは出来る
-
昔のメールはアクセスしない(1年くらい)
- 1年前のはGlacier
-
AWSを基盤にすることでAWSの競争力を武器にできる!
DevOps人材募集中!(来年は2000インスタンスとかになりそう)
Windowsで使う S3クライアント」
サーバーワークス 坂井田さん @idacchi
- JAWSUG LT初めて
dgtools
- S3と同期できる
- 個人利用、会社はOKだが商用利用不可
- 無償
s3sync
- ruby
- ゴミがS3上に出来る
- 無償
s3cmd
- Phthon
- 無償
- 動かないがWindows版にライブラリがないから
まとめ
- 個人:dgtools
- 商用:s3cmd
S3のアクセスコントロールについて
得上さん
スライドアップしたら追記
S3のアクセスコントロールが多すぎて訳が解らないので整理してみる
ACL
* IAM
まとめ
- JAWS DAYS 2014
AWS Samurai 2014の発表
堀内さん
- jawsug支部41
2014 Samurai
- 横浜支部 吉田さん
- 名古屋支部 石田さん
- 沖縄支部 西島さん
- 福岡支部兼女子部 小室さん
JAWS-UG貢献者賞!
- re:Inventにご招待
- AWS Summit 2014(7月開催)のJAWS-UG東京勉強会で発表
JAWS DAYS 2014
- 2014/3/15
ビットアイルさんより
ビットアイル 成迫さん
- エンジニアで一番大事なのは楽したい!楽しい!
-
DCのレイテンシーが3ms切ってる
-
ビットアイルの時間を作ればタダになる!!!