第19回 AWS User Group – Japan 東京勉強会 『クリスマス直前ストレージ祭り』行ってきた!


第19回 AWS User Group - Japan 東京勉強会 『クリスマス直前ストレージ祭り』

undefined


  • 日時: 2013/12/13 (金) 19:00 - 21:00
  • 開催場所: 株式会社ビットアイル セミナールーム
    東京都品川区東品川2-2-28 タチバナビル1F
  • 参加者:120名

参加者

既に顔なじみな方が懇親会ではほとんどだったが、名刺交換したほとんどの方はJAWS東京初。
上司命令や自発的に技術コミュニティに触れたいという方、熱く語る方々。
様々だった。
名刺交換数:11名


まとめ

  • 古くからこの業界にいる人間としては、AWS Storage Gateway VTLがイケてると思った。バックアップ設計が捗る!
  • 全体を通してS3は使い勝手がよいサービス。これを使いこなしてこそという感じ。
  • NASソリューションなどが花盛り。やはりWindowsも共存環境に考慮が必要と感じた。
  • コストダウンを追求することが、AWSアーキテクトの基本。そこには技術者本来の探究心とそうせざるを得ない事情がある。

  • 支部が40突破!
  • 懇親会はこの場所でうまいピザ!!!
  • JAWS-UGのロゴ変わりました!(鮫の口がAmazonのロゴNG)

PONPONうぇいうぇいストレージゲートウェイVTL

クラスメソッド 大瀧さん

  • jawsug初
  • AWSトレーニング講師
  • 好きなAWSサービス Route53

AWS Storage Gatewayとは

  • S3とかGlacierをHTTP/HTTPS以外で利用するためのG/Wサービス
  • EC2の他、オンプレのVMWARE、Hyper-Vに対応
  • オンプレのバックアップ、DRに最適
  • ゲートウェイアプライアンスとAPIで提供される(OVF、VHD、AMIで提供)

VTL概要

  • アプライアンス登録時に2つのタイプ

    • ボリューム(iSCSI)
    • 仮想テープライブラリ(Virtual Tape Liblary)←VTL
  • テープドライブを仮想で提供

  • iSCSIのIBM UTL3580-T5テープドライブ
  • ライブラリ機能も有する(最大1500本、150TB)

  • 100G,200GB,400GB,800GB,1.5TB,2.5TB

  • カートリッジ数上限なし
  • バックアップデータはS3の堅牢性

  • NetBackup以外は鋭意動作検証中

  • mt/mtx、tar/dumpも操作出来る

VTLの料金体系

  • ゲートウェイアプライアンス
    月額$125 60日無料
  • 仮想テープライブラリ(S3)
    月額 $0.1/1GB
  • 仮想テープシェルフ(Glacier)
    月額 $0.012/1GB
    • 復帰に24h
    • 費用 約36,000円/1TB
      ※通常のGlacierと違う点に注意!
      月額$125 60日無料
  • 仮想テープライブラリ(S3)
    月額 $0.1/1GB
  • 仮想テープシェルフ

  • 消すとき

    • シェルフにあるカートリッジは配置後3ヶ月以内の場合課金あり

まとめ

  • 激安アーカイブとして利用で居る
  • サポートはまだ先
  • 復帰とか削除の独特な要件に注意!

APIもDirect Hostingで配信してみた

リクルート大井さん

情報配信系APIをDirect Hostingを使ってみた

  • 静的ホスティング以外に使えないかな?
  • おしゃれ天気(朝7時に集中的にアクセスがある)
  • 天気予報JSONファイルを置いてみた(1700ファイル)
  • RDSのコストが半分!
  • S3のコスト91%
  • 天気予報JSONファイルを置いてみた(1700ファイル)
  • RDSのコストが半分!
  • S3のコスト91%

まとめ

  • 月額10円にならない
  • サーバ管理が楽になった

マルチAZ対応!AWS上で稼働するスケールアウトNASストレージ Red Hat Storage

RedHat平さん

  • GlusterFS
  • samba
  • Active Directory

    GlusterFS

  • NAS
  • 仮想ボリュームを作る。
  • S3対応しなくてもOK

  • 商用ではREDHAT STORAGEという名前

ソフトウェアベンダーがAWSを活用して急にSaaSを始めた話

HDE 小椋さん

  • オンプレミスでソフトウェアを作って売ってた

    何故SaaSを始めたか

  • やりたかった
  • 3/11を受けてクラウドにあった方が安全じゃないか?

HDEメールサービス

  • googleapps/office365
  • アーカイブツールシェア1位 77.4%
  • 440社

  • 処理:3億/月

  • 保管:1億/月
  • 300TB
  • インスタンス 850

メインストレージに何を使うか?

  • 無限に増加するデータの安全な保管場所
  • 現実的なパフォーマンスで検索可能にする
  • 可用性 99.99%
    • S3を採用!
      • 使いたかった!
  • I/O性能
    • HTTPベースのAPI:単体でのアクセスは遅い
    • 並列化(書き)
    • キャッシュ(読み)
      • Rは並列化が得意(採用)
      • ElastiCashe(採用)

検索インデックス

  • 全文検索エンジンをゼロから開発
    • 作りたかった!
  • SQSで分散
  • 予測可能なメール流量なのでスポットインスタンスを使用

弱点

  • インデックスストレージ
  • S3だとパケ死する
  • MongoDBを使用(疲弊した)
    • 更新終わればS3に移せばいいかも!!!(EMRを使用)
    • 圧縮して更に安くしよう!

まとめ

  • S3+SQSで大抵のことは出来る

  • 昔のメールはアクセスしない(1年くらい)

    • 1年前のはGlacier
  • AWSを基盤にすることでAWSの競争力を武器にできる!

DevOps人材募集中!(来年は2000インスタンスとかになりそう)


Windowsで使う S3クライアント」

サーバーワークス 坂井田さん @idacchi

  • JAWSUG LT初めて

dgtools

  • S3と同期できる
  • 個人利用、会社はOKだが商用利用不可
  • 無償

s3sync

  • ruby
  • ゴミがS3上に出来る
  • 無償

s3cmd

  • Phthon
  • 無償
  • 動かないがWindows版にライブラリがないから

まとめ

  • 個人:dgtools
  • 商用:s3cmd

S3のアクセスコントロールについて

得上さん

スライドアップしたら追記 
S3のアクセスコントロールが多すぎて訳が解らないので整理してみる

ACL 
* IAM

まとめ

  • JAWS DAYS 2014

AWS Samurai 2014の発表

堀内さん

  • jawsug支部41

2014 Samurai

  • 横浜支部 吉田さん
  • 名古屋支部 石田さん
  • 沖縄支部 西島さん
  • 福岡支部兼女子部 小室さん

JAWS-UG貢献者賞!

  • re:Inventにご招待
  • AWS Summit 2014(7月開催)のJAWS-UG東京勉強会で発表

JAWS DAYS 2014

  • 2014/3/15

ビットアイルさんより

ビットアイル 成迫さん

  • エンジニアで一番大事なのは楽したい!楽しい!
  • DCのレイテンシーが3ms切ってる

  • ビットアイルの時間を作ればタダになる!!!