pixivのインフラになって2ヶ月がたった - NSEG feat. 高専カンファレンス

pixivのインフラになって2ヶ月がたった - NSEG feat. 高専カンファレンス

• 1.
  NSEG feat. Kosenconf-053nseg 2012-06-23 pixivのインフラになっ て2ヶ月がたった はるかさん/ harukasan
• 2.
  高専カンファレンス の方から来ました！
• 3.
  はるかさん ・久留米高専制御情報工学科43期生 ・NHK高専ロボコン ・ACM/ICPC ・筑波大学大学院卒業 ・pixivのインフラ3ヶ月目
• 4.
  はるかさん ・Kosenconf-003tokyo ・Kosenconf-005kyushu ・Kosenconf-013salesio ・Kosenconf-014tokyo ・Kosenconf-020salesio2 ・Kosenconf-031sciences ・Kosenconf-038tokyo ・Kosenconf-045tokyo ・Kosenconf-053nseg ←NEW!!
• 5.
  http://www.pixiv.net
• 7.
  ・イラストコミュニケーションサービス ・2007年9月10日にスタート 会員数 444400万人 作品数 2288,,000000,,000000 平均投稿数 ページビュー 2288,,000000//日 3300億PPVV//月 　　　　 　　　　　
• 8.
  pixivのインフラ
• 9.
  ２拠点のハイブリッド 構成
• 10.
  自作サーバー群 ・AthlonX2 64 505e/ Athlon II X4 605e ・B-28（ベニヤ）機 ・1Gbps線 6本
• 11.
  データセンターサーバー群 ・hp DL120G7（DB、TS、Front） ・hp DL165G7（AP、Solr） ・1Gbps線10本
• 12.
  アプリケーションまわりの構成 Internet Internet Front Front Front Front AP AP AP AP Slave LVS L3 Slave L3 Slave Master Slave Slave KVS 旧社屋クラスタ KVS Slave LVS Slave iDCクラスタ ・旧社屋とデータセンタの２つで捌いている ・２拠点間を１Gbpsの専用線で接続
• 13.
  画像まわりの構成 Internet Front Cache Cache Dispatcher L3 Front Cache Origin Front Dispatcher Dispatcher Original Thumbnail L3 Origin Origin Origin 旧社屋クラスタ iDCクラスタ ・旧社屋に画像オリジンがある ・データセンタ側でキャッシュ（９５％） ・オリジナル、サムネイルの一部はiDCに
• 14.
  画像まわりの構成 Internet Front Front Front Cache Cache Cache Dispatcher Dispatcher Dispatcher Original Front: NGINX (RAMCache) Cache: TrafficServer (SSD Cache) Dispatcher: NGINX Thumbnail L3 iDCクラスタ ・Front、Cache、Dispatcherを同居させて 　ネットワークコストを下げる ・tmpfsを利用してRAM領域にキャッシュ ・画像集約サーバーにサムネイルを集約
• 15.
  最近のプロダクト
• 17.
  ・pixivでマンガの試し読みができるサービス ・2012年6月5日にスタート ・Ruby on Rails3.2 / Unicorn ・インフラの担当をやっている
• 18.
  国際版
• 19.
  国際版 ・海外向けpixiv ・日本ではプレミアム会員になれば見られる ・Rails/ActiveResource + PHP5.3/RestfulAPI ・2011年12月末にスタート Internet ・Ruby on Rails 3.2 / Unicorn ・PHP5.3 / Apache Front Front Rails Rails PHP PHP pixiv.netのインフラ
• 20.
  まとめ ・データセンターの依存度高まってきた ・Ruby on Railsのプロダクト増えてきた ・バックアップちゃんとする
• 21.
  pixivではエンジニアを募集しています！！ http://recruit.pixiv.net/
• 22.
  サマーインターン申し込み受付中です！ http://recruit.pixiv.net/