[san-tech][02891] Google Megastore (CIDR 2011, 2011/01/09-12)

Date: Sun, 16 Jan 2011 16:06:03 +0900
--------------------------------------------------
Agile Catさんの Blogエントリーで知りましたが

"Google Megastore - 1日で 30億 Write／200億 Read のトランザクションを実現"
 January 13, 2011, Agile Cat - in the cloud with openness
  http://agilecat.wordpress.com/2011/01/13/google-megastore-1%e6%97%a5%e3%81%a7-30%e5%84%84-write%ef%bc%8f200%e5%84%84-read-%e3%81%ae%e3%83%88%e3%83%a9%e3%83%b3%e3%82%b6%e3%82%af%e3%82%b7%e3%83%a7%e3%83%b3%e3%82%92%e5%ae%9f%e7%8f%be-cloud/

  "未来へ向けた完全な分散環境への大いなる第一歩が、High Replication
   Datastore（HRD）をリリースする、Google App Engine チームにより達成
  された。この HRD は、少なくとも 3ヶ所のデータセンターにデータをリプ
  リケートする、ミッション・クリティカルなアプリケーションをターゲットに
  したものであり、完全な ACID セマンティクスがグループ全体に適用されるが、
  コンシステンシーに関する保証は引き下げられる。"
※Agile Catさんによる以下の High Scalabilityの Blogエントリー冒頭の翻訳



"Google Megastore - 3 Billion Writes and 20 Billion Read Transactions Daily"
 January 11, 2011, High Scalability
  http://highscalability.com/blog/2011/1/11/google-megastore-3-billion-writes-and-20-billion-read-transa.html

James Hamilton氏による解説
"Google Megastore: The Data Engine Behind GAE",  2011/01/09
  http://perspectives.mvdirona.com/2011/01/09/GoogleMegastoreTheDataEngineBehindGAE.aspx

発表学会：
Conference on Innovative Data Systems Research (CIDR) 2011
 January 9-12, 2011
  http://www.cidrdb.org/cidr2011/

  "a systems-oriented conference, complementary in its mission to the
   mainstream database conferences like SIGMOD and VLDB, emphasizing the
   systems architecture perspective. The conference draws practitioners,
   researchers, and thinkers from academia and industry to explore and
   debate the latest ideas in the field." ....

  "CIDR especially seeks papers about innovative and risky approaches,"...

CIDR 2011 PAPERS
  http://www.cidrdb.org/cidr2011/program.html
※ペーパーが公開されています。

"Megastore: Providing Scalable, Highly Available Storage for Interactive Services"
 Jason Baker, et al.
  http://www.cidrdb.org/cidr2011/Papers/CIDR11_Paper32.pdf

※A downloadable (zipped) PDF of the entire Proceedings (16MB)
  http://dl.dropbox.com/u/8950924/CIDR11Procs.zip
※全ペーパーが 1ファイルに纏められています。

Google App Engine Googleグループ関連ディスカッション：
"Announcing the High Replication Datastore for App Engine"
 2011/01/06
  http://groups.google.com/group/google-appengine/browse_thread/thread/dbebe4482008eb3e
"Performance comparison between Master/Slave and High Replication"
 2011/01/06
  http://groups.google.com/group/google-appengine/browse_thread/thread/5fc3b6a4366de62f/


少し前ですが、これも関連するかも
"Availability in Globally Distributed Storage Systems", 2010/11/29
  http://perspectives.mvdirona.com/2010/11/29/AvailabilityInGloballyDistributedStorageSystems.aspx
"Availability in Globally Distributed Storage Systems"
 Daniel Ford, et al.
 9th USENIX Symposium on Operating Systems Design and Implementation, 2010.
  http://research.google.com/pubs/pub36737.html


Publications by Googlers
  http://research.google.com/pubs/papers.html
例えば
"MapReduce/Bigtable for Distributed Optimization"
 Keith B. Hall, Scott Gilpin and Gideon Mann
 Neural Information Processing Systems (NIPS)
 Workshop on Leaning on Cores, Clusters, and Clouds, 2010
  http://research.google.com/pubs/pub36948.html

※NIPSでこのようなワークショップが開催されていたとは驚きです：
NIPS 2010 Workshop on Learning on Cores, Clusters, and Clouds
  http://nips.cc/Conferences/2010/Program/event.php?ID=1995
  http://lccc.eecs.berkeley.edu/
NIPS (Neural Information Processing Systems)
  http://nips.cc/

※追加情報
Date: Sun, 13 Feb 2011 01:56:51 +0900
--------------------------------------------------
少し前ですが、Official Google Research Blogに

"Google at NIPS 2010"
 January 27, 2011 at 1/27/2011 07:30:00 AM
  http://googleresearch.blogspot.com/2011/01/google-at-nips-2010.html

という投稿がありました。関心を持たれた方はチェックして下さい。