Tag Archives: mapreduce

Google 將之前買下 Skybox 公司的工具放出來 (MapReduce for C)

在 Zite 上看到的,Google 把之前買下的 Skybox 所開發的工具 MapReduce for C (MR4C) 放出來:「Google open sources a MapReduce framework for C/C++」。 MR4C 的程式碼放在 GitHub 上,以 Apache License Version 2.0 授權放出來:「google/mr4c」。

Posted in Computer, Murmuring, Network, Programming, Software | Tagged , , , , , | Leave a comment

EMR 對 S3 Consistency 的補強

今年一月的時候,Netflix 曾經寫過一篇關於對 S3 的 Eventually Consistency 的問題:「Netflix 對 S3 的 Eventually Consistency 的補強...」,當時 Netflix 的作法是實做 s3mper 以確保一致性。 過了半年,AWS 的人在 EMR 上實做了類似的功能:「Consistent View for Elastic MapReduce's File System」。 看文章的說明,應該是用到 DynamoDB 負責 S3 上資料的狀態,而 DynamoDB 的資料並不會砍掉,所以在使用時要注意這點 :o

Posted in AWS, Cloud, Computer, Murmuring, Network, Software | Tagged , , , , , , , , , , , , , , , | Leave a comment

Amazon EMR 總算支援更多種類的機器了...

Amazon Elastic MapReduce 一直都只能跑舊的機器,總算把新機器加上去了:「New Instance Types for Amazon Elastic MapReduce」。 接下來應該都會用 c3 系列來跑吧?

Posted in AWS, Cloud, Computer, Murmuring, Network | Tagged , , , , , | Leave a comment

AWS 大降價

在「AWS Price Reduction #42 - EC2, S3, RDS, ElastiCache, and Elastic MapReduce」這邊看到 AWS 降價的消息,明顯是被 Google 壓著推出來 :p 降價的範圍包括 EC2 instance、EC2 的 reserved instance、S3,以及對應的 RDS、ElastiCache、Elastic MapReduce。 前幾天買了兩台 us-west-2 c1.xlarge 的三年 RI,結果從 USD$2804 降到 USD$2524,現虧 USD$280 (XDDD),而每小時單價從 USD$0.124 降到 USD$0.112,也就 9.7% 左右。 … Continue reading

Posted in AWS, Cloud, Computer, Murmuring, Network | Tagged , , , , , , , , , | 1 Comment