Tag: reduce

Amazon EMR 可以在 Private Subnet 裡面執行了...

以前 Amazon EMR 都只能接著 Public IP 跑 (AWS 端會認這個 IP)，現在可以丟進 Private Subnet 裡面跑：「New – Launch Amazon EMR Clusters in Private Subnets」。

看起來主要是半年前的功能的延伸。

在今年五月時 Amazon VPC 內有直通 Amazon S3 的介面，不需要再通過 Internet 處理：「Amazon VPC 的 Private Subnet 不需要透過 NAT 去 Amazon S3 抓資料了」。

不過這個架構上還是需要 NAT 連外 (連到 AWS 的系統溝通)，不論是傳統的 NAT Instances 或是 NAT Gateways (參考先前的文章「AWS 推出 NAT Gateways」)。

emr_vpc_private_subnet_nat_2

總算是搬進內部網路了...

EMR 對 S3 Consistency 的補強

今年一月的時候，Netflix 曾經寫過一篇關於對 S3 的 Eventually Consistency 的問題：「Netflix 對 S3 的 Eventually Consistency 的補強...」，當時 Netflix 的作法是實做 s3mper 以確保一致性。

過了半年，AWS 的人在 EMR 上實做了類似的功能：「Consistent View for Elastic MapReduce's File System」。

看文章的說明，應該是用到 DynamoDB 負責 S3 上資料的狀態，而 DynamoDB 的資料並不會砍掉，所以在使用時要注意這點 :o

AWS EC2 更新以及降價，以及 EBS 降價...

AWS 官方公告這一波改善：「AWS Update - New M3 Sizes & Features + Reduced EBS Prices + Reduced S3 Prices」。

首先是 EC2 多了 m3.medium 與 m3.large，與 m1.medium 與 m1.large 相比很有競爭力？

以 {m1,m3}.medium 比較來看，m3 的 ECU 值比 m1 高 50% (3 vs 2)，而且有 SSD 硬碟 (雖然只有 4GB)，價錢又比較便宜... 拿來跑 CPU bound 的 server 看起來就很好用啊？

另外一個超大的降價是 EBS，空間費用與 i/o 的費用都直接降 50%...

該來找人討論 KKTIX 要不要 migrate 過去了...

Amazon S3 調降 request 本身的收費...

Amazon S3 的 request 費用大幅調降：「Announcing New Lower Request Pricing for Amazon S3」。

PUT/LIST/COPY/POST 的部份調降 50%，本來每千個是 USD$0.01 調降到 USD$0.005。而 GET 調降 60%，本來 USD$0.01 調降到 USD$0.004。

本來 CloudFront 可以降低 request 費用 (美國區每千個 GET 是 USD$0.0075)，現在相比反而變貴... 還是過陣子 CloudFront 有機會再調降 request 費用？