眾所皆知的，Netflix 幾乎將所有服務都放在 AWS 上，這當然也包括了 Amazon S3。
在 Amazon S3 上會有 Eventually Consistency 的問題：寫入後可能會讀到舊的資料，於是就算錯資料了...
Netflix 的人討論了幾種方案，後來開發 s3mper 用來解決 Amazon S3 的 Eventually Consistency 問題：「S3mper: Consistency in the Cloud」。
s3mper 透過 AWS DynamoDB 儲存檔案的 metadata，藉以得知是否 consistency。而 Amazon DynamoDB 本身雖然也是 Eventually Consistency，但多了 API 可以得知是否 Consistency。
在 Supported Operations in DynamoDB 可以看到 Data Read and Consistency Considerations 這段提供了兩種 read mode：
- Eventually Consistent Reads
- Strongly Consistent Reads
在 Strongly Consistent Reads 中，可以確認讀到的是不是最新的資料。只有當 DynamoDB 與 S3 的資料都正確時才繼續往下跑...
這個解法相當於在 Amazon S3 上面架了一層防護網，算是 workaround 吧 :p 如果 Amazon S3 可以提供 consistency 資訊的話，也就不用這樣搞了...
3 thoughts on “Netflix 對 S3 的 Eventually Consistency 的補強...”