Tag: instance

AWS 提供 6TB/9TB/12TB RAM 的機器...

AWS 推出了超大記憶體的機器，代碼 u-{6,9,12}tb1.metal，分別對應 6TB/9TB/12TB 的 RAM：「Now Available – Amazon EC2 High Memory Instances with 6, 9, and 12 TB of Memory, Perfect for SAP HANA」。

這記憶體比我桌機的硬碟還大... 然後還打算出更大台的機器 XDDD：

We’re not stopping at 12 TiB, and are planning to launch instances with 18 TiB and 24 TiB of memory in 2019.

不過目前從 web console 上沒看到可以選擇，似乎沒有開放零租 (i.e. 以分計費，或是以小時計費)，在價錢頁「Amazon EC2 Pricing」這邊沒看到，在 Reserved Instance (RI) 的頁面「Amazon EC2 Reserved Instances Pricing」這邊也沒看到。

從文章裡的描述知道目前在 us-east-1 & ap-northeast-1 有提供，但從後台情況以及文章語氣推測，似乎要另外開 support ticket 才能選用：

These instances are now available in the US East (N. Virginia) and Asia Pacific (Tokyo) Regions as Dedicated Hosts with a 3-year term, and will be available soon in the US West (Oregon), Europe (Ireland), and AWS GovCloud (US) Regions. If you are ready to get started, contact your AWS account team or use the Contact Us page to make a request.

而且看起來這個階段像是一次只給買三年？

Amazon EC2 推出 T3 系列機器了...

Amazon EC2 推出新的 family type，T3 系列了：「Introducing Amazon EC2 T3 Instances」。

官方宣稱比 T2 系列的機器快 30%：

T3 instances also feature the latest 2.5 GHz Intel Xeon Scalable processors which combined with the AWS Nitro System result in up to a 30% better price to performance improvement over T2 instances.

另外 T3 低階系列的機器 (t3.nano、t3.micro、t3.small) 都是 2 vCPU 了，而且「CPU credits earned per hour」是原來的兩倍，但 t3.medium 與 t3.large 就跟原來一樣了，而再更大台的 t3.xlarge 與 t3.2xlarge 又比較大了... (參考「CPU Credits and Baseline Performance」)

另外是價錢上的差異，T3 的單價反而比 T2 低了一些：以 us-east-1 來看，t3.nano 是 USD$0.0052/hr，而 t2.nano 則是 USD$0.0058/hr，大約是 10% 的差距。

Reserved Instance 也是類似的情況，t3.nano 是 USD$27/y 與 USD$51/3y，t2.nano 則是 USD$29/y 與 USD$57/3y。

這次發佈把台灣團隊常用的區域都納入了，包括了北美的 us-east-1 (北維吉尼亞)、us-west-2 (奧勒崗) 與亞洲的 ap-northeast-1 (東京)、ap-southeast-1 (新加坡)：

Amazon EC2 T3 Instances are available immediately in the US East (N. Virginia), US East (Ohio), US West (N. California), US West (Oregon), Canada (Central), Asia Pacific (Singapore), Asia Pacific (Sydney), Asia Pacific (Tokyo), Europe (Frankfurt), Europe (Ireland), Europe (London), and South America (Sao Paulo) AWS Regions.

現有的機器都可以考慮換過去了... 這也是買三年 RI 最好的時機了 XD

EC2 推出了 R5、R5d、z1d 三種機器...

上個禮拜 Amazon EC2 就放話預定要推出 r5、r5d、z1d 三種機器，但當時沒公佈價錢，只公佈了規格，這樣就沒辦法比較成本。尤其 R 系列的機器主要就是看記憶體的單位成本...

今天總算是正式推出公開價錢了：「Now Available: R5, R5d, and z1d Instances」。

拿 r{4,5}.large 比較，都是 2 vCPU，但 r5 的 ECU 快了一些，記憶體多了一些，價錢少了一些：

vCPU ECU Memory (GiB) Instance Storage (GB) Linux/UNIX Usage
r5.large 2 8 16 GiB EBS Only $0.126 per Hour
r4.large 2 7 15.25 GiB EBS Only $0.133 per Hour

完全是個「麵多一點、湯多一點，但錢少一點」的概念 XD

另外這次推出的 z1d 系列主打高時脈：

The high frequency z1d instances use custom Intel® Xeon® Scalable Processors running at up to 4.0 GHz, powered by sustained all-core Turbo Boost, perfect for Electronic Design Automation (EDA), financial simulation, relational database, and gaming workloads that can benefit from extremely high per-core performance.

vCPU ECU Memory (GiB) Instance Storage (GB) Linux/UNIX Usage
z1d.large 2 11 16 GiB 1 x 75 NVMe SSD $0.186 per Hour

對於沒有辦法利用平行化加速的工作會有幫助，不過在目前 EC2 的價位表上面大概是因為比 r4 的記憶體還多，所以放在「Memory Optimized - Current Generation」而不是 Compute Optimized，不知道實際上用的時候會偏向哪塊...

從 Aurora 同步到 EC2 上的 MySQL

Percona 這篇「How to Set Up Replication Between AWS Aurora and an External MySQL Instance」講怎麼設定 Amazon Aurora，把資料同步到外部的 MySQL instance。

其中最重要的應該是你需要透過 snapshot 建出 consistent backup，然後用這份資料去接 Aurora 的 master server：

Create a snapshot and restore it (create a new instance from a snapshot). This is only needed to make a consistent copy with mysqldump. As Aurora does not allow “super” privileges, running mysqldump --master-data is not possible. The snapshot is the only way to get a consistent backup with the specific binary log position.

能拉出來後續就能做很多事情...

GCP 的 f1-micro 的使用心得...

這幾天在弄備援跳板機，不想弄在日本 (latency)，所以就想到 Google Cloud Platform (GCP) 在台灣有機房，而 Compute Engine 有 f1-micro，類似 AWS 裡 EC2 提供的 t2.nano 的機器。而這兩天玩了玩，大概有些事情值得記錄起來。

CPU 相關的部份：

  • EC2 的 t2 系列可以透過 API 或是在 web console 看到 CPU credit 剩下多少，GCE 沒找到在哪邊可以看。
  • EC2 的 t2 系列在 CPU credit 用完後是變慢運行，除非你打開 T2 Unlimited 同意 AWS 多收錢。而 GCE 的則是沒得選，相當於一定要開 T2 Unlimited。
  • GCE 的 f1-micro 是 0.2 vCPU，但我在上面跑 Ubuntu 18.04，平常沒事就已經是 15% 左右。這數字比預期的高不少，還在找是什麼原因...

網路相關的部份：

  • 因為要用台灣的機房，網路的部份只有 Premium 等級可以選 (Standard 等級目前只在美國有)，也就是會先走 Google 佈建的網路再出去，所以流出的費用會隨著 destination 地區而有差異 (i.e. 封包送到美國與送到中國是不同計價)。
  • 但 Premium 等級實測品質真的很不一樣，到香港居然在 15ms 以下，以前在固網機房內沒看過這個數字...

其他的部份：

  • 硬碟空間方面，Standard provisioned space 比 EBS 的 gp2 便宜不少，而且還包括了 i/o 費用 (AWS 會另外收費)。
  • 連續使用就會有 discount 了，也可以 commit 買一年或是三年取得更深的 discount。而 AWS 則是得買 Reserved Instance 拿到 discount。

來看看一個月會有多少帳單產生吧...

EC2 的 Dedicated Instance 也支援 Auto Recovery 了...

所以除了一般的 EC2 instance 可以設定 Auto Recovery 外，實體機的 Dedicated Instance 也可以設定了：「Amazon EC2 Auto Recovery is now available for Dedicated Instances」。

不過能用架構做 High Availability 還是用架構做會比較好 (像是透過 ELB 擋在前面提供服務)，Auto Recovery 因為是透過 CloudWatch 偵測 (目前最短的偵測時間應該是 10 秒一次)，再加上要等新機器接手，還是會有明顯的 downtime。

Amazon EC2 推出 C5d instance：對 CPU 與 Disk 最佳化

AWS 推出了 C5d instance，同時針對 CPU 與 Disk 最佳化的機種：「EC2 Instance Update – C5 Instances with Local NVMe Storage (C5d)」。可以看出是在本地端掛上 NVMe 的方式在租用，價錢也不算高：

以帶了一個 local NVMe 的規劃來看，像是補 c3 系列產品線的感覺：

然後不是每個有 c5 的區域都會有 c5d，目前只有五區有：

C5d instances are available in On-Demand, Reserved Instance, and Spot form in the US East (N. Virginia), US West (Oregon), EU (Ireland), US East (Ohio), and Canada (Central) Regions. Prices vary by Region, and are just a bit higher than for the equivalent C5 instances.

AWS 推出 EC2 Fleet：直接混搭標準 EC2、Spot、RI 的計算

AWS 將本來 EC2 的 Spot Fleet 加上了 EC2 Fleet，計算的公式從本來只有 Spot Instace，變成把標準 EC2 Instance 與 RI 的計算全部都納進來：「EC2 Fleet – Manage Thousands of On-Demand and Spot Instances with One Request」。

Today we are extending and generalizing the set-it-and-forget-it model that we pioneered in Spot Fleet with EC2 Fleet, a new building block that gives you the ability to create fleets that are composed of a combination of EC2 On-Demand, Reserved, and Spot Instances with a single API call.

不過目前有些服務還沒整，主要是跟 auto scaling 有關的部份，這部份應該是一次上一大包：

We plan to connect EC2 Fleet and EC2 Auto Scaling groups. This will let you create a single fleet that mixed instance types and Spot, Reserved and On-Demand, while also taking advantage of EC2 Auto Scaling features such as health checks and lifecycle hooks. This integration will also bring EC2 Fleet functionality to services such as Amazon ECS, Amazon EKS, and AWS Batch that build on and make use of EC2 Auto Scaling for fleet management.

整完以後對於要省成本就更簡單了...

出租 GPU 的服務...

前陣子在「Rent out your GPU compute to AI researchers and make ~2x more than mining the most profitable cryptocurrency.」這邊看到的消息，服務網站是「Vectordash: GPU instances for deep learning」。

起因是搞計算的弄不到顯卡計算，而雲服務的 GPU 又太貴，所以再找方法解決... 結果注意到 cryptocurrency 計算的獲利與雲服務的 GPU 中間有不少差價，於是就弄出一個服務來媒合手上有顯卡與需要科學計算的人，一邊提供較高的獲利給本來在挖礦的人，另外一邊提供較低的價錢給需要科學計算的人。

目前支援的平台有限 (Nvidia 的顯卡，另外不支援 Windows，不知道是不是 Linux only)，其他支援目前都還沒列 ETA，不過感覺是個解決大家痛點的服務 (而且挖礦這邊就是在拼獲利)，應該有機會弄得很大...

繼續觀望... XD

Microsoft SQL Server 可以跑在 t2.large 與 t2.xlarge 了...

AWS 宣佈 Microsoft SQL Server 可以跑在 t2 系列的機器上了：「Amazon EC2 T2 instance types are now supported on Windows with SQL Server Enterprise」。

不過應該是因為記憶體限制，目前只開放 t2.xlarge (8GB RAM) 與 t2.2xlarge (16GB RAM) 上可以跑：

Windows with SQL Server Enterprise Edition is now available on t2.xlarge and t2.2xlarge instance types.

馬上可以想到的是測試環境，另外就是某些不能關機的內部系統，可以用離峰時間累積 CPU credit 之類的應用？