上週我們介紹Dell今年開始主推的儲存代管服務Apex Data Storage Services，接下來，繼續看他們另一個運用超融合基礎架構（HCI）來建構整合IT環境的代管服務，名為Apex Cloud Services，先前這套解決方案稱為Dell Technologies Cloud Platform（DTP）。
從名稱來看，兩者似乎差異不大，然而，Apex Cloud Services區分成Apex Private Cloud，以及Apex Hybrid Cloud，有了更明確的用途與定位差異。

這兩種解決方案底層的硬體設備都是Dell EMC長期發展的超融合基礎架構應用設備 VxRail，但上面搭配的系統軟體各為vSphere和VMware Cloud Foundation，均可延伸支援容器與Kubernetes。

而用戶在申租Apex Cloud Services時，也和Apex Data Storage Services一樣，可至Apex Console網頁管理主控臺，透過一連串的步驟指引，如同租用公有雲服務虛擬機器，可選擇合用的執行個體類型、共用儲存類型與容量，完成、提交IT資源訂單，之後Dell會進行規畫、組裝，再到用戶指定的自家資料中心、代管機房或邊緣運算區域，執行部署與建置。

https://www.ithome.com.tw/review/146890

ref: https://medium.com/swlh/quick-fix-sharing-persistent-disks-on-multiple-nodes-in-kubernetes-ef5541fd8376

這篇文章是 kubernetes 與 Storage 整合的經驗分享文，該文章包括了下列內容
Cloud Storage, NFS, Kubernetes, PV/PVC.

Kubernetes 內針對這些儲存相關的使用方式有
1. 使用 ephemeral 的儲存設備
ephemeral 只適合暫存資料使用，因為該儲存設備不是持久保存的，這意味 Container 如果重啟，資料就會消失。
2. 使用 Bind Mount 的方式將資料從節點掛載到容器中
就如同過往使用 Docker 時會使用 -v 的方式將同節點中的儲存目錄給掛載到容器中來使用。

基本上有任何永久性儲存的需求都會採用(2) 這個方式來處理，而目前很多 Cloud Provider 都有提供相關的儲存裝置讓你的 VM(k8s Node)
可以輕鬆存取與使用。

舉例來說，AWS 有 EBS， GCP 有 GPD，這類型的 Block Storage Device 本身支援動態掛載與卸載，所以就算 Kubernetes 將目標 Container 重新部署到
不同節點上也不需要擔心資料會不同，因為這些 Storage 可以隨者不同節點動態掛載上去，讓你的 Container 看到相同的資料。
但是以上兩個裝置都有一個限制，就是並不支援同時多人寫入的動作，於 Kubernetes 只能使用 Read/Write 模式。
這意味每個 Storage 同時只能有一個 Container 去進行讀寫操作(but Azure 的服務就沒有這個限制)

作者假設今天有一個服務底層是由三個元件組成，這些元件會需要針對相同一個資料集一起處理。
舉例來說有服務 A,B,C
A: 將資料寫入到儲存系統中
B: 從儲存系統中讀入資料進行二次處理，處理完畢再寫回去儲存系統中
C: 將資料從儲存系統中讀出並且供外部使用

上述情境簡單說就是一個儲存設備，會有三個服務同時想要讀取，一個專心寫，一個同時讀寫，一個專心讀。
這種需求就沒有辦法單純使用 EBS/GPD等裝置來使用，因此作者接下來就會針對如何使用 NFS 這套網路儲存系統來搭建一個符合上述需求的用法。
該解決方案流程如下
1) 透過 EBS/GPD 的方式掛載一個儲存空間到 k8s 節點中
2) 部署一個 NFS Server 的容器到 Kubernetes 中，該 NFS Server 會使用 EBS/GPD 作為其儲存空間的來源
3) NFS Server 透過 service 分享服務
4) 部署 PV/PVC 物件到 Kubernetes 中
5) A,B,C 三種容器透過 PVC 的方式來存取 NFS Server

因為 NFS 本身就是一個可多重讀寫的解決方案，作者透過這種方式讓多個應用程式可以同時讀寫，同時將這些資料保存到 EBS/GPD 的儲存空間中。
不過這種用法帶來的問題可能就是速度問題，從同節點直接存取變成透過網路存取，所以如果本身對於存取有非常高的頻寬需求時，使用這種解決方案也許會遇到
很難解決的瓶頸，畢竟大部分人的 k8s 叢集都是 data/control 兩種資料交雜於底層的網路架構中，沒有辦法將 data plane/control plane 給分開來。

有興趣看作者如何一步一步搞定上述流程的可以參考全文

Evergreen Storage 訂閱方案至今已服務超過2,700位客戶完成儲存設備升級不中斷，在過去五年內，該服務每年平均進行設備升級的次數已成長38%。

iPhone 13 發表會就在今晚！現在連平價版本 iPhone 13 都起始 128G 了？蘋果也太佛心了吧！
===========================
【小豪包膜 - 官方Line@】https://lin.ee/eh0ohxW
【小豪包膜 - 官方蝦皮】https://sho.pe/3jrnhr
=============小豪抽 iPhone13 四個連結==============
【小豪 - Siouhao 一】https://pse.is/3n6d5b
【小豪 - Siouhao 二】https://pse.is/3pakn8
【小豪包膜 - 光華店】https://pse.is/3nwkxr
【小豪包膜 - 桃園店】https://pse.is/3k2saw
===========================
阿康 IG & FB
IG：https://instagram.com/goodskang
FB ：https://www.facebook.com/goodskang/
===========================
想贊助阿康更多經費拍片可以這兩種方式
1.) 至阿康的蝦皮消費：https://sho.pe/3grd6p
2.) 加入頻道會員：https://www.youtube.com/channel/UCuQ7s6G50qzqgDbQB6qKDDw/join
===========================
拍攝器材：Sony a6400 + SEL18135, iPhone 12 Pro Max / iPhone 11 Pro, 智雲Smooth 4, GoPro Max
收音設備：RODE Wireless Go, 鐵三角 audio-technica AT9934, RODE VideoMicro, iPhone 12 Pro Max / iPhone 11 Pro 和 GoPro Max 內建
剪輯軟體：Final Cut Pro X
背景音樂：Epidemicsound, https://www.epidemicsound.com/referral/weo8gd/
===========================
影片企劃：阿康 Kang
影片攝影：阿康 Kang
後製剪輯：阿康 Kang
===========================
素材與資料來源 Source / Reference：
官網、Pexels (若有非我實拍）
https://rendersbyian.com
https://www.youtube.com/watch?v=zSq5Ru-wEZM
https://www.macrumors.com/2021/09/12/kuo-iphone-13-storage-capacities/
===========================
版權聲明：此影片若有採用任何素材，皆以幫助素材擁有者推廣為主，若有採用都會在影片敘述標注讓觀眾知道出處與來源，若版權擁有者對於附註或是其餘想法問題，還請讓我知道
Content / Right：All Material / Section / Pictures / in this video is 100% in order to help the source owners gain more exposure, all reference / credit is obviously attached in the description for viewers, any content that may be right-violated or unclear please feel free to let me know.
=========廠商專區==========
工商影片秉持公開、公正原則
所以我在影片內一定會提廠商 Sponsor 資訊
還請各位廠商大大乾爹乾媽們見諒囉！
===========================
合作邀約請寄：goodskang@gmail.com
或是也可到我的 Facebook & IG 私訊，可能會比較快收得到哦！
===========================
#iPhone13 #iPhone12 #蘋果發表會 #AppleEvent #iPhone13Pro

iPhone 13 才剛準備上市就流出 iPhone 14 的各種消息，你在猶豫今年要不要入手 iPhone 13 嗎？不如先來看看 iPhone 14 的規格吧！
===========================
【小豪包膜 - 官方Line@】https://lin.ee/eh0ohxW
【小豪包膜 - 官方蝦皮】https://sho.pe/3jrnhr
===========================
【小豪抽 iPhone13 】三個連結
小豪 - Siouhao 粉專 https://pse.is/3n6d5b
小豪包膜 - 光華店 https://pse.is/3nwkxr
小豪包膜 - 桃園店 https://pse.is/3k2saw
===========================
阿康 IG & FB
IG：https://instagram.com/goodskang
FB ：https://www.facebook.com/goodskang/
===========================
想贊助阿康更多經費拍片可以這兩種方式
1.) 至阿康的蝦皮消費：https://sho.pe/3grd6p
2.) 加入頻道會員：https://www.youtube.com/channel/UCuQ7s6G50qzqgDbQB6qKDDw/join
===========================
拍攝器材：Sony a6400 + SEL18135, iPhone 12 Pro Max / iPhone 11 Pro, 智雲Smooth 4, GoPro Max
收音設備：RODE Wireless Go, 鐵三角 audio-technica AT9934, RODE VideoMicro, iPhone 12 Pro Max / iPhone 11 Pro 和 GoPro Max 內建
剪輯軟體：Final Cut Pro X
背景音樂：Epidemicsound, https://www.epidemicsound.com/referral/weo8gd/
===========================
影片企劃：阿康 Kang
影片攝影：阿康 Kang
後製剪輯：阿康 Kang
===========================
素材與資料來源 Source / Reference：
官網、Pexels (若有非我實拍）
https://www.frontpagetech.com/2021/09/08/exclusive-a-closer-first-look-at-iphone-14/
https://rendersbyian.com
https://www.macrumors.com/2021/09/08/iphone-14-leak-jon-prosser/
https://www.macrumors.com/2021/09/09/iphone-13-fewer-storage-options-and-new-colors/
===========================
版權聲明：此影片若有採用任何素材，皆以幫助素材擁有者推廣為主，若有採用都會在影片敘述標注讓觀眾知道出處與來源，若版權擁有者對於附註或是其餘想法問題，還請讓我知道
Content / Right：All Material / Section / Pictures / in this video is 100% in order to help the source owners gain more exposure, all reference / credit is obviously attached in the description for viewers, any content that may be right-violated or unclear please feel free to let me know.
=========廠商專區==========
工商影片秉持公開、公正原則
所以我在影片內一定會提廠商 Sponsor 資訊
還請各位廠商大大乾爹乾媽們見諒囉！
===========================
合作邀約請寄：goodskang@gmail.com
或是也可到我的 Facebook & IG 私訊，可能會比較快收得到哦！
===========================
#iPhone13 #iPhone14 #iPhone12 #iPhone13Pro #iPhone13ProMax

iPhone 13 的發表會終於公告了！這是今年萬眾矚目的機種，所以帶大家看下週發表會有哪些東西囉！
===========================
別忘了設定提醒跟我一起看發表會哦：https://youtu.be/F12BEoexdNY
===========================
阿康 IG & FB
IG：https://instagram.com/goodskang
FB ：https://www.facebook.com/goodskang/
===========================
想贊助阿康更多經費拍片可以這兩種方式
1.) 至阿康的蝦皮消費：https://sho.pe/3grd6p
2.) 加入頻道會員：https://www.youtube.com/channel/UCuQ7s6G50qzqgDbQB6qKDDw/join
===========================
拍攝器材：Sony a6400 + SEL18135, iPhone 12 Pro Max / iPhone 11 Pro, 智雲Smooth 4, GoPro Max
收音設備：RODE Wireless Go, 鐵三角 audio-technica AT9934, RODE VideoMicro, iPhone 12 Pro Max / iPhone 11 Pro 和 GoPro Max 內建
剪輯軟體：Final Cut Pro X
背景音樂：Epidemicsound, https://www.epidemicsound.com/referral/weo8gd/
===========================
影片企劃：阿康 Kang
影片攝影：阿康 Kang
後製剪輯：阿康 Kang
===========================
素材與資料來源 Source / Reference：
官網、Pexels (若有非我實拍）
https://www.youtube.com/watch?v=zSq5Ru-wEZM
https://www.youtube.com/watch?v=Z5jLX0ah7fw
https://rendersbyian.com
https://www.macrumors.com/2021/09/07/apple-september-14-event/
https://www.gizmochina.com/2021/09/03/apple-iphone-13-pro-may-not-come-with-a-256gb-storage-variant/
===========================
版權聲明：此影片若有採用任何素材，皆以幫助素材擁有者推廣為主，若有採用都會在影片敘述標注讓觀眾知道出處與來源，若版權擁有者對於附註或是其餘想法問題，還請讓我知道
Content / Right：All Material / Section / Pictures / in this video is 100% in order to help the source owners gain more exposure, all reference / credit is obviously attached in the description for viewers, any content that may be right-violated or unclear please feel free to let me know.
=========廠商專區==========
工商影片秉持公開、公正原則
所以我在影片內一定會提廠商 Sponsor 資訊
還請各位廠商大大乾爹乾媽們見諒囉！
===========================
合作邀約請寄：goodskang@gmail.com
或是也可到我的 Facebook & IG 私訊，可能會比較快收得到哦！
===========================
#iPhone13 #蘋果發表會 #AppleEvent #AppleWatch7 #AirPods3 #M1XMacBookPro