數字化轉型案例：Club Factory如何用雲計算服務一億全球用戶群
Club Factory由中國公司嘉雲數據於2016年創建，是一家時尚、美容和生活方式的電子商務商店，總部位於浙江杭州。其產品有三個特點：非品牌、時尚和低價。為此，Club Factory整合了上百萬供應商，無需提前備貨。在Club Factory誕生前，嘉雲數據的主打產品為爆款易，這是一個SaaS數據智能平臺，幫助供應商根據工廠和庫存數據做出決策。
Club Factory定位於創新型出口電商、輕自營跨境電商平臺，上游已整合數千萬個SKU，下游則覆蓋27個國家和地區，其中超過10個國家APP購物榜單排名前5，14個國家排名前10。Club Factory平臺目前積累了1億多全球用戶群，其中8000多萬來自印度，躋身印度跨境電商平臺前列。在電商領域，Club Factory是少數可以用輕自營模式運營上千萬SKU的平臺。
用大數據連接供應端和消費端
嘉雲數據於2014年12月創立的爆款易(應用於供應鏈管理)很快成為了面向製造商的最大的數據分析平臺之一。擁有20多萬家工廠的庫存數據，藉助大數據找出爆款貨源，幫助供應商快速增加收益。2016年，嘉雲數據消費端產品Club Factory海外上線，用大數據AI服務平臺重構出海電商供應鏈。
現在，Club Factory已經完善了以零售業務為主的供應鏈管理系統，專注於個人和配對，基於人工智能算法向用戶推薦產品。其應用程序採用人工智能技術，實時比較各個製造商的價格，為客戶提供最低的產品價格。這有助於減少不必要的中間環節，降低成本。此外，Club Factory的SaaS產品可以為供應商提供生產相關建議，比如爆款商品的詳細信息以及用戶喜歡的設計方案等，降低滯留庫存和成本。
目前，Club Factory月活近億，包括訂單、交易、支付、大數據分析等在內的所有電商平臺服務均運行在AWS雲上。平臺日均實時流入15億級行為日誌，支撐80位工程師數據分析和算法需求。每天支撐約180個活躍數據分析調度任務，每天同步4000+業務數據表到數據倉庫，後者支撐的數據總量達到約600TB，每月新增約30TB數據。
圖1和圖2 分別是Club Factory基於AWS的數據架構示意圖和基於AWS的全站架構示意圖。Club Factory所使用的AWS服務包括Amazon Elastic Compute Cloud (Amazon EC2)、Amazon Simple Storage Service (Amazon S3)、 Amazon Virtual Private Cloud (Amazon VPC)、AWS Lambda、Amazon Elastic Container Registry (Amazon ECR)、Amazon Redshift、Amazon DynamoDB、Amazon Elasticsearch Service (Amazon ES)、Amazon ElastiCache、Amazon Relational Database Service (Amazon RDS)、Elastic Load Balancer (ELB)、Amazon Kinesis、Amazon CloudFront、Amazon CloudWatch、AWS Identity and Access Management (IAM)等。
圖1：Club Factory基於AWS的數據架構示意圖
圖2：Club Factory基於AWS的全站架構示意圖
完美適配跨境電商：AWS的"殺手鐧"
談到跨境電商平臺對雲平臺IT基礎設施的關鍵要求，在Club Factory看來，網絡、存儲和大數據分析非常重要。其他雲服務商無法滿足跨境電商的業務需求，而AWS則能夠提供一整套成熟、完善的解決方案。
遷移至AWS之前，Club Factory在海外使用的是其他雲服務商，其在海外的CDN佈局有所欠缺。起先，Club Factory使用Amazon CloudFront做CDN解析，發現和業務配合得很不錯，後來就將數據庫等服務遷移至AWS。在此基礎上，配合大數據分析業務，越來越多地使用AWS服務。圖3是Club Factory基於AWS的網絡架構示意圖，主要使用Amazon VPC網絡，大分區放在美國，前端基本在印度。通過AWS全球骨幹網絡，實現分區間類似本地內網的數據傳輸效率。由於AWS在印度區域接入了當地90%以上的運營商，所以本地用戶體驗非常好。
圖3：Club Factory基於AWS的網絡架構示意圖
談到存儲，馬金金指出，Amazon S3跨區域的同步功能令人印象深刻，可實現圖片的自動同步。目前，Club Factory的SKU已達兩三千萬，圖片存儲量近五千萬。Amazon S3的存儲空間是近乎無限量且用戶透明的，同時具備強大的寫入性能，並且完成寫入後，可在全球不同區域自動完成數據同步。在所有圖片發佈到Amazon S3時，Club Factory通過AWS Lambda實現圖片的實時自動裁剪，適應約8-9種不同終端的訪問規則，每週裁剪近一百萬張圖片。Club Factory團隊只需提供代碼，完全無需考慮後臺基礎設施，大幅減少運維和管理工作。
大數據分析方面，Club Factory主要基於AWS雲開展三方面工作：第一，個性化推薦。基於用戶在平臺上的所有行為做實時自主推薦；第二，BI報表，包括轉化率、DAU、用戶購買單價等信息按天計算呈現，高效輔助運營決策；第三，一些按不同時間間隔劃分的異步任務，比如以小時計的單量轉化率變化情況、流量變化等，監控整體線上業務運行。
目前，Club Factory藉助AWS數據湖理念與解決方案，解耦數據計算與存儲, 實現業務進行任意規模的擴展。Club Factory目前主要使用包括實時流數據服務Amazon Kinesis、數據同步工具DMS、ETL工具AWS Glue、Data Pipeline、數據倉庫Amazon Redshift、Amazon EMR集群等在內的整體AWS大數據產品體系，用到的服務覆蓋整個數據分析端到端處理流程，包括數據收集、存儲、分析以及使用。
所有原始數據都在Amazon S3中，一個單一的事實來源，不同的團隊可以用不同的分析服務或者技術，對同一份數據進行處理，比如BI用到數據倉庫Amazon Redshift Spectrum大規模並行對存在Amazon S3結構化和半結構化數據有效地查詢和檢索，而不必將數據加載到 Amazon Redshift表中，而批處理以及流處理場景會用到Amazon EMR，通過EMRFS直接對Amazon S3上的數據進行分析。
通過Amazon Kinesis，可以獲取業務日誌以及用戶點擊流等實時數據，即刻對收到的數據進行處理和分析並做出響應，無需等到收集完全部數據後才開始進行處理。
藉助AWS Glue的無服務器架構，降低ETL和操作層面的複雜度以及額外的工作量，同時也為新的分析技術提供前瞻性的擴展能力，比如AI。
馬金金認為，AWS的優勢是可以通過不同類型的產品服務排列組合充分滿足業務需求，這是其獨特的優勢。據瞭解，Club Factory數據分析團隊有十幾人，算法團隊20-30人，包括推薦算法、商品算法和供應鏈算法。此外，還有算法引擎這塊重要內容，將數據離線同步到Amazon Redshift後做數據分析，同時還將離線數據做索引後放在Amazon ES上，都會整體使用到AWS大數據服務。
零庫存、輕自營："人工智能+"技術創新
通過大數據AI服務平臺連接消費側與供應側，Club Factory現已實現了"人工智能+商品"、"人工智能+消費者"、"人工智能+供應鏈"的全方位技術創新：基於商品知識圖譜的商品管理系統，有效實現機器管理千萬量級的前端商品，克服傳統電商平臺賣家需手動上下架商品和更改商品價格的困難，實現實時的商品智能上下架和價格動態展示。海量豐富的商品數據，為用戶帶來了多樣的購物選擇的同時，提供了更多的感官體驗；基於海量用戶行為數據，搭建多維度立體清晰用戶畫像。用戶瀏覽和購買的商品越多，系統對用戶偏好就越瞭解。基於商品與用戶畫像建模，人工智能使得用戶非常便捷地在平臺上找到喜歡、適合自己的商品；人工智能系統有效地集成商品管理模塊、倉儲管理模塊、供應商管理模塊、用戶管理模塊、訂單管理模塊，通過匹配海外消費者需求，指導出口廠家的生產，大幅優化行業效率，降低行業市場成本30%以上。
智能推薦是Club Factory的核心特色。當用戶下單時，後臺會自動匹配一個"最優供應商"，綜合退貨率、入倉時效、商品質量等信息。對於用戶而言，一方面收貨時間更短，同時也能享受到相對實惠的價格。
使用AWS雲以後，馬金金總結了以下幾方面印象深刻的體驗和收益：
第一，支持自動化擴展，運維成熟度高。Club Factory現已實現將自己創建的自動化運維平臺與AWS API打通，AWS所有服務的操作都提供規範清晰的API，可以幫助我們進行自動化腳本控制，大大減輕運維壓力。尤其在電商大促、閃購等活動期間，平臺可以無縫地應對激增的QPS。
第二，本地化的支持服務。雖然Club Factory一直使用的是AWS海外的資源，AWS本地團隊則自始至終為Club Factory提供包含銷售、業務架構師、方案架構等在內的全方位支持服務，保證用戶的平臺使用體驗，第一時間滿足業務發展需求，避免走彎路。
第三，基於AWS雲的強大資源能力和豐富產品功能，Club Factory實現了與大量業務應用相結合，有針對性的優化。比如，印度區域和俄勒岡區域通過Amazon VPC的對等連接，中間網絡通過AWS骨幹網連接；以及Amazon VPC網絡和技術架構升級，Club Factory將整個導購鏈路的頁面加載時間優化到一秒左右，大幅提升前端用戶體驗，平均用戶停留時間增加了20%。
第四，充分支持業務的全球化快速擴張。Club Factory上線至今，整體業務已經擴張了幾十倍，運維人員卻只有3人，沒有專職的DBA。如果沒有AWS提供的穩定支撐，這一切無法想象。應用層面，Club Factory認為"數據服務離消費者越近越好"。AWS全球化的資源和產品能力可以提供充分保障。比如商品圖片信息的瀏覽，一方面通過Amazon S3自動同步到本地，同時也可通過CDN自動同步到離用戶最近的邊緣站點。
未來，Club Factory將嘗試通過AWS CloudFormation，實現在全球多區域、多站點複製部署，對流量進行更精細化的評估，充分適配自身全球化的業務發展戰略。同時，深化大數據服務應用，進一步提高效率，優化成本。"AWS雲服務是值得信賴的，能夠提供可靠、高可用的全球化部署，包括AWS數據庫與跨境電商全球庫存的業務特性無縫結合等。同時，AWS整體的配套服務非常完善，用戶體驗令人滿意。"馬金金總結道。
閱讀更多 黃兆敏 的文章
