亞太內(nèi)容分發(fā)大會暨CDN峰會一直致力于推動CDN產(chǎn)業(yè)深度融合發(fā)展和市場普及，現(xiàn)已成為亞太地區(qū)影響力最大的內(nèi)容分發(fā)網(wǎng)絡(luò)盛會。十年來，在以阿里云、網(wǎng)宿科技、騰訊云等亞太CDN產(chǎn)業(yè)聯(lián)盟成員孜孜不輟的努力下，CDN產(chǎn)業(yè)已經(jīng)成為基礎(chǔ)性設(shè)施網(wǎng)絡(luò)，以堅定的基石之姿，支撐起中國成為世界最大的互聯(lián)網(wǎng)市場。

隨著全球數(shù)字化、“一帶一路”戰(zhàn)略的推進(jìn)，亞太內(nèi)容分大會暨CDN峰會的影響力正在逐漸向全球延伸，同時也將中國智造CDN及產(chǎn)業(yè)鏈推廣向全球每一個角落。

在 6 月 10 日下午舉辦的【對象存儲論壇】，又拍云存儲技術(shù)負(fù)責(zé)人 黃勵博帶來了題為《又拍云存儲分層架構(gòu)實踐》的精彩演講。

黃勵博首先介紹了又拍云打造的以場景化服務(wù)為核心的跨云計算平臺業(yè)務(wù)，通過深度聚焦客戶的核心體驗，又拍云以場景化服務(wù)為核心，構(gòu)建了包括計算、存儲、網(wǎng)絡(luò)、安全在內(nèi)的跨云計算平臺。作為國內(nèi)知名的企業(yè)級云服務(wù)商，又拍云已為包括星巴克、快手、美團點評、華數(shù)傳媒等知名企業(yè)在內(nèi)的超 50 萬企業(yè)級客戶提供云服務(wù)，覆蓋音視頻、直播、電商、游戲、金融、廣電、在線教育、小程序等諸多行業(yè)，幫助企業(yè)用戶和開發(fā)者輕松實現(xiàn)穩(wěn)定、可靠、安全的云服務(wù)。

黃勵博表示，又拍云作為國內(nèi)最早提供云存儲服務(wù)的廠商，行業(yè)經(jīng)驗頗多，其提供的海量、安全、高可靠的面向非結(jié)構(gòu)化數(shù)據(jù)的云存儲服務(wù)，能夠滿足大數(shù)據(jù)、人工智能、物聯(lián)網(wǎng)背景下的數(shù)據(jù)傳輸、處理、存儲、分發(fā)與容災(zāi)需求，具有如下優(yōu)點：
穩(wěn)定可靠。數(shù)據(jù)多備份，跨數(shù)據(jù)中心存儲，熱門數(shù)據(jù)多個數(shù)據(jù)中心綬存，確保業(yè)務(wù)穩(wěn)定、持久可信；

簡單易用。設(shè)計簡單，保留 Linux、Windows 的使用習(xí)慣，Bucket 不限存儲容量，可自動彈性擴展；

數(shù)據(jù)安全。提供賬號級、Bucket 級、Object 級 ACL，數(shù)據(jù)中心具備 DDoS、CC 防護(hù)等能力，確保數(shù)據(jù)訪問安全；

靈活上傳。體現(xiàn)在上傳加速、下載加速、多種上傳方式，基于分布式加速網(wǎng)絡(luò)，上傳速度快，支持大流量并發(fā)上傳；

接入方便。支持?jǐn)?shù)據(jù)遷移、在線壓縮解壓縮和 FTP，讓云存儲接入和使用更簡單。

如此優(yōu)異的性能表現(xiàn)，得益于又拍云存儲服務(wù)采用的分布式架構(gòu)，使其不僅應(yīng)用場景廣泛，還降低了運營成本并合理利用了容量。黃勵博解釋道，該存儲架構(gòu)隨著靜態(tài)文件的不斷增加，為了降低 Web 服務(wù)器負(fù)載，可將靜態(tài)文件全部放在云存儲，從此無需考慮存儲容量及架構(gòu)升級。此外，還可以負(fù)載海量文件存儲，適用于圖片、音視頻、應(yīng)用安裝包等，配合 CDN 加速服務(wù)為互聯(lián)網(wǎng)應(yīng)用提供最佳體驗。在數(shù)據(jù)歸檔與備份功能方面，可以提供更具成本效益的集中備份方案。

一切的服務(wù)和升級都是為了滿足用戶的需求。又拍云的用戶類型主要分為存儲用戶、S3兼容用戶、CDN用戶。其中，廣大普通存儲用戶直接通過云存儲 AP SDK 等工具使用存儲服務(wù)，S3兼容客戶一般是海外客戶，CDN 用戶會把存儲源作為源站，作為文件緩存等。

在統(tǒng)一接入層，主要提供了分區(qū)，分片，路由等功能。分區(qū)主要是根據(jù)副本，性能，帶寬延遲等需求和文件搜索文件查找的一些特殊要求決定。分片主要是針對大文件，有提高并發(fā)數(shù)，減少延遲的作用。

路由當(dāng)然是根據(jù)以上這些需求，動態(tài)的選擇一個存儲集群來存儲和訪問。在存儲層通過 Unified Storage Api 來訪問，根據(jù)存儲數(shù)據(jù)的類型不同，分為 Metadata Storage，Block Storage，Event Storage，Metadata Storage 主要存儲對象存儲系統(tǒng)的元數(shù)據(jù)，類似 inode 信息，另外可以存儲少量 data，優(yōu)化減少首包延遲。元數(shù)據(jù)存儲層又細(xì)分為 Mysql、Hbase 和 TiKV，可參考下圖了解：

元數(shù)據(jù)存儲系統(tǒng)采用以上的開源服務(wù)，又拍云在此之上開發(fā)了一系列的代理服務(wù)。比如解決了 Hbase Rest Server 的對外訪問的安全性問題，同時可以統(tǒng)計相關(guān)請求，及時發(fā)現(xiàn)超時空洞等情況，及時觸發(fā)合并壓縮操作。

作為又拍云存儲服務(wù)的重要部分，又拍云數(shù)據(jù)片存儲系統(tǒng)根據(jù) Amazon Dynamo 論文實現(xiàn)，采用了 Quorum- Based 復(fù)制機制，實現(xiàn)寫 N 讀 1， 可以保證各個副本的一致性，節(jié)點間 Handoff 機制和副本間 Repair 機制保證了副本的數(shù)量和副本間的一致性，節(jié)點信息通過 Gossip 傳播。

涉及到存儲層 Event 采集系統(tǒng)的部分，黃勵博介紹道，Event Storage 分為 Kafka、NSQ 和 Redis 三個板塊。其中關(guān)于基于 Kafka 的存儲異步任務(wù)又細(xì)分為多個部分，例如遷移、優(yōu)化、垃圾回收、修復(fù)、過期、索引以及統(tǒng)計等。

又拍云 Event 存儲基于內(nèi)容優(yōu)化，支持內(nèi)容尋址冷熱遷移，副本遷移等存儲業(yè)務(wù)上保證消息只處理一次，極大提高了處理速率。而基于 NSQ 的存儲處理服務(wù)中，圖片處理、文檔處理和音視頻處理是云拍云存儲服務(wù)的重要內(nèi)容，這方面又拍云的優(yōu)勢在于實現(xiàn)支持優(yōu)先級隊列的 NSQ，方便定制功能，事件處理完成即可，不用保存到磁盤。

最后，黃勵博再次強調(diào)了又拍云對用戶的重視與技術(shù)投入，新十年，又拍云明確要打造以場景化服務(wù)為核心的跨云計算平臺，在相繼推出直播云服務(wù)、完善云存儲+CDN 一體化服務(wù)和推出容器云平臺后，又拍云將在音視頻、金融等更多的領(lǐng)域展開合作，繼續(xù)為幫助企業(yè)用戶和開發(fā)者輕松實現(xiàn)穩(wěn)定、可靠、安全的云服務(wù)而不懈努力。