大數據、云計算、人工智能在今天看來早已不是什么新鮮事物，這些領域的快速發(fā)展推動著金融行業(yè)的不斷創(chuàng)新，比如在移動支付、互聯網銷售、生物識別認證、智能安全監(jiān)測、大數據分析授信、遠程開戶等業(yè)務方面全面推進，同時信息化系統(tǒng)中已不單單只是存儲著結構化的信息數據，比如金融行業(yè)各自的APP、多媒體終端、電話銷售、銷售行為可回溯的雙錄等方面都存在著大量的音頻、視頻、圖片、地理位置等非結構化的數據存儲需求。

　　業(yè)內專家和權威第三方調查機構普遍認為，海量數據時代已經到來。各類復雜數據中，85%以上是屬于廣泛用于信息網絡、物聯網、電子商務等場景中的非結構化數據。由于非結構化數據的特點，其數據量遠遠大于結構化的文件，金融行業(yè)已經面臨著數據存儲容量的大規(guī)模增長。許多企業(yè)用戶已經意識到軟件定義分布式存儲技術的重要性，基于我們在存儲領域多年的實施和應用經驗，今天有幸和大家分享我積累的一些經驗和見解。

　　元核云CEO 王凌云

　　元核云作為一家提供企業(yè)級軟件定義存儲的供應商，從這幾年合作的客戶(單一客戶存儲數量超40PB)以及實際案例中歸納出時下海量數據存儲情況的幾個特征：

　　1、數據體量巨大：簡單來講就是數據存儲單位已經從TB級發(fā)展為PB級;

　　2、數據類型繁多：比如用戶行為記錄、影像圖片、音頻、視頻、地理位置、文檔、日志等等;

　　3、商業(yè)價值高：數據收集后，進行有效統(tǒng)計分析帶來的商業(yè)價值極高，數據已經成為企業(yè)的核心競爭資產;

　　4、處理速度快：對于海量的數據，金融企業(yè)往往要求處理數據的速度必須得快，更快挖掘數據價值才可以創(chuàng)造更好的企業(yè)價值。

　　面對以上海量數據存儲特征，傳統(tǒng)的信息化存儲方式也面臨著巨大的挑戰(zhàn)：

　　1、高可靠性：數據對于任何一個行業(yè)來說都是企業(yè)的核心資產，對于金融行業(yè)來說更是重中之重，一切的業(yè)務都建立在數據的基礎之上。當數據最終存儲于硬件介質中，硬件隨著使用的時長增加，將面臨著設備故障、電器老化、自然損耗等問題。海量數據背景下，存在數量眾多的存儲硬件設備，當設備發(fā)生故障時，往往可能帶來數據的丟失或者需要長時間的數據恢復。這樣會給金融企業(yè)的業(yè)務開展帶來無法承擔的損失。

　　2、靈活可控性：從我們與金融公司合作的經驗來講，隨著數據的快速增長，實現快速擴容也成為滿足許多企業(yè)進一步發(fā)展的必然條件。虛擬化技術的發(fā)展使得計算資源得以池化，使得業(yè)務系統(tǒng)所需要的計算資源能夠按需分配，彈性擴展。同樣，企業(yè)也需要建立存儲的資源池，并能夠按需分配和動態(tài)增加存儲資源，滿足業(yè)務發(fā)展的需要。

　　3、高并發(fā)，低延遲的數據訪問方式：在海量數據的應用場景下，對于數據的使用方式，企業(yè)提出了更高的要求。面對著高密度數據運算、互聯網用戶的高并發(fā)訪問、實時數據分析、機器學習等多種應用場景，數據存儲系統(tǒng)必須要滿足更高并發(fā)的數據訪問，同時需要保證較低的響應時效。簡單來說，即是需要更為高效的性能表現。而傳統(tǒng)的NAS、SAN存儲已經有30多年的歷史，在其設計之初并非針對如此龐大數據量場景，因此會出現諸如文件索引緩存、服務器機頭等技術設計上的先天瓶頸。在海量數據存儲場景下，性能表現也會急劇下降。

　　4、數據使用方式變化：大規(guī)模海量數據應用場景下，隨著數據的應用方式多樣化，需要提供更細粒度的數據管理和使用方式，例如在近年來普遍提到的存儲即服務的思路，更推崇將數據存儲能力以服務的方式進行暴露，比如：對象存儲服務方式。這一方式能有效地降低數據使用方對存儲系統(tǒng)的深度耦合性。

　　而傳統(tǒng)存儲仍然普遍通過塊設備或文件系統(tǒng)的方式提供存儲能力，這就大大的限制了數據存儲的使用場景。同時由于塊設備和文件系統(tǒng)需要大量的初始化動作和對于客戶端的要求，也增加了長期數據運維的成本。

　　相對于傳統(tǒng)存儲，新一代的軟件定義的分布式存儲理念已被提出多年。與我們合作的企業(yè)都遇到了數據量的大規(guī)模增長情況，而分布式存儲技術正好能符合這些企業(yè)對于當下和未來大規(guī)模數據存儲的需求。

　　縱觀國際國內技術發(fā)展趨勢，軟件定義的分布式存儲技術已經成為越來越多金融企業(yè)IT管理者的選擇。

　　元核云正是專注于金融行業(yè)的軟件定義分布式存儲公司。其自主研發(fā)的元核云分布式存儲產品基于開源的Ceph軟件為架構核心，企業(yè)客戶不用再擔心被閉源產品所綁架。同時，該產品在Ceph的基礎上進行了深度優(yōu)化和完善。比如：我們在性能方面針對海量小文件場景、數據IO路徑、高速網絡、Crush算法進行了優(yōu)化;在安全穩(wěn)定性方面設計了故障自動隔離、防數據靜默損毀的數據自動校驗、數據智能恢復等機制;在管理方面研發(fā)了全新的智能運維管理平臺，支持跨數據中心多集群的統(tǒng)一管理，輕松擴容和規(guī)劃故障隔離域，監(jiān)控發(fā)現異常時郵件、短信、電話告警等運維功能。

　　目前元核云已經幫助中國平安、中國人壽、華潤集團、微眾銀行、招商金融等大型企業(yè)完成了分布式存儲技術的引入和轉型。擁有金融行業(yè)最大的Ceph存儲案例，支撐了千億級對象數據存儲和上萬個虛擬機運行，連續(xù)4年零故障穩(wěn)定運營記錄。

特別提醒：本網信息來自于互聯網，目的在于傳遞更多信息，并不代表本網贊同其觀點。其原創(chuàng)性以及文中陳述文字和內容未經本站證實，對本文以及其中全部或者部分內容、文字的真實性、完整性、及時性本站不作任何保證或承諾，并請自行核實相關內容。本站不承擔此類作品侵權行為的直接責任及連帶責任。如若本網有任何內容侵犯您的權益，請及時聯系我們，本站將會在24小時內處理完畢。