天天看點

東方證券:破解億級影像資料存儲難題,攜手杉岩資料加速信創轉型

作者:杉岩資料
東方證券:破解億級影像資料存儲難題,攜手杉岩資料加速信創轉型

案例亮點

  • 基于國産化伺服器搭建分布式存儲叢集,相容國産化軟硬體,滿足信創需求。
  • 原有NAS、MinIO、FastDFS第三方開源存儲資料平滑遷移至杉岩海量對象存儲,保障業務的連續性和高可用。
  • 億級影像資料高性能讀寫,無性能瓶頸,保障毫秒級通路。
  • 豐富的協定接口,相容雲平台、備份産品和雲數倉等多個重要和一般業務系統。
  • 多站點容災部署,多個站點之間的資料自動同步,實作資料的異地備份,大大提高了資料的安全性。

客戶背景

東方證券股份有限公司(以下簡稱東方證券)是一家經中國證券監督管理委員會準許設立的綜合類證券公司,其總部設在上海,現有員工超7000人、總資産超過3200億、分支機構達177家,提供證券、期貨、資産管理、理财、投行、投資咨詢及證券研究等全方位、一站式專業綜合金融服務。東方證券于2015年及2016年先後于上海證券交易所、香港聯合交易所發行上市,成為行業内第五家A+H股上市券商。

東方證券:破解億級影像資料存儲難題,攜手杉岩資料加速信創轉型

近年來,伴随着網際網路金融的興起和金融科技的發展,證券行業的市場客戶和業務量不斷激增。業務資料體量的飛速增長在為企業發展提供強大驅動力的同時,也給資料的長期存儲、管理與使用帶來了更大的挑戰,對IT基礎設施的性能、靈活性、可靠性等提出了更高要求。

在機遇和挑戰并存的當下,東方證券始終秉承數字化轉型、科技與業務雙輪驅動融合發展的理念,在管理機制融合、業務場景賦能、技術架構深化等方面持續建設,全面推動數字化轉型。

億級影像檔案的存儲困擾和更新需求

在網際網路業務中,東方證券積累了海量開戶錄音、錄像資料、合同掃描件等檔案,需要長期保留并拒絕篡改,這些檔案平均大小隻有幾百KB,但近年來資料增長非常快,檔案總數高達億級。與此同時,業務的多樣性和遵循“雙錄”規範,要求多個系統要能快速調閱影像資料。這對底層存儲的性能、可用性、擴充性提出了更高要求。

東方證券:破解億級影像資料存儲難題,攜手杉岩資料加速信創轉型

東方證券目前使用NAS存儲和第三方開源存儲,在不斷增長的海量小檔案下,面臨容量受限、通路性能下降、資料遷移困難等一系列問題。是以,東方證券對新的存儲架構提出以下主要訴求:

  • 信創需求:伴随國家對資訊安全的高度重視及信創政策在證券行業的推動,東方證券啟動了基于信創環境的資訊系統建設,存儲架構需要支援國産化伺服器、私有雲平台等。
  • 存儲性能:影像資料量已達數億級别,預計後續還将随業務發展快速增長。現有的檔案存儲與開源對象存儲在面對海量小檔案時,容易出現性能瓶頸,要求新存儲高性能、高可靠、高可用。
  • 資料遷移:目前有多套系統需要使用存儲系統中的影像資料,且目前NAS存儲、FastDFS檔案系統和第三方開源存儲資料需要切換到新存儲,在存儲更新更替過程中,要求資料平滑遷移,保證業務的連續性和高可用。
  • 适配上層應用:新存儲要支援豐富的協定和接口,以對接雲平台、備份産品和雲數倉等。
  • 資料安全:實作不同地域的業務系統就近通路以及主資料中心的跨地域容災,同時對各分支機構資料設計災備方案,保證整個業務系統的資料安全性。

引入對象存儲技術,攜手杉岩資料更新IT基礎架構

存儲作為IT基礎架構的底座,關系到各類上層業務系統的安全、穩定、高效運作。是以,東方證券急需找到一個更好的解決方案,以便從根本上解決傳統存儲面臨的難題。基于對杉岩海量對象存儲(SandStone MOS)及其在證券行業多個成功案例的了解,東方證券将目光轉向了正在蓬勃發展的對象存儲技術,并最終選擇杉岩資料作為合作廠商,通過引入對象存儲技術,開啟存儲架構更新改造之路。

東方證券:破解億級影像資料存儲難題,攜手杉岩資料加速信創轉型

圖 東方證券基于杉岩海量對象存儲建設分布式存儲資源池

  • 全棧信創替代,滿足信創需求:在國産化伺服器上部署杉岩海量對象存儲軟體,全線産品相容國産化軟硬體,并支援國産化作業系統,滿足信創需求。
  • 更新對象存儲,性能大提升:替代原有NAS和開源存儲,存儲容量彈性擴充,同時性能随着節點數量的增加線性增長,保障毫秒級通路,滿足海量影像資料長期安全存儲需求。
  • 業務快速改造,資料平滑遷移,業務無感覺:杉岩資料幫助東方證券順利地進行業務改造,以支援對象存儲S3協定;将原有NAS存儲按照CSV資訊批量遷移至對象存儲,在保證資料一緻性的同時大大提高整體遷移效率,并将FastDFS檔案系統的資料平滑遷移;搭建臨時存儲空間,滿足業務正式上線前的資料臨時存儲需求。遷移過程中業務系統零感覺。
  • 豐富接口,業務系統快速接入:支援S3、NFS、SMB、FTP、CSI、HDFS等豐富的接口,實作雲平台、大資料平台、備份軟體等多種業務系統快速接入;可靈活對接SNMP和zabbix等運維監控系統,提高運維效率的同時保證存儲系統安全性。
  • 全面安全方案,為業務保駕護航:基于索引日志機制實作了多站點異步複制、總部分支機構彙聚分發,支援多站點智能DNS解析,可通過杉岩SandVision高效實作多站點多叢集統一監控管理,徹底解決了傳統方案成本高、運維複雜、方案厚重的問題,更新為一套運維便利、架構簡潔、高效靈活的非結構化資料保護解決方案。

支撐更多業務系統,加速IT基礎架構信創轉型

在數字化轉型浪潮下,東方證券克服了億級影像資料的容災備份難題,采用全新的對象存儲來取代傳統NAS存儲和第三方開源存儲,基于國産化伺服器搭建了多套存儲叢集,建構高可靠、高性能、彈性擴充、統一的存儲資源池;并實作現網存儲資料的平滑遷移,保證資料安全,保障了業務的連續性和高可用,實作業務的快速上線,是一次成功的信創實踐。

随着對包含杉岩海量對象存儲在内的杉岩大資料智能存儲系列産品的使用逐漸深入,東方證券已經充分認識到了對象存儲的優勢,并逐漸将其應用于更多業務系統,加速IT基礎架構更新和信創轉型。

繼續閱讀