天天看點

【雲栖号案例 | 網際網路】Ping++上雲 打造百萬級交易量的大資料平台

雲栖号案例庫: 【點選檢視更多上雲案例】 不知道怎麼上雲?看雲栖号案例庫,了解不同行業不同發展階段的上雲方案,助力你上雲決策!

公司簡介

我們是上海簡米網絡科技有限公司,旗下的聚合支付品牌Ping++ 是國内領先的第三方支付解決方案SaaS服務商。我們的Ping++ 産品成立于2014年4月,2016年初獲得由寬帶資本領投的千萬美元 B 輪融資。我們為零售、電商、O2O、教育、旅遊、SaaS 服務等衆多領域的商戶提供定制化支付解決方案,累計幫助15000多家商戶解決支付問題。

從安全可靠的聚合支付平台到簡單無憂的聚合支付雲服務,我們不僅極大地簡化了企業與移動支付管道和消費分期管道的對接過程,還将日常交易管理、賬務管理、大資料分析、多級商戶、使用者賬戶等功能內建到統一的管理平台。從支付接入、交易處理、業務分析到業務營運、大資料營銷,我們以定制化全流程的解決方案來幫助企業應對在商業變現環節可能面臨的諸多問題。

業務痛點

我們公司的Ping++産品通過搭建在雲端的支付處理平台,為商戶集中處理所需第三方支付管道的交易請求,并提供統一的SDK接口供商戶調用。當商戶的使用者發起交易時,就會調用這個SDK,此時這些資料記錄會存儲到資料庫中,包括時間、金額、管道等資訊。目前日交易筆數為百萬級,目前已經積累了海量交易資料。

如何在經過客戶授權的情況下利用資料為客戶賦能,并帶來額外附加價值,進而提高客戶黏性,我們亟需搭建可靠、穩定的大資料平台。在搭建大資料平台的過程中,存在以下挑戰:

  • 一站式大資料平台,可以幫助降低資料創新與創業成本,需同時具有存儲、計算、BI和機器學習等功能需求:

1.存儲:利用資料倉庫存儲海量支付訂單資料。

2.計算:批處理進行 ETL 資料清洗、統計彙總、資料分析。

3.BI:産出資料的監控名額,以圖形化方式反映資料品質和趨勢。

4.機器學習:各類場景下模型的訓練及預測。

  • 我們作為一個創業公司,前期盡可能以最低的成本去實作業務創新。但是,自己搭建符合上述4種所有要求的大資料平台,需要投入大量硬體投資、時間成本和人力成本。作為網際網路創業公司,唯快不破,需要跟時間賽跑,如何快速、高效、低成本的搭建大資料平台也是重要議題。
  • 安全是金融行業永遠的話題,作為網際網路支付服務提供商,我們非常重視大資料平台的安全性、穩定性和可靠性,并需要平台具有多角色多權限的賬戶體系。同時,我們使用嚴格的資料隐私保護機制,商戶的資料隻用于分析商戶自己的生意。

解決方案

我們圍繞積累下來海量的交易資料,主要基于阿裡雲數加平台進行以下業務場景創新:

  • BI營銷業務系統。基于使用者交易行為資料進行使用者畫像,在使用者畫像的基礎上提供精準營銷方案,在老客戶激活、提高客單價、潛客擷取、轉化率提升等方面對客戶賦能。
  • 内部監控。基于阿裡雲數加平台進行資料監控賦能内部管理,包括交易資訊彙總、異常交易提醒、資料品質分析等。
  • 資料源:來源于支付業務系統,分别使用了阿裡雲RDS、DRDS以及MongoDB,DRDS和RDS主要用來存儲使用者交易資訊,MongoDB主要用來存儲商品次元資訊。
  • 大資料平台:通過阿裡雲數加平台搭建,包含的元件及功能為:

1.大資料計算服務(MaxCompute ,原名 ODPS):用于資料倉庫。目前有包括原始基礎表、ETL 結果表、上層 ADM 應用資料集市表在内的共計 630+ 張資料表。

2.大資料開發套件(DataIDE):使用其中的 DAG 排程系統支撐每天例行化運作 140+ 個節點;利用提供的日志功能、報警機制、重跑補資料等多種工具進行運維工作;通過阿裡雲子賬号和數加平台的權限體系實作了多角色多權限的賬戶體系。

3.Quick BI:用于名額的圖表展示。目前有 10+ 張圖表以監控資料品質和輔助決策。

4.機器學習:利用提供的算法庫解決大資料量的圖模型問題、機器學習分類問題、文本分詞問題等。

相關産品

  • 大資料計算服務 · MaxCompute

MaxCompute(原ODPS)是一項大資料計算服務,它能提供快速、完全托管的PB級資料倉庫解決方案,使您可以經濟并高效的分析處理海量資料。

更多關于阿裡雲MaxCompute的介紹,

參見MaxCompute産品詳情頁

  • DataWorks

DataWorks是一個提供了大資料OS能力、并以all in one box的方式提供專業高效、安全可靠的一站式大資料智能雲研發平台。 同時能滿足使用者對資料治理、品質管理需求,賦予使用者對外提供資料服務的能力。

更多關于阿裡雲DataWorks的介紹,

參見DataWorks 産品詳情頁
  • Quick BI

Quick BI 專為雲上使用者量身打造的新一代智能BI服務平台。

更多關于Quick BI的介紹,

參見Quick BI産品詳情頁
  • 機器學習PAI

阿裡雲機器學習平台PAI(Platform of Artificial Intelligence),為傳統機器學習和深度學習提供了從資料處理、模型訓練、服務部署到預測的一站式服務。

更多關于機器學習PAI的介紹,

參見機器學習PAI 産品詳情頁

【雲栖号線上課堂】每天都有産品技術專家分享!

線上課堂位址:

https://yqh.aliyun.com/zhibo

立即加入社群,與專家面對面,及時了解課程最新動态!

【雲栖号線上課堂 社群】

https://c.tb.cn/F3.Z8gvnK

繼續閱讀