天天看點

詳解IBM大資料應用五大方向

詳解IBM大資料應用五大方向

摘要:ibm全球副總裁王陽博士詳解ibm大資料應用的五大方向:探索大資料發現和業務相關的興趣點、全面了解客戶優化每次客戶互動、分析海量機器資料提高營運效率、利用it新技術從現有資料倉庫中獲得更多價值并降低成本、分析大資料所有類型和來源強化傳統安全方案。

ibm公司2013年中在北京正式釋出了puredata system for hadoop系統、新增blu加速技術的db2  10.5、物聯網資料分析平台messagesight以及定制watson (watson engagement  advisor)等最新的大資料技術,使得ibm的大資料解決方案在基礎架構、大資料平台、分析、行業及領域的解決方案以及咨詢和實施服務方面更加豐滿。ibm全球副總裁兼ibm中國開發中心總經理王陽博士在接受zdnet采訪時表示,通過整套大資料平台,ibm可以協助企業實作收叢集組合各種相關資訊,借助智能可視化平台來發現和探索資訊,通過分析、預測和自動化擷取更準确的答案,采取措施優化流程,提高分析性能,降低基礎架構複雜性和整體it成本,同時還可以很好地管理、治理和保護大資料資訊。

王陽表示,目前ibm的大資料應用主要針對五大方向:通過探索和挖掘大資料發現和業務相關的興趣點、通過全面了解客戶的360度視圖優化每次客戶互動、通過分析海量機器資料提高營運效率、通過利用it新技術從現有資料倉庫中獲得更多價值并降低成本、通過分析大資料所有類型和來源強化傳統安全方案。王陽還披露,從2012年開始的連續3年内,ibm計劃投資超過3億元用于大資料及分析的研發與推廣。

探索大資料發現和業務相關的興趣點

在探索大資料方面,ibm可以在在不給定假設條件,探索現有企業資料和内容之外的新資料資源的潛在價值;給定假設條件下,也可以挖掘業務需求相關資訊;通過關聯上下文中不同來源的資訊可以評估非結構化内容的商業價值;還可以使用可視化、算法和處理發現興趣模式。

王陽表示,中國氣象局通過部署新一代高性能計算機系統,可以支援未來十年短期天氣預測業務,以提供更多類型、更實時、更精準的氣象及氣候資訊服務。該系統采用了穩定性和擴充性高的ibm  puresystems 系統(超過 18,000 個 power7 核心)和容量超過4000tb的ibm存儲系統以及ibm  gpfs并行檔案系統等,在衛星資料測試環境中使用了ibm platform symphony /  hadoop應用,使中國氣象局的高性能計算機系統性能提升約50倍,高性能并行檔案系統容量提升約100倍。在測試環境中, 衛星圖像流資料處理速度  由原系統需要約幾天時間縮減至幾分鐘便完成。

王陽還告訴zdnet記者,ibm新推出的puredata for  hadoop系統能夠大幅提升企業部署hadoop的速度,同時降低部署難度。融合ibm專家經驗,新系統可以讓企業部署hadoop時的加載時間從數周減少到數分鐘,而且還為商業分析師和資料科學家提供易用、功能強大的分析工具、呈現可視化效果。此外,新系統還提供了功能更強大的大資料工具,可用于監測和研發,同時加強版的大資料工具可以與更多企業系統相相容。

全面了解客戶的360度視圖優化每次客戶互動

ibm的大資料方案可以幫助使用者嘗試整合内部資訊和外部資訊,進而建立互聯互通的客戶視圖,關聯和挖掘企業資料、主資料、呼叫記錄、  企業内容和新資訊源,進而獲得可采取行動的洞察。通過分析社交媒體和外部資料源,企業可以發現客戶對于産品和企業的評價觀點,進而優化每一次客戶互動。

王陽透露,中國移動某省級公司在新競争對手加入以及消費者從傳統手機演變至智能裝置、從2g/3g變為4g、話音服務演變為移動網際網路或資料服務等趨勢下,該公司需要強化商業智能及客戶關系管理系統以便分析高端客戶需求迅速制定市場政策,以提高客戶忠誠度,減少客戶流失成本。最終該公司采用了ibm  power 780伺服器、ibm  db2資料倉庫和congos報表分析應用的組合,有效分析了客戶需要,為消費者提供了貼心的優惠或增值服務,并提高了公司的arpu業務收入。

王陽還表示,ibm推出的watson engagement  advisor融合了大資料分析與ibm智慧商務的核心思想,使定制的watson系統能夠基于海量的知識庫儲備,幫助企業客服人員迅速提供回複,直接通過雲端運送服務、線上聊天或移動裝置送達客戶。通過一次簡單的點選,“ask  watson”應用就能夠快速地解決客戶的問題,發送回報或排除故障。

分析海量機器資料提高營運效率

王陽告訴zdnet記者表示,未來大資料的最大來源是來自物聯網上的機器自動産生的資料,企業需要在保證亞秒級延遲的前提下分析海量機器資料,以便在發生關注的事件時及時識别,并通過應用預測模型和規則在發生潛在的反常現象或出現機遇時及時識别,以整合營運企業的資料,進而實時了解服務水準、提升營運效率并避免服務降級或中斷。

據悉,fiserv公司為全球16000多家金融機構技術解決方案,該公司的電子票據支付系統采用了ibm power system、存儲、infosphere  family、  db2資料庫、congos和spss智能分析産品等大資料組合方案,每年處理大約200億次資料交易量及1萬億美元交易額,幫助了金融客戶提供了可信資料分析和洞察,并減少了客戶流失。

王陽表示,“ibm新推出的物聯網資料分析平台messagesight以資訊隊列遙測傳輸技術為基礎,能支援100萬台并發傳感器或智能裝置,消息處理量可擴充至每秒1300萬條。企業能夠通過該平台對移動端和傳感器發出的資料進行實時處理和內建,進而更加輕松便捷地搜集、和分析擷取洞察,驅動業務決策。”

利用it新技術為現有資料倉庫增值

目前很多企業已經部署了大量的資料倉庫,王陽表示,通過将流式傳輸和非結構化的資料源添加到現有的資料倉庫,可以優化資料倉庫存儲資源,在降低成本的同時,提供更好的查詢性能,并支援複雜的分析應用程式,利用預測分析和商業智能實作擴充實時決策。

王陽表示,關聯優勢通過部署ibm puredata for analytics、  cdc、datastage和congos等産品搭建的企業級資料平台,兼具了資料吞吐能力和資料整合能力,能夠應對分散在不同子系統中的tb級資料,為業務和産品團隊提供更加及時有效的資料支援和洞察。關聯優勢目前的報表生成時間縮短了一半,平均隻需要0.5位dba就可以完成運作puredata  for  analytics的全部工作,有效節約了it資源和it成本。此外,關聯優勢高度靈活的資料中心系統擴充能力也為企業戰略發展和it系統藍圖提供了有力保障。

王陽還透露,“ibm最新的db2  10.5新增了全新blu加速技術,可以将報告和分析速度提升8-25倍,還可節省10倍的存儲空間。blu是一個縮寫,該技術就是把行處理和列處理mapreduce的過程,可以使大資料加快在記憶體中的處理速度。”

分析大資料所有類型和來源強化傳統安全

王陽表示,大資料時代的資訊和資料的安全需求更加重要和緊迫。ibm可以通過分析大資料的所有類型和來源,增強傳統的安全解決方案,以防止罪案發生。“ibm能夠分析動态資料和靜止資料,找出關聯、發現事實并保持資訊的現行有效性;ibm還能夠通過分析網絡流量更快發現新的威脅、檢測已知的複雜威脅并實時采取行動;此外,ibm還可以通過分析電信和社交資料,收集犯罪證據,預防犯罪活動并主動地逮捕罪犯。”

據悉,某國内大型城市銀行采用了ibm puredata for analytics以及infosphere  guardium安全解決方案,在無需修改資料庫配置的前提下建立了企業資料庫安全基線,可以智能分析資料庫使用狀況,不僅可以随時根據要求生成特定報告并靈活修正企業安全政策,還可以自動化分發審計報告,為安全部門、審計部門、資料庫管理者及資料擁有部門定時提供報告。進而使該城市銀行滿足了立項時個人隐私和核心資料保護的需求,加快了該銀行内審部門以及應對外審的工作速度,建立起全行跨中心的資料安全保護企業級方案,滿足我國監管部門和行業指導法規,對于金融服務行業資料安全以及客戶個人隐私資訊的保護要求;并減輕了資料庫管理者對于系統維護、資料庫相關操作和吞吐量統計等人工工作,實作權責分離機制。

将在中國投資3億元進行大資料與分析研發和推廣

“自2010年以來,ibm的大資料客戶不斷增長,從過去的170個,增長到現在的1550個,全球合作夥伴的數量也增至400個。目前ibm已在全球9個城市裡建設全球大資料分析解決方案中心,擁有近9000名顧問和400名數學家。ibm還是全球最大的數學博士雇主。”王陽表示,“在中國,從2012年開始的連續3年内,ibm計劃投資超過3億元用于大資料及分析的研發與推廣。通過ibm中國開發中心,将ibm軟體在大資料、資訊管理、商業分析等相關領域的前瞻洞察和創新技術引入中國市場,幫助中國的政府和企業在大資料時代對于快速轉型和智慧成長的需求。”

<b>原文釋出時間為:2013-08-4</b>

<b></b>

<b>本文來自雲栖社群合作夥伴“大資料文摘”,了解相關資訊可以關注“bigdatadigest”微信公衆号</b>