時間:2022-08-23 17:42:48
導(dǎo)語:在數(shù)據(jù)分析解決方案的撰寫旅程中,學(xué)習(xí)并吸收他人佳作的精髓是一條寶貴的路徑,好期刊匯集了九篇優(yōu)秀范文,愿這些內(nèi)容能夠啟發(fā)您的創(chuàng)作靈感,引領(lǐng)您探索更多的創(chuàng)作可能。
提出“五級”轉(zhuǎn)型戰(zhàn)略
盡管當(dāng)前很多企業(yè)都在積極采用大數(shù)據(jù)分析技術(shù)和解決方案來變革業(yè)務(wù)模式,提升企業(yè)的核心競爭力,但是很多企業(yè)都對自身的大數(shù)據(jù)項目并不滿意。全球領(lǐng)先的基準(zhǔn)研究和咨詢機構(gòu)Ventana Research的研究@示,79%的企業(yè)用戶不具備運用高級分析技術(shù)的必備技能。
姜欣介紹,今年Teradata通過《經(jīng)濟學(xué)人》雜志在全球所做的一個調(diào)研結(jié)果顯示,在大數(shù)據(jù)利用方面,企業(yè)主要存在以下三方面問題:第一,數(shù)據(jù)整合問題,57%的被訪企業(yè)認(rèn)為難以獲取重要的業(yè)務(wù)數(shù)據(jù);第二,數(shù)據(jù)應(yīng)用問題,42%的受訪企業(yè)認(rèn)為數(shù)據(jù)過于繁雜,應(yīng)用不夠友好;第三,數(shù)據(jù)治理問題,75%的受訪企業(yè)為因異構(gòu)數(shù)據(jù)而浪費時間感到困擾。
“我們目前推出的解決方案和技術(shù),就是為了解決以上三方面問題。”姜欣介紹說,為此Teradata提出了五級轉(zhuǎn)型戰(zhàn)略:
其一,堅定地走一體化數(shù)據(jù)分析平臺的道路,不斷完善一系列平臺產(chǎn)品,其中包括最近推出的Teradata IntelliFlex數(shù)據(jù)倉庫架構(gòu)和Teradata Aster大數(shù)據(jù)探索平臺
其二,全面向云轉(zhuǎn)型,支持私有云、公有云和托管云等多種部署方式,并在這種云生態(tài)下提供咨詢和開發(fā)部署服務(wù)。
其三,打造分析生態(tài)系統(tǒng),將統(tǒng)一數(shù)據(jù)架構(gòu)(UDA),以及Unity、QueryGrid和Listener等工具整合起來,形成一個大數(shù)據(jù)生態(tài),并在這個生態(tài)下提供咨詢和實施服務(wù)。
其四,從完全技術(shù)中立的角度為客戶提供大數(shù)據(jù)咨詢服務(wù),如大數(shù)據(jù)戰(zhàn)略規(guī)劃服務(wù)、敏捷開發(fā)咨詢服務(wù)、數(shù)據(jù)建模服務(wù)。
其五,堅持客戶至上而非產(chǎn)品至上,用多元化的產(chǎn)品全面滿足客戶需求,幫助客戶挖據(jù)數(shù)據(jù)價值。
由此可見,Teradata在大數(shù)據(jù)領(lǐng)域,除了不斷完善產(chǎn)品和技術(shù)以外,還不斷強化咨詢服務(wù)能力。
推出無邊界分析功能
作為Teradata多年的老客戶,瑞典最大的工業(yè)企業(yè)集團沃爾沃汽車公司從2006年開始建立數(shù)據(jù)分析平臺。一直以來,沃爾沃汽車公司面臨的一個問題,就是數(shù)據(jù)散布在超過30個系統(tǒng)中。公司的整合數(shù)據(jù)存儲庫和數(shù)據(jù)模型中,除了有客戶、經(jīng)銷商、車輛與車輛配置信息、質(zhì)保和故障診斷等數(shù)據(jù)外,還有很多外部數(shù)據(jù)。這些數(shù)據(jù)有結(jié)構(gòu)化數(shù)據(jù),也有非結(jié)構(gòu)化數(shù)據(jù)。
沃爾沃汽車公司亟須一個彈性好、敏捷性高的平臺來處理所有這些數(shù)據(jù)。為此,沃爾沃汽車公司部署了Teradata統(tǒng)一數(shù)據(jù)架構(gòu),將所有需要處理的數(shù)據(jù)全部整合起來進(jìn)行處理,從而解決數(shù)據(jù)孤島和數(shù)據(jù)治理混亂問題。在部署了Teradata統(tǒng)一數(shù)據(jù)架構(gòu)后,沃爾沃汽車公司構(gòu)建了全球統(tǒng)一的敏捷的數(shù)據(jù)驅(qū)動環(huán)境,從而可以借助可靠的數(shù)據(jù)分析結(jié)果降低運營成本,提高盈利能力和客戶滿意度;形成基于事實的決策機制和文化,使得公司更加開放和透明;有效支撐“數(shù)據(jù)創(chuàng)客”活動,員工和合作伙伴可以基于數(shù)據(jù)平臺開發(fā)數(shù)據(jù)產(chǎn)品。
沃爾沃汽車公司成功應(yīng)用Teradata統(tǒng)一數(shù)據(jù)架構(gòu)的案例,是Teradata新推出的無邊界分析功能的一個應(yīng)用典范。據(jù)悉,Teradata無邊界分析打破了過去在進(jìn)行數(shù)據(jù)分析時單一系統(tǒng)、單一技術(shù)分析的界限,突破時間、地點,以及所需數(shù)據(jù)和平臺的限制,幫助企業(yè)高效完成數(shù)據(jù)分析工作。
Teradata無邊界分析功能通過最新版本的Teradata QueryGrid軟件和可以自動協(xié)調(diào)多系統(tǒng)Teradata環(huán)境的Teradata Unity軟件來實現(xiàn)。其中,Teradata Unity軟件具有高可用性特點和工作負(fù)載分配功能,從而確保用戶在權(quán)限范圍內(nèi)可隨時訪問相關(guān)數(shù)據(jù)和分析。全新升級的Teradata Unity具有強大的跨系統(tǒng)功能,可進(jìn)一步消除分析環(huán)境界限。
電子專業(yè)制造服務(wù)公司偉創(chuàng)力公司數(shù)據(jù)與分析團隊主管森迪爾(Sendil Thangavelu)認(rèn)為,采用多個分析引擎來分析來自多個數(shù)據(jù)存儲庫的數(shù)據(jù)以獲得更全面、可視化的分析結(jié)果,將成為企業(yè)強化競爭優(yōu)勢的重要因素。“我們的Teradata數(shù)據(jù)管理環(huán)境已經(jīng)非常卓越,但我們一直還在尋找解決方案來提高我們的能力。Teradata的無邊界分析概念與我們的企業(yè)發(fā)展方向不謀而合。”森迪爾補充說。
推出快速分析咨詢服務(wù)
姜欣告訴記者,2015年年底,Teradata總結(jié)出了在新形勢下具有較強競爭力的新型企業(yè)――技術(shù)感知型企業(yè)。技術(shù)感知型企業(yè)應(yīng)具有敏捷平臺、行為分析、協(xié)同思維、自助應(yīng)用和自動決策五大核心能力。
姜欣表示,技術(shù)感知型企業(yè)對內(nèi)能夠提供數(shù)據(jù)洞察能力,實現(xiàn)數(shù)據(jù)驅(qū)動流程,提升運營的ROI;對外可以整合數(shù)據(jù)價值,創(chuàng)新數(shù)據(jù)盈利模式,實現(xiàn)信息運營。
但是,成為技術(shù)感知型企業(yè)并不容易。為了幫助客戶更加順利、快速地成為技術(shù)感知型企業(yè),Teradata還推出了Teradata RACE(快速分析咨詢服務(wù))和Teradata業(yè)務(wù)價值框架。據(jù)介紹,RACE是一套敏捷、技術(shù)中立的方法論,能夠幫助客戶在正式投資前了解分析解決方案的潛在業(yè)務(wù)價值。不僅如此,借助豐富的行業(yè)經(jīng)驗和專業(yè)的數(shù)據(jù)分析技術(shù),Teradata還可以幫助客戶將項目實施所需時間從數(shù)月縮短至6~10周。
據(jù)悉,作為Teradata RACE服務(wù)的核心,Teradata業(yè)務(wù)價值框架是Teradata從數(shù)千次與客戶成功合作中積累的豐富經(jīng)驗的結(jié)晶。該框架通過發(fā)現(xiàn)切實有用的分析解決方案,幫助客戶更快地從分析和數(shù)據(jù)技術(shù)投資中獲取回報。
值得一提的是,隨著物聯(lián)網(wǎng)傳感器數(shù)據(jù)等新型數(shù)據(jù)源的不斷出現(xiàn),新分析技術(shù)的不斷涌現(xiàn),用戶部署和應(yīng)用分析解決方案的難度越來越大。但依托適用Teradata業(yè)務(wù)價值框架詳盡的可視化信息,接受RACE服務(wù)的客戶可以在實施分析解決方案時,掌握清晰的路線圖,了解該項目在何時、以怎樣的方式帶來投資回報。
姜欣介紹,RACE方法包含三個主要階段:
第一階段,溝通(Align)。Teradata的分析業(yè)務(wù)咨詢顧問以業(yè)務(wù)價值框架作為出發(fā)點,幫助客戶發(fā)現(xiàn)最具潛在價值的業(yè)務(wù)案例,并對準(zhǔn)該業(yè)務(wù)案例開展工作,確認(rèn)支持該使用案例關(guān)鍵數(shù)據(jù)資產(chǎn)的可用性。
第二階段,創(chuàng)建(Create)。Teradata的數(shù)據(jù)科學(xué)家為選中的業(yè)務(wù)案例載入并準(zhǔn)備數(shù)據(jù),開發(fā)新分析模型或調(diào)整既有模型。本階段數(shù)據(jù)科學(xué)家會與業(yè)務(wù)發(fā)起人對方案進(jìn)行多次快速迭代,以確保分析結(jié)果能帶來預(yù)期業(yè)務(wù)效果。
第三階段,評估(Evaluate)。Teradata的分析業(yè)務(wù)咨詢顧問分析結(jié)果,評估部署分析使用案例的潛在投資回報率,并為客戶設(shè)計、部署方案。
Ventana Research高級副總裁兼研究主管大衛(wèi)(David Menninger)指出,企業(yè)對數(shù)據(jù)分析項目不滿的主要原因是相關(guān)技能短缺,而Teradata的業(yè)務(wù)價值框架將為企業(yè)提供所需技能和最佳實踐案例,幫助企業(yè)獲得豐碩的成果和可觀的投資回報。
大數(shù)據(jù)在2012年備受關(guān)注,主要是由需求和技術(shù)兩方面因素所決定的。在需求方面,一方面是因為企業(yè)在經(jīng)過一段時期的信息化建設(shè)后,積累了大量的數(shù)據(jù)資產(chǎn),迫切需要讓這些數(shù)據(jù)產(chǎn)生價值。另一個方面,海量非結(jié)構(gòu)化數(shù)據(jù)隨著社交網(wǎng)絡(luò)、移動應(yīng)用的普及而產(chǎn)生,如何分析這些非結(jié)構(gòu)化數(shù)據(jù)并使其產(chǎn)生價值,成為企業(yè)所面臨的新的挑戰(zhàn)。
在技術(shù)方面,內(nèi)存計算技術(shù)的成熟,使得企業(yè)實時分析海量數(shù)據(jù)成為可能。Hadoop技術(shù)的完善,為非結(jié)構(gòu)化數(shù)據(jù)分析提供了可能。
在大數(shù)據(jù)解決方案方面,不能不提軟硬件一體機。這兩年,具有簡化IT、降低IT運維成本優(yōu)勢的軟硬件一體機越來越受到供應(yīng)商和用戶的青睞。值得一提的是,當(dāng)前的軟硬件一體機中,很多都是大數(shù)據(jù)解決方案:最早推出軟硬件一體機的甲骨文公司的第一款軟硬件一體機產(chǎn)品Exadata數(shù)據(jù)庫一體機就與大數(shù)據(jù)相關(guān),甲骨文后來推出的Exalytics商業(yè)智能一體機和大數(shù)據(jù)一體機都是用于數(shù)據(jù)分析的;被SAP視為革命性的產(chǎn)品SAP HANA屬于內(nèi)存計算一體機,其最大的優(yōu)勢在于可實現(xiàn)海量數(shù)據(jù)的實時分析;IBM今年推出的PureSystem系列一體機中,就有PureData;微軟與惠普聯(lián)合推出的BI一體機,也是用于數(shù)據(jù)分析的……
盡管市場已經(jīng)非常火熱,但是當(dāng)前大數(shù)據(jù)市場應(yīng)該尚屬于啟動階段,因為大部分用戶對大數(shù)據(jù)僅僅有想法而沒有真正的行動,而他們對于大數(shù)據(jù)分析的需求是顯而易見的。相關(guān)的解決方案也有待完善,特別是針對非結(jié)構(gòu)化數(shù)據(jù)分析的解決方案。
IBM PureData
作為IBM PureSystems專家集成系統(tǒng)家族的新成員,PureData能夠幫助企業(yè)在幾分鐘內(nèi)完成對PB數(shù)量級大數(shù)據(jù)的管理和分析,高效獲取洞察力,從而實現(xiàn)企業(yè)市場、銷售等各部門業(yè)務(wù)目標(biāo)的快速推進(jìn),并幫助各行各業(yè)的企業(yè)解決幾大難題:如何利用更簡便、經(jīng)濟的方式分析業(yè)務(wù)數(shù)據(jù),了解客戶購買行為,減少客戶流失,開展需要大量數(shù)據(jù)支持的市場推廣活動以及實時發(fā)現(xiàn)欺詐行為。
不同于其他數(shù)據(jù)系統(tǒng),PureData能夠?qū)⑾到y(tǒng)安裝和配置的時間從24天減至24小時,將復(fù)雜的分析時間從數(shù)小時驟降至數(shù)分鐘,并實現(xiàn)在單個系統(tǒng)上管理100多個數(shù)據(jù)庫的卓越性能。通過PureData系統(tǒng),企業(yè)得以在傳統(tǒng)IT環(huán)境或云環(huán)境中為業(yè)務(wù)用戶提供高性能的數(shù)據(jù)服務(wù),在不到10天的時間里完成Web應(yīng)用的部署,而同樣的任務(wù)過去至少需要6個月才能完成。
針對特定工作負(fù)載,PureData共有三個型號,分別是PureData System for Transactions(PureData事務(wù)系統(tǒng)或PureData交易系統(tǒng))、PureData System for Analytics(PureData分析系統(tǒng))和PureData System for Operational Analytics(PureData運營分析系統(tǒng))。
目前,60多家ISV(獨立軟件供應(yīng)商)已經(jīng)表示將全力支持PureData。PureData將為這種開放的合作模式提供新的平臺,激勵更多合作伙伴開發(fā)適用于PureData的解決方案。同時,IBM還將在這些解決方案和應(yīng)用的基礎(chǔ)上推出數(shù)種新模式,涵蓋社交業(yè)務(wù)、資產(chǎn)管理和業(yè)務(wù)流程管理,全面簡化軟硬件資源的配置和管理,為20多個行業(yè)應(yīng)用領(lǐng)域提供支持。
IBM大數(shù)據(jù)平臺
IBM充分發(fā)揮其整合的優(yōu)勢,結(jié)合信息管理、業(yè)務(wù)分析等領(lǐng)先的軟件提出了“大數(shù)據(jù)平臺”架構(gòu),為各行業(yè)企業(yè)選擇和構(gòu)建大數(shù)據(jù)解決方案提供了全面的技術(shù)支持。IBM大數(shù)據(jù)平臺突破了傳統(tǒng)數(shù)據(jù)倉庫和數(shù)據(jù)管理理念,能夠為企業(yè)組織提供實時分析信息流和因特網(wǎng)范圍信息源的能力,讓這些企業(yè)實現(xiàn)更為經(jīng)濟、高效的大數(shù)據(jù)管理,并為在此之上的業(yè)務(wù)分析奠定堅實的基礎(chǔ)。
IBM大數(shù)據(jù)平臺的四大核心能力包括Hadoop系統(tǒng)、流計算、數(shù)據(jù)倉庫和信息整合與治理:
·IBM在Hadoop系統(tǒng)領(lǐng)域的代表產(chǎn)品是InfoSphere BigInsights。IBM將其在數(shù)據(jù)管理上的豐富經(jīng)驗與Hadoop開源平臺高效整合,使得BigInsights相比普通的Hadoop開源工具的可用性、可管理性、安全性得以大大提高,成為最主要的靜態(tài)大數(shù)據(jù)分析工具和平臺;
·IBM在流計算領(lǐng)域的代表產(chǎn)品是InfoSphere Streams,它是目前業(yè)界獨有的流數(shù)據(jù)處理技術(shù)。InfoSphere Streams能夠在諸如氣象信息、通信信息、金融交易數(shù)據(jù)的管理中動態(tài)捕捉信息,進(jìn)行實時分析,為靜態(tài)數(shù)據(jù)的處理提供有效補充。
·IBM在數(shù)據(jù)倉庫領(lǐng)域的代表產(chǎn)品是在線交易型數(shù)據(jù)倉庫InfoSphere Warehouse和分析型數(shù)據(jù)倉庫Netezza。Netezza可將大量數(shù)據(jù)整合到統(tǒng)一平臺上,計算能力高達(dá)TB級。
·信息整合與治理是IBM在業(yè)界獨有的方法論和技術(shù),其代表產(chǎn)品是Optim和Guardium。近期推出的Guardium 9能夠?qū)⑷鏒B2這樣的傳統(tǒng)關(guān)系型數(shù)據(jù)倉庫和基于Hadoop的分布式存儲系統(tǒng)進(jìn)行統(tǒng)一管理,并提供完整的數(shù)據(jù)生命周期管控。
微軟SQL Server 2012
微軟SQL Server 在市場上有著良好的口碑,是全球使用較為廣泛的數(shù)據(jù)庫與商業(yè)智能產(chǎn)品。微軟SQL Server提供了對混合IT環(huán)境的支持,全面支持私有云和公有云,并可實現(xiàn)平滑遷移,滿足企業(yè)實現(xiàn)數(shù)據(jù)庫以及應(yīng)用擴展的需要。
作為云就緒信息平臺,SQL Server能夠滿足企業(yè)關(guān)鍵業(yè)務(wù)應(yīng)用環(huán)境所提出的高穩(wěn)定性、高性能、高安全和易管理等需求,同時提供全面的商業(yè)智能及數(shù)據(jù)倉庫解決方案,幫助企業(yè)更好地挖掘數(shù)據(jù)背后的知識,提供強大的工具實現(xiàn)并展現(xiàn)數(shù)據(jù)分析結(jié)果,且能根據(jù)企業(yè)需要實施個性化的云以及大數(shù)據(jù)解決方案。
作為微軟的信息平臺產(chǎn)品,SQL Server在數(shù)據(jù)處理與分析市場一直處于領(lǐng)導(dǎo)地位。SQL Server是全面的數(shù)據(jù)庫、數(shù)據(jù)倉庫、商業(yè)智能解決方案。它不僅提供全面的滿足OLTP處理的功能,而且提供多種組件以滿足不同規(guī)模客戶的多種需求。它是第一個帶有商業(yè)智能全套組件的數(shù)據(jù)庫產(chǎn)品,在數(shù)據(jù)分析,特別是OLAP領(lǐng)域有著極好的口碑。
針對大數(shù)據(jù),SQL Server具有自己本地以及云端解決方案,與微軟強大的商業(yè)智能組件以及前端展現(xiàn)方式相結(jié)合。
國泰君安證券股份有限公司已經(jīng)借助微軟SQL Server 2012提升了數(shù)據(jù)分析能力,實現(xiàn)了對用戶的精準(zhǔn)服務(wù)與趨勢跟蹤。國泰君安是目前國內(nèi)規(guī)模最大、營業(yè)范圍最寬、機構(gòu)分布最廣的證券公司之一。基于以往使用 SQL Server 產(chǎn)品的良好經(jīng)驗,以及客戶數(shù)據(jù)建模、多維分析與鉆取、動態(tài)報表分析與展現(xiàn)等領(lǐng)域的應(yīng)用需求,國泰君安選用微軟 SQL Server 2012來搭建新一代的零售客戶BI分析系統(tǒng)。國泰君安充分利用新一代 SQL Server提供的對大數(shù)據(jù)量的數(shù)據(jù)分析及計算能力,結(jié)合Power View及PowerPivot 的易用性,更高效、更自主地發(fā)現(xiàn)業(yè)務(wù)數(shù)據(jù)的變化及趨勢,提高針對零售客戶的業(yè)務(wù)洞察力,優(yōu)化以客戶為中心的證券服務(wù)。
SAP實時數(shù)據(jù)平臺
SAP實時數(shù)據(jù)平臺是一套緊密集成并優(yōu)化,專為應(yīng)對當(dāng)今企業(yè)數(shù)據(jù)管理的最新挑戰(zhàn)的領(lǐng)先技術(shù)平臺。
憑借革命性的創(chuàng)新產(chǎn)品SAP HANA與業(yè)界領(lǐng)先的Sybase數(shù)據(jù)管理產(chǎn)品,SAP實時數(shù)據(jù)平臺這套全方位集成、實時處理的平臺,在包括數(shù)據(jù)交易、遷移、存儲、處理和分析等在內(nèi)的信息生命周期的不同階段,不僅能夠幫助企業(yè)用戶管理海量數(shù)據(jù)存儲,即時處理高速流量數(shù)據(jù),實現(xiàn)智能數(shù)據(jù)流動,數(shù)據(jù)可視化消費,而且還可以幫助用戶大大降低基礎(chǔ)架構(gòu)的復(fù)雜性,在滿足應(yīng)用基本的設(shè)計和藍(lán)圖管理需求的同時,為下一代大數(shù)據(jù)應(yīng)用和分析提供卓越性能,持續(xù)保證對云計算和移動應(yīng)用的平臺支持,從而有效降低成本。
值得一提的是,所有這些平臺功能的交付,都將在盡可能不影響客戶現(xiàn)有應(yīng)用的前提下進(jìn)行。
作為SAP實時數(shù)據(jù)平臺的核心,SAP HANA獨具創(chuàng)新性,并已得到市場的充分驗證。SAP HANA不僅能幫助客戶以快10萬倍的速度獲取和傳遞信息,還將為企業(yè)信息系統(tǒng)提供強勁動力,通過技術(shù)創(chuàng)新促進(jìn)業(yè)務(wù)發(fā)展,最終幫助企業(yè)以全新的思路拓展業(yè)務(wù),達(dá)成卓越績效。
Teradata Aster大數(shù)據(jù)綜合分析平臺
Teradata Aster大數(shù)據(jù)綜合分析平臺是業(yè)內(nèi)首款集成Teradata Aster以及Apache Hadoop的大數(shù)據(jù)解決方案,整合了MapReduce和Hadoop的技術(shù)優(yōu)勢。
作為卓越的企業(yè)級平臺,Teradata Aster大數(shù)據(jù)綜合分析平臺使用了業(yè)內(nèi)獨有的SQL-MapReduce接口語言,以及全面的MapReduce 分析功能庫。該分析庫內(nèi)嵌50多項預(yù)建的MapReduce功能,提供開箱即用的圖形、文本、行為、營銷分析,以及更多分析功能。
作為一個真正采用混合架構(gòu)的平臺,Teradata Aster大數(shù)據(jù)綜合分析平臺包含Aster Database、Aster SQL-MapReduce和Apache Hadoop。由于深度集成了Aster與Apache Hadoop平臺,用戶無需接受復(fù)雜的培訓(xùn)即可通過SQL-H連接器和SQL-MapReduce使用標(biāo)準(zhǔn)SQL訪問Aster和Hadoop數(shù)據(jù)進(jìn)行分析平臺。
與市場上其他典型平臺相比,該平臺的數(shù)據(jù)吞吐量及分析速度可分別提高19倍及35倍。
Oracle Exadata X3 Database In-Memory Machine
Oracle Exadata X3 Database In-Memory Machine是Oracle Exadata數(shù)據(jù)庫云服務(wù)器的最新升級產(chǎn)品。
Oracle Exadata X3 Database In-Memory Machine是甲骨文云平臺的關(guān)鍵組件。Oracle Exadata X3-2和X3-8 Database In-Memory Machine均可在閃存和隨機存儲器(RAM)中存儲多達(dá)數(shù)百TB的壓縮用戶數(shù)據(jù),幾乎可以消除由磁盤驅(qū)動器減速而產(chǎn)生的讀\寫功能運維費用,從而使Exadata X3系統(tǒng)成為應(yīng)對云計算中不同類型和不斷變化的工作負(fù)載的理想數(shù)據(jù)庫平臺。
為了以最低成本實現(xiàn)最高性能,Oracle Exadata X3 Database In-Memory Machine采用了多個存儲層次,可自動將所有活動數(shù)據(jù)轉(zhuǎn)移到閃存和隨機存儲器中,同時將活動性較低的數(shù)據(jù)保留在低成本的磁盤上。
面對中國大數(shù)據(jù)市場的蓬勃發(fā)展和實際需求,IBM不斷加大對中國市場的投入,以領(lǐng)先的大數(shù)據(jù)與分析技術(shù)促進(jìn)大數(shù)據(jù)在零售、銀行、電信、醫(yī)療、制造和互聯(lián)網(wǎng)等諸多行業(yè)落地,這與企業(yè)對大數(shù)據(jù)應(yīng)用的熱情形成良性互動,加速了最有說服力的、實打?qū)嵉摹鞍咐钡南群笥楷F(xiàn)。
實踐時代到來
“數(shù)據(jù)是競爭資源”、“細(xì)分市場越小,對數(shù)據(jù)的需求越大”,這些觀念已經(jīng)逐漸深入人心,大數(shù)據(jù)在證明其對企業(yè)的重要性和必要性后,走進(jìn)了“榜樣就是力量”的實戰(zhàn)階段——展望全球,IBM大數(shù)據(jù)與分析在全球的客戶數(shù)已經(jīng)突破3萬家。
談到中國的大數(shù)據(jù)市場,IBM全球副總裁兼大中華區(qū)軟件集團總經(jīng)理胡世忠表示:“IBM大數(shù)據(jù)與分析業(yè)已邁進(jìn)‘中國實踐階段’。中國的人口和經(jīng)濟規(guī)模決定了中國具有全球最大的大數(shù)據(jù)規(guī)模,同時也意味著中國的大數(shù)據(jù)與分析解決方案比其他國家更具創(chuàng)新性。另外,中國經(jīng)濟發(fā)展面臨的諸多挑戰(zhàn)需要大數(shù)據(jù)這種創(chuàng)新方式提供更好的解決方案,這一巨大的需求在客觀上為中國提供了廣泛的大數(shù)據(jù)實踐機會。我們相信,對于大數(shù)據(jù),中國面臨前所未有的機遇,有望在這一領(lǐng)域引領(lǐng)全球技術(shù)發(fā)展趨勢。”
要落地,如何降低大數(shù)據(jù)分析成本、降低部署難度、提高分析速度是大數(shù)據(jù)應(yīng)用無論如何也逃避不了的難點,也是企業(yè)最頭疼的關(guān)鍵點。IBM從這三點入手,實際效果不辯自明。
青島銀行以PureData for Transactions專家集成系統(tǒng)支持公司數(shù)據(jù)中心建設(shè),以整合的專家能力賦能大數(shù)據(jù),支持公司數(shù)據(jù)中心建設(shè),建立了高可用、高性能、簡單、易于安裝、簡化運維、能夠為青島銀行新柜面業(yè)務(wù)和其他重要交易業(yè)務(wù)提供可靠的數(shù)據(jù)平臺系統(tǒng)。
安聯(lián)全球救援(中國)對原有的數(shù)據(jù)分析和報告系統(tǒng)進(jìn)行升級,利用IBM Cognos 10業(yè)務(wù)分析技術(shù)和解決方案來全面支持“安聯(lián)全球救援業(yè)務(wù)分析智能系統(tǒng)”,從而更好地管理和運營自身的數(shù)據(jù)庫,提高服務(wù)和運營水平,將更有價值的業(yè)務(wù)分析和預(yù)測提供給企業(yè)級汽車客戶。
安聯(lián)全球救援(中國)首席運營官金卡羅(Giancarlo Scupino)表示:“IBM大數(shù)據(jù)分析將我們的業(yè)務(wù)分析能力提升到了一個新的高度,使我們不再局限于過去簡單的人工數(shù)據(jù)統(tǒng)計,而是對數(shù)據(jù)進(jìn)行了更高層次的總結(jié)和分析。”
技術(shù)的力量
支持這諸多應(yīng)用成功落地的正是IBM在大數(shù)據(jù)和分析領(lǐng)域的不斷努力和層出不窮的新產(chǎn)品。正如IBM全球副總裁兼IBM中國開發(fā)中心總經(jīng)理王陽所描述的:“如果你想要走進(jìn)大數(shù)據(jù)時代,IBM會給你帶來強有力的武器,以產(chǎn)品和解決方案幫助你來實現(xiàn)大數(shù)據(jù)時代的勝利。”
“IBM創(chuàng)新的大數(shù)據(jù)技術(shù)和解決方案,能夠?qū)崿F(xiàn)數(shù)據(jù)的快速挖掘與分析,幫助企業(yè)更加高效地獲取大數(shù)據(jù)價值,從而深化客戶關(guān)系,規(guī)避風(fēng)險和詐騙,快速尋找新的業(yè)務(wù)機遇,提升業(yè)務(wù)表現(xiàn)。” IBM大中華區(qū)系統(tǒng)與科技事業(yè)部技術(shù)總監(jiān)李永輝了IBM大數(shù)據(jù)與分析新產(chǎn)品及實現(xiàn)路線圖。
一體化方案確保信息回報
一項由惠普主導(dǎo)的調(diào)查表明,亞太地區(qū)60%的受訪企業(yè)表示今年將把至少10%的IT創(chuàng)新預(yù)算用于大數(shù)據(jù),而在中國這一數(shù)字為56%。三分之一的亞太地區(qū)和中國受訪企業(yè)還堅信,大數(shù)據(jù)是其最大的差異化競爭優(yōu)勢。然而,調(diào)查卻發(fā)現(xiàn),近一半的亞太地區(qū)受訪企業(yè)所實施的大數(shù)據(jù)計劃都失敗了,而在中國,這一數(shù)字為55%。很顯然,大數(shù)據(jù)中蘊含著巨大的商業(yè)價值,然而駕馭大數(shù)據(jù)不是一件容易的事,并不是所有企業(yè)都具備像Google一樣“玩轉(zhuǎn)”數(shù)據(jù)的基因與技術(shù)儲備。許多行業(yè)除了需要做好大數(shù)據(jù)思維上的轉(zhuǎn)變之外,還需要有不同工具來進(jìn)行大數(shù)據(jù)的處理與分析。
通過對收購的Vertica、Autonomy、ArcSight等產(chǎn)品進(jìn)行優(yōu)化整合,惠普在融入Hadoop等大數(shù)據(jù)技術(shù)的基礎(chǔ)上打造了大數(shù)據(jù)分析平臺HAVEn。“HAVEn平臺提供了大量的應(yīng)用開發(fā)接口(API),惠普希望通過HAVEn與合作伙伴共同打造一套完整的大數(shù)據(jù)分析生態(tài)系統(tǒng),讓更多應(yīng)用解決方案落地到行業(yè)。它可以充分利用惠普的分析軟件、硬件和服務(wù),創(chuàng)建新一代為大數(shù)據(jù)準(zhǔn)備的分析應(yīng)用和解決方案。” 惠普公司軟件集團大中華區(qū)總經(jīng)理于志偉表示,“同時,HAVEn平臺還支持各種主流硬件平臺,為客戶提供最佳的投資回報(Return On Investment)與信息回報(Return On Information)。”
不只是軟件平臺
“HAVEn”這個名字實際上來源于其各個組件的首字母,即Hadoop(HDFS)、Autonomy、Vertica、Enterprise Security以及nApp(行業(yè)解決方案)。可以看出,HAVEn平臺實際上是一個惠普大數(shù)據(jù)產(chǎn)品的組合。實際上,HAVEn解決方案中除了包含此前提到的四方面內(nèi)容外,還支持Hadoop這樣通用的技術(shù),而且是“雙向集成”。同時HAVEn并不是一個孤立的軟件產(chǎn)品,而是更多軟、硬件產(chǎn)品的服務(wù)能力的體現(xiàn)。“HAVEn不只是一個軟件平臺,更是一個生態(tài)環(huán)境。”于志偉表示。
面對新互聯(lián)網(wǎng)時代技術(shù)大潮的挑戰(zhàn), 企業(yè)決策者的迫切需求是:如何洞察其最終用戶的需求,并找到自身的轉(zhuǎn)型契機。尤其是那些面對大數(shù)據(jù)、云計算、移動互聯(lián)網(wǎng)、社交和O2O等新技術(shù)形式挑戰(zhàn),創(chuàng)新和轉(zhuǎn)型節(jié)奏快的行業(yè),比如零售行業(yè)。
IBM中國客戶中心對客戶體驗的設(shè)計,既兼顧企業(yè)高層決策者 (CXO,CEO、C M O、C I O等)所面臨的挑戰(zhàn),又結(jié)合決策者所面對的最終消費市場的需求,讓決策者在體驗中洞察最終用戶的需求和自身的轉(zhuǎn)型的之道。
例如,在智慧企業(yè)之旅的零售創(chuàng)新的展示中,物理數(shù)字融合解決方案展示了零售商如何利用門店渠道獲取的客戶可公開的行為數(shù)據(jù),從而提高其運營績效和客戶服務(wù)水平。 零售商還可以結(jié)合店內(nèi),線上和社交輿情分析等方式對客戶信息深度分析,勾勒360度客戶視圖并為其提供個性化的購物體驗,從而提升客戶忠誠度。
此外,IBM基于交互式的客戶選車體驗允許客戶通過體感,與汽車3D模型進(jìn)行信息交互,選擇汽車不同的顏色,款式及配件等。同時,還可以通過手勢識別進(jìn)入汽車3D模型,了解汽車內(nèi)飾及模擬汽車啟動。 進(jìn)而增強客戶體驗,以便捷地選擇最適合自己的車型。
基于Watson的零售應(yīng)用則是利用IBM Watson針對人類自然語言的意義和語境分析能力,能快速地處理海量的非結(jié)構(gòu)化數(shù)據(jù)并實時地進(jìn)行分析的能力實現(xiàn)的。它能夠快速挖掘和識別客戶在社交媒體的需求,針對客戶推送個性化定制的服務(wù)和購買意見。
據(jù)了解,為了更好的重新塑造碧浪在數(shù)字世界中的形象,徹底從之前的"微創(chuàng)新"解決方案策略轉(zhuǎn)為"顛覆式"創(chuàng)新的滿足式需求策略的轉(zhuǎn)變,碧浪需要一家對數(shù)字營銷戰(zhàn)略有足夠創(chuàng)新,思維更加顛覆和突破的商來協(xié)助其完成任務(wù)。針對碧浪的需求,基于對品牌、用戶的充分理解與認(rèn)識,從品牌特性和用戶關(guān)聯(lián)的角度出發(fā),時趣采用數(shù)字化營銷推廣的策略,以創(chuàng)意設(shè)計為輔助配合手段,為碧浪洗衣液制定了精準(zhǔn)匹配不同用戶屬性的活動策劃及推廣運營的營銷解決方案。
本次碧浪攜手時趣是因為,時趣一向重視在數(shù)字營銷領(lǐng)域?qū)π律虣C的把握,具有豐富的數(shù)字營銷整合服務(wù)能力和經(jīng)驗,能夠為合作伙伴提供全方位的服務(wù)支持;另一方面,時趣團隊擁有高效的執(zhí)行能力,為碧浪提供高質(zhì)量的服務(wù),對客戶的需求能夠做到快速響應(yīng)。這也再次證明,時趣借助大數(shù)據(jù)分析平臺,可以深入洞察出消費者需求,能夠為客戶提供更加全面、精準(zhǔn)、前瞻性的數(shù)字化支持。并且可以為客戶提供成熟的產(chǎn)品,能夠做到廣告、運維、軟件的整體搭配實現(xiàn)社交數(shù)字營銷的整體需求。
碧浪相關(guān)負(fù)責(zé)人表示,在簡短的2-3次溝通過程中,時趣展現(xiàn)了非常強的對數(shù)字營銷的戰(zhàn)略思維和不同尋常思路的出色創(chuàng)意能力,不僅能夠迅速把握住碧浪品牌精神,為產(chǎn)品建立高端、科學(xué)的形象,并且為碧浪提供了清晰的數(shù)字營銷策略,極具創(chuàng)意的高質(zhì)量多形式內(nèi)容傳播內(nèi)容,以及極具消費者深刻洞察整合媒介平臺策略。
大數(shù)據(jù)時代,豐富的數(shù)據(jù)和管理技術(shù)給人們帶來諸多便利的同時,也給國家信息安全帶來日益嚴(yán)峻的挑戰(zhàn)。今年3月29日,奧巴馬政府投資2億美元啟動“大數(shù)據(jù)研究和發(fā)展計劃”,旨在增強收集海量數(shù)據(jù)、分析萃取信息的能力,保障美國國家信息安全。
“十二五”時期是我國全面推進(jìn)經(jīng)濟和社會信息化的關(guān)鍵時期,國家信息安全尤為重要。在大數(shù)據(jù)應(yīng)用環(huán)境下,若國產(chǎn)數(shù)據(jù)庫不能滿足用戶在數(shù)據(jù)管理、數(shù)據(jù)分析、數(shù)據(jù)挖掘等方面的需求,用戶則只能選擇國外廠商的產(chǎn)品,這將對國家信息安全構(gòu)成重大隱患。
保障大數(shù)據(jù)時代的國家信息安全,打造大數(shù)據(jù)中心一站式解決方案是必要手段。近兩年來,IBM、Oracle、SAP等國際IT巨頭先后共花費超過15億美元收購數(shù)據(jù)管理和分析相關(guān)廠商,以應(yīng)對大數(shù)據(jù)的挑戰(zhàn)。在此背景下,作為國產(chǎn)數(shù)據(jù)庫企業(yè),人大金倉同樣緊跟國際行業(yè)趨勢,收購專注于商業(yè)智能領(lǐng)域的廣州思邁特公司。思邁特公司專門從事商業(yè)智能產(chǎn)品的研發(fā),其核心產(chǎn)品Kingbase SmartBI商業(yè)智能應(yīng)用平臺能夠?qū)崿F(xiàn)數(shù)據(jù)預(yù)處理(ETL)、儀表盤、靈活查詢業(yè)務(wù)報表、多維數(shù)據(jù)分析、數(shù)據(jù)挖掘、GIS展現(xiàn)、元數(shù)據(jù)管理等功能,并支持iPad/iPhone等移動終端展現(xiàn)。此外,該團隊還提供面向行業(yè)深入分析的商業(yè)智能解決方案,旨在幫助用戶深層次地發(fā)現(xiàn)和挖掘數(shù)據(jù)價值進(jìn)而轉(zhuǎn)化成商業(yè)價值。
打造端到端的大數(shù)據(jù)解決方案
當(dāng)下,物聯(lián)網(wǎng)、終端設(shè)備、移動通信等,產(chǎn)生了大量的數(shù)據(jù),這些數(shù)據(jù)有些是結(jié)構(gòu)化的數(shù)據(jù),有些則是非結(jié)構(gòu)化的數(shù)據(jù)。傳統(tǒng)的IT架構(gòu)因此而面臨著嚴(yán)苛的挑戰(zhàn)。現(xiàn)在一些企業(yè)常用的ERP、CRM的分析建構(gòu),通常情況下是用一個RISC架構(gòu)的小型機加上集中式存儲,在這樣一個信息大爆炸的時代,這確實是一種挑戰(zhàn)。
英特爾(中國)有限公司數(shù)據(jù)中心及云計算業(yè)務(wù)產(chǎn)品市場總監(jiān)賀曉東舉例,比如一張信用卡在廣州刷出了一筆錢,3分鐘后同樣的信用卡又在北京消費了一筆錢,這肯定有問題。這需要更快的數(shù)據(jù)分析和稽核監(jiān)控。
“英特爾中國和SAP中國一起做了一件事,打造一個端到端的大數(shù)據(jù)解決方案。英特爾提供平臺支持,針對數(shù)據(jù)分析的整個生命周期提供端到端的技術(shù)支持。以英特爾至強E7處理器為例,它可以提供6個TB的內(nèi)存空間,這樣就可以讓很多應(yīng)用直接加載在內(nèi)存里邊,及時地進(jìn)行分析。”賀曉東說。
大數(shù)據(jù)既要有實時的分析,又要有海量的歷史數(shù)據(jù)挖掘。據(jù)賀曉東介紹,雙方的架構(gòu)師團隊在英特爾中國云計算創(chuàng)新中心搭建了一個HANA平臺和一個Hadoop平臺。如果用戶愿意用他們的數(shù)據(jù)在這里做一些常識性的測試,從數(shù)據(jù)的源頭到數(shù)據(jù)的管理,以及數(shù)據(jù)的應(yīng)用等,英特爾都可以提供相應(yīng)的支持。
加速實時分析技術(shù)落地
過去幾年,海量復(fù)雜結(jié)構(gòu)數(shù)據(jù)的存儲、清洗、處理、查詢和基本的分析功能在開放架構(gòu)開源平臺上得以實現(xiàn)后,大數(shù)據(jù)實時分析,成為大數(shù)據(jù)應(yīng)用領(lǐng)域內(nèi)諸多用戶及廠商共同關(guān)注的焦點話題。
大數(shù)據(jù)實時分析平臺的基石是具備高性能和高能效,并提供計算、存儲和I/O均衡優(yōu)勢。英特爾架構(gòu)開放硬件平臺在部署了SAP強大的、基于內(nèi)存的數(shù)據(jù)庫和商業(yè)智能技術(shù)之后,能夠以前所未有的優(yōu)異性能及數(shù)據(jù)分析速度,幫助企業(yè)用戶掘取實時的洞察力,更快地制定更為明智的業(yè)務(wù)決策,或創(chuàng)造新的業(yè)務(wù)模式及流程,從而幫助客戶捕獲新的市場機遇,并進(jìn)一步降低業(yè)務(wù)運營成本。
SAP公司數(shù)據(jù)庫及技術(shù)平臺部售前總監(jiān)、數(shù)據(jù)管理技術(shù)首席架構(gòu)師宋一平提到:“英特爾和SAP在總部已經(jīng)合作了20多年,HANA作為內(nèi)存計算環(huán)境每次推出的時候,它的版本研發(fā)一定是跟英特爾的具體工程師在做一些底層的優(yōu)化。”
大數(shù)據(jù)分析四大挑戰(zhàn)
“大數(shù)據(jù)對包含計算、存儲等系統(tǒng)在內(nèi)的基礎(chǔ)平臺提出的重要挑戰(zhàn)是如何加速工作流。” Erwan Menard表示,“大數(shù)據(jù)解決方案應(yīng)涵蓋數(shù)據(jù)生命周期的四個過程——抽取、存儲、處理和分發(fā)。”這其中的每一個步驟都對存儲系統(tǒng)的設(shè)計都提出了相應(yīng)的要求。Erwan Menard的解釋是:在數(shù)據(jù)的抽取上,系統(tǒng)更關(guān)注的是I/O性能;在數(shù)據(jù)的存儲方面,能效和密度是關(guān)鍵詞;提供存儲內(nèi)的計算能力,將處理功能和能力放置于離數(shù)據(jù)更近的地方已經(jīng)成為存儲系統(tǒng)設(shè)計的重要原則;在數(shù)據(jù)的分發(fā)上,DDN提供面向大型網(wǎng)站和云的對象存儲,可快速分發(fā)結(jié)果,讓更多用戶更快地接受信息。
在談到DNN存儲解決方案和產(chǎn)品的優(yōu)勢時,Erwan Menard認(rèn)為DDN的特點主要集中在三個方面:以SFA系列產(chǎn)品為例,在海量數(shù)據(jù)的存儲上,DDN解決方案的高擴展性可以滿足用戶的需求;面向云的存儲解決方案WOS,可以在一個系統(tǒng)中存儲多達(dá)2500億個對象/塊/文件;DDN解決方案和產(chǎn)品擁有存儲內(nèi)計算的能力,可通過控制器和軟件為數(shù)據(jù)提供更好的內(nèi)部處理性能。“DDN擁有管理數(shù)據(jù)的專利技術(shù),控制器的設(shè)計和軟件方面的相關(guān)技術(shù)是DDN存儲實現(xiàn)高性能的關(guān)鍵。”Erwan Menard表示。
面向工作流的混合應(yīng)用
DDN解決方案和產(chǎn)品的一個重要特性是能在一個系統(tǒng)中混合使用SSD、SATA、SAS等不同種類的硬盤。Erwan Menard表示,目前SSD在HPC和大數(shù)據(jù)相關(guān)的解決方案中得到了應(yīng)用,但大多數(shù)廠商是將SSD單獨地作為一層存儲來應(yīng)用的。特別是帶PCIe插口的SSD,在分層存儲里應(yīng)用得比較多,經(jīng)常訪問的數(shù)據(jù)放在最快的SSD里面,大大提高了讀寫的速度。DDN能夠混合使用不同的硬盤并實現(xiàn)分層管理,這樣系統(tǒng)就能更好地兼顧高I/O、高帶寬以及低成本。“DDN解決方案分層存儲和管理的特性,能使不同種類的硬盤發(fā)揮其最大的功效,真正做到混合應(yīng)用,這是DDN與其他廠商不同的地方。” Erwan Menard說。
存儲系統(tǒng)的設(shè)計和選擇必須結(jié)合特定的工作流和應(yīng)用場景來考量,無論是分布式存儲還是集中式共享存儲。Erwan Menard解釋說,有些應(yīng)用只寫一次,卻要讀多次,比如備份、歸檔等,但在一些大型網(wǎng)絡(luò)服務(wù)中,用戶往往需要快速實現(xiàn)文件共享和數(shù)據(jù)同步,這就要求系統(tǒng)兼具高性能和高帶寬。應(yīng)對這種情況,面向?qū)ο蟮拇鎯Ωm合。
大眾化的HPC
Erwan Menard介紹,DDN的大型存儲系統(tǒng)和高端存儲系統(tǒng)主要面向四類應(yīng)用環(huán)境:第一,云、托管及Web應(yīng)用,提供存儲和網(wǎng)絡(luò)的結(jié)合;第二,高性能計算,面向政府、商用和科研應(yīng)用等領(lǐng)域;第三,面向非結(jié)構(gòu)化數(shù)據(jù)的視頻監(jiān)控;第四,廣電媒體的流媒體數(shù)據(jù)存儲和應(yīng)用。