基于云端的大數據崛起
大數據是未來的行業發展趨勢,其發展勢頭已勢不可擋,而Hadoop作為更大規模分布式計算和存儲離線處理集群的代表,在今年更是紅遍了全球。
無可否認,大數據正在成為改變人們生活的重要因素,而大數據和云計算的整合也在如火如荼地進行中。
從定量、結構的世界,到不確定、非結構的世界。這個轉變,使我們得以了解真實信息,提高決策水平,當社會對自然的數據有較為完善、隨時的分析能力時,我們對事件的把握及預測能力便增強。以云計算為基礎的信息存儲、分享和挖掘手段為知識生產提供了工具,通過對大數據分析、預測會使得決策更為精準,而對于許多企業而言,數據正成為在商戰中取勝的決定性要素。
日前落幕的第十一屆大連軟交會“2013大數據創新論壇”,以大數據的分析及服務為主題,邀請了來自Intel、微軟和IBM的高層專家,分享了對大數據技術的見解,共同探討大數據生態系統的構建。
中國有著龐大的人群和應用市場,復雜性高、充滿變化,如此龐大的用戶群體,構成了世界上最為龐雜、最為繁復的數據。解決這種由大規模數據引起的問題,探索以大數據為基礎的解決方案,是中國產業升級、效率提高的重要手段。
IBM “智慧的計算”引領方向
作為論壇當日的一大亮點,IBM中國開發中心首席技術官毛新生在以“智慧的計算”為主題的演講中提出:大數據并不是Hadoop, Hadoop只是進行大數據分析的一個很小的分支,大數據分析是非常多樣化的領域,每一個領域自身數學模型和數學屬性,這些模型和屬性需要開發者去開發領域相關的算法,然后將這個算法映射到一個可以進行大規模分布的機制上,這個機制往往要利用云計算基礎設施達成。
作為大數據領域的領導者,IBM正在利用領先方法論和全面大數據技術幫助企業重新思考已有的IT模式;助力企業進行基于這場信息革命的業務轉型,獲取競爭機遇和不可估量的商業價值。同時,IBM作為目前業界唯一能夠集咨詢、服務、軟硬件綜合實力,提供端到端全面整合解決方案的廠商,相關產品和服務覆蓋了大數據及分析相關領域的各個階段、各個領域;IBM的大數據實踐已經深入到包括中國在內的全球市場的各個行業,包括電信、金融、醫療、零售、制造等眾多客戶已在IBM大數據平臺及大數據分析等技術和理念支持下獲得收益。此外,IBM還推出了一套以成果為導向的組合產品解決方案,包括欺詐預測、財務運營和客戶服務三大核心能力。這套解決方案廣泛匯集了IBM的智慧資本,包括軟件產品、基礎架構、研[FS:PAGE]究及咨詢服務。
針對企業大數據方向開發者,IBM推出了多款產品和技術,大力提升了其分析產品的加速性能,簡化了開發和運營。新版本企業級Hadoop產品InfoSphere BigInsights可以利用現有的SQL技術,更便捷地開發應用組件。兼具安全性強和高可用性特點,新版BigInsights能夠更加契合企業部署需求。新版流計算軟件InfoSphere Streams在實時分析的開發和部署上進一步增強了操作的簡易性。新版關系數據庫管理軟件Informix包含TimeSeries Acceleration,能夠適用于智能儀表和傳感器數據的運行報告和分析。
英特爾 軟硬協同、體驗至上
“大數據正在深刻地改變軟件行業、IT產業,以及人們生活的方方面面。”英特爾亞太研發有限公司總經理、英特爾軟件與服務事業部中國區總經理何京翔博士表示:“產業正在重構。我們希望與廣大產業鏈伙伴和開發者分享英特爾大數據技術平臺和計算解決方案,推動構建本地‘端到端’的大數據生態環境,共同迎接智能城鎮建設中日益苛刻的大數據挑戰。”
目前,英特爾的軟件支持已經擴展到整個軟件棧,從平臺硬件、固件、虛擬機、云計算到操作系統、開發工具、中間件和應用程序,幫助廣大產業鏈伙伴和開發者釋放創新潛力,革新用戶體驗。以英特爾針對大數據的開放架構核心產品線,配合英特爾Hadoop分發版,可以實現“軟硬協同、體驗至上”的創新效果。例如,利用英特爾至強處理器平臺對網絡和I/O技術所做的優化,與英特爾Hadoop分發版進行強力組合,以往分析1TB的數據需要4個多小時漫長等待才能完全處理完畢,現在僅需短短的7分鐘即可完成,極大地提升了大數據“智能”的意義。
英特爾Hadoop目前已經有了廣泛的應用案例,包括智慧城市、電信、金融、醫療等行業都產生了用戶。在談到具體案例的時候,苗凱翔博士指出在英特爾Hadoop發行版軟件的應用領域,中國比其他國家是先邁出了一大步,走在了世界的前列。以電信行業為例,英特爾Hadoop發行版已經被中國聯通(600050,股吧),用以進行歷史賬單及流量的查詢與分析。正是由于客戶的強烈需求,使得英特爾Hadoop這一原本在英特爾作為創新與嘗試性的項目最終變成實際的產品出現。
通過與本地合作伙伴的攜手努力,英特爾正在將大數據技術應用于智慧醫療的創新。英特爾亞太地區研發有限公司數據中心軟件部大數據解決方案經理王曉棟介紹了在過去一年中與用友在UEP框架下實現的合作,主要是基于英特爾x86集群+x86綜合解決方案,來嘗試處理現在在醫療中的問題。例[FS:PAGE]如醫生查詢病人病例,以前可能要拿病例本才能查到,而隨著整個醫療系統在大數據時代的升級,所有醫療病例都集成在英特爾大數據平臺上,使其查詢速度、處理速度都達到頂級的水平。在過去一年,雙方在區域性、大型電子健康檔案和區域性的醫療質量分析方面均進行了不同程度的嘗試。
從IT硬件系統,到數據管理應用,再到數據處理和分析軟件領域,英特爾都擁有廣泛的合作伙伴和健康的生態系統,通過合作伙伴間的緊密合作,已能夠向用戶提供適用于大數據應用,或針對此應用進行了進一步優化的服務器、存儲設備和網絡設備,以及能與這些設備實現無縫對接、更符合大數據應用需求的數據管理和數據分析軟件。
大數據處理任務對于開放架構平臺的倚重,讓英特爾在這一領域獲得了越來越多開發者的關注。作為全球領先的開放架構平臺最核心部件——處理器平臺的提供商,英特爾首要的任務就是要打造適用于大數據應用的“芯”,而后幫助開發者圍繞這一基礎創新打造可承載大數據應用的基礎設施。英特爾還計劃在其上的數據組織與管理層,針對大數據的分發和管理需求提供針對英特爾平臺優化的Hadoop產品和服務;在分析與發現層,提供針對客戶端與服務器端算法開發的支持,以滿足大數據計算所需的性能與規模要求;在決策支持與IT服務層,則將聯合生態系統內的合作伙伴,提供更為優化的可視化應用體驗。英特爾所有與這些規劃相關的具體策略,將隨著大數據技術、應用和市場的發展逐步深化、細化。
微軟 攜甲骨文漫步“云端”
結合對大數據本身的認知和微軟自身強大的產品組合,微軟可以為用戶提供一個端到端的大數據解決方案。簡單來說,就是后端以新一代SQL Server 2012為基準平臺,將大數據管起來,然后在中端以數據集市為依托,配以豐富的數據應用,最后在前端以豐富的界面形式展現數據分析的結果,完成數據的匯總——應用與分析——結果呈現的完整流程。
為幫助企業快速采用其大數據解決方案,微軟將同時在Windows Azure 平臺和 Windows Server 上提供 Hadoop(在前者上用作基于云的服務,在后者上用作內部部署的分布)。并且有非常多的第三方針對Hadoop的應用工具,能夠在這個平臺上做到更好的分析、更好的視覺化的工作。微軟大數據解決方案還支持Mahout等通用的第三方工具與框架,通過Hadoop流,支持C++、C#、Python、Ruby和Pearl語言的定制挖掘算法。
去年9月份,微軟跟中國電信天翼平臺達成合作共識,他們把門戶網站的服務、災備服務都[FS:PAGE]建立在Windows Server上,這樣便整合成了一個非常完整的“云”操作系統。對于客戶來說,這個系統將帶來了相當大的價值,它能夠把你所有的應用、所有的運維場景在線上和線下更好地管理起來。從整體角度來說,云的管理系統能夠幫助IT人員解決一系列操作場景。
為了讓更多初創企業使用微軟公有云服務,微軟大中華區副總裁兼市場戰略部總經理、微軟大中華區首席云計算戰略官謝恩偉表示,公司已在華啟動了云加速器項目,免費為新創企業提供Windows Azure服務,而目的也是進一步推廣公有云服務。Windows Azure開放、可靠、易用的平臺服務大幅降低了初創企業系統開發及運營成本,幫助初創企業快速在全球范圍內開展業務,并為全球用戶提供一致卓越的用戶體驗,使初創企業集中精力于核心業務開發,加速業務成長。目前第二期項目已接近尾聲。
此外,吸引廣大開發者眼球的好消息還包括HTML 5網頁app、Apache Cordova/PhoneGap 和 Windows Phone 7.5的開發者,現在可以用Azure作為服務支持。而可以享有這個權利的移動端瀏覽器包括IE8以及“現行版本的Chrome、 Firefox、 Safari和2.3以上的PhoneGap。”
近日,有國外媒體報道稱,甲骨文與微軟公司宣布在云計算領域展開深入合作。其中微軟云平臺Windows Azure將全面支持Oracle數據庫、Java、Weblogic和Linux。通過與甲骨文的合作,微軟能夠給Windows Azure平臺的客戶提供更多的部署選擇。但對于Azure平臺應用在甲骨文和微軟云上的表現具體會如何,目前尚不得而知。
三巨頭 八仙過海各顯神通
2012年,從整個云計算解決方案ITBrand排行榜上看出,IBM、微軟、英特爾雖然在排名上有細微波動,但一直穩居前三位。
云計算技術是目前解決大數據問題集最重要有效的手段。云計算提供了基礎架構平臺,大數據應用在這個平臺上運行。大數據是未來的行業發展趨勢,其發展勢頭已勢不可擋,而Hadoop作為更大規模分布式計算和存儲離線處理集群的代表,在今年更是紅遍了全球。英特爾一方面準備了全面的、端到端的、跨越了凌動、單路雙路及多路至強處理器產品的核心硬件支持,另一方面由英特爾中國團隊領銜開發的Apache Hadoop軟件的英特爾Hadoop分發版不但可提供開源版本所不具備的強大技術支持,還針對英特爾架構硬件平臺進行了充分優化;IBM的優勢在于其信息管理平臺、信息整合與治理、分析能力,以及平衡配置的IT基礎架構;微軟希望將Hadoop集成到Windows系統中,在Windows Azure、Windows Server、[FS:PAGE]SQL server 2012上全面支持Hadoop。
在大數據分析領域,雖然暫時面臨技術人員匱乏的狀況,但現今越來越多的人開始學習Hadoop,企業也在鼓勵和培養技術人員學習Hadoop。廣大開發者應抓住大數據機遇,選擇更適合的平臺技術,借助最優的解決方案,利用大數據開發出更智能、更個性化的新一代應用,并最終實現應用經濟的轉型升級。
0 贊
相關文章
大數據等構成的人體信息物聯網將改變未來醫療模式
一條項鏈可以實時監測人體心肺功能、一個戒指可以監測呼吸脈搏等指標、一副眼鏡可以監測精神疾病患者狀況……記者20日從成都舉行的2021第二屆四川康復治療及產業論壇上獲悉,由大數據、云計算、有限傳輸與無線傳輸相結合構成的人體信息物...
如何通過云安全態勢管理保障云端數據安全和抵御網絡威脅
人們需要了解什么是云安全態勢管理(CSPM)以及CSPM工具如何幫助企業提高云端安全性以抵御網絡威脅。隨著越來越多的企業采用基于云計算的平臺和服務,了解與云計算相關的風險非常重要。與內部部署數據中心相比,基于云計算基礎設施在管...
依托大數據物聯網 開展防汛工作
記者從白云區綜合行政執法局獲悉,為確保轄區安全度汛,該局充分利用大數據、物聯網技術,開展職責范圍內防汛搶險的應急綜合調度、指揮、協調工作,以有效應對汛期突發事件、緊急或特殊情況。該局以白云區“數字城管”系統平臺為基礎,依托...
治理PM2.5推行智能型環保 云計算大數據首當其沖
兩會期間,全國人大代表、廣東省家電商會會長、TCL集團董事長李東生接受采訪時一句:“北京昨天的霧霾還很重,今天天氣很好,北京的天氣比較講政治。”的玩笑逗樂了在場所有記者。
大數據和分析解決方案如何在數字時代徹底改變業務?
如今的技術在不斷地發展。無論是自動駕駛汽車、機器人還是重型自動機械,技術只會隨著時間的推移而變得更好。然而,很多技術在很大程度上依賴于數據、各種規模和類型企業的信息,以及解釋這些數據和信息的高級分析技術。由于大數據在推動組織數...