
AI、大數(shù)據(jù)、云計(jì)算深度融合,星環(huán)大數(shù)據(jù)3.0給用戶(hù)帶來(lái)啥體驗(yàn)
“伴隨著人工智能、云計(jì)算、大數(shù)據(jù)的深度融合,大數(shù)據(jù)技術(shù)已經(jīng)進(jìn)入3.0時(shí)代?!毙黔h(huán)科技創(chuàng)始人兼CEO孫元浩8月14日在2018星環(huán)科技大數(shù)據(jù)3.0研討會(huì)北京站上明確表示。
當(dāng)前,人類(lèi)社會(huì)快速數(shù)據(jù)化。一方面,全球使用互聯(lián)網(wǎng)的人數(shù)突破70億,50億設(shè)備接入網(wǎng)絡(luò),擁有的數(shù)據(jù)量達(dá)到40ZB,其中90%為近兩年產(chǎn)生的數(shù)據(jù),而大數(shù)據(jù)應(yīng)用的規(guī)模將突破5000億美元。另一方面,大數(shù)據(jù)應(yīng)用向縱深發(fā)展,覆蓋行業(yè)逐步擴(kuò)展到政府、金融、安全、教育等眾多領(lǐng)域。同時(shí),計(jì)算模式也在快速變化,IOT邊緣計(jì)算機(jī)、AI、云計(jì)算將逐漸成為計(jì)算模式中時(shí)代內(nèi)容。
大數(shù)據(jù)3.0階段,大數(shù)據(jù)分析平臺(tái)將成為一個(gè)聯(lián)系IT系統(tǒng)與從員工、客戶(hù)、合作伙伴、社會(huì),到設(shè)備的一個(gè)全生態(tài)的核心系統(tǒng)。大數(shù)據(jù)3.0的影響已經(jīng)開(kāi)始變得越來(lái)越廣泛。而未來(lái)星環(huán)科技在人工智能、云計(jì)算、大數(shù)據(jù)三大“跑道”競(jìng)速,為用戶(hù)提供大數(shù)據(jù)基礎(chǔ)平臺(tái),也讓大數(shù)據(jù)應(yīng)用體驗(yàn)進(jìn)入一個(gè)新階段。
融合引領(lǐng)大數(shù)據(jù)3.0五大態(tài)勢(shì)
孫元浩從技術(shù)趨勢(shì)、開(kāi)發(fā)與維護(hù)、數(shù)據(jù)與業(yè)務(wù)的關(guān)系三個(gè)維度說(shuō)明,大數(shù)據(jù)已經(jīng)進(jìn)入3.0階段。
星環(huán)科技創(chuàng)始人兼CEO孫元浩
從技術(shù)趨勢(shì)的維度看,大數(shù)據(jù)、云計(jì)算和人工智能將走向深度融合,容器編排系統(tǒng)、大數(shù)據(jù)分析和深度學(xué)習(xí)能夠融合在一起,大數(shù)據(jù)從技術(shù)上而言邁入3.0階段。在3.0階段,大數(shù)據(jù)技術(shù)基本上普及化,可以隨手獲得,絕大部分的人都能夠非常便捷地獲取大數(shù)據(jù)分析能力。
大數(shù)據(jù)平臺(tái)也經(jīng)歷了三個(gè)發(fā)展階段。1.0階段,大數(shù)據(jù)應(yīng)用開(kāi)發(fā)和運(yùn)維都有非常高的技術(shù)門(mén)檻,只有少量的高科技企業(yè)才能自建和使用;2.0階段,隨著專(zhuān)業(yè)的Hadoop生態(tài)的出現(xiàn),大數(shù)據(jù)應(yīng)用開(kāi)發(fā)和運(yùn)維的門(mén)檻大幅降低,像財(cái)富500強(qiáng)公司,因?yàn)閾碛凶约旱腎T團(tuán)隊(duì),可以去運(yùn)維這一復(fù)雜的系統(tǒng);3.0階段,包括星環(huán)以及一些公有云服務(wù)商可以提供完整的大數(shù)據(jù)產(chǎn)品線(xiàn),也可以提供云化方式服務(wù),把大數(shù)據(jù)變成PaaS和微服務(wù)化,客戶(hù)可以隨時(shí)使用
數(shù)據(jù)與業(yè)務(wù)的關(guān)系也在悄然發(fā)生變化。1.0階段是業(yè)務(wù)電子化階段,企業(yè)要信息化,業(yè)務(wù)要能夠IT化、數(shù)字化,業(yè)務(wù)需求是主流;2.0階段是技術(shù)支撐業(yè)務(wù)應(yīng)用階段,響應(yīng)業(yè)務(wù)部門(mén)的業(yè)務(wù)需求,圖形化報(bào)表是主要表現(xiàn)形式,科技被動(dòng)響應(yīng)服務(wù)需求;3.0階段是業(yè)務(wù)數(shù)據(jù)化階段,數(shù)據(jù)分析開(kāi)始成為企業(yè)的創(chuàng)新驅(qū)動(dòng)力,大數(shù)據(jù)以業(yè)務(wù)部門(mén)為主,業(yè)務(wù)需求能夠用大數(shù)據(jù)技術(shù)迅速支撐。
孫元浩認(rèn)為,大數(shù)據(jù)3.0時(shí)代實(shí)現(xiàn)5大融合,具有5大特征:
首先,數(shù)據(jù)平臺(tái)的融合,統(tǒng)一了數(shù)據(jù)湖、數(shù)據(jù)倉(cāng)庫(kù)、數(shù)據(jù)集市,不再需要混合結(jié)構(gòu)。而借助星環(huán)的技術(shù)和產(chǎn)品,只需一套引擎,就能夠解決數(shù)據(jù)分析的所有問(wèn)題,而不需要在不同架構(gòu)之間換來(lái)?yè)Q去。這也是大數(shù)據(jù)技術(shù)向簡(jiǎn)單化、應(yīng)用化方向邁出的重要一步,IT架構(gòu)可以極度簡(jiǎn)化。
其次,開(kāi)發(fā)方式融合,只需要一套SQL+R/Python開(kāi)發(fā)語(yǔ)音與接口。未來(lái),進(jìn)行大數(shù)據(jù)分析,只需要掌握SQL+R/Python三種語(yǔ)言就夠了。R/Python將是預(yù)測(cè)性分析和機(jī)器學(xué)習(xí)的主流,R專(zhuān)注在統(tǒng)計(jì)上面,Python專(zhuān)注在深度學(xué)習(xí)上。
第三,BI與AI的融合,數(shù)據(jù)分析工具鏈走向融合。 BI與AI已經(jīng)嵌在一起,密不可分,因?yàn)锳I做數(shù)據(jù)特征分析需要用到BI,需要可視化。BI通常也會(huì)嵌入一些機(jī)器學(xué)習(xí)的算法來(lái)做智能分析。
第四,人工智能、大數(shù)據(jù)、云計(jì)算的融合,彈性資源策略讓服務(wù)隨處可見(jiàn)。利用云計(jì)算的資源池化,利用容器技術(shù)統(tǒng)一管理和調(diào)度,支持單行擴(kuò)展,按需使用,按需付費(fèi)。星環(huán)讓業(yè)務(wù)人員隨時(shí)使用數(shù)據(jù)分析平臺(tái)成為可能。
第五,應(yīng)用、數(shù)據(jù)與企業(yè)應(yīng)用生態(tài)的融合,數(shù)據(jù)、服務(wù)、應(yīng)用相互促進(jìn),形成閉環(huán),促進(jìn)企業(yè)大數(shù)據(jù)應(yīng)用生態(tài)的發(fā)展。
TDC踐行大數(shù)據(jù)、人工智能與云計(jì)算的融合趨勢(shì)
在2018星環(huán)科技大數(shù)據(jù)3.0研討會(huì)的每一站,星環(huán)科技都帶著最新的產(chǎn)品和案例,與各地的企業(yè)用戶(hù)與觀眾分享。
星環(huán)科技研發(fā)總監(jiān)、首席工程師劉汪根
接受記者采訪(fǎng)的星環(huán)科技研發(fā)總監(jiān)、首席工程師劉汪根介紹,經(jīng)過(guò)多年自主研發(fā),星環(huán)科技已經(jīng)建立了包括ABCD+一體機(jī)在內(nèi)的五大產(chǎn)品系列:其中,A是人工智能產(chǎn)品,如智子人工智能平臺(tái)Transwarp Sophon;B是大數(shù)據(jù)產(chǎn)品,包括一站式大數(shù)據(jù)平臺(tái)Transwarp Data Hub (TDH);C是云計(jì)算產(chǎn)品,包括基于容器的智能大數(shù)據(jù)云平臺(tái)Transwarp Data Cloud (TDC);D是數(shù)據(jù)庫(kù)產(chǎn)品,包括分布式閃存數(shù)據(jù)庫(kù)ArgoDB、分布式圖數(shù)據(jù)庫(kù)StellarDB、交易型數(shù)據(jù)庫(kù)KunDB等;一體機(jī)則各種超融合一體機(jī),包括超融合大數(shù)據(jù)一體機(jī)TxData Appliance、流處理器一體機(jī)、智能識(shí)別一體機(jī)等。
劉汪根認(rèn)為,在大數(shù)據(jù)、人工智能、云計(jì)算三者共同蓬勃發(fā)展的時(shí)代背景下,星環(huán)新一代智能大數(shù)據(jù)云平臺(tái)TDC作為這三個(gè)領(lǐng)域相互融合的代表性產(chǎn)品,推動(dòng)了服務(wù)容器化以及大數(shù)據(jù)生態(tài)上云。TDC在實(shí)現(xiàn)大數(shù)據(jù)技術(shù)落地時(shí)利用云計(jì)算三項(xiàng)核心技術(shù)——虛擬化技術(shù)、數(shù)據(jù)中心技術(shù)、多租戶(hù)技術(shù),繼承云平臺(tái)資源彈性伸縮、自動(dòng)修復(fù)、同一平臺(tái)服務(wù)于多租戶(hù)的能力,滿(mǎn)足企業(yè)對(duì)大數(shù)據(jù)云平臺(tái)的多種需求。星環(huán)科技產(chǎn)品實(shí)現(xiàn)ABC全面融合,可以最大程度地支持大數(shù)據(jù)3.0時(shí)代下企業(yè)的多方面需求。
目前,TDC已實(shí)現(xiàn)私有云和托管云的部署方式,為不同體量、不同業(yè)務(wù)類(lèi)型、不同運(yùn)作模式的企業(yè)提供針對(duì)性的服務(wù)。TDC可部署在大型企業(yè)內(nèi)部,提供定制化的實(shí)現(xiàn),集中數(shù)據(jù)資源和計(jì)算資源,為各個(gè)業(yè)務(wù)部門(mén)和分支機(jī)構(gòu)提供數(shù)據(jù)分析服務(wù),滿(mǎn)足企業(yè)對(duì)大數(shù)據(jù)分析云的需求
而在今年下半年,TDC將提供公有云部署方式與服務(wù),提供PaaS平臺(tái)。在公有云領(lǐng)域,TDC提供各種內(nèi)部的數(shù)據(jù)產(chǎn)品和業(yè)務(wù),云上的客戶(hù)可以自主快速的構(gòu)建集群、創(chuàng)建應(yīng)用,啟動(dòng)大數(shù)據(jù)業(yè)務(wù),立即創(chuàng)建立即銷(xiāo)毀,減少技術(shù)中心成本投入。
未來(lái),TDC也可以用于混合云的構(gòu)架,對(duì)于特定的需要對(duì)外提供服務(wù)的私有云企業(yè),TDC支持接入公有云IaaS服務(wù),從而在業(yè)務(wù)高峰期提供良好的彈性擴(kuò)展、精確計(jì)費(fèi)等能力,提高企業(yè)的服務(wù)響應(yīng)能力。
北京站會(huì)場(chǎng)
自主可控?cái)?shù)據(jù)庫(kù)實(shí)現(xiàn)終點(diǎn)突破
今年5月,全球最知名的數(shù)據(jù)管理系統(tǒng)評(píng)測(cè)基準(zhǔn)標(biāo)準(zhǔn)化組織TPC宣布,星環(huán)TDH平臺(tái)通過(guò)TPC-DS基準(zhǔn)測(cè)試,打破了該領(lǐng)域12年來(lái)沒(méi)有廠(chǎng)商通過(guò)該項(xiàng)測(cè)試的局面,在世界范圍內(nèi)填補(bǔ)了該項(xiàng)技術(shù)的空白。劉汪根說(shuō),這標(biāo)志著星環(huán)在Hadoop上打造的分布數(shù)據(jù)庫(kù),在功能上已經(jīng)可以與傳統(tǒng)的關(guān)系數(shù)據(jù)庫(kù)相媲美,同時(shí)處理的數(shù)據(jù)量也比傳統(tǒng)關(guān)系數(shù)據(jù)庫(kù)高幾個(gè)量級(jí)。這說(shuō)明在大數(shù)據(jù)基礎(chǔ)軟件領(lǐng)域,國(guó)產(chǎn)技術(shù)已經(jīng)實(shí)現(xiàn)彎道超車(chē),星環(huán)的分布數(shù)據(jù)庫(kù)已經(jīng)能夠取代傳統(tǒng)關(guān)系數(shù)據(jù)庫(kù)做復(fù)雜的處理了。
劉汪根認(rèn)為,作為本土的軟件研發(fā)企業(yè),星環(huán)科技在過(guò)去五年中堅(jiān)持大數(shù)據(jù)底層基礎(chǔ)產(chǎn)品的研發(fā),堅(jiān)持自主創(chuàng)新,在一些領(lǐng)域如大數(shù)據(jù)分布式數(shù)據(jù)庫(kù)領(lǐng)域?qū)崿F(xiàn)了技術(shù)突破,實(shí)現(xiàn)的基礎(chǔ)軟件的彎道超車(chē)。
據(jù)介紹,ArgoDB是星環(huán)自研的新一代分布式閃存數(shù)據(jù)庫(kù),能夠同時(shí)滿(mǎn)足多維實(shí)時(shí)檢索、準(zhǔn)實(shí)時(shí)分析和海量數(shù)據(jù)離線(xiàn)分析業(yè)務(wù)場(chǎng)景。在當(dāng)前混合業(yè)務(wù)場(chǎng)景逐漸成為主流的情況下,ArgoDB能夠極大的簡(jiǎn)化數(shù)據(jù)平臺(tái)架構(gòu)、降低實(shí)施與運(yùn)維成本。
Transwarp StellarDB是一款為企業(yè)級(jí)圖應(yīng)用而打造的分布式圖數(shù)據(jù)庫(kù),用于快速查找數(shù)據(jù)間的關(guān)聯(lián)關(guān)系,并提供強(qiáng)大 的算法分析能力。StellarDB克服了海量關(guān)聯(lián)圖數(shù)據(jù)存儲(chǔ)的難題,通過(guò)自定義圖存儲(chǔ)格式和集群化存儲(chǔ),實(shí)現(xiàn)了傳統(tǒng)數(shù)據(jù)庫(kù) 無(wú)法提供的低延時(shí)多層關(guān)系查詢(xún),在社交網(wǎng)絡(luò)、公安、金融領(lǐng)域都有巨大應(yīng)用潛力。
大數(shù)據(jù)的發(fā)展也離不開(kāi)生態(tài)建設(shè)。星環(huán)已經(jīng)逐漸形成以星環(huán)技術(shù)為核心的生態(tài)系統(tǒng),包括免費(fèi)社區(qū)版用戶(hù)遍布21個(gè)省市,累計(jì)培訓(xùn)開(kāi)發(fā)者超過(guò)2000人,累計(jì)為超過(guò)400家企業(yè)提供培訓(xùn),累積頒發(fā)證書(shū)超過(guò)1000張。我們期望在大數(shù)據(jù)3.0時(shí)代,星環(huán)能給用戶(hù)帶來(lái)不一樣的體驗(yàn)。
數(shù)據(jù)分析咨詢(xún)請(qǐng)掃描二維碼
若不方便掃碼,搜微信號(hào):CDAshujufenxi
LSTM 模型輸入長(zhǎng)度選擇技巧:提升序列建模效能的關(guān)鍵? 在循環(huán)神經(jīng)網(wǎng)絡(luò)(RNN)家族中,長(zhǎng)短期記憶網(wǎng)絡(luò)(LSTM)憑借其解決長(zhǎng)序列 ...
2025-07-11CDA 數(shù)據(jù)分析師報(bào)考條件詳解與準(zhǔn)備指南? ? 在數(shù)據(jù)驅(qū)動(dòng)決策的時(shí)代浪潮下,CDA 數(shù)據(jù)分析師認(rèn)證愈發(fā)受到矚目,成為眾多有志投身數(shù) ...
2025-07-11數(shù)據(jù)透視表中兩列相乘合計(jì)的實(shí)用指南? 在數(shù)據(jù)分析的日常工作中,數(shù)據(jù)透視表憑借其強(qiáng)大的數(shù)據(jù)匯總和分析功能,成為了 Excel 用戶(hù) ...
2025-07-11尊敬的考生: 您好! 我們誠(chéng)摯通知您,CDA Level I和 Level II考試大綱將于 2025年7月25日 實(shí)施重大更新。 此次更新旨在確保認(rèn) ...
2025-07-10BI 大數(shù)據(jù)分析師:連接數(shù)據(jù)與業(yè)務(wù)的價(jià)值轉(zhuǎn)化者? ? 在大數(shù)據(jù)與商業(yè)智能(Business Intelligence,簡(jiǎn)稱(chēng) BI)深度融合的時(shí)代,BI ...
2025-07-10SQL 在預(yù)測(cè)分析中的應(yīng)用:從數(shù)據(jù)查詢(xún)到趨勢(shì)預(yù)判? ? 在數(shù)據(jù)驅(qū)動(dòng)決策的時(shí)代,預(yù)測(cè)分析作為挖掘數(shù)據(jù)潛在價(jià)值的核心手段,正被廣泛 ...
2025-07-10數(shù)據(jù)查詢(xún)結(jié)束后:分析師的收尾工作與價(jià)值深化? ? 在數(shù)據(jù)分析的全流程中,“query end”(查詢(xún)結(jié)束)并非工作的終點(diǎn),而是將數(shù) ...
2025-07-10CDA 數(shù)據(jù)分析師考試:從報(bào)考到取證的全攻略? 在數(shù)字經(jīng)濟(jì)蓬勃發(fā)展的今天,數(shù)據(jù)分析師已成為各行業(yè)爭(zhēng)搶的核心人才,而 CDA(Certi ...
2025-07-09【CDA干貨】單樣本趨勢(shì)性檢驗(yàn):捕捉數(shù)據(jù)背后的時(shí)間軌跡? 在數(shù)據(jù)分析的版圖中,單樣本趨勢(shì)性檢驗(yàn)如同一位耐心的偵探,專(zhuān)注于從單 ...
2025-07-09year_month數(shù)據(jù)類(lèi)型:時(shí)間維度的精準(zhǔn)切片? ? 在數(shù)據(jù)的世界里,時(shí)間是最不可或缺的維度之一,而year_month數(shù)據(jù)類(lèi)型就像一把精準(zhǔn) ...
2025-07-09CDA 備考干貨:Python 在數(shù)據(jù)分析中的核心應(yīng)用與實(shí)戰(zhàn)技巧? ? 在 CDA 數(shù)據(jù)分析師認(rèn)證考試中,Python 作為數(shù)據(jù)處理與分析的核心 ...
2025-07-08SPSS 中的 Mann-Kendall 檢驗(yàn):數(shù)據(jù)趨勢(shì)與突變分析的有力工具? ? ? 在數(shù)據(jù)分析的廣袤領(lǐng)域中,準(zhǔn)確捕捉數(shù)據(jù)的趨勢(shì)變化以及識(shí)別 ...
2025-07-08備戰(zhàn) CDA 數(shù)據(jù)分析師考試:需要多久?如何規(guī)劃? CDA(Certified Data Analyst)數(shù)據(jù)分析師認(rèn)證作為國(guó)內(nèi)權(quán)威的數(shù)據(jù)分析能力認(rèn)證 ...
2025-07-08LSTM 輸出不確定的成因、影響與應(yīng)對(duì)策略? 長(zhǎng)短期記憶網(wǎng)絡(luò)(LSTM)作為循環(huán)神經(jīng)網(wǎng)絡(luò)(RNN)的一種變體,憑借獨(dú)特的門(mén)控機(jī)制,在 ...
2025-07-07統(tǒng)計(jì)學(xué)方法在市場(chǎng)調(diào)研數(shù)據(jù)中的深度應(yīng)用? 市場(chǎng)調(diào)研是企業(yè)洞察市場(chǎng)動(dòng)態(tài)、了解消費(fèi)者需求的重要途徑,而統(tǒng)計(jì)學(xué)方法則是市場(chǎng)調(diào)研數(shù) ...
2025-07-07CDA數(shù)據(jù)分析師證書(shū)考試全攻略? 在數(shù)字化浪潮席卷全球的當(dāng)下,數(shù)據(jù)已成為企業(yè)決策、行業(yè)發(fā)展的核心驅(qū)動(dòng)力,數(shù)據(jù)分析師也因此成為 ...
2025-07-07剖析 CDA 數(shù)據(jù)分析師考試題型:解鎖高效備考與答題策略? CDA(Certified Data Analyst)數(shù)據(jù)分析師考試作為衡量數(shù)據(jù)專(zhuān)業(yè)能力的 ...
2025-07-04SQL Server 字符串截取轉(zhuǎn)日期:解鎖數(shù)據(jù)處理的關(guān)鍵技能? 在數(shù)據(jù)處理與分析工作中,數(shù)據(jù)格式的規(guī)范性是保證后續(xù)分析準(zhǔn)確性的基礎(chǔ) ...
2025-07-04CDA 數(shù)據(jù)分析師視角:從數(shù)據(jù)迷霧中探尋商業(yè)真相? 在數(shù)字化浪潮席卷全球的今天,數(shù)據(jù)已成為企業(yè)決策的核心驅(qū)動(dòng)力,CDA(Certifie ...
2025-07-04CDA 數(shù)據(jù)分析師:開(kāi)啟數(shù)據(jù)職業(yè)發(fā)展新征程? ? 在數(shù)據(jù)成為核心生產(chǎn)要素的今天,數(shù)據(jù)分析師的職業(yè)價(jià)值愈發(fā)凸顯。CDA(Certified D ...
2025-07-03