版權(quán)所有?大唐電信科技股份有限公司
京ICP備06071639號(hào) 京公網(wǎng)安備11010802023277號(hào)面對(duì)撲面而來(lái)的“新基建”浪潮所帶來(lái)的大量數(shù)據(jù)上云、應(yīng)用上云需求與機(jī)會(huì),大唐電信提出了新一代云化大數(shù)據(jù)中心解決方案,已在產(chǎn)品、技術(shù)、標(biāo)準(zhǔn)、業(yè)務(wù)融合與實(shí)施能力等方面做好了充分的準(zhǔn)備,我們將把“與‘新基建’同行,服務(wù)國(guó)家發(fā)展戰(zhàn)略”作為自身的使命和發(fā)展戰(zhàn)略,盡自己所能為“新基建”建設(shè)添磚加瓦。
云化大數(shù)據(jù)中心總體架構(gòu)
基于對(duì)“新基建”中對(duì)新一代云化大數(shù)據(jù)中心建設(shè)需求的理解與應(yīng)用需求,大唐電信推出了面向“部-?。校镜亍倍鄬蛹?jí)建設(shè)需求的一體化云大數(shù)據(jù)中心解決方案。該方案基于云原生容器技術(shù),構(gòu)建集資源基礎(chǔ)設(shè)施云化、安全設(shè)施與數(shù)據(jù)云化、業(yè)務(wù)應(yīng)用智能化為一體的大數(shù)據(jù)中心,為各部委或行業(yè)實(shí)現(xiàn)跨部門(mén)業(yè)務(wù)融合、跨地區(qū)集中統(tǒng)一服務(wù),提供快速高效、便捷安全的建設(shè)與支撐手段。
大唐電信一體化云大數(shù)據(jù)中心的總體架構(gòu)如下圖所示:
圖|大唐電信一體化云大數(shù)據(jù)中心系統(tǒng)總體架構(gòu)
資源基礎(chǔ)設(shè)施云化:底層基于云原生容器技術(shù)對(duì)資源基礎(chǔ)設(shè)施進(jìn)行云化,云化后的IaaS平臺(tái)可有效解決資源管理效率問(wèn)題,對(duì)系統(tǒng)資源提供橫向和縱向的統(tǒng)一管理,將計(jì)算、存儲(chǔ)、網(wǎng)絡(luò)等各類(lèi)資源包裝成服務(wù),提供高效的配置和調(diào)度。
安全與數(shù)據(jù)云化:基于大數(shù)據(jù)平臺(tái)及內(nèi)嵌數(shù)據(jù)庫(kù)系統(tǒng)快速構(gòu)建面向數(shù)據(jù)的云化PaaS平臺(tái),并通過(guò)云密碼服務(wù)設(shè)施以及模塊化疊加的專(zhuān)業(yè)應(yīng)用服務(wù)設(shè)施(如GIS地理信息服務(wù)、北斗導(dǎo)航定位服務(wù)等),有效解決數(shù)據(jù)分散、隔離問(wèn)題以及數(shù)據(jù)在認(rèn)證、傳輸、存儲(chǔ)中的安全問(wèn)題,避免交換障礙,使各類(lèi)數(shù)據(jù)資產(chǎn)共享集中存儲(chǔ),實(shí)現(xiàn)數(shù)據(jù)服務(wù)開(kāi)放、數(shù)據(jù)相互交換,并搭載數(shù)據(jù)資產(chǎn)目錄以提供綜合數(shù)據(jù)治理。
業(yè)務(wù)應(yīng)用智能化:基于大數(shù)據(jù)平臺(tái)底座并結(jié)合人工智能提供豐富的中間件和應(yīng)用開(kāi)發(fā)工具(包括管理后臺(tái)、工具庫(kù)、人工智能AI模型庫(kù)等),解決應(yīng)用系統(tǒng)在開(kāi)發(fā)、部署、運(yùn)維、治理中的效率和智能化問(wèn)題,以應(yīng)對(duì)系統(tǒng)中面臨的各類(lèi)管理接口障礙,從而實(shí)現(xiàn)業(yè)務(wù)應(yīng)用的高度智慧化與使用的便捷化。
云化大數(shù)據(jù)中心“軟平臺(tái)”技術(shù)
實(shí)際上,要想讓數(shù)據(jù)中心真正發(fā)揮其在“新基建”中“數(shù)字底座”的核心作用,僅靠人們腦海中的大量服務(wù)器、存儲(chǔ)和網(wǎng)絡(luò)設(shè)備等硬件基礎(chǔ)設(shè)施云化(硬平臺(tái))是遠(yuǎn)遠(yuǎn)不夠的。數(shù)據(jù)中心真正發(fā)揮業(yè)務(wù)作用的是對(duì)外提供各種類(lèi)型的云數(shù)據(jù)服務(wù)平臺(tái)(軟平臺(tái))是必不可少?!坝财脚_(tái)”就像是一個(gè)人的骨骼和肌肉,有了它就有了云數(shù)據(jù)中心的“形”,而“軟平臺(tái)”則像是一個(gè)人的大腦,有了它才有了云數(shù)據(jù)中心的“神”。只有將“硬平臺(tái)”與“軟平臺(tái)”有機(jī)地結(jié)合在一起,云化大數(shù)據(jù)中心才能構(gòu)成一個(gè)完整的、有思考和行為能力的“人”。
圖|大唐電信云化大數(shù)據(jù)中心的軟平臺(tái)技術(shù)結(jié)構(gòu)
“軟平臺(tái)”在IaaS層包括操作系統(tǒng)和云管理系統(tǒng)平臺(tái),采用容器編排工具進(jìn)行統(tǒng)一集群管理;在PaaS層則主要是通過(guò)各類(lèi)嵌入數(shù)據(jù)庫(kù)滿(mǎn)足不同存儲(chǔ)需求,提供大數(shù)據(jù)的流程和離線(xiàn)批處理能力,并提供數(shù)據(jù)安全服務(wù),支持對(duì)數(shù)據(jù)的深入挖掘分析,基于微服務(wù)架構(gòu)的云原生應(yīng)用進(jìn)行持續(xù)部署和集成;在SaaS層則包括各行業(yè)的應(yīng)用軟件和對(duì)專(zhuān)項(xiàng)業(yè)務(wù)安全應(yīng)用的支持。在當(dāng)前云原生、分布式技術(shù)架構(gòu)逐漸成為主流技術(shù)的背景下,“軟平臺(tái)”支持容器管理、分布式交易數(shù)據(jù)庫(kù)與分布式閃存數(shù)據(jù)庫(kù)、海量數(shù)據(jù)的批量與流式處理等關(guān)鍵技術(shù),架構(gòu)性能處于國(guó)內(nèi)領(lǐng)先水平。
同時(shí),大唐電信的一體化云大數(shù)據(jù)中心在“新基建”中全面支持國(guó)產(chǎn)化,強(qiáng)化了關(guān)鍵核心技術(shù)與產(chǎn)品的自研能力,實(shí)現(xiàn)了“軟平臺(tái)”國(guó)產(chǎn)化與非國(guó)產(chǎn)化的混合兼容,確保IT全產(chǎn)業(yè)鏈的安全、可控、可持續(xù)。
大唐電信云化大數(shù)據(jù)中心產(chǎn)品體系
“新基建”中各類(lèi)行業(yè)應(yīng)用可部署在基于云化的大數(shù)據(jù)中心“數(shù)字底座”上,采用統(tǒng)一的系統(tǒng)建設(shè)與支撐手段(即基礎(chǔ)設(shè)施云化、數(shù)據(jù)云化、應(yīng)用云化與智能化),實(shí)現(xiàn)信息資源的應(yīng)用整合、數(shù)據(jù)價(jià)值的增值和管理服務(wù)水平提升。
大唐電信提出的支撐一體化解決方案的“數(shù)字底座”—大數(shù)據(jù)中心核心產(chǎn)品體系,包括三大平臺(tái)(人工智能平臺(tái)、一站式大數(shù)據(jù)平臺(tái)、數(shù)據(jù)云平臺(tái))三類(lèi)數(shù)據(jù)庫(kù)(閃存數(shù)據(jù)庫(kù)、交易數(shù)據(jù)庫(kù)、圖數(shù)據(jù)庫(kù)),如下圖所示。
圖|大唐電信云一體化大數(shù)據(jù)平臺(tái)產(chǎn)品體系
該產(chǎn)品體系可概括為“ABC+DB”,“A”指“AI”即人工智能平臺(tái),“B”指“Big Data”即一站式大數(shù)據(jù)平臺(tái),“C”指“Cloud”即數(shù)據(jù)云平臺(tái),而“DB”則是包括分布式交易數(shù)據(jù)庫(kù)、分布式閃存數(shù)據(jù)庫(kù)和圖數(shù)據(jù)庫(kù)在內(nèi)的三類(lèi)數(shù)據(jù)庫(kù),它們共同構(gòu)成了“新一代云化大數(shù)據(jù)中心的數(shù)字底座”,為各類(lèi)客戶(hù)快速搭建其行業(yè)應(yīng)用提供有力支撐。
一站式大數(shù)據(jù)平臺(tái)BIGDataHub:在產(chǎn)品體系中處于基礎(chǔ)平臺(tái)地位,可實(shí)現(xiàn)高性能、可擴(kuò)展的數(shù)據(jù)批處理與實(shí)時(shí)的流處理,其內(nèi)置的分布式分析型數(shù)據(jù)庫(kù)實(shí)現(xiàn)了完整的SQL和分布式事務(wù)支持,支持通過(guò)SQL語(yǔ)句實(shí)現(xiàn)大數(shù)據(jù)上的秒級(jí)全文搜索,大大方便了對(duì)海量數(shù)據(jù)的檢索查詢(xún)。另外,該平臺(tái)還提供了圖形化的大數(shù)據(jù)開(kāi)發(fā)工具套件,包括數(shù)據(jù)治理、工作流引擎、數(shù)據(jù)整合、數(shù)據(jù)建模、報(bào)表等多種工具。用戶(hù)可以使用這些圖形化工具來(lái)提高大數(shù)據(jù)的開(kāi)發(fā)效率,降低技術(shù)門(mén)檻。
云數(shù)據(jù)平臺(tái)DATA Cloud:該平臺(tái)基于一個(gè)共同的底座架構(gòu)可滿(mǎn)足大型系統(tǒng)、中型系統(tǒng)、小型系統(tǒng)的多次建設(shè)要求和平滑升級(jí),底層采用了統(tǒng)一的容器支撐平臺(tái)可構(gòu)建形成“聯(lián)邦云”模式,打通應(yīng)用與數(shù)據(jù)之間的無(wú)縫訪(fǎng)問(wèn),云平臺(tái)內(nèi)共享資源,資源可彈性伸縮且相互借用,大幅提升資源使用效率。
人工智能平臺(tái)AI DataSeer:是一款集數(shù)據(jù)處理、模型加工、線(xiàn)上監(jiān)控以及數(shù)據(jù)分析為一體的人工智能基礎(chǔ)平臺(tái)?;诒酒脚_(tái),用戶(hù)可以快速完成從特征工程、模型訓(xùn)練到模型上線(xiàn)的機(jī)器學(xué)習(xí)全生命周期開(kāi)發(fā)工作。
為支持云化大數(shù)據(jù)中心的高性能,在產(chǎn)品體系可根據(jù)應(yīng)用需求選擇內(nèi)嵌不同類(lèi)型的分布式數(shù)據(jù)庫(kù),以適用于不同的客戶(hù)場(chǎng)景。
交易數(shù)據(jù)庫(kù)FastDB:分布式關(guān)系型國(guó)產(chǎn)數(shù)據(jù)庫(kù),具有可擴(kuò)展、高并發(fā)、高可用特性,對(duì)于現(xiàn)代數(shù)據(jù)庫(kù)的需求提供了通用的解決方案。它可以方便地部署上云,并提供多租戶(hù)能力,保障租戶(hù)隔離和SLA。它采用可擴(kuò)展分布式架構(gòu),輕松處理高并發(fā)、大流量訪(fǎng)問(wèn),使數(shù)據(jù)庫(kù)性能不再成為系統(tǒng)瓶頸。
閃存數(shù)據(jù)庫(kù)LightningDB:分布式閃存國(guó)產(chǎn)數(shù)據(jù)庫(kù)產(chǎn)品,它從底層為適應(yīng)閃存而設(shè)計(jì)了精巧的存儲(chǔ)結(jié)構(gòu)和高效的算法。由于其出色的性能,在一套產(chǎn)品里即可以滿(mǎn)足用戶(hù)的多種復(fù)雜需求。以往客戶(hù)根據(jù)不同需求,需要分別部署離線(xiàn)批處理數(shù)據(jù)倉(cāng)庫(kù)、實(shí)時(shí)數(shù)據(jù)分析平臺(tái)、OLAP數(shù)據(jù)庫(kù)、全文檢索數(shù)據(jù)庫(kù)等,而現(xiàn)在只需要簡(jiǎn)單的一個(gè)LightningDB就可以滿(mǎn)足客戶(hù)的所有需求。
分布式圖數(shù)據(jù)庫(kù)GraphDB:企業(yè)級(jí)分布式圖數(shù)據(jù)庫(kù),用于快速查找數(shù)據(jù)間的關(guān)聯(lián)關(guān)系,并提供強(qiáng)大的算法分析能力。它實(shí)現(xiàn)了傳統(tǒng)數(shù)據(jù)庫(kù)無(wú)法提供的低延時(shí)多層關(guān)系查詢(xún),在社交網(wǎng)絡(luò)、公安、金融領(lǐng)域都有巨大應(yīng)用潛力。
云化大數(shù)據(jù)中心的相關(guān)實(shí)踐進(jìn)展
基于新一代云化大數(shù)據(jù)中心解決方案,大唐電信以行業(yè)需求為業(yè)務(wù)驅(qū)動(dòng),通過(guò)技術(shù)和業(yè)務(wù)的緊密結(jié)合,實(shí)現(xiàn)技術(shù)賦能行業(yè)發(fā)展,為行業(yè)發(fā)展提供技術(shù)保障,已成功為包括政府、電信、教育、交通等多個(gè)行業(yè)的客戶(hù)實(shí)施了多個(gè)數(shù)據(jù)上云與應(yīng)用上云和智能化項(xiàng)目。
“重點(diǎn)醫(yī)療物資保障平臺(tái)”、“制造強(qiáng)國(guó)產(chǎn)業(yè)基礎(chǔ)大數(shù)據(jù)平臺(tái)”是大數(shù)據(jù)技術(shù)在工信部產(chǎn)業(yè)發(fā)展監(jiān)測(cè)領(lǐng)域的典型應(yīng)用;“高速公路大數(shù)據(jù)分析平臺(tái)研發(fā)及應(yīng)用示范”是大數(shù)據(jù)及人工智能技術(shù)在交通領(lǐng)域的典型應(yīng)用。這些案例得到了客戶(hù)及行業(yè)主管部門(mén)的高度認(rèn)可。其中,“高速公路交通大數(shù)據(jù)分析平臺(tái)研發(fā)及應(yīng)用示范”項(xiàng)目成功入選了工信部2018年大數(shù)據(jù)產(chǎn)業(yè)發(fā)展試點(diǎn)示范項(xiàng)目,“職業(yè)教育校園大數(shù)據(jù)應(yīng)用試點(diǎn)示范”項(xiàng)目成功入選了工信部2020年大數(shù)據(jù)產(chǎn)業(yè)發(fā)展試點(diǎn)示范項(xiàng)目,“重點(diǎn)醫(yī)療物資保障平臺(tái)”還入選了2020年工信部疫情防控和復(fù)工復(fù)產(chǎn)復(fù)課大數(shù)據(jù)產(chǎn)品和解決方案。
大唐電信高度重視通過(guò)標(biāo)準(zhǔn)化工作跟進(jìn)行業(yè)技術(shù)及應(yīng)用的最新進(jìn)展并提升自身在行業(yè)的參與度與地位。目前,大唐電信已牽頭制定并發(fā)布了7項(xiàng)云計(jì)算、大數(shù)據(jù)領(lǐng)域的國(guó)際標(biāo)準(zhǔn)和2項(xiàng)該領(lǐng)域的行業(yè)標(biāo)準(zhǔn)。
2020年5月,經(jīng)全國(guó)科技振興城市經(jīng)濟(jì)研究會(huì)批準(zhǔn),由大唐電信倡議發(fā)起成立了數(shù)字經(jīng)濟(jì)數(shù)據(jù)安全委員會(huì),該專(zhuān)委會(huì)旨在發(fā)展數(shù)字經(jīng)濟(jì),提升數(shù)據(jù)安全保障能力,積極推進(jìn)數(shù)字產(chǎn)業(yè)化、產(chǎn)業(yè)數(shù)字化、引導(dǎo)數(shù)字經(jīng)濟(jì)和實(shí)體經(jīng)濟(jì)融合,推動(dòng)創(chuàng)新發(fā)展和城市振興,并通過(guò)數(shù)據(jù)安全為數(shù)字經(jīng)濟(jì)保駕護(hù)航,全面助力國(guó)家數(shù)字經(jīng)濟(jì)高質(zhì)量發(fā)展。