版權(quán)所有?大唐電信科技股份有限公司
京ICP備06071639號 京公網(wǎng)安備11010802023277號面對撲面而來的“新基建”浪潮所帶來的大量數(shù)據(jù)上云、應(yīng)用上云需求與機(jī)會,大唐電信提出了新一代云化大數(shù)據(jù)中心解決方案,已在產(chǎn)品、技術(shù)、標(biāo)準(zhǔn)、業(yè)務(wù)融合與實施能力等方面做好了充分的準(zhǔn)備,我們將把“與‘新基建’同行,服務(wù)國家發(fā)展戰(zhàn)略”作為自身的使命和發(fā)展戰(zhàn)略,盡自己所能為“新基建”建設(shè)添磚加瓦。
云化大數(shù)據(jù)中心總體架構(gòu)
基于對“新基建”中對新一代云化大數(shù)據(jù)中心建設(shè)需求的理解與應(yīng)用需求,大唐電信推出了面向“部-?。校镜亍倍鄬蛹壗ㄔO(shè)需求的一體化云大數(shù)據(jù)中心解決方案。該方案基于云原生容器技術(shù),構(gòu)建集資源基礎(chǔ)設(shè)施云化、安全設(shè)施與數(shù)據(jù)云化、業(yè)務(wù)應(yīng)用智能化為一體的大數(shù)據(jù)中心,為各部委或行業(yè)實現(xiàn)跨部門業(yè)務(wù)融合、跨地區(qū)集中統(tǒng)一服務(wù),提供快速高效、便捷安全的建設(shè)與支撐手段。
大唐電信一體化云大數(shù)據(jù)中心的總體架構(gòu)如下圖所示:
圖|大唐電信一體化云大數(shù)據(jù)中心系統(tǒng)總體架構(gòu)
資源基礎(chǔ)設(shè)施云化:底層基于云原生容器技術(shù)對資源基礎(chǔ)設(shè)施進(jìn)行云化,云化后的IaaS平臺可有效解決資源管理效率問題,對系統(tǒng)資源提供橫向和縱向的統(tǒng)一管理,將計算、存儲、網(wǎng)絡(luò)等各類資源包裝成服務(wù),提供高效的配置和調(diào)度。
安全與數(shù)據(jù)云化:基于大數(shù)據(jù)平臺及內(nèi)嵌數(shù)據(jù)庫系統(tǒng)快速構(gòu)建面向數(shù)據(jù)的云化PaaS平臺,并通過云密碼服務(wù)設(shè)施以及模塊化疊加的專業(yè)應(yīng)用服務(wù)設(shè)施(如GIS地理信息服務(wù)、北斗導(dǎo)航定位服務(wù)等),有效解決數(shù)據(jù)分散、隔離問題以及數(shù)據(jù)在認(rèn)證、傳輸、存儲中的安全問題,避免交換障礙,使各類數(shù)據(jù)資產(chǎn)共享集中存儲,實現(xiàn)數(shù)據(jù)服務(wù)開放、數(shù)據(jù)相互交換,并搭載數(shù)據(jù)資產(chǎn)目錄以提供綜合數(shù)據(jù)治理。
業(yè)務(wù)應(yīng)用智能化:基于大數(shù)據(jù)平臺底座并結(jié)合人工智能提供豐富的中間件和應(yīng)用開發(fā)工具(包括管理后臺、工具庫、人工智能AI模型庫等),解決應(yīng)用系統(tǒng)在開發(fā)、部署、運(yùn)維、治理中的效率和智能化問題,以應(yīng)對系統(tǒng)中面臨的各類管理接口障礙,從而實現(xiàn)業(yè)務(wù)應(yīng)用的高度智慧化與使用的便捷化。
云化大數(shù)據(jù)中心“軟平臺”技術(shù)
實際上,要想讓數(shù)據(jù)中心真正發(fā)揮其在“新基建”中“數(shù)字底座”的核心作用,僅靠人們腦海中的大量服務(wù)器、存儲和網(wǎng)絡(luò)設(shè)備等硬件基礎(chǔ)設(shè)施云化(硬平臺)是遠(yuǎn)遠(yuǎn)不夠的。數(shù)據(jù)中心真正發(fā)揮業(yè)務(wù)作用的是對外提供各種類型的云數(shù)據(jù)服務(wù)平臺(軟平臺)是必不可少?!坝财脚_”就像是一個人的骨骼和肌肉,有了它就有了云數(shù)據(jù)中心的“形”,而“軟平臺”則像是一個人的大腦,有了它才有了云數(shù)據(jù)中心的“神”。只有將“硬平臺”與“軟平臺”有機(jī)地結(jié)合在一起,云化大數(shù)據(jù)中心才能構(gòu)成一個完整的、有思考和行為能力的“人”。
圖|大唐電信云化大數(shù)據(jù)中心的軟平臺技術(shù)結(jié)構(gòu)
“軟平臺”在IaaS層包括操作系統(tǒng)和云管理系統(tǒng)平臺,采用容器編排工具進(jìn)行統(tǒng)一集群管理;在PaaS層則主要是通過各類嵌入數(shù)據(jù)庫滿足不同存儲需求,提供大數(shù)據(jù)的流程和離線批處理能力,并提供數(shù)據(jù)安全服務(wù),支持對數(shù)據(jù)的深入挖掘分析,基于微服務(wù)架構(gòu)的云原生應(yīng)用進(jìn)行持續(xù)部署和集成;在SaaS層則包括各行業(yè)的應(yīng)用軟件和對專項業(yè)務(wù)安全應(yīng)用的支持。在當(dāng)前云原生、分布式技術(shù)架構(gòu)逐漸成為主流技術(shù)的背景下,“軟平臺”支持容器管理、分布式交易數(shù)據(jù)庫與分布式閃存數(shù)據(jù)庫、海量數(shù)據(jù)的批量與流式處理等關(guān)鍵技術(shù),架構(gòu)性能處于國內(nèi)領(lǐng)先水平。
同時,大唐電信的一體化云大數(shù)據(jù)中心在“新基建”中全面支持國產(chǎn)化,強(qiáng)化了關(guān)鍵核心技術(shù)與產(chǎn)品的自研能力,實現(xiàn)了“軟平臺”國產(chǎn)化與非國產(chǎn)化的混合兼容,確保IT全產(chǎn)業(yè)鏈的安全、可控、可持續(xù)。
大唐電信云化大數(shù)據(jù)中心產(chǎn)品體系
“新基建”中各類行業(yè)應(yīng)用可部署在基于云化的大數(shù)據(jù)中心“數(shù)字底座”上,采用統(tǒng)一的系統(tǒng)建設(shè)與支撐手段(即基礎(chǔ)設(shè)施云化、數(shù)據(jù)云化、應(yīng)用云化與智能化),實現(xiàn)信息資源的應(yīng)用整合、數(shù)據(jù)價值的增值和管理服務(wù)水平提升。
大唐電信提出的支撐一體化解決方案的“數(shù)字底座”—大數(shù)據(jù)中心核心產(chǎn)品體系,包括三大平臺(人工智能平臺、一站式大數(shù)據(jù)平臺、數(shù)據(jù)云平臺)三類數(shù)據(jù)庫(閃存數(shù)據(jù)庫、交易數(shù)據(jù)庫、圖數(shù)據(jù)庫),如下圖所示。
圖|大唐電信云一體化大數(shù)據(jù)平臺產(chǎn)品體系
該產(chǎn)品體系可概括為“ABC+DB”,“A”指“AI”即人工智能平臺,“B”指“Big Data”即一站式大數(shù)據(jù)平臺,“C”指“Cloud”即數(shù)據(jù)云平臺,而“DB”則是包括分布式交易數(shù)據(jù)庫、分布式閃存數(shù)據(jù)庫和圖數(shù)據(jù)庫在內(nèi)的三類數(shù)據(jù)庫,它們共同構(gòu)成了“新一代云化大數(shù)據(jù)中心的數(shù)字底座”,為各類客戶快速搭建其行業(yè)應(yīng)用提供有力支撐。
一站式大數(shù)據(jù)平臺BIGDataHub:在產(chǎn)品體系中處于基礎(chǔ)平臺地位,可實現(xiàn)高性能、可擴(kuò)展的數(shù)據(jù)批處理與實時的流處理,其內(nèi)置的分布式分析型數(shù)據(jù)庫實現(xiàn)了完整的SQL和分布式事務(wù)支持,支持通過SQL語句實現(xiàn)大數(shù)據(jù)上的秒級全文搜索,大大方便了對海量數(shù)據(jù)的檢索查詢。另外,該平臺還提供了圖形化的大數(shù)據(jù)開發(fā)工具套件,包括數(shù)據(jù)治理、工作流引擎、數(shù)據(jù)整合、數(shù)據(jù)建模、報表等多種工具。用戶可以使用這些圖形化工具來提高大數(shù)據(jù)的開發(fā)效率,降低技術(shù)門檻。
云數(shù)據(jù)平臺DATA Cloud:該平臺基于一個共同的底座架構(gòu)可滿足大型系統(tǒng)、中型系統(tǒng)、小型系統(tǒng)的多次建設(shè)要求和平滑升級,底層采用了統(tǒng)一的容器支撐平臺可構(gòu)建形成“聯(lián)邦云”模式,打通應(yīng)用與數(shù)據(jù)之間的無縫訪問,云平臺內(nèi)共享資源,資源可彈性伸縮且相互借用,大幅提升資源使用效率。
人工智能平臺AI DataSeer:是一款集數(shù)據(jù)處理、模型加工、線上監(jiān)控以及數(shù)據(jù)分析為一體的人工智能基礎(chǔ)平臺?;诒酒脚_,用戶可以快速完成從特征工程、模型訓(xùn)練到模型上線的機(jī)器學(xué)習(xí)全生命周期開發(fā)工作。
為支持云化大數(shù)據(jù)中心的高性能,在產(chǎn)品體系可根據(jù)應(yīng)用需求選擇內(nèi)嵌不同類型的分布式數(shù)據(jù)庫,以適用于不同的客戶場景。
交易數(shù)據(jù)庫FastDB:分布式關(guān)系型國產(chǎn)數(shù)據(jù)庫,具有可擴(kuò)展、高并發(fā)、高可用特性,對于現(xiàn)代數(shù)據(jù)庫的需求提供了通用的解決方案。它可以方便地部署上云,并提供多租戶能力,保障租戶隔離和SLA。它采用可擴(kuò)展分布式架構(gòu),輕松處理高并發(fā)、大流量訪問,使數(shù)據(jù)庫性能不再成為系統(tǒng)瓶頸。
閃存數(shù)據(jù)庫LightningDB:分布式閃存國產(chǎn)數(shù)據(jù)庫產(chǎn)品,它從底層為適應(yīng)閃存而設(shè)計了精巧的存儲結(jié)構(gòu)和高效的算法。由于其出色的性能,在一套產(chǎn)品里即可以滿足用戶的多種復(fù)雜需求。以往客戶根據(jù)不同需求,需要分別部署離線批處理數(shù)據(jù)倉庫、實時數(shù)據(jù)分析平臺、OLAP數(shù)據(jù)庫、全文檢索數(shù)據(jù)庫等,而現(xiàn)在只需要簡單的一個LightningDB就可以滿足客戶的所有需求。
分布式圖數(shù)據(jù)庫GraphDB:企業(yè)級分布式圖數(shù)據(jù)庫,用于快速查找數(shù)據(jù)間的關(guān)聯(lián)關(guān)系,并提供強(qiáng)大的算法分析能力。它實現(xiàn)了傳統(tǒng)數(shù)據(jù)庫無法提供的低延時多層關(guān)系查詢,在社交網(wǎng)絡(luò)、公安、金融領(lǐng)域都有巨大應(yīng)用潛力。
云化大數(shù)據(jù)中心的相關(guān)實踐進(jìn)展
基于新一代云化大數(shù)據(jù)中心解決方案,大唐電信以行業(yè)需求為業(yè)務(wù)驅(qū)動,通過技術(shù)和業(yè)務(wù)的緊密結(jié)合,實現(xiàn)技術(shù)賦能行業(yè)發(fā)展,為行業(yè)發(fā)展提供技術(shù)保障,已成功為包括政府、電信、教育、交通等多個行業(yè)的客戶實施了多個數(shù)據(jù)上云與應(yīng)用上云和智能化項目。
“重點(diǎn)醫(yī)療物資保障平臺”、“制造強(qiáng)國產(chǎn)業(yè)基礎(chǔ)大數(shù)據(jù)平臺”是大數(shù)據(jù)技術(shù)在工信部產(chǎn)業(yè)發(fā)展監(jiān)測領(lǐng)域的典型應(yīng)用;“高速公路大數(shù)據(jù)分析平臺研發(fā)及應(yīng)用示范”是大數(shù)據(jù)及人工智能技術(shù)在交通領(lǐng)域的典型應(yīng)用。這些案例得到了客戶及行業(yè)主管部門的高度認(rèn)可。其中,“高速公路交通大數(shù)據(jù)分析平臺研發(fā)及應(yīng)用示范”項目成功入選了工信部2018年大數(shù)據(jù)產(chǎn)業(yè)發(fā)展試點(diǎn)示范項目,“職業(yè)教育校園大數(shù)據(jù)應(yīng)用試點(diǎn)示范”項目成功入選了工信部2020年大數(shù)據(jù)產(chǎn)業(yè)發(fā)展試點(diǎn)示范項目,“重點(diǎn)醫(yī)療物資保障平臺”還入選了2020年工信部疫情防控和復(fù)工復(fù)產(chǎn)復(fù)課大數(shù)據(jù)產(chǎn)品和解決方案。
大唐電信高度重視通過標(biāo)準(zhǔn)化工作跟進(jìn)行業(yè)技術(shù)及應(yīng)用的最新進(jìn)展并提升自身在行業(yè)的參與度與地位。目前,大唐電信已牽頭制定并發(fā)布了7項云計算、大數(shù)據(jù)領(lǐng)域的國際標(biāo)準(zhǔn)和2項該領(lǐng)域的行業(yè)標(biāo)準(zhǔn)。
2020年5月,經(jīng)全國科技振興城市經(jīng)濟(jì)研究會批準(zhǔn),由大唐電信倡議發(fā)起成立了數(shù)字經(jīng)濟(jì)數(shù)據(jù)安全委員會,該專委會旨在發(fā)展數(shù)字經(jīng)濟(jì),提升數(shù)據(jù)安全保障能力,積極推進(jìn)數(shù)字產(chǎn)業(yè)化、產(chǎn)業(yè)數(shù)字化、引導(dǎo)數(shù)字經(jīng)濟(jì)和實體經(jīng)濟(jì)融合,推動創(chuàng)新發(fā)展和城市振興,并通過數(shù)據(jù)安全為數(shù)字經(jīng)濟(jì)保駕護(hù)航,全面助力國家數(shù)字經(jīng)濟(jì)高質(zhì)量發(fā)展。