近日,星環(huán)數(shù)據(jù)云平臺(tái) Transwarp Data Cloud (以下簡(jiǎn)稱 TDC)正式推出 3.1 版本。TDC 是采用云原生技術(shù),融合星環(huán)科技全系產(chǎn)品打造的統(tǒng)一 PaaS 平臺(tái),可以為企業(yè)提供數(shù)據(jù)流通交易平臺(tái)、企業(yè)湖倉(cāng)一體數(shù)據(jù)湖、企業(yè)數(shù)據(jù)中臺(tái)、聯(lián)邦云、企業(yè)數(shù)字化轉(zhuǎn)型、政務(wù)大數(shù)據(jù)、云原生數(shù)據(jù)科學(xué)云和高并發(fā)數(shù)據(jù)應(yīng)用八大解決方案,能夠滿足企業(yè)各種數(shù)據(jù)處理場(chǎng)景的需求,幫助企業(yè)實(shí)現(xiàn)企業(yè)數(shù)據(jù)與應(yīng)用的生態(tài)化建設(shè)。截至目前 TDC 已經(jīng)為政府、銀行、基金、能源等多個(gè)行業(yè)提供完整的數(shù)字化建設(shè)解決方案。
在星環(huán)科技 2022 年春季產(chǎn)品發(fā)布周上,TDC 重磅發(fā)布了 3.0 版本,提供了三大核心能力:第一,支持星環(huán)科技全系產(chǎn)品新版本,同時(shí) PaaS 能力持續(xù)增強(qiáng);第二,新增聯(lián)邦云管理功能;第三,安全升級(jí),新增隱私計(jì)算區(qū)。3.0 版本發(fā)布以來被眾多客戶認(rèn)可,是一套優(yōu)秀的數(shù)據(jù)云平臺(tái)。經(jīng)過半年的打磨,TDC 再次推出 3.1 版本 ,此次的新版本新增了八大功能,同時(shí)對(duì)原有能力進(jìn)行了優(yōu)化升級(jí)!
新增滾動(dòng)重啟、存儲(chǔ)擴(kuò)容、存儲(chǔ)回收站等八大核心功能
滾動(dòng)重啟,保障業(yè)務(wù)連續(xù)性
新增對(duì)多副本高可用角色(工作負(fù)載)的滾動(dòng)重啟能力。將底層滾動(dòng)重啟能力和業(yè)務(wù)重啟邏輯結(jié)合,在變更過程中,實(shí)現(xiàn)了分布式系統(tǒng)的可靠自動(dòng)有序重啟,保障在 TDC 上運(yùn)行的大數(shù)據(jù)業(yè)務(wù)的運(yùn)行連續(xù)性。
多種存儲(chǔ)擴(kuò)容方式,滿足數(shù)據(jù)持續(xù)增長(zhǎng)
支持對(duì)星環(huán)科技存儲(chǔ)引擎 TDFS、TDDMS 進(jìn)行手動(dòng)擴(kuò)容存儲(chǔ),擴(kuò)容方式支持在線增加磁盤大小、增加磁盤個(gè)數(shù)、增加副本數(shù)。在擴(kuò)容開始前系統(tǒng)將進(jìn)行資源預(yù)檢,無論是否可以成功擴(kuò)容,都不會(huì)影響原來業(yè)務(wù)運(yùn)行,并且在擴(kuò)容過程中可正常提供數(shù)據(jù)讀寫操作。
存儲(chǔ)回收站,避免數(shù)據(jù)誤刪
刪除 TDFS、TDDMS、KunDB 組件或所屬實(shí)例時(shí),數(shù)據(jù)不會(huì)直接被刪除,可以選擇放入回收站,從而避免用戶誤操作刪除數(shù)據(jù)導(dǎo)致生產(chǎn)事故。支持展示租戶回收站內(nèi)的存儲(chǔ)總量,并可按需一鍵清理并查詢清理記錄。
高性能網(wǎng)絡(luò),滿足 TP 場(chǎng)景高性能需求
引入 Macvlan 高性能網(wǎng)絡(luò),業(yè)務(wù)可按需開啟高性能網(wǎng)絡(luò),滿足 KunDB 等對(duì)網(wǎng)絡(luò)性能的要求。相較于開源 Macvlan 網(wǎng)絡(luò)方案,TDC 的方案沒有物理網(wǎng)段的限制,可以任意自定義第二塊網(wǎng)卡使用的網(wǎng)段(包括物理網(wǎng)段,因此不需要申請(qǐng)額外申請(qǐng)固定的 IP 網(wǎng)段),并且能夠自動(dòng)的提供第二塊網(wǎng)卡的服務(wù)發(fā)現(xiàn),完整實(shí)現(xiàn)了底層 Kubernetes 的 Service 功能。
除此之外,TDC 的網(wǎng)絡(luò)能力還做了如下改進(jìn):
【VIP】虛擬 IP 支持綁定二層網(wǎng)絡(luò)下的節(jié)點(diǎn)集合(網(wǎng)絡(luò)可用區(qū)),虛擬 IP 將在選擇的可用區(qū)對(duì)應(yīng)的網(wǎng)段中創(chuàng)建,從而可以做到外部流量不只是通過 master 節(jié)點(diǎn)進(jìn)來,提高了集群處理外部流量的能力,也通過分散到不同節(jié)點(diǎn)提高了可用性。
【SLB】為組件配置 SLB 時(shí)可開啟流量轉(zhuǎn)發(fā)高性能網(wǎng)絡(luò),開啟后訪問配置對(duì)象的流量將會(huì)被轉(zhuǎn)發(fā)至高性能網(wǎng)絡(luò)上,提升訪問性能。
聯(lián)邦云網(wǎng)絡(luò)統(tǒng)一管理,更便捷聯(lián)通兩地集群
通過統(tǒng)一的域名解析體系實(shí)現(xiàn)聯(lián)邦云集群之間的網(wǎng)絡(luò)連接與通信,打通底層多個(gè)集群之間的網(wǎng)絡(luò)。應(yīng)用場(chǎng)景有:統(tǒng)一管理分布式部署在不同集群上的數(shù)據(jù)庫(kù)實(shí)例,分散讀寫請(qǐng)求流量,提高讀寫效率,同時(shí)支撐在多個(gè)數(shù)據(jù)中心之間星環(huán)產(chǎn)品(例如 KunDB )的數(shù)據(jù)安全通信需求。在傳統(tǒng)跨機(jī)房通信中,是通過手工搭建的方式實(shí)現(xiàn)的,搭建過程比較繁瑣,耗費(fèi)人力和時(shí)間,聯(lián)邦云實(shí)現(xiàn)了自動(dòng)的跨集群通信,更加便捷。
開源生態(tài)對(duì)接,更好滿足客戶多樣需求
實(shí)現(xiàn)開源 Spark 在 TDC 的上架和運(yùn)行,并與星環(huán)科技大數(shù)據(jù)體系對(duì)接,以便更靈活滿足客戶使用場(chǎng)景以及支撐星環(huán)智能分析工具 Sophon:
支持在 TDC 上可視化部署 Spark,支持 HA 部署,支持通過運(yùn)維入口查看歷史任務(wù),支持資源擴(kuò)容和縮容。
支持對(duì)接星環(huán)科技大數(shù)據(jù)安全管理軟件 Guardian,支持對(duì)接開啟安全的星環(huán)分布式文件系統(tǒng) TDFS。
GPU 分組,更靈活管理 GPU 資源
支持 GPU 分組,可以精細(xì)管理和調(diào)度 GPU 資源,不同工作負(fù)載或者租戶在使用時(shí),可以指定分組的 GPU 卡資源,實(shí)現(xiàn)資源分組和配額管理。
高可用增強(qiáng),提升平臺(tái)可靠性
針對(duì)客戶對(duì)于高可用的更高要求,TDC 從操作系統(tǒng)層開始進(jìn)行梳理,并通過嚴(yán)格的高可用測(cè)試,改進(jìn)了 TCOS 和 TDC 云管平臺(tái),以及云產(chǎn)品星環(huán)科技大數(shù)據(jù)開發(fā)工具 TDS 和智能分析工具 Sophon 的高可用能力,可以實(shí)現(xiàn)單組件副本、硬盤故障、網(wǎng)絡(luò)故障、控制單節(jié)點(diǎn)故障、工作多節(jié)點(diǎn)故障下,平臺(tái)仍然可以正常對(duì)外服務(wù)。
同時(shí),為了提升易用性,TDC 還新增了模塊化安裝功能,安裝 TDC 時(shí)可按需選裝所需系統(tǒng)服務(wù),后續(xù)有需要時(shí)可通過 TDC 安裝工具按需部署。目前可選裝包括微服務(wù)引擎、DevOps、應(yīng)用市場(chǎng)、數(shù)據(jù)市場(chǎng)模塊。
除新增功能外,TDC 本次升級(jí)也對(duì)原有功能進(jìn)行了優(yōu)化和升級(jí),其中包括:
【統(tǒng)一用戶】TDC 各系統(tǒng)實(shí)現(xiàn)統(tǒng)一用戶、登錄和門戶,同時(shí)兼容原有租戶用戶管理模式,提升用戶登錄體驗(yàn)。
【權(quán)限管控】增強(qiáng) HDFS 權(quán)限管控,解決不同租戶的同名用戶權(quán)限不隔離的問題,實(shí)現(xiàn)多租戶共享 TDFS 目錄權(quán)限隔離,規(guī)范并實(shí)現(xiàn)上游組件在 TDFS/ Zookeeper/KunDB 創(chuàng)建不同路徑,同時(shí)支持白名單機(jī)制,實(shí)現(xiàn)跨租戶訪問 TDFS 權(quán)限由 Guardian 嚴(yán)格控制。
截至目前,星環(huán)科技數(shù)據(jù)云平臺(tái) TDC 已經(jīng)在數(shù)十家大型企業(yè)落地,覆蓋多個(gè)行業(yè)。其中典型案例包括:為江蘇農(nóng)信建設(shè)的大數(shù)據(jù) DAAS 應(yīng)用平臺(tái),提升了江蘇農(nóng)信數(shù)據(jù)輸出服務(wù)能力;為上海大數(shù)據(jù)中心建設(shè)了上海市數(shù)據(jù)共享交換平臺(tái),為一網(wǎng)通辦、政府大屏、政務(wù)決策等政務(wù)應(yīng)用提供支撐,有效提升政府部門辦事效率;為中化中化信息大數(shù)據(jù)平臺(tái)建設(shè)提供了一站式的大數(shù)據(jù)解決方案,充分整合和管理企業(yè)各個(gè)系統(tǒng)全生命周期數(shù)據(jù),快速挖掘數(shù)據(jù)背后的價(jià)值,綜合提升企業(yè)管理和運(yùn)營(yíng)能力。
(免責(zé)聲明:本網(wǎng)站內(nèi)容主要來自原創(chuàng)、合作伙伴供稿和第三方自媒體作者投稿,凡在本網(wǎng)站出現(xiàn)的信息,均僅供參考。本網(wǎng)站將盡力確保所提供信息的準(zhǔn)確性及可靠性,但不保證有關(guān)資料的準(zhǔn)確性及可靠性,讀者在使用前請(qǐng)進(jìn)一步核實(shí),并對(duì)任何自主決定的行為負(fù)責(zé)。本網(wǎng)站對(duì)有關(guān)資料所引致的錯(cuò)誤、不確或遺漏,概不負(fù)任何法律責(zé)任。
任何單位或個(gè)人認(rèn)為本網(wǎng)站中的網(wǎng)頁或鏈接內(nèi)容可能涉嫌侵犯其知識(shí)產(chǎn)權(quán)或存在不實(shí)內(nèi)容時(shí),應(yīng)及時(shí)向本網(wǎng)站提出書面權(quán)利通知或不實(shí)情況說明,并提供身份證明、權(quán)屬證明及詳細(xì)侵權(quán)或不實(shí)情況證明。本網(wǎng)站在收到上述法律文件后,將會(huì)依法盡快聯(lián)系相關(guān)文章源頭核實(shí),溝通刪除相關(guān)內(nèi)容或斷開相關(guān)鏈接。 )