日本黄色一级经典视频|伊人久久精品视频|亚洲黄色色周成人视频九九九|av免费网址黄色小短片|黄色Av无码亚洲成年人|亚洲1区2区3区无码|真人黄片免费观看|无码一级小说欧美日免费三级|日韩中文字幕91在线看|精品久久久无码中文字幕边打电话

當(dāng)前位置:首頁 > 物聯(lián)網(wǎng) > IT葡萄皮
[導(dǎo)讀]BOSS系統(tǒng)的存儲容量限制一直是阻礙廣東移動數(shù)據(jù)價值實(shí)踐的天花板。溫?cái)?shù)據(jù)沒地方存,只能定期遷到冷存儲上了事。而GaussDB OLAP數(shù)據(jù)庫的出現(xiàn)和華為工程團(tuán)隊(duì)的天才方案設(shè)計(jì)卻用巧勁輕松捅穿了這層“鋼筋水泥天花板”,在不浪費(fèi)原有系統(tǒng)的情況下解決了擴(kuò)容問題,


BOSS系統(tǒng)的存儲容量限制一直是阻礙廣東移動數(shù)據(jù)價值實(shí)踐的天花板。溫?cái)?shù)據(jù)沒地方存,只能定期遷到冷存儲上了事。而GaussDB OLAP數(shù)據(jù)庫的出現(xiàn)和華為工程團(tuán)隊(duì)的天才方案設(shè)計(jì)卻用巧勁輕松捅穿了這層“鋼筋水泥天花板”,在不浪費(fèi)原有系統(tǒng)的情況下解決了擴(kuò)容問題,讓溫?cái)?shù)據(jù)不再直接變冷。而在這一過程中,廣東移動IT團(tuán)隊(duì)也找到了新老數(shù)據(jù)庫和關(guān)鍵業(yè)務(wù)高效共存的解決之道

數(shù)字化轉(zhuǎn)型的核心就是要充分發(fā)掘數(shù)據(jù)的價值,而這對應(yīng)著兩條非常明確的實(shí)現(xiàn)路徑。其中之一,是對數(shù)據(jù)的產(chǎn)生和變化進(jìn)行即時響應(yīng),通過提高業(yè)務(wù)及數(shù)據(jù)實(shí)時性的方法來打造敏捷、靈活的數(shù)字化企業(yè);而另一條路徑則是發(fā)掘存量數(shù)據(jù)的價值,通過對海量數(shù)據(jù)的分析找出不斷變化的趨勢,為企業(yè)提供更高層次的洞察。

兩條路徑的啟點(diǎn)雖然都是數(shù)據(jù),但在啟點(diǎn)之后的數(shù)據(jù)庫應(yīng)用中卻會走上不同路徑。前者對應(yīng)了頻繁的寫操作,后者則對應(yīng)了大量的讀操作。而這也正是OLTP和OLAP的分水嶺。所謂數(shù)字化轉(zhuǎn)型,二者缺一不可。

作為企業(yè)數(shù)據(jù)庫領(lǐng)域的新晉選手,GaussDB在今年初正式發(fā)布之后可謂賺足了眼球。憑借全自研和分布式的特性,GaussDB一經(jīng)推出便受到了各方注意和爭相報(bào)道。

當(dāng)然,作為面向企業(yè)核心應(yīng)用的數(shù)據(jù)庫產(chǎn)品,推出和應(yīng)用完全是兩回事,更何況是在Oracle等產(chǎn)品已經(jīng)占據(jù)市場相當(dāng)久的情況下,要上馬一款關(guān)乎核心應(yīng)用的新數(shù)據(jù)庫,企業(yè)和華為要考慮的事情還有很多。

0 1
PART
面對數(shù)據(jù)金礦,廣東移動遇到了天花板

廣東是國內(nèi)當(dāng)之無愧的人口與經(jīng)濟(jì)第一大省,無論面對10萬億規(guī)模的GDP還是面對超過1億的常住人口,通訊服務(wù)都是必須保障的基礎(chǔ)服務(wù)。作為廣東省運(yùn)營商市場的絕對主力,20196月,廣東移動服務(wù)的用戶總數(shù)已超過1.4億。海量的用戶規(guī)模既意味著巨大的收入,也同時意味著巨大的數(shù)據(jù)挑戰(zhàn)。

業(yè)務(wù)運(yùn)營支持系統(tǒng),簡稱BOSS系統(tǒng),在運(yùn)營商應(yīng)用中負(fù)責(zé)記錄用戶的通話詳單,是業(yè)務(wù)中基石的基石,是企業(yè)對用戶收費(fèi)和開展各類高級業(yè)務(wù)的依據(jù),重要性不言而喻。面對行業(yè)監(jiān)管的硬性規(guī)定,太快刪除這些數(shù)據(jù)是不可能的;面對數(shù)字化轉(zhuǎn)型的壓力,想要把這些數(shù)據(jù)移出主數(shù)據(jù)庫、歸檔到磁帶等冷存儲上也是不可取的。

但現(xiàn)實(shí)的情況卻是,這套目前服務(wù)于1.4億用戶的BOSS系統(tǒng)每月都會產(chǎn)生30TB的增量數(shù)據(jù)。目前,BOSS系統(tǒng)的Oracle數(shù)據(jù)庫中已經(jīng)存儲了150TB數(shù)據(jù),而承擔(dān)存儲任務(wù)的EMC核心存儲系統(tǒng)的容量上限為200TB……

如果以“數(shù)據(jù)即是財(cái)富”的角度來看,廣東移動每月30TB的新增數(shù)據(jù)和海量的庫存數(shù)據(jù)無疑是座巨大的金礦;但現(xiàn)時的難題卻是負(fù)責(zé)存儲這一數(shù)據(jù)庫的EMC核心存儲已經(jīng)在容量上捉襟見肘,節(jié)點(diǎn)內(nèi)的擴(kuò)展能力早已完全枯竭。

0 2
PART
擴(kuò)展力決定想象力,解決數(shù)據(jù)庫擴(kuò)容難題

一方面是不斷積累的寶貴用戶數(shù)據(jù),另一方面則是接近極限的存儲能力;這就相當(dāng)于出海打漁卻發(fā)現(xiàn)船艙太小,廣東移動的心情可想而知。

放在過去,廣東移動似乎除了將存不下的數(shù)據(jù)遷到冷存儲上之外,只剩下?lián)Q裝核心存儲系統(tǒng)這一條路可走了;但這僅剩的選擇也同樣意味著極高的成本和眾多不可預(yù)知的風(fēng)險。不過,隨著數(shù)據(jù)庫技術(shù)的進(jìn)步,華為卻為廣州移動提出了全新的解決思路。

在不替換現(xiàn)有數(shù)據(jù)庫和存儲系統(tǒng)的前提下再接入一套分布式數(shù)據(jù)庫,兩套數(shù)據(jù)庫均通過JDBC(Java Database Connectivity)與上層的BOSS系統(tǒng)及其他業(yè)務(wù)系統(tǒng)相連。這樣,通過定期將Oracle主數(shù)據(jù)庫在EMC核心存儲中的數(shù)據(jù)遷移到分布式數(shù)據(jù)庫上就能在不對核心數(shù)據(jù)庫及存儲進(jìn)行大改的前提下實(shí)現(xiàn)對數(shù)據(jù)庫的擴(kuò)容。

從這一升級思路中,我們不難看出,其中的關(guān)鍵點(diǎn)在于承擔(dān)擴(kuò)展任務(wù)的分布式數(shù)據(jù)庫不僅要具備能夠滿足未來數(shù)據(jù)需求的擴(kuò)展能力,更要擁有足夠的可靠性來承載業(yè)務(wù)核心數(shù)據(jù)。當(dāng)然,最關(guān)鍵的是,數(shù)據(jù)要足夠安全,遷移要又快又穩(wěn)。

在這其中扮演關(guān)鍵角色的分布式數(shù)據(jù)庫正是站在聚光燈下的華為GaussDB。

目前,GaussDB有兩個版本,分別對應(yīng)OLTP和OLAP應(yīng)用。仔細(xì)判斷廣東移動對遷移數(shù)據(jù)的需求,我們不難發(fā)現(xiàn),需要遷移的數(shù)據(jù)并非近幾月產(chǎn)生的最新數(shù)據(jù),而是數(shù)月之前的數(shù)據(jù)。這些數(shù)據(jù)已經(jīng)不會再進(jìn)行頻繁的修改操作,反倒是對于總結(jié)業(yè)務(wù)在季度/半年/全年當(dāng)中的變化趨勢仍有不小幫助,查詢需求大于修改需求。因此,GaussDB OLAP是最適合的選擇。

作為一款分布式數(shù)據(jù)庫,GaussDB OLAP由負(fù)責(zé)響應(yīng)SQL任務(wù)的Coordinator Node(CN節(jié)點(diǎn))和負(fù)責(zé)存儲數(shù)據(jù)的Data Node(DN節(jié)點(diǎn))共同組成,CN節(jié)點(diǎn)和DN節(jié)點(diǎn)均可自由擴(kuò)展,理論上限達(dá)到2048個,以實(shí)現(xiàn)更好的訪問性能和存儲性能及容量。由此,相互解耦的CN與DN節(jié)點(diǎn)便相對輕松的實(shí)現(xiàn)了數(shù)據(jù)庫與存儲容量的橫向擴(kuò)展。這是解決Oracle+EMC組合缺乏擴(kuò)展能力問題的關(guān)鍵。

同樣是通過這種多個CN節(jié)點(diǎn)對多個DN節(jié)點(diǎn)的形式,GaussDB OLAP能夠?qū)崿F(xiàn)更好的并發(fā)查詢、讀取性能,為日后的大規(guī)模數(shù)據(jù)分析提供了很好的性能保障。

另一方面, GaussDB OLAP也通過集群內(nèi)冗余的方式解決了數(shù)據(jù)庫服務(wù)及數(shù)據(jù)存儲的可靠性問題。在整套系統(tǒng)中每個CN節(jié)點(diǎn)均可訪問全部DN節(jié)點(diǎn),因此,只要還有一個CN節(jié)點(diǎn)在線,整個數(shù)據(jù)庫就處于可用狀態(tài)。另一方面,由于采用了DN節(jié)點(diǎn)中HDFS文件系統(tǒng),數(shù)據(jù)也通過分布式和冗余的方式保障了整體的可靠性。

在項(xiàng)目實(shí)施過程中,華為為廣東移動配置了由3個CN節(jié)點(diǎn)和12個DN節(jié)點(diǎn)的GaussDB OLAP集群,并通過GDS(Gauss Data Service)工具完成了第一期431GB數(shù)據(jù)的遷移。這431GB數(shù)據(jù)遷移共耗時502.6秒,傳輸速度達(dá)到了驚人的879.74MB/s。作為對比,廣東移動在從一個Oracle數(shù)據(jù)庫向另一個Oracle數(shù)據(jù)庫導(dǎo)入數(shù)據(jù)時,速度從來沒有超過10MB/s。

0 3
PART
精誠合作,問題不再是問題

當(dāng)然,不同品類數(shù)據(jù)庫的數(shù)據(jù)遷移過程中不發(fā)生問題幾乎是不可能的。在廣東移動上馬GaussDB OLAP的數(shù)據(jù)遷移過程中,雖然配套的GDS工具能夠提供非??斓膫鬏斔黉洠@一工具卻無法完成對blob字段(大體積的非結(jié)構(gòu)化字段)的遷移工作。

發(fā)生問題不可怕,找不到解決問題的人才可怕。在遇到問題之后,華為工程團(tuán)隊(duì)立即投入戰(zhàn)斗。經(jīng)過摸索,華為工程團(tuán)隊(duì)發(fā)現(xiàn)Oracle在針對醫(yī)療領(lǐng)域的解決方案中提供了一款專門針對大體積非結(jié)構(gòu)化字段的數(shù)據(jù)遷移工具HDR(Oracle Healthcare Data Repository),利用這款工具,團(tuán)隊(duì)完美的解決了blob字段的遷移工作,項(xiàng)目得以順利進(jìn)行。

任何數(shù)據(jù)庫的換裝和遷移,核心目的都不是數(shù)據(jù)庫本身,而是要為上層應(yīng)用提供數(shù)據(jù)服務(wù),廣東移動的GaussDB項(xiàng)目同樣如此。換裝之后,廣東移動的BOSS系統(tǒng)要對接兩套數(shù)據(jù)庫,這必然涉及到業(yè)務(wù)邏輯和操作代碼的變更與轉(zhuǎn)換。這個問題不解決,后期必然會伴隨大量的業(yè)務(wù)人員重新培訓(xùn)成本。

為此,廣東移動團(tuán)隊(duì)仔細(xì)梳理了整個BOSS系統(tǒng)的業(yè)務(wù)邏輯和每一個數(shù)據(jù)庫接口,找到了新舊數(shù)據(jù)庫在語法和接口上的數(shù)百個不同點(diǎn),為GaussDB上線后的調(diào)整及修改確立了方向。而在修改之后,GaussDB也終于做到無論在接口還是語法層面都與原系統(tǒng)如出一轍,真正做到了業(yè)務(wù)層面對底層變化的無感。

可以說,除了GaussDB本身的眾多先進(jìn)特性之外,廣東移動和華為團(tuán)隊(duì)的無間合作同樣是項(xiàng)目成功實(shí)施的核心保障。

0 4
PART
數(shù)字化轉(zhuǎn)型,別讓熱數(shù)據(jù)變冷

數(shù)據(jù)是企業(yè)數(shù)字化轉(zhuǎn)型過程中的核心驅(qū)動力,是企業(yè)在數(shù)字時代的核心資產(chǎn)。與所有其他資產(chǎn)一樣,數(shù)據(jù)本身也有著自己的生命周期,因此,讓處在生命周期不同階段的數(shù)據(jù)正確發(fā)揮自身的價值也就成了完成數(shù)字化轉(zhuǎn)型的前提。

對于廣東移動們來說,在上個時代構(gòu)建的核心數(shù)據(jù)庫及存儲系統(tǒng)往往面臨著性能夠用但空間捉襟見肘的現(xiàn)實(shí)困境。這一困境使得企業(yè)不得不在一個兩難局面之間進(jìn)行選擇:要么花費(fèi)大量金錢并冒著巨大風(fēng)險對原有存儲系統(tǒng)進(jìn)行升級或橫向擴(kuò)展;要么把那些還有分析價值的數(shù)據(jù)導(dǎo)出來,直接打入冷存儲的廣寒宮。前者是對業(yè)務(wù)的不負(fù)責(zé),后者是對數(shù)據(jù)的不負(fù)責(zé),都是數(shù)字化轉(zhuǎn)型中的大“罪過”。

數(shù)據(jù)庫擴(kuò)容并不是新問題,市面上的解決方案也絕非GaussDB一種。而之所以廣東移動要選擇初出茅廬的華為GaussDB,一方面是源于GaussDB強(qiáng)大的擴(kuò)展能力及新穎的方案;另一方面則是因?yàn)樯蠈拥腂OSS系統(tǒng)本身就是華為軟件團(tuán)隊(duì)的作品,把這個項(xiàng)目交給一群既懂應(yīng)用又懂?dāng)?shù)據(jù)庫的人,顯然是更靠譜的選擇。而在之后的方案選型及推進(jìn)過程中,廣東移動團(tuán)隊(duì)也與華為緊密協(xié)作,論證了方案的可行性并制定了詳細(xì)規(guī)劃,最終推動方案成型。

目前,廣東移動正在就新數(shù)據(jù)庫與業(yè)務(wù)系統(tǒng)的兼容性進(jìn)行細(xì)致測試,確保業(yè)務(wù)在穩(wěn)定可靠的前提下滿足擴(kuò)展性與性能的需求。

兩個團(tuán)隊(duì),一個初心;廣東移動與GaussDB未來想必還會有更多關(guān)于數(shù)字化轉(zhuǎn)型的精彩故事。


【IT葡萄皮】(公眾號:itopics)由資深媒體人張垞運(yùn)營。從業(yè)十二年的深度觀察,只為一篇不吐不快的科技評論。

聯(lián)系方式

電話:18612920630

電子郵件:69240891@163.com

微信:z87136954

QQ:87136954


免責(zé)聲明:本文內(nèi)容由21ic獲得授權(quán)后發(fā)布,版權(quán)歸原作者所有,本平臺僅提供信息存儲服務(wù)。文章僅代表作者個人觀點(diǎn),不代表本平臺立場,如有問題,請聯(lián)系我們,謝謝!

本站聲明: 本文章由作者或相關(guān)機(jī)構(gòu)授權(quán)發(fā)布,目的在于傳遞更多信息,并不代表本站贊同其觀點(diǎn),本站亦不保證或承諾內(nèi)容真實(shí)性等。需要轉(zhuǎn)載請聯(lián)系該專欄作者,如若文章內(nèi)容侵犯您的權(quán)益,請及時聯(lián)系本站刪除。
換一批
延伸閱讀

LED驅(qū)動電源的輸入包括高壓工頻交流(即市電)、低壓直流、高壓直流、低壓高頻交流(如電子變壓器的輸出)等。

關(guān)鍵字: 驅(qū)動電源

在工業(yè)自動化蓬勃發(fā)展的當(dāng)下,工業(yè)電機(jī)作為核心動力設(shè)備,其驅(qū)動電源的性能直接關(guān)系到整個系統(tǒng)的穩(wěn)定性和可靠性。其中,反電動勢抑制與過流保護(hù)是驅(qū)動電源設(shè)計(jì)中至關(guān)重要的兩個環(huán)節(jié),集成化方案的設(shè)計(jì)成為提升電機(jī)驅(qū)動性能的關(guān)鍵。

關(guān)鍵字: 工業(yè)電機(jī) 驅(qū)動電源

LED 驅(qū)動電源作為 LED 照明系統(tǒng)的 “心臟”,其穩(wěn)定性直接決定了整個照明設(shè)備的使用壽命。然而,在實(shí)際應(yīng)用中,LED 驅(qū)動電源易損壞的問題卻十分常見,不僅增加了維護(hù)成本,還影響了用戶體驗(yàn)。要解決這一問題,需從設(shè)計(jì)、生...

關(guān)鍵字: 驅(qū)動電源 照明系統(tǒng) 散熱

根據(jù)LED驅(qū)動電源的公式,電感內(nèi)電流波動大小和電感值成反比,輸出紋波和輸出電容值成反比。所以加大電感值和輸出電容值可以減小紋波。

關(guān)鍵字: LED 設(shè)計(jì) 驅(qū)動電源

電動汽車(EV)作為新能源汽車的重要代表,正逐漸成為全球汽車產(chǎn)業(yè)的重要發(fā)展方向。電動汽車的核心技術(shù)之一是電機(jī)驅(qū)動控制系統(tǒng),而絕緣柵雙極型晶體管(IGBT)作為電機(jī)驅(qū)動系統(tǒng)中的關(guān)鍵元件,其性能直接影響到電動汽車的動力性能和...

關(guān)鍵字: 電動汽車 新能源 驅(qū)動電源

在現(xiàn)代城市建設(shè)中,街道及停車場照明作為基礎(chǔ)設(shè)施的重要組成部分,其質(zhì)量和效率直接關(guān)系到城市的公共安全、居民生活質(zhì)量和能源利用效率。隨著科技的進(jìn)步,高亮度白光發(fā)光二極管(LED)因其獨(dú)特的優(yōu)勢逐漸取代傳統(tǒng)光源,成為大功率區(qū)域...

關(guān)鍵字: 發(fā)光二極管 驅(qū)動電源 LED

LED通用照明設(shè)計(jì)工程師會遇到許多挑戰(zhàn),如功率密度、功率因數(shù)校正(PFC)、空間受限和可靠性等。

關(guān)鍵字: LED 驅(qū)動電源 功率因數(shù)校正

在LED照明技術(shù)日益普及的今天,LED驅(qū)動電源的電磁干擾(EMI)問題成為了一個不可忽視的挑戰(zhàn)。電磁干擾不僅會影響LED燈具的正常工作,還可能對周圍電子設(shè)備造成不利影響,甚至引發(fā)系統(tǒng)故障。因此,采取有效的硬件措施來解決L...

關(guān)鍵字: LED照明技術(shù) 電磁干擾 驅(qū)動電源

開關(guān)電源具有效率高的特性,而且開關(guān)電源的變壓器體積比串聯(lián)穩(wěn)壓型電源的要小得多,電源電路比較整潔,整機(jī)重量也有所下降,所以,現(xiàn)在的LED驅(qū)動電源

關(guān)鍵字: LED 驅(qū)動電源 開關(guān)電源

LED驅(qū)動電源是把電源供應(yīng)轉(zhuǎn)換為特定的電壓電流以驅(qū)動LED發(fā)光的電壓轉(zhuǎn)換器,通常情況下:LED驅(qū)動電源的輸入包括高壓工頻交流(即市電)、低壓直流、高壓直流、低壓高頻交流(如電子變壓器的輸出)等。

關(guān)鍵字: LED 隧道燈 驅(qū)動電源
關(guān)閉