收藏本站
收藏 | 投稿 | 手機打開
二維碼
手機客戶端打開本文

面向電信網數據的ETL系統的設計與實現

安軻  馬宏  李英樂  劉樹新  
【摘要】:電信網數據常分布在若干個獨立的信息系統中,具有數據量大、數據結構差異大等特點,數據如何從各個數據源匯聚到目的倉庫中成為數據分析的基礎,需要數據處理工具ETL(Extract-Transform-Load)。傳統的ETL工具難以滿足電信數據的分析要求,為此結合Hadoop生態圈設計一種基于Spark的分布式ETL系統,通過設計批處理層和流處理層可以對電信網中的歷史數據和流數據分別進行數據轉換。測試結果表明,該系統在處理電信網大數據時具有較好的性能,同時可以動態地監控管理ETL任務。

知網文化
【相似文獻】
中國期刊全文數據庫 前19條
1 盛瓊;;淺談新建小區公眾電信網的設計[J];數字通信世界;2019年12期
2 夏雷;陳愛萍;薛馨欣;;淺析軟交換技術及下一代電信網[J];中國科技信息;2011年07期
3 蔣林濤;;下一代電信網[J];數據通信;2008年01期
4 黃海清;薛鵬;;國家航空電信網的建設研究[J];計算機工程與設計;2008年06期
5 蔣林濤;;關鍵詞二:下一代電信網[J];世界電信;2007年12期
6 蔣林濤;對電信網發展的思考[J];電信技術;2004年01期
7 黃亞祥;電信網路管理的現狀與發展趨勢[J];江蘇通信技術;1998年04期
8 ;Sprint和Cisco推出革命性電信網[J];微型電腦應用;1998年05期
9 徐文偉;為21世紀電信網做好準備[J];電信科學;1999年02期
10 張延川;電信網路管理技術的演進與發展[J];電信技術;1997年09期
11 曹遠;公眾電信網上的應急通信服務[J];現代電信科技;2005年08期
12 蔣林濤;對下一代電信網發展的思考[J];電信工程技術與標準化;2003年04期
13 蔣林濤;下一代電信網的研究(二)——電信網的分層[J];電信網技術;2003年09期
14 韋樂平;電信網的演進趨勢[J];信息系統工程;2000年02期
15 韋樂平;向下一代電信網演進的探討[J];電信網技術;2000年01期
16 劉冉;;電信網規劃的計算機輔助設計[J];天津職業院校聯合學報;2013年11期
17 李鵬;;透視新時期電信網安全IT基礎設施篇[J];通信世界;2009年30期
18 蔣林濤;下一代電信網的研究[J];世界電信;2003年11期
19 ;萬兆IP電信網之建設目標和理念[J];世界電信;2003年12期
中國重要會議論文全文數據庫 前20條
1 范滌;韓端品;;基于電信網的三網融合關鍵技術——本地直播頻道引入解決方案[A];湖北省通信學會、武漢通信學會2009年學術年會論文集[C];2009年
2 范鐵生;;我國電信網的自動化和數字化[A];IEEE北京分會第一屆學術年會論文集[C];1987年
3 劉會永;;電信網資源管理模型及應用[A];2004年全國通信軟件學術會議論文集[C];2004年
4 張俊凱;;地理信息技術在電信網資源管理中的應用[A];海南省通信學會論文集(二○○一年)[C];2001年
5 張樹軍;肖揚;;一種電信網多模式實時測試方法與應用研究[A];第十三屆全國信號處理學術年會(CCSP-2007)論文集[C];2007年
6 金波;李聲沛;忻寶錄;;電信網結構智能決策支持系統的設計和建立[A];1998年中國智能自動化學術會議論文集(下冊)[C];1998年
7 涂喜珍;;利用現有資源,疏通受阻話務[A];湖北省通信學會、武漢通信學會2009年學術年會論文集[C];2009年
8 張宏偉;喬偉;;電信網滲透測試技術分析研究[A];內蒙古通信學會2018年優秀論文集[C];2018年
9 袁文橋;;寬帶化——電信網發展的必由之路[A];武漢市第二屆學術年會、通信學會2006年學術年會論文集[C];2006年
10 張宏科;;未來網絡設計體系研究[A];新觀點新學說學術沙龍文集27:下一代網絡及三網融合[C];2009年
11 李娟;郭威;;航空電信網(ATN)安全問題分析與研究[A];2010年航空器適航與空中交通管理學術年會論文集[C];2010年
12 王錦龍;;電信網IP化變遷之路[A];2005年安徽通信論文集[C];2006年
13 陳欣;;關于四川省發展B-ISDN的初步設想[A];四川省通信學會1998年學術年會論文集[C];1998年
14 徐紅軍;;基于IMS的電信網融合[A];中國通信學會信息通信網絡技術委員會2005年年會論文集[C];2005年
15 盧小林;;一個改進的VNC協議及其在電信網管集成中的應用[A];2003年中國智能自動化會議論文集(下冊)[C];2003年
16 王琳;;號碼映射技術在電信網演進中的應用研究[A];中國通信學會信息通信網絡技術委員會2003年年會論文集[C];2003年
17 鄭超文;賴世能;;電信網動力資源管理系統的完善探討[A];通信電源新技術論壇——2010通信電源學術研討會論文集[C];2010年
18 齊穎超;;IP電信網的QoS技術[A];中國航海學會通信導航專業委員會2004學術年會論文集[C];2004年
19 王玲;;利用現有資源 疏通受阻話務[A];武漢市第二屆學術年會、通信學會2006年學術年會論文集[C];2006年
20 張旭東;;關于IP寬帶骨干網的探討[A];海南省通信學會論文集(二○○一年)[C];2001年
中國博士學位論文全文數據庫 前2條
1 王寬全;基于信度網模型的電信網阻塞預測及控制的研究[D];重慶大學;2001年
2 周琦;IP航空電信網層次化體系結構與網絡優化技術研究[D];北京郵電大學;2017年
中國碩士學位論文全文數據庫 前20條
1 盧宇;下一代電信網風險分析系統的研究與實現[D];北京郵電大學;2009年
2 華通;下一代電信網資產評估系統的設計與實現[D];北京郵電大學;2009年
3 德妍;電信關鍵性指標分析系統中ETL技術研究[D];北京郵電大學;2007年
4 黃蕊;下一代電信網安全評估指標體系的研究[D];北京郵電大學;2010年
5 毛文君;黑龍江黨政專用電信網計費系統設計[D];哈爾濱工程大學;2002年
6 張琴和;基于ETL在電信經營分析系統中的數據質量研究[D];昆明理工大學;2012年
7 鄭文彬;事件關聯技術在下一代電信網中的應用[D];北京郵電大學;2007年
8 王巖;用于電信網間監測的自動撥測系統的研究[D];西安電子科技大學;2008年
9 劉天華;一種IP化航空電信網切換管理方案設計及仿真[D];北京郵電大學;2011年
10 朱自珍;媒體電信網點播協議的仿真與分析[D];華中科技大學;2008年
11 黃笑磊;基于IP和電信網融合的通信解決方案[D];華北電力大學;2013年
12 李沁;下一代電信網風險數據采集技術的研究和實現[D];北京郵電大學;2009年
13 陳廣曉;基于LTE的寬帶數據鏈環境下航空電信網移動性管理方法研究與設計[D];北京郵電大學;2014年
14 范士軍;本地電信網綜合網管監控系統的研究和實現[D];北京郵電大學;2007年
15 羅小盛;基于CORBA技術的電信網管中間件的研究與實現[D];哈爾濱工程大學;2006年
16 劉云;電信網安全漏洞分析與攻擊行為檢測算法研究[D];北京郵電大學;2009年
17 張保軍;電信網管系統中異構數據源數據集成方法研究與應用[D];北方工業大學;2006年
18 陳窕莉;基于ETL的電信路由報表的設計與實現[D];北京郵電大學;2010年
19 鄧偉;電信網管平臺高可用性技術的研究與實現[D];電子科技大學;2008年
20 王堅;江蘇省電信網管專家系統研究[D];南京理工大學;2009年
中國重要報紙全文數據庫 前20條
1 本報記者 張建銘;解惑IP電信網[N];網絡世界;2003年
2 若芳;電信網有多大[N];光明日報;2002年
3 ;IP電信網的前世今生[N];網絡世界;2004年
4 ;萬兆IP電信網解決方案[N];人民郵電;2003年
5 中國電信北京研究院副院長 趙慧玲;SDN應用范圍和對電信網影響需深入研究[N];中國電子報;2012年
6 ;MPLS實現電信網的增值[N];人民郵電;2003年
7 ;業務驅動下一代電信網[N];人民郵電;2002年
8 顧忠禹;中興寬帶IP電信網策略[N];人民郵電;2002年
9 未來;電信網管系統現狀分析[N];人民郵電;2002年
10 ;NGN:電信網的未來[N];網絡世界;2003年
11 徐勇;電信網到信息網[N];人民郵電;2006年
12 ;華為IP電信網解決方案介紹[N];人民郵電;2003年
13 靳輝;電信網安全不應獨善其身[N];通信產業報;2007年
14 耿學峰;IMS是互聯網業務向電信網轉移的表現[N];中國電子報;2006年
15 黃建中;解決之道在承載[N];網絡世界;2003年
16 楊景;擔當電信網核心[N];中國計算機報;2002年
17 中國電信集團股份有限公司上海研究院 潘毅明 高波 李莉;WAPI在電信網的部署和運營探討[N];通信產業報;2009年
18 ;港灣: 萬兆、NGN[N];中國計算機報;2003年
19 朗訊科技(中國)公司光網絡部技術市場部總監 商哲民;業務驅動的電信網[N];中國電子報;2002年
20 游龍科技;電信網呼喚綜合網管平臺[N];通信產業報;2007年
中國知網廣告投放
 快捷付款方式  訂購知網充值卡  訂購熱線  幫助中心
  • 400-819-9993
  • 010-62982499
  • 010-62783978


黑粗硬大欧美在线视频