十年前，預言家提出信息超載的概念。如今，數據正超出預料地呈指數型增長。在今天的廣電大數據系統建設領域，采集所有用戶的屬性、收視、工單、訂購、賬單、支付、設備運行等數據可以說是一個浩瀚的工程。

廣電數據由數據源經過統一的數據抽取和轉換平臺進行抽取、格式轉換、脫敏等操作，由于匯聚了多個源的數據，通常數據量非常大。

面對龐大的數據體量，以及數據挖掘與分析的個性化需求，一套完整的數據治理機制以及具有良好可擴展性的大數據平臺成為廣電大數據系統建設、構建以數據為關鍵要素的智慧廣電新模式的核心。

曙光廣電大數據應用

最近，曙光中標廣州珠江數碼集團廣電大數據運用項目并且實施。依托多年的大數據項目經驗，在智慧廣電應用上，助力珠江數碼實現全方位數據挖掘與分析需求。

珠江數碼為華南地區最大規模的廣播電視網絡運營商之一，用戶規模約400萬戶。面對移動互聯網對傳統業務帶來的挑戰和機遇，珠江數碼先后完成了4K智能電視業務平臺、綜合云平臺和廣電大數據系統的建設。

在此次項目中，曙光以一站式大數據平臺、全程可追溯的數據采控模式、靈活的大屏展示、以及與業務貼合的智能算法，實現珠江數碼廣電數據面向業務應用的全方位分析和挖掘。

廣州珠江數碼集團股份有限公司在給曙光的感謝信中特別提到：“曙光研發的XData大數據智能引擎發揮其在數據采集、治理、融合、分析、可視化等方面的能力，實現公司數據整個生命周期的全程可追溯，實現收視數據指標的大屏展示，全面提升數據質量，提升數據的可用性，提供科學決策依據，得到了領導高度認可與贊揚。”

曙光XData大數據智能引擎，目前已入選國家《大數據優秀產品和應用解決方案案例集（2019）》。已實現對數據源進行統一存儲和檢索，為前端應用系統提供豐富的ETL類服務，并支持跨系統數據的分析應用。另一方面，除了支持支持傳統關系庫、文件、FTP等數據源的可視接入，還可實現數據采集插件的可拓展。

本次建設智慧廣電，曙光大數據服務工程團隊還有兩個方案技術架構值得一提。

第一個是數據共享平臺

曙光XData大數據智能引擎是基于微服務架構的多線程、集群化的數據存儲、數據計算的平臺工具。

為了實現多種存儲系統的統一管理，曙光融合分布式文件系統HDFS、數據倉庫Hive、分布式數據庫Hbase、并行數據庫MppDB等，打造了統一接入、統一管理、統一權限的融合存儲層；針對不同的計算內容和計算方式，提供內存計算、流式計算、離線計算、圖計算等常規大數據計算方式，支持基于Hadoop生態的主流組件，包括MapReduce/Storm/Spark/Spark Streaming/SparkSQL，搜索支持Solr和ElasticSearch、數據可視化平臺等，并且可以在此基礎上進行擴展升級。

第二個是數據智能應用

數據智能應用包括收視行為分析、精準營銷推薦、數據可視化展示等。

收視行為分析和互聯網行業用戶畫像的結合，依據當前用戶的收視習慣和用戶評論、用戶屬性、廣告點擊等信息，完成基于排行榜與用戶瀏覽歷史的節目、廣告推薦。

精準營銷主要是建立用戶檔案，為業務部門提供精準化營銷、用戶挽留、產品推介等市場服務。開發針對每個用戶的數據化視圖，建立用戶的各項數據檔案，將其標簽化、積分化。

數據可視化展示主要包括大屏交互展示、數據采集過程追蹤、報表展示及數據目錄。準確的定位數據問題，使數據發揮更大的價值。

依托多年大數據項目經驗

以關鍵技術打通創新節點

曙光大數據工程服務團隊依靠多年的大數據項目經驗積累、雄厚的技術實力，在數據采集、綜合治理、智能分析、可視化服務等領域已經積累了一整套成體系的項目流程規范和技術服務體系。

依托強勁算力，結合與業務貼合的智能算法，依托多年大數據項目經驗，曙光在實現廣電數據面向業務應用的全方位分析和挖掘的道路上繼續探索，通過軟硬一體化發展路徑，用關鍵技術打通創新節點，為企業決策提供依據，加速企業戰略轉型，促進數字經濟的飛速發展。