火熱七月，巨龍信息技術(shù)委員會為促進(jìn)跨部門及內(nèi)外部的技術(shù)交流，隆重推出“巨龍大咖說”！2017年 7月21日，來自數(shù)據(jù)事業(yè)部的技術(shù)大咖們，齊聚一堂為大家獻(xiàn)上了一場別開生面的技術(shù)盛宴。

主題討論

本期巨龍大咖說的分享內(nèi)容為——《公開？那就公開了吧！巨龍龍騰大數(shù)據(jù)體系產(chǎn)品架構(gòu)解密》，數(shù)據(jù)事業(yè)部的技術(shù)大咖們對公司的大數(shù)據(jù)管家、ETL、服務(wù)總線、數(shù)據(jù)魔方等產(chǎn)品進(jìn)行了詳細(xì)的介紹與和解讀。出乎我們預(yù)料的是，炎熱的夏天并沒能阻止小伙伴們熱愛學(xué)習(xí)交流的心， 此次分享現(xiàn)場座無虛席。

技術(shù)委員會會長何總分享了他對“大咖說”技術(shù)分享的的一些看法和見解。他指出，技術(shù)委員會開設(shè)的技術(shù)分享，旨在讓大家進(jìn)一步提升了自身業(yè)務(wù)水平，加深對公司產(chǎn)品的認(rèn)知，為技術(shù)人員日后開展工作奠定基礎(chǔ)，力爭為客戶提供更加完美的服務(wù)。

下面，就由小編帶你領(lǐng)略一下數(shù)據(jù)事業(yè)部技術(shù)大咖們的風(fēng)采吧！

聽大咖說了啥

巨龍數(shù)據(jù)事業(yè)部的優(yōu)秀技術(shù)人員，結(jié)合自己的實際工作經(jīng)驗，慷慨分享了產(chǎn)品開發(fā)設(shè)計、挑戰(zhàn)與彎路、團(tuán)隊建設(shè)等實在、接地氣的干貨。引導(dǎo)大家思考如何做好產(chǎn)品。

探秘一：ETL

—— ETL產(chǎn)品那么多， 做它干嘛？

在公安信息化的建設(shè)過程中，除了要求業(yè)務(wù)數(shù)據(jù)快速準(zhǔn)確進(jìn)倉之外，還要能夠支持各種清洗，校驗，數(shù)據(jù)流轉(zhuǎn)復(fù)雜業(yè)務(wù)，并保證數(shù)據(jù)整合，項目的快速響應(yīng)。這對ETL產(chǎn)品的性能提出了新的要求。

巨龍ETL產(chǎn)品為公安海量數(shù)據(jù)歷提供集數(shù)據(jù)轉(zhuǎn)換、庫抽取、庫加載、文件處理、預(yù)評估等服務(wù)，不僅解決了海量異構(gòu)數(shù)據(jù)的抽取和管理難題，還可為未來進(jìn)一步的數(shù)據(jù)挖掘打造基礎(chǔ)數(shù)據(jù)平臺。同時構(gòu)建于普通PC Server之上的Hadoop平臺具有硬件廉價，系統(tǒng)高容錯、水平靈活擴(kuò)展、運行高效等特點。

探秘二：服務(wù)總線

—— 為什么需要總線？

我們知道，通過數(shù)據(jù)治理形成優(yōu)良的數(shù)據(jù)資產(chǎn)之后，下一步的工作就是數(shù)據(jù)共享和服務(wù)了。以往數(shù)據(jù)共享存在安全漏洞，有一定風(fēng)險。資源服務(wù)總線是本地建設(shè)的信息共享傳輸通道，現(xiàn)在通過總線，可監(jiān)管請求方訪問情況，有授權(quán)才可訪問，這也大大提高了數(shù)據(jù)共享的安全系數(shù)。

此外，總線還能能產(chǎn)生更多的價值

巨龍資源服務(wù)總線通過集合本地資源，以請求、服務(wù)的形式幫助本地實現(xiàn)跨應(yīng)用、跨警種、跨區(qū)域的信息共享 。第三方應(yīng)用通過請求總線的服務(wù)獲得數(shù)據(jù)，而不直接訪問底層數(shù)據(jù)庫。

• 一點接入，全網(wǎng)辦案
• 數(shù)據(jù)沒壁壘，語言協(xié)調(diào)
• 進(jìn)行業(yè)務(wù)協(xié)作，數(shù)據(jù)流轉(zhuǎn)

至2017年中旬，巨龍總線已運用在公安科信、情報、網(wǎng)安以及海關(guān)等部門；巨龍總線已部署了20多個省廳，40多個地市，并且為公安部科信的全網(wǎng)分布式應(yīng)用提供了很好的運行支撐；在網(wǎng)安，已有150多個地市部署了總線，并且這些數(shù)字在逐漸增長中。

探秘三：數(shù)據(jù)魔方

——阿里已經(jīng)有類似的產(chǎn)品，做它干嘛

大數(shù)據(jù)的魅力不在于掌握龐大的信息資源，而在于科學(xué)地讓這些信息透析事物本質(zhì)反映發(fā)展趨勢。如果把大數(shù)據(jù)比作一種產(chǎn)業(yè)，那么這種產(chǎn)品實現(xiàn)盈利的關(guān)鍵，在于提高對數(shù)據(jù)的“加工能力”，實現(xiàn)數(shù)據(jù)的“增值”。換言之，“大數(shù)據(jù)”需要更新的“處理載體”由此迸發(fā)其真正的價值魅力。而數(shù)據(jù)挖掘與分析正是“載體”的關(guān)鍵。

龍騰數(shù)據(jù)魔方采用大數(shù)據(jù)云計算為支撐架構(gòu)，輔以建模可視化/數(shù)據(jù)可視化/智慧引擎/大數(shù)據(jù)計算框架/輕應(yīng)用框架/快速開發(fā)框架等能力創(chuàng)新打造，其核心價值具體在：

• 純?yōu)g覽器/鼠標(biāo)拖拽操作，簡單易學(xué)習(xí)，輕松駕馭大數(shù)據(jù)分析技能；
• 可視化無代碼的大數(shù)據(jù)分析應(yīng)用快速開發(fā)平臺；
• 分析應(yīng)用化、分析服務(wù)化、數(shù)據(jù)可視化、集成可擴(kuò)展，滿足用戶多元需求；
• 資源規(guī)范化、服務(wù)規(guī)范化、開發(fā)規(guī)范化、共享規(guī)范化、管理一體化、安全可控化，幫助信息化建設(shè)主導(dǎo)部門提升大數(shù)據(jù)下分析應(yīng)用的需求響應(yīng)及快速開發(fā)能力；
• 高能計算、關(guān)聯(lián)嗅探、智慧學(xué)習(xí)，幫助用戶把握數(shù)據(jù)脈搏，掌握事物發(fā)展動態(tài)；
• 同性能，低要求，支持計算節(jié)點資源的橫向拓展，即便使用普通的PC服務(wù)器，也能明顯提升計算效能，為信息化建設(shè)的資源利用提供保障；

參會人員全神貫注、側(cè)耳傾聽，并在互動環(huán)節(jié)與講師進(jìn)行積極的交流與探討，使原本停留在文字上的理論更加清晰明了，令大家受益匪淺。

通過此次培訓(xùn)和經(jīng)驗分享，加強了技術(shù)人員間的交流聯(lián)系，提升了大家對龍騰大數(shù)據(jù)體系產(chǎn)品的認(rèn)知程度，為以后更加持續(xù)高效地工作打好了基礎(chǔ)。相信下次的巨龍大咖說主題研討必定會持續(xù)帶給大家更多的驚喜，讓我們共同期待吧！