近日,京東舉辦首屆大數據峰會,此次峰會亮點頗多,京東打造的智能零售大數據“操作系統”全面亮相,并發布《京東大數據技術白皮書》,宣布與英特爾合作建立數字化零售聯合實驗室、推出針對線下零售、區塊鏈等領域的多款產品。
值得注意的是,不同以往以戰略和產品為主的發布會,此次,京東大數據團隊各技術部門負責人悉數登臺,詳細介紹了京東大數據平臺的底層架構和技術細節。
發布大數據白皮書,打造一站式全流程大數據解決方案
京東集團CTO張晨在開場演講中指出,如今的京東已經不僅僅是一家零售公司,而是數字經濟與實體經濟深度融合的創新企業,完整的產業鏈條帶來了海量大數據和豐富的業務場景。
據介紹,2010年京東就啟動了在大數據領域的研發和應用探索,正式組建京東大數據部,并確立了數據集中式的數據服務模式。
此次發布會,《京東大數據技術白皮書》正式對外發布,至于為什么選擇在這個節點發布,京東集團副總裁、大數據平臺負責人翁志在接受包括雷鋒網在內的媒體采訪時表示,首先,京東大數據經過十幾年的發展,在技術上已經積累到一定程度,是時候向外界展示其成果;其次,京東非??春脭祿茖W對整個經濟發展的驅動,通過這個節點發布白皮書,可以展示京東的技術能力,也希望通過大數據和數據產品的對外開放,賦能行業,產生更大價值。
此外,翁志表示,通過發布大數據技術白皮書,可以讓行業伙伴和相關從業者對京東大數據整個發展概貌有比較系統的了解,“研發人員也可以通過這本書來了解京東是怎樣進行數據處理的,可以看到我們在哪方面非常重視,做了哪些工作;對于大數據分析的從業人員,他們可以從中來了解京東大概數據的面貌,這里包括底層的,包括我們產品的,也包括我們應用方向的,所以對他們來說應該也是非常有用;這本白皮書對普通的數據分析人員和新聞工作者也有參考價值?!?/p>
第一時間拿到了這本《京東大數據技術白皮書》,主體內容共八個章節,涵蓋了京東大數據的發展歷程、技術體系、數據管理、數據產品、應用場景、合作生態以及京東大數據的特點和展望。
白皮書中指出,京東大數據平臺的發展隨著京東業務同步發展,由原來的傳統數據倉庫模式逐步演變為基于Hadoop的分布式計算架構。
技術領域覆蓋Hadoop、Kubernetes、Spark、Hive、Alluxio、Presto、Hbase、Storm、Flink、Kafka等大數據全生態體系。
目前已擁有集群規模40000+服務器、數據規模800PB+、日增數據1P+,每日的離線數據日處理30PB+,實時計算每天行數近萬億條。
建設了完整的技術體系,包括離線計算、實時計算和機器學習平臺,可以滿足多種復雜應用場景的計算任務。
元數據管理、數據質量管理、任務調度、數據開發工具、流程中心等構成了全面的數據運營工具。
分析師、指南針等數據應用產品提供了便利的數據分析功能,以及敏感數據保護、數據權限控 制等策略方案,能夠最大程度地保護數據資產的安全。
利用大數據分析和挖掘,京東打造了個性化商城,自主研發了智能門店解決方案,打造了智能供應鏈體系,京東大數據的應用已滲透到了業務的各個環節。
京東大數據的特點包括:
高可用和高性能。采用自研 Yarn Federation 技術實現資源按需無限擴展;采用自研大數據虛擬化容器技術實現計算資源共享;采用自研 Vitual FileSystem 技術實現計算存儲分離。
一站式服務平臺。覆蓋了用戶、商品、采銷、倉儲、配送、 訂單、售后等電商全產業鏈數據;建立了完善的技術體系;提供全面的平臺產品和服務。
可靠的安全保障。數據分級保護;通過用戶權限系統保障用戶數據安全;對敏感數據傳輸通道進行加密。
此外,京東大數據建設了全生態核心產品體系,是京東大數據業務的基礎服務平臺,為京東全業務生態提供一站式、自助式的大數據處理全流程解決方案。
涵蓋數據采集、存儲、加工、分析、可視化、機器學習等專業化產品和服務,在保障數據安全的前提下,提供更可靠、高性能的服務,降低大數據使用門檻,幫助京東大數據業務快速落地。
攜手英特爾,建立數字化零售聯合實驗室
在論壇上,京東攜手英特爾宣布建立數字化零售聯合實驗室,據介紹,雙方將探索IoT(物聯網)在線下智能零售解決方案中的應用。
數字化零售聯合實驗室將憑借京東在零售行業的海量大數據積累,與英特爾邊緣計算優勢相結合,旨在建立更加完善的零售產業基礎設施,孵化并推動新技術、新產品的商業落地與全球推廣。
翁志表示:“這個實驗室將結合雙方的優勢,開發尖端的解決方案,將在線購物出色的精準體驗帶給線下的消費者。我們期待著擴大與英特爾的合作,無論消費者在哪里購物,都能提供一流的個性化購物體驗?!?/p>
據了解,目前京東已與英特爾在門店科技、邊緣計算、新媒體領域展開合作并取得了一定成果:
在門店科技方面,借助京東機器視覺算法與英特爾RRI邊緣計算和OPENVINO計算機視覺加速技術,已經可以利用普通安防攝像頭做門店客流分析與用戶行為識別。
在邊緣計算領域,結合英特爾的技術優勢與京東門店IoT平臺結合,提升了設備接入能力與邊緣計算能力。
新媒體方面,雙方正在就基于深度學習的智能媒體推薦平臺展開合作,根據周邊客群特點提升廣告投放效果。
針對線下零售,推出全新智能零售解決方案“數鏈+”
在論壇上,京東公布了針對線下零售的全新智能零售解決方案——數鏈+。
據介紹,數鏈+大數據智能零售服務解決方案整合了此前京東在門店科技、智能供應鏈等業務上的經驗成果,由京東大數據團隊自研形成。
該解決方案是將大數據技術和人工智能技術進行結合打造出的智能零售業態。
首先,以社交體系、內容體系以及交易體系為依托,為品牌商打造的線上線下一體化、服務深度定制化、場景交易高融合的零售解決方案,旨在成為智能零售的大數據“操作系統”。
其次,以實現產業鏈成本、效率最優化,打造極致用戶體驗為目的,針對現有的線下實體店進行升級改造,為店鋪提供智能化數據支撐,實現“知人、知貨、知場”的精準匹配,驅動企業業務增長、提升運營效率,為客戶提供個性化、高品質產品及服務。
在該解決方案中,包含了前端的應用到基礎的協議和數據支持,每一個功能都以組件化的模式對外輸出,并整合了祖沖之全鏈路數據平臺,提供更為完整的一體化解決方案。
此外,為了能夠更好地幫助商家使用這套解決方案,京東還推出了“燈塔”計劃,由組件、產品和服務三個部分組成,為商家提供業務對接、產品升級、技能培訓等服務。
發布企業級區塊鏈應用平臺
發布會最后環節,京東還發布了兩大企業級區塊鏈領域應用平臺:
面向消費品和醫藥行業推出的區塊鏈防偽追溯平臺能幫助消費品行業建立全程的信息防偽追溯,并滿足企業多樣化的數字分析及營銷需求;推動醫藥領域建立透明、安全、高效的管理機制,實現疫苗、藥品、醫療器械等的追溯能力。
區塊鏈存證平臺可通過自動化取證、可信存證、一鍵舉證、侵權預警等能力,應用于多種同信任關聯的場景中,助力構建信任經濟大環境。
此外,京東在論壇上還推出了具有自主知識產權的企業級區塊鏈框架系統——JD CHAIN。
據介紹,其交易處理達到萬級TPS,交易確認縮短至秒級;基于可動態伸縮的賬本存儲設計支持海量賬戶和交易;支持多核并行的高性能密碼算法,并且,該框架系統將在2019年1季度開源。
-
大數據
+關注
關注
64文章
8904瀏覽量
137625 -
京東
+關注
關注
2文章
999瀏覽量
48628
發布評論請先 登錄
相關推薦
評論