在线观看www成人影院-在线观看www日本免费网站-在线观看www视频-在线观看操-欧美18在线-欧美1级

0
  • 聊天消息
  • 系統消息
  • 評論與回復
登錄后你可以
  • 下載海量資料
  • 學習在線課程
  • 觀看技術視頻
  • 寫文章/發帖/加入社區
會員中心
創作中心

完善資料讓更多小伙伴認識你,還能領取20積分哦,立即完善>

3天內不再提示

提供全域數據與服務的畫像標簽體系

數據分析與開發 ? 來源:一個數據人的自留地 ? 作者:一個數據人的自留 ? 2021-04-01 09:59 ? 次閱讀

阿里

為打破數據孤島,創造更大的數據價值,阿里設計了OneEntity來提供全域數據與服務。OneEntity體系主要包含統一實體、全域標簽、全域關系、全域行為4大類。

894b45a6-9247-11eb-8b86-12bb97331649.png

01

標簽分類

其中GProfile全域標簽的分類,將“人”的立體刻畫劃分為“人的核心屬性”和“人的向往與需求”2大部分,具體包含4大類:

人的核心屬性,可分為自然屬性、社會屬性。

-自然屬性:是指人的肉體存在及其特征,是人自出生后自然存在的,一般不會因人為因素發生較大的改變。例如“性別”“生肖”“年齡”“身高”“體重”等。

-社會屬性:指人在實踐活動基礎上產生的一切社會關系的總和。人一旦進入社會就會產生社會屬性。例如經濟狀況、家庭狀況、社會地位、政治宗教、地理位置、價值觀等。

人的向往與需求,可分為興趣偏好、行為消費偏好。

-興趣偏好:是人堆非物化對象的內在心理向往與外在行為表達,是一種法子內心的本能喜好,與物質無必然關系。例如渴望愛情、需要安全感、討厭臟亂環境等。

-行為消費偏好:是人對物化對象的需求與外在行為表達,涉及各行業,與物質世界存在千絲萬縷的聯系。例如母嬰行業偏好、美妝行業偏好、洗護行業偏好、家裝行業偏好等。

在以上四大類的基礎上,我們又嘗試根據不同的業務形態進一步細分二級、三級分類。

02

標簽萃取

標簽的萃取工作包含:數據采集;清洗,去噪聲并統一;反復試用并確定最佳算法及模型;為模型選擇計算因子并對模型中的每一個計算因子調配權重;產出標簽質量評估報告以輔助驗收。

我們隨機抽查了若干個在用的標簽,預估工作量和工作周期,一個有價值的標簽的萃取,平均耗時2周。

慢的主要原因,一是由于萃取流程復雜,每個標簽萃取都依賴底層的基礎數據,而較少依賴上一層匯總的數據中間層數據;二是大量重復的人力,對應的標簽萃取邏輯時可以復用的,包含算法的選擇、模型訓練和計算因子的加權等,但由于不同人來做,造成了很多重復工作。

標簽萃取過程復雜,那有什么可以參考的流程呢?

89b4ccf6-9247-11eb-8b86-12bb97331649.png

首先,數據源層面:建設一套完整的數據源,以OneEntity體系為核心,將OneEntity相關實體及其行為全部串聯起來,與存量的標簽一起作為數據源。

其次,標簽計算層面:將標簽萃取邏輯沉淀為2種,分別對應到偏好類標簽和分類預測類標簽的工具型產品的生產過程中,包含計算因子、權重等業務規則、數據樣本選擇、模型與算法選擇等。

最后,標簽監測層面:沉淀質量評估報告和生產監測、上線等管理流程。

當一整套工具型產品上線之后,批量生產十幾個同類型標簽只需要2天左右,這是因為在補足數據源、確定業務規則、選擇數據樣本、選擇算法與模型的過程中,減少了大量的代碼開發與模型訓練的工作。

在這個過程中,參與的角色也發生了變化,從原本的以數據產品經理、數倉工程師、數據科學家為主導,轉變為對業務更為熟悉的業務人員、數據分析師為主導。

2

網易

網易大數據融合用戶娛樂、電商購物、教育、新聞資訊、通訊等多行業10+產品線,構建起全域用戶畫像數據,目前總標簽1000+,ID量URS、phone、idfa、IMEI、oaid等均達到憶級。

01

標簽分類

1.基礎標簽:

性別、年齡、教育背景、生活習慣(早起晚起)、地理位置(POI信息)、職業狀況、經濟情況(有車有房)、設備信息(手機、運營商等)、會員信息(會員等級)、衍生信息。

其中衍生標簽,如評估是否已婚,在原由標簽體系下沒有此類標簽,但可通過多個標簽進行組合生成新的標簽,包含是否有小孩、30歲等條件組合。

89c4214c-9247-11eb-8b86-12bb97331649.jpg

2. 行為標簽

包含地域、廣告、搜過、播放、點擊、評論、關注、收藏、購買等維度。

3. 偏好標簽

包含出行購物、手機數碼、家裝家居、教育公益、文化娛樂、新聞資訊、金融理財、游戲競技、動漫影視、明星藝人等維度

4. 預測標簽

包含利用算法進行預測生成的標簽,包含是否出行、是否買車等標簽。

注意:

1. 標簽的枚舉值十分重要,業務分析過程中很容易出現枚舉值的偏差,不符合實際業務邏輯

2. 注意標簽之間的沖突,如年齡15歲,學歷卻是博士或者有小孩

02

標簽計算

預測類標簽案例:性別,主要包含三種方案:

1. 標簽傳播:根據用戶在各個業務場景,如母嬰商品點擊行為,進行item標記,構建user-item的興趣網絡進行 Graph Embedding,最后進行分類,預測用戶的性別。

2. 語義分析:利用NLP算法對用戶昵稱進行語義分析

3. 自行填寫:利用業務屬性自行填寫的內容進行判斷,此處需對數據質量進行過濾,排除如生日為1990-01-01的參數異常值信息。

89d8dccc-9247-11eb-8b86-12bb97331649.jpg

基于上述三類算法特征結果集,對模型進行融合,然后對用戶的性別進行預測,其準確率在0.6以上。

注意:需要突破的地方在于特征的稀疏性,因為ID-mapping打通后,數據覆蓋率僅20%左右,嚴重影響了模型的整體效果。

3

汽車之家

用戶畫像的構建就是把用戶標簽分列到不同的類里面,這些類都是什么,彼此之間的聯系,就構成了標簽體系。

01

按用途分類

1.人口屬性:用戶自然屬性、用戶會員、用戶所屬年代、用戶價值登記、是否增換購用戶、用戶分群、UVN-B用戶分群、用戶分層、用戶流失預警

89e2b422-9247-11eb-8b86-12bb97331649.png

2.網絡屬性:用戶APP設備信息、用戶PC設備信息、用戶活躍時段、用戶平臺偏好、用戶活躍類型

3.內容興趣偏好:業務類型偏好、內容分類標簽、用戶關注作者偏好、用戶產品偏好、用戶顯式負反饋、用戶論壇偏好、車友圈偏好、用戶興趣欄目

4.車興趣偏好 :用戶短期興趣車偏好、用戶興趣車偏好、配置偏好、用戶顏色偏好、用戶購車目的、用戶置換偏好、用戶推薦有車、二手車用戶偏好、用戶購車意向、用戶新舊偏好、用戶購車階段、用戶有車標簽、用戶興趣集中度、用戶能源偏好、用戶生產方式偏好

5.金融畫像:分期購車意向度、用戶購買力、二手車用戶購買力、用戶汽車價格偏好、用戶經濟屬性、增換購用戶預測線索

6.場景畫像:用戶地理位置

02

按統計方式分類

1.統計類標簽

統計類標簽,通過業務規則,將業務問題轉化為數據口徑實現。如收藏列表、 搜索關鍵詞、保險到期時間、是否下過線索、30天內訪問xx次等。

2.興趣類標簽

興趣類標簽,基于興趣遷移模型構建用戶標簽。綜合考慮特征、特征權重、距今時間、行為次數等因素,用戶興趣標簽構建公式如下:

用戶興趣標簽=行為類型權重*時間衰減*行為次數

-特征:需要結合業務選擇,如瀏覽、搜索、線索、對比、互動、點擊、有車等行為。

-權重:用戶在平臺上發生的行為具體到用戶標簽層面有著不同的行為權重,一般而言,行為發生的成本越高,權重越大。可以由業務人員確定,也可以采用TF-IDF技術分析得出。

-時間衰減:用戶行為收時間的影響不斷衰減,距離現在越遠,對用戶興趣的影響越低,這里采用牛頓冷卻定律的思想擬合衰減系數,衰減周期結合業務制定。

-行為次數:在固定時間周期內行為發生的次數越多,興趣傾向越重。

3.模型類標簽

基于機器學習方法進行數據建模預測用戶的標簽,這類標簽在標簽體系中占比較少,其實現難度高,開發成本高。

例如:

-是否有車:基于RF+LR模型實現

-常駐地:基于GPS聚類獲取,采用DBSCAN

-購車轉化:GBDT

-用戶分群:KMENAS聚類產生

03

按時效分類

從數據時效上,可分為離線畫像和實時畫像。離線與實時采用的構建思想相同,不同之處在于:

-離線畫像:描述用戶長期的習慣;

-實時畫像:描述用戶當下的興趣,會隨時間的改變而發生變更;

總結

各大公司的標簽分類不同,現市面上有三種常用的標簽分類方式,按用途分類,可分為基礎信息、用戶行為、業務偏好、場景標簽;按統計方式分類,可分為事實類標簽、規則類標簽、預測類標簽;按時效分類,可分為靜態標簽、動態標簽。

原文標題:干貨:阿里/網易/汽車之家畫像標簽體系

文章出處:【微信公眾號:數據分析與開發】歡迎添加關注!文章轉載請注明出處。

責任編輯:haq

聲明:本文內容及配圖由入駐作者撰寫或者入駐合作網站授權轉載。文章觀點僅代表作者本人,不代表電子發燒友網立場。文章及其配圖僅供工程師學習之用,如有內容侵權或者其他違規問題,請聯系本站處理。 舉報投訴
  • 數據
    +關注

    關注

    8

    文章

    7104

    瀏覽量

    89287
  • 機器學習
    +關注

    關注

    66

    文章

    8428

    瀏覽量

    132841

原文標題:干貨:阿里/網易/汽車之家畫像標簽體系

文章出處:【微信號:DBDevs,微信公眾號:數據分析與開發】歡迎添加關注!文章轉載請注明出處。

收藏 人收藏

    評論

    相關推薦

    維智科技提供時空數據治理服務

    城市作為一個最具價值的超大綜合體,在推進全域數字化轉型的過程中,會產生大量的時空數據
    的頭像 發表于 01-14 09:25 ?113次閱讀

    有方科技參加中國信通院城市全域數字化轉型分論壇

    有方科技參加城市全域數字化轉型分論壇并做《創新物聯感知體系 助力城市全域數字化轉型》主題演講,分享在城市數字化轉型中物聯感知體系建設的創新方法與實踐經驗,與各界與會者共同探討城市
    的頭像 發表于 12-25 16:09 ?161次閱讀

    【「RISC-V體系結構編程與實踐」閱讀體驗】-- SBI及NEMU環境

    ,運行在S模式下的操作系統提供引導和統一的接口服務。 本書的實驗并沒有采用業界流行的OpenSBI固件,而是從零開始編寫一個小型可用的SBI固件,以便從底層深入學習RISC-V體系結構。 系統上電后
    發表于 11-26 09:37

    IP風險畫像詳細接入規范、API參數(Ipdatacloud)

    IP數據云的IP風險畫像是基于數據分析和機器學習技術的產品。工作原理是對IP地址的多維度數據進行綜合分析,進而為企業提供全面的IP風險評估和
    的頭像 發表于 11-15 11:11 ?324次閱讀
    IP風險<b class='flag-5'>畫像</b>詳細接入規范、API參數(Ipdatacloud)

    華為云全域 Serverless 8 月更新盤點

    【摘要】 近年來,華為云持續構筑全域 Serverless 云服務,推出了一系列競爭力領先的 Serverless 產品,包括函數工作流 FunctionGraph、Serverless 容器引擎
    的頭像 發表于 09-27 00:06 ?872次閱讀
    華為云<b class='flag-5'>全域</b> Serverless 8 月更新盤點

    軟通動力數據庫全棧服務,助力企業數據體系全面升級

    。在企業節與"數博會"展區,軟通動力受邀分享數據庫專業服務全棧解決方案,并重點展示以全棧云服務為核心的數智化能力。 軟通動力高級數據服務
    的頭像 發表于 09-05 15:30 ?359次閱讀
    軟通動力<b class='flag-5'>數據</b>庫全棧<b class='flag-5'>服務</b>,助力企業<b class='flag-5'>數據</b>庫<b class='flag-5'>體系</b>全面升級

    調用云服務認證體系

    “郵箱已被注冊”、“密碼格式不正確”等)。 注冊成功后顯示歡迎信息并引導用戶進行后續操作(如設置個人資料)。 潛在價值:提供安全、簡便的注冊與認證流程,提高用戶體驗。通過驗證機制確保數據安全,減少虛假
    發表于 09-05 09:39

    IP風險畫像如何維護網絡安全

    的重要工具。 什么是IP風險畫像? IP風險畫像是一種基于大數據分析和機器學習技術的網絡安全管理工具。它通過對IP地址的網絡行為、流量特征、歷史記錄等多維度數據進行深入分析,構建出每個
    的頭像 發表于 09-04 14:43 ?317次閱讀

    凱睿德制造與 Loftware 合作提供 MES 和標簽的無縫集成

    葡萄牙波爾圖2024年8月14日?/美通社/ -- 工業 4.0 制造執行系統 (MES) 領先提供商凱睿德制造今天宣布與全球最大的基于云的企業標簽和包裝管理提供商 Loftware 建立戰略聯盟
    的頭像 發表于 08-14 17:15 ?255次閱讀

    服務提供商數據在精確定位中的應用

    我們在網絡連接和數據傳輸時通過利用ISP提供數據,可以實現對用戶和設備的精確定位。接下來我將就ISP數據在精確定位中的應用進行闡述。 ISP數據
    的頭像 發表于 07-18 11:18 ?390次閱讀

    服務體驗-服務發現

    :用戶在 HarmonyOS Connect標簽的支持下,用戶也可以通過碰一碰、靠近或掃一掃該標簽,發現并使用元服務。 本材料整理來源于HarmonyOS NEXT Developer Beta1
    發表于 07-15 17:02

    云安全服務體系由哪五部分組成

    云安全服務體系是一個復雜的系統,它包括多個組成部分,以確保云環境中的數據和應用程序的安全。以下是云安全服務體系的五個主要部分: 云安全策略和合規性 云安全策略是確保云環境安全的基石。這包括定義安全
    的頭像 發表于 07-02 09:24 ?576次閱讀

    工業互聯網三大體系是什么?

    、工業產品和工業服務,形成了全面覆蓋生產和管理各環節的智能化“血液循環系統”。 2. 平臺體系:平臺體系是工業互聯網的核心,它主要負責數據的集成、管理和分析。通過平臺
    的頭像 發表于 05-25 14:03 ?1117次閱讀

    AWTK 開源串口屏開發(16) - 提供 MODBUS 服務

    AWTK串口屏內置MODBUS從站模型,不用編寫一行代碼即可讓串口屏提供MODBUS服務,讓遠程設備通過MODBUS協議訪問串口屏上的數據。1.功能讓串口屏提供Modbus
    的頭像 發表于 04-13 08:24 ?473次閱讀
    AWTK 開源串口屏開發(16) - <b class='flag-5'>提供</b> MODBUS <b class='flag-5'>服務</b>

    海辰儲能榮獲NECAS、CTEAS售后服務體系雙項權威認證

    近日,憑借完善、專業的售后服務體系,經過嚴格審核,海辰儲能順利通過NECAS、CTEAS雙體系權威認證,榮獲“NECAS全國商品售后服務達標認證五星級”和“CTEAS售后服務體系完善程
    的頭像 發表于 02-29 11:10 ?2405次閱讀
    海辰儲能榮獲NECAS、CTEAS售后<b class='flag-5'>服務體系</b>雙項權威認證
    主站蜘蛛池模板: 激情六月综合| 黑色丝袜美女被视频网站| 性欧美高清视频| 色爱区综合五月激情| 男女激情做爰叫床声视频偷拍| 黄色美女网站免费看| 色偷偷亚洲男人| 亚洲人成人77777网站| 亚洲春色www| 欧美成人eee在线| 九九热国产| 奇米影视四色7777久久精品| 永久福利盒子日韩日韩免费看| 国外免费一级| 六月丁香婷婷综合| 555成人免费影院| 深爱五月激情| 91福利国产在线观看网站| 欧美成人免费草草影院| 天堂在线最新版www中文| 午夜影视剧场| 99久久精品久久久久久婷婷| 国模私拍在线视频| 永久免费看片| 久久黄色网| 黄色网址播放| 一级毛片西西人体44rt高清| 婷婷亚洲五月琪琪综合| 亚洲一级毛片中文字幕| 亚洲欧美色图| 嫩草影院入口一二三免费| 色综合久久中文综合网| 免费观看欧美一级片| 美女网色| 久久久国产精品网站| 狠狠色噜噜狠狠狠狠色综合久| 又粗又长又大又黄的日本视频| 久久亚洲精选| 国产精品福利一区二区亚瑟 | 久久久久国产一级毛片高清版| 在线视频免费播放|