针对各类主题,通过对用户DPI访问数据深度解析,体现数据价值,丰富云产品形态与应用范围;建立行业的标签,能够对用户访问各类APP和网站的行为和内容有深入细致的刻画,为主题运营工作提供必要的数据支撑。在获客成本越来越高的当下,围绕用户的价值创造,守住活跃用户的基本盘,促进用户一层一层向更具价值的用户转化。
构建多维打标签算法
规则库搭建
根据爬虫工具与抓包工具提取网站及App特征信息,提取正则表达式形成各类规则库
数据分发与标签收集
将规则库加载到主框架,与dpi中的HOST进行匹配,对该dpi记录进行数据处理与分发,如网站类型、平台名称、开始时间等
汇总入库
将处理后的标签结果数据入库,按月、日进行汇总处理,进行小文件合并,提高存储空间利用率与入库处理效率