推荐系统项目实战一(推荐业务架构介绍)

阅读量：215 次

发布时间：2019-02-28

本文共 358 字，大约阅读时间需要 1 分钟。

架构与业务流

基础数据层：
- 包括业务数据和用户行为日志数据。
  - 业务数据主要包含用户数据和文章数据，用户数据即某头条注册用户的基础数据，文章数据在自媒体平台上传的文章的基本信息。
  - 用户行为日志数据来源于前端埋点
- 业务批量存储在HDFS上以用作离线分析
- 日志数据实时流向Kafka以用作实时计算

数据处理层：
- 基础计算：基于离线和实时数据，对各类基础数据计算成用户画像、文章画像
- 召回与排序
  - 召回环节使用各种算法逻辑从海量的文章中筛选出用户感兴趣的文章候选集合，集合大小：上千级别。排序即对候选集合中的文章进行用户相对的模型结果排序，生成一个排序列表。
  - 召回
  - 排序
    - 点击率预估模型
    - 特征处理、模型评价

推荐业务层：通过对外提供rpc接口来实现推荐业务的接入
- Feed流推荐：今日推荐场景，用户可以在这些页面中不断下拉刷新

转载地址：http://jvxp.baihongyu.com/

你可能感兴趣的文章

MySql 查询以逗号分隔的字符串的方法（正则）

MySQL 查询优化：提速查询效率的13大秘籍（避免使用SELECT 、分页查询的优化、合理使用连接、子查询的优化）（上）

mysql 查询，正数降序排序，负数升序排序

MySQL 树形结构根据指定节点获取其下属的所有子节点（包含路径上的枝干节点和叶子节点）...

mysql 死锁 Deadlock found when trying to get lock； try restarting transaction

mysql 死锁(先delete 后insert)日志分析

MySQL 死锁了，怎么办？

MySQL 深度分页性能急剧下降，该如何优化？

MySQL 深度分页性能急剧下降，该如何优化？

MySQL 添加列，修改列，删除列

mysql 添加索引

MySQL 添加索引，删除索引及其用法

MySQL 用 limit 为什么会影响性能？

MySQL 用 limit 为什么会影响性能？有什么优化方案？

MySQL 用户权限管理：授权、撤销、密码更新和用户删除（图文解析）

mysql 用户管理和权限设置

MySQL 的 varchar 水真的太深了！

mysql 的GROUP_CONCAT函数的使用（group_by 如何显示分组之前的数据）

MySQL 的instr函数

MySQL 的mysql_secure_installation安全脚本执行过程介绍