Flink Native Windowing 机制引入:对于窗口类型的有状态特征,我们目前采用上文所述的抽象 SlotState 时间切片方案统一进行支持 。另外 Flink 本身提供了非常完善的窗口机制,通过 Window Assigner、Window Trigger 等组件可以非常灵活地支持各种窗口语义 。因此后续我们也会在窗口特征计算场景引入 Flink 原生的 Windowing 机制,更加灵活地支持窗口特征迭代 。
Flink HybridState Backend 架构:目前在字节的线上场景中,Flink 底层的 StateBackend 默认都是使用 RocksDB 存储引擎 。这种内嵌的存储引擎不能通过外部机制去提供状态数据的回灌和多任务共享,因此我们需要支持 KV 中心化存储方案,实现灵活的特征状态回溯 。
静态属性类型特征统一管理 :通过特征平台提供统一的 DSL 语义,统一管理其他外部静态类型的特征服务 。例如一些其他业务团队维度的用户分类、标签服务等 。作者介绍:
郭文飞,字节跳动推荐系统基础服务方向负责人 。2015 年初加入字节,主要负责推荐系统基础服务方向,例如消重、计数、特征等 。
推荐阅读
-
央视网|美将“制裁伊朗” 英法德:不跟,美国“没资格”
-
-
太平洋电脑网|已上线众筹,基于埃隆马斯克的怪异推文创作涂色书
-
-
-
退潮之后的海水去哪了?每一次海水的潮起潮落,是风力引起的吗?
-
农业农村部|农业农村部:全国农产品批发市场猪肉平均价格为45.64元,比昨天上涨0.6%
-
今日必看|怎么与学生建立信任关系?4点参考意见!,新老师在班级立威之后
-
-
瑞舒伐他汀间断48小时吃一次行吗?有什么注意事项?医生仔细讲
-
中年全文阅读3分钟:让你知道爱玛电动车性价比到底怎么样
-
-
-
-
领导|新员工不喝领导敬的酒被掌掴 员工质疑:“不喝酒是否不符合公司要求?”
-
-
-
中国青年网@国家卫健委:病例已清零两周以上地区不会无缘由出现无症状感染者
-
股票行情|收评:三大指数探底回升沪指跌0.2% 疫苗板块再走强
-
好听阳光帅气的男孩名字大全 好听阳光帅气的男孩名字大全两个字