Flink Native Windowing 机制引入:对于窗口类型的有状态特征,我们目前采用上文所述的抽象 SlotState 时间切片方案统一进行支持 。另外 Flink 本身提供了非常完善的窗口机制,通过 Window Assigner、Window Trigger 等组件可以非常灵活地支持各种窗口语义 。因此后续我们也会在窗口特征计算场景引入 Flink 原生的 Windowing 机制,更加灵活地支持窗口特征迭代 。
Flink HybridState Backend 架构:目前在字节的线上场景中,Flink 底层的 StateBackend 默认都是使用 RocksDB 存储引擎 。这种内嵌的存储引擎不能通过外部机制去提供状态数据的回灌和多任务共享,因此我们需要支持 KV 中心化存储方案,实现灵活的特征状态回溯 。
静态属性类型特征统一管理 :通过特征平台提供统一的 DSL 语义,统一管理其他外部静态类型的特征服务 。例如一些其他业务团队维度的用户分类、标签服务等 。作者介绍:
郭文飞,字节跳动推荐系统基础服务方向负责人 。2015 年初加入字节,主要负责推荐系统基础服务方向,例如消重、计数、特征等 。
推荐阅读
-
澄澈的眼|自学一个月跳槽计算机视觉,其实入门很简单,网友:Java岗
-
国际丨日本一火锅店爆炸:整栋楼炸得只剩钢筋 民众以为发生地震
-
-
机智猫 煲剧4小时”手机来了!,最便宜的“充电5分钟
-
人民威评 特朗普为何执意封杀“海外版抖音”TikTok?
-
郑智|艾克森够拼,朴志洙小胡子骚劲十足,郑智真的老了,韦世豪不见了
-
DeepTech深科技亚马逊首推会飞的监控摄像头,艳冠整场硬件发布会
-
-
看实事▲2020年中国3大巨变,“中国地位”让人叹服,美国专家预测
-
赣榆区公安局|网传“江苏一家四口同日死亡,警方被指拒开死亡证明”,官方回应
-
-
黑小二开讲|路过阿姨脱衣帮忙解围,暖心又窝心,12岁女孩路上突遇“初潮”
-
#亲戚#做人的叹息:落魄时,要“躲”着这三个人,写完心酸了
-
-
-
瓷砖地板清洁片对人的身体有没有伤害 地板清洁片对地板有伤害吗
-
-
兰花浇水的正确方法和注意事项视频 兰花浇水的正确方法和注意事项
-
-