Flink Native Windowing 机制引入:对于窗口类型的有状态特征,我们目前采用上文所述的抽象 SlotState 时间切片方案统一进行支持 。另外 Flink 本身提供了非常完善的窗口机制,通过 Window Assigner、Window Trigger 等组件可以非常灵活地支持各种窗口语义 。因此后续我们也会在窗口特征计算场景引入 Flink 原生的 Windowing 机制,更加灵活地支持窗口特征迭代 。
Flink HybridState Backend 架构:目前在字节的线上场景中,Flink 底层的 StateBackend 默认都是使用 RocksDB 存储引擎 。这种内嵌的存储引擎不能通过外部机制去提供状态数据的回灌和多任务共享,因此我们需要支持 KV 中心化存储方案,实现灵活的特征状态回溯 。
静态属性类型特征统一管理 :通过特征平台提供统一的 DSL 语义,统一管理其他外部静态类型的特征服务 。例如一些其他业务团队维度的用户分类、标签服务等 。作者介绍:
郭文飞,字节跳动推荐系统基础服务方向负责人 。2015 年初加入字节,主要负责推荐系统基础服务方向,例如消重、计数、特征等 。
推荐阅读
-
-
云南白药粉的功效!(今日用药小贴士:云南白药粉!)
-
画布|他在画布上用刀戳了1000多个洞,开始被嘲笑,后来卖了19亿
-
汪同学爱玩机:手机全局自由窗口让MIUI12实现了,多任务不再是难题,小米真给力
-
串口、COM口、UART口,TTL、RS-232、RS-485这么多接口,怎么区分
-
观衣|大胆挑战“花衬衫”,帅气面貌难以忘记,一直让你不睡的李佳琦
-
已查明:有3种“明星”降压药,可能含致癌物,有你在吃的吗?
-
易中天祖屋:145间房子、3个足球场大,吃饭要敲磬
-
问董秘|建有党建工作站和党建办公室,这些...,投资者提问:贵公司2014年成立了党支部
-
新华网|俄4种疫苗被证实安全 亚欧多国病例数持续增长
-
肖战|厉害!《骄阳》重庆拍摄地,老板晒肖战餐巾纸画8只小鲨鱼超可爱
-
为啥同样是鸡肉,炸鸡容易增胖,而健身的时候吃的清水煮鸡胸肉是补充蛋白质的
-
叶舞翩翩|青歌赛冠军的他,竟然是靠“千斤小姐”资助,而今他们怎么样了?
-
王牌对王牌|华晨宇,刘浩存,张纪中,张小斐,王艳,大张伟!
-
-
-
司机都不会晕车,晕车的都是乘客?这其中到底有什么猫腻呢!
-
-
人员|汕头南澳突发森林火灾,火势蔓延迅速,当地正全力扑救
-
[喝牛奶治胃病]喝牛奶能治胃病吗 肠胃不好吃什么水果