Flink Native Windowing 机制引入:对于窗口类型的有状态特征,我们目前采用上文所述的抽象 SlotState 时间切片方案统一进行支持 。另外 Flink 本身提供了非常完善的窗口机制,通过 Window Assigner、Window Trigger 等组件可以非常灵活地支持各种窗口语义 。因此后续我们也会在窗口特征计算场景引入 Flink 原生的 Windowing 机制,更加灵活地支持窗口特征迭代 。
Flink HybridState Backend 架构:目前在字节的线上场景中,Flink 底层的 StateBackend 默认都是使用 RocksDB 存储引擎 。这种内嵌的存储引擎不能通过外部机制去提供状态数据的回灌和多任务共享,因此我们需要支持 KV 中心化存储方案,实现灵活的特征状态回溯 。
静态属性类型特征统一管理 :通过特征平台提供统一的 DSL 语义,统一管理其他外部静态类型的特征服务 。例如一些其他业务团队维度的用户分类、标签服务等 。作者介绍:
郭文飞,字节跳动推荐系统基础服务方向负责人 。2015 年初加入字节,主要负责推荐系统基础服务方向,例如消重、计数、特征等 。
推荐阅读
-
-
「听李医生说」33岁新冠肺炎患者,呕了一地血,医生紧急花了2小时才为其止了血
-
-
【求助】第一次养猫好多不懂,急求!不然被宿管发现了!
-
全民厨房|把金针菇和它煮,简单精致,不脏菜板,偷懒又美味,一个人这么吃
-
-
-
小米小米官网迎来好消息!小米mix4在准备,网友:这是我想要的
-
东方财富网 中国移动今年将投150亿元用于5G终端,全国已开通5G基站逾20万个
-
『传染病』太原市妇幼保健院预防接种门诊恢复,需要电话预约
-
秦绪文自媒体|放下一个人要多久?比很久很久还要久!
-
-
『特朗普』糟糕!截至5月9日,特朗普为甩锅不惜代价:找到了让中国必须赔偿的方法!
-
[搜达足球]还有欧洲电视台希望转播,6例确诊+1例死亡!他们却坚持踢联赛
-
董益坚说职场|一毛千金,干件大事拯救自己,阿里员工感慨:做程序员后脱发严重
-
慢慢长大吖|如何引导孩子在幼儿园和其他人沟通,老实的孩子不一定吃亏
-
老喵钓历史|李建成却为何要主动送死?,玄武门之变本有两次机会可以避免
-
萱读星座|各项运势都好,事业一飞冲天,获得满意报酬,人生一路开挂,6月
-
摩羯座:(周运)克里斯托弗_3月23日至29日星座运势:按下暂停键
-
从化温泉别墅两天一夜——广州温泉旅游,广州从化温泉团购?