[云悦科技]深度学习用于多模态语义学习简述( 二 )
将深度学习应用于语义概念识别和理解时 , 有两种方法:(1)将深度学习得到的特征表示直接输入给判别分类模型(如支持向量机等);(2)通过softmax函数或回归函数对输入数据、隐含层和输出层(语义标签)之间的概率分布进行建模 , 然后基于互信息熵最小或间隔距离最大等准则对模型进行优化 。
有人的理论研究结果表明:在机器学习中 , 如果对模型本身的假设产生偏差 , 则会影响学习结果 。 因此 , 如何合理引入数据本身所具有的先验知识和结构线索 , 来构造和微调深层模型使之更好地处理多模态数据 , 是一个亟待解决的问题 。 因此 , 一些研究开始在生成式深层模型或区别式深层模型中引入数据本身所具有的先验结构 , 以提升特征学习的泛化能力和区别能力 。 有人在卷积神经网络输出端引入层次化概念树来促进关联语义所具有的共享特征的学习 , 有人通过非参贝叶斯假设来提高判别性语义特征学习的灵活度 。 为了进一步学习图像视觉对象和文本实体之间存在的组合语义 , 有人基于排序优化框架提出了多模态深度组合语义学习方法 , 不仅保持了多模态数据之间的局部相关性 , 也保持了其全局关联性 。
推荐阅读
- [火科技]iPhone12系列又有消息,但我真的不想等了!
- 『小胖说科技』便携、清晰、高亮度,明基E520无线智能投影仪评测
- 「灵感科技风」荣耀30 Pro图赏:低调玻璃下的流光溢彩
- 魅族科技:魅族17终于来啦!蛰伏三年,它能一鸣惊人吗?
- 『小米书商量科技』移动为什么会免费送宽带,背后到底有何猫腻?网友:都是套路啊!
- 『科技互联精选』森海塞尔MOMENTUM True Wireless 2评测:真无线耳机挑战严肃音乐
- 小贝贝议科技■国产手机厂商有可能使用华为麒麟芯片吗?
- 科技资深分析@极限高空挑战!这家国产巨头玩嗨了!居然体验高空开伞开箱?
- 『科技互联精选』果粉等了四年的小屏旗舰终于来了!新一代iPhone SE售价3299元起
- 功能:能解决孩子的学习问题吗?牛听听儿童智能熏教机体验!