其乐融融的IT技术小站

标签:多模态学习

自然语言处理

Meta-Transformer 多模态学习的统一框架

12

其乐融融 发布于 2023/10/29 02:22:15

Meta-Transformer是一个用于多模态学习的新框架,用来处理和关联来自多种模态的信息,如自然语言、图像、点云、音频、视频、时间序列和表格数据,虽然各种数据之间存在固有的差距,但是Meta-Transformer利用冻结编码器从共享标记空间的输入数据中提取高级语义特征,不需要配对的多模态训练数据。

阅读()评论(0)赞 ()

自然语言处理

Meta-Transformer 多模态学习的统一框架

12

其乐融融 发布于 2023/08/07 05:10:03

Meta-Transformer是一个用于多模态学习的新框架,用来处理和关联来自多种模态的信息,如自然语言、图像、点云、音频、视频、时间序列和表格数据,虽然各种数据之间存在固有的差距,但是Meta-Transformer利用冻结编码器从共享标记空间的输入数据中提取高级语义特征,不需要配对的多模态训练数据。

阅读()评论(0)赞 ()