英伟达推全新视觉AI语音模型 可以直接看图聊天

如今AI大时代,世界各大巨头都有自己的特色AI产品计划,日前据英伟达官方消息,英伟达联合 Georgia Tech、UMD 和 HKPU 的研究团队推出了全新的视觉语言模型 ——NVEagle。

据悉,NVEagle 能够理解复杂的现实场景,通过视觉输入进行更好的解读和回应。它的设计核心在于将图像转化为视觉标记,再与文本嵌入相结合,进而提升了对视觉信息的理解。

NVEagle包括了三个版本:Eagle-X5-7B、Eagle-X5-13B 以及 Eagle-X5-13B-Chat。其中,7B 和13B 版本主要用于一般的视觉语言任务,而13B-Chat 版本则专门针对对话式 AI 进行了微调,能够更好地进行基于视觉输入的互动。

NVEagle 的一个亮点在于采用了混合专家(MoE)机制,能够根据不同任务动态选择最合适的视觉编码器,这极大提升了对复杂视觉信息的处理能力。该模型已在 Hugging Face 上发布,方便研究人员和开发者使用。

也许你还喜欢

《黑神话:悟空》蛇巡司的影神图

蛇巡司是黑风山中的精怪,是虾蟆成精。起蛰看天时,草里难寻迹。身细吞巨

ETH币是什么?它和以太坊区块链有什

ETH币(以太币)是以太坊区块链的原生加密货币,由Vitalik

微博手机版设置每天只接收热搜爆点

微博app这款软件中为用户推送出来的内容涉及范围十分广泛,不管是

扑朔迷离 为何韩游引进再度叫停!和

相信有很多小伙伴们应该也都已经发现了我们对于韩国游戏的限制已

《黑神话:悟空》砗磲佩能减多少时间

砗磲佩是游戏中的一个珍玩,效果是些微减少所有法术的回转时间。这个减少的时

段位够高!全球玩家都能靠《原神》赚

全球玩家都能靠《原神》赚钱了?原神这款游戏有多赚钱相信各位玩

V社《Deadlock》开发者:将重新编写

V 社最近终于正式宣布的“神秘”新作《Deadlock》是一款第三人

机构买盘能否支撑BTC当前价格7.8万

当前来看,比特币在7.8万美元附近的价格具备一定的机构资金支撑,

微博手机版设置可能感兴趣的内容为

微博app是一款每天都会有热搜信息推送的操作软件,喜欢观看每天的

大受欢迎!夏洛特永昼皮肤上线 销量

夏洛特永昼皮肤上线,这款皮肤上线之后,受到了很多朋友们的欢迎