Meta开源多感官人工智能模型 结合六种类型的数据
Meta公司宣布了一个新的开源人工智能模型，将多个数据流联系在一起，包括文本、音频、视觉数据、温度和运动读数。该模型目前只是一个研究项目，没有直接的消费者或实际应用，但它指出了生成性人工智能系统的未来，可以创造沉浸式的多感官体验，并表明在OpenAI和Google等竞争对手变得越来越神秘的时候，Meta继续分享人工智能研究。
该研究的核心概念是将多种类型的数据连接起来，形成一个单一的多维指数(或"嵌入空间"，用人工智能的说法)。这个想法可能看起来有点抽象，但正是这个概念支撑着最近生成性人工智能的蓬勃发展。
例如，像DALL-E、Stable Diffusion和Midjourney这样的人工智能图像生成器都依赖于在训练阶段将文本和图像联系起来的系统。他们在视觉数据中寻找模式，同时将这些信息与图像的描述联系起来。这就是使这些系统能够按照用户的文字输入生成图片的原因。许多以同样方式生成视频或音频的人工智能工具也是如此。
Meta公司说，其模型ImageBind是第一个将六种类型的数据结合到一个单一的嵌入空间的模型。该模型包括的六种数据是：视觉(图像和视频形式);热能(红外图像);文本;音频;深度信息;以及最有趣的--由惯性测量单元或IMU产生的运动读数。(IMU存在于手机和智能手表中，它们被用于一系列任务，从将手机从横向切换到纵向到区分不同类型的身体活动)。
Meta博客文章中的一张截图，显示了不同类型的链接数据，例如，火车的图片、火车鸣笛的音频，以及关于火车三维形状的深度信息。
Meta的ImageBind模型结合了六种类型的数据：音频、视觉、文本、深度、温度和运动。
我们的想法是，未来的人工智能系统将能够交叉引用这些数据，就像目前的人工智能系统处理文本输入一样。例如，想象一下，一个未来的虚拟现实设备不仅能产生音频和视觉输入，还能产生你在物理舞台上的环境和运动。你可能会要求它模拟一次漫长的海上航行，它不仅会把你放在一艘船上，背景是海浪的噪音，而且还有甲板在你脚下的摇晃和海洋空气的凉风。
在一篇博文中，Meta公司指出，其他的感官输入流可以被添加到未来的模型中，包括"触摸、语言、气味和大脑fMRI信号"。它还声称这项研究"使机器离人类同时、全面和直接从许多不同形式的信息中学习的能力更近了一步"。
当然，这都是非常推测性的，而且像这样的研究的直接应用很可能会更有限。例如，去年，Meta公司展示了一个人工智能模型，可以从文本描述中生成短小而模糊的视频。像ImageBind这样的工作显示了该系统的未来版本如何纳入其他数据流，例如，生成音频以匹配视频输出。
不过，对于行业观察者来说，这项研究也很有趣，因为Meta公司正在开放底层模型--这是人工智能世界中越来越受到关注的做法。
那些反对开源的人，比如OpenAI说这种做法对创作者有害，因为对手可以复制他们的作品，而且这可能有潜在的危险，让恶意的行为者利用最先进的人工智能模型。倡导者回应说，开放源代码允许第三方仔细检查系统的缺陷，并改善它们的一些缺陷。他们指出，这甚至可以提供商业利益，因为它基本上允许公司招募第三方开发人员作为无偿工人来改进他们的工作。
到目前为止，Meta一直坚定地站在开源阵营中，尽管并非没有困难。(例如，其最新的语言模型LLaMA今年早些时候在网上泄露了。) 在许多方面，它在人工智能方面缺乏商业成就(该公司没有可以与Bing、Bard或ChatGPT匹敌的聊天机器人)，这使得这种做法成为可能。同时，通过ImageBind，它正在继续实施这一战略。
抢先读
- 跟银行协商挂账停息可以吗？停息挂账容易申请吗？
- Meta开源多感官人工智能模型 结合六种类型的数据
- 苹果Mac销量下降让此前曾大举投资OLED面板供应商感到恐慌
- 容积率应怎么计算？买房子还要搞清楚哪些问题？
- 原神3.6版本复刻角色有哪些？复刻角色阵容推荐有哪些？
- spotlight搜索是什么？如何使用Spotlight搜索？spotlight搜索怎么关闭？
- 微软电脑管家如何给电脑体检？电脑管家真的没必要安装吗？
- 支付宝充电服务上线电价波动提醒功能 你知道吗？
- 出租车计价方式是什么？汽车营转非后还能开几年？
- 什么是两融业务?新股上市就解禁股票是好是坏？
- 买车是夫妻共同财产吗？夫妻离婚车子过户给一方怎么变更？
- 保险退保能全额退吗？保险交了三年不想交了怎么办？
- 新能源车主自驾出行 支付宝出行频道上线电价波动提醒 你知道吗？
- 脱发预防方法有哪些？ 脂溢性脱发的症状主要有哪些？
- 柴油轿车有哪些优点？全球轮胎品牌排行榜前十名有哪些？
- 淡竹叶是什么竹的叶？淡竹叶是包粽子的叶子吗？
- 远期汇率和即期汇率的关系是什么？远期汇率的升贴水受不受供求关系影响？
- 万用表的使用方法是什么？万用表红黑表笔怎么插？
- 日均存款怎么算公式？日均存款剪刀差什么意思？
- 防爆扳手和普通扳手区别是什么 普通扳手的检测要求介绍
- 特别法人和非营利法人怎么区分？一个公司法人能集资吗？
- 如何看股票主力进出？主力进场代表什么意思？
- 涉及家庭暴力婚姻案件审理指南：发生家庭暴力后应该怎么办？
- 基金风险都会有哪些？基金风险的类型有哪些？
- 两寸照片的像素是多少？二寸照片的分辨率应该是多少？
- 什么是特种养殖业？特种养殖养什么前景好？
- U盾是什么 u盾密码忘了怎么办
- 信用卡应该怎么注销?信用卡注销了还可以恢复吗？
- 夫妻的共同财产有哪些？离婚查对方银行流水难度大吗？
- 诉讼时效中断的法定事由主要有哪些？诉讼时效中断应当注意的问题有哪些？
- 个性化分期可以自己办吗？个性化分期手续费怎么收？
- 结婚需要什么证件？受理结婚登记申请的条件是什么样的？
- 余额宝转出到银行卡收费吗？余额宝自动转入怎么取消？
- 世界上最丑的建筑 世界上最丑的建筑排名汇总
- 《阳光养猪场》小猪仔怎么配种？《阳光养猪场》小猪仔养殖有什么技巧？
- “署名权、修改权和保护作品完整权”如何认定?
- 公民的基本权利有哪些？公民与人民的法律依据有哪些？
- 全球微动态丨快手电商新风向：寻找质量增长与鼓励深度经营
- 苹果耳机微信语音播报怎么关闭?微信通话耳机不能用怎么回事?
- 私募基金公司注册条件是什么?私募和信托有什么区别?
- 群体免疫真的有效吗？感染高峰过后能达到群体免疫吗？
- PS过的图片会经过原作者的同意吗?PS过的图片会侵犯哪些权利?
- 买车可以代买吗?法律依据是什么?
- 夏季皮炎症状有哪些？ 特应性皮炎和湿疹区别是什么？
- 复活节的由来和风俗是怎样的呢？复活节是干什么的？
- 1617爱情数字代表什么意思？1617年是什么朝代？
- 什么是股市预测？预测股票市场涨跌有何意义？
- 手机td版是什么意思？sim卡什么情况下会被锁？
- 信用卡逾期会被起诉坐牢吗？信用卡逾期罚款多少?
- 环保股票龙头有哪些？环保股票龙头股一览
- 股票折算率是什么意思？折算率怎么算？
- 嫁妆是什么？嫁妆是夫妻共同财产吗？
- 主力资金进出怎么看？主力资金进入为何会跌？
- youtube代理软件那个好？怎么访问youtube的网站？
- IP协议网络层引入是什么？路由协议通过IP协议判断吗？
- MIUI一键刷机软件怎么使用？如何用手机按键刷机？
- 避雷针是谁发明的？避雷针是什么时候发明的？
- 新三板上市标准有哪些？新三板上市条件和要求有哪些？
- 领结婚证需要带什么材料？办理结婚登记的内地居民应当出具哪些证件和证明材料？
- 挂牌交易是什么意思？挂牌和上市区别是什么？
- 合同上没盖章生效吗？合同上可以盖公章吗？
- 精装房收房流程是什么？房子精装修包括哪些东西？
- 止损是什么意思？如何止损止盈？
- 汽车散热风扇声音大嗡嗡响正常吗？汽车胎压监测灯亮了怎么消除？
- k线图基础入门知识图解是怎样的?初学者怎样看懂k线图?
- 离婚以后夫妻共同财产怎么分配？离婚协议具有强制执行力吗？
- 风声雨声读书声声声入耳下一句是什么？风声雨声改版搞笑对联是什么？
- 结婚登记流程是什么呢？婚姻登记条例第七条有什么内容？
- 怎么样才能申购新股?新股申购中签后如何操作?
- 怎么炒黄金？炒黄金的种类有哪些？新手入门的炒黄金手法
- 家庭暴力有哪几种常见的类型？无性婚姻是冷暴力吗？
- 多大可以领结婚证？民法典有哪些情形婚姻无效？
- 不当得利的法律规定及其分类都是什么？关于不当得利的规定有哪些？
- 车辆继承需要交税吗？车辆继承过户需要验车吗？
- 离婚孩子判给男方的什么情况下可能性大？孩子判给男方孩子户口在女方，孩子如何上学？
- 单位净值怎么算?净值怎么换算成年化收益率?
- 2022年城镇平均工资出炉 城镇平均工资怎么算的？
- 特有财产制名词解释是什么？什么叫夫妻一方个人特有财产？
- 记账式国债的优点是什么？国债记账式和储蓄怎么区分？
- 代办停息挂账需要掏手续费吗？停息挂账办理机构合法吗？
- 尾盘炸板的股票会怎样？炸板股是什么意思？
- 英菲尼迪新车型上市包括旗舰轿车和电动SUV
- 征收房产税的目的有什么？房产税的征收范围是什么？
- 坐地铁逃票被追回怎么处理？地铁出站没扣费但出了钱怎么办？
- 微信转账退回到零钱还是银行卡?余额宝提现到银行卡要多久到账?
- 百度地图3D实景地图怎么开启？什么地图可以看到实景？
- 城乡居民养老保险可以一次性缴费吗？ 参加城乡居民养老保险还缴职工养老保险吗？
- 莘莘学子莘字怎么读？曱甴旮旯怎么读？
- A股降历史最低是怎么回事？股票是根据什么来涨跌的？
- 车窗关不上自己怎么解决？汽车推重比怎么计算？
- 陶瓷刹车片和金属刹车片区别是什么?半金属刹车片的特点是什么?
- QQ浏览器网页禁止访问怎么解决？在电脑上敏感网站用什么浏览器？
- 《灌篮高手》：一个共同的密码，追溯二十年的回忆_当前头条
- readyfor 4gb是什么？readyfor4gb设置办法
- 指数基金适合长期投资吗？指数基金长期投资有哪些方面？
- 夫妻共同财产司法解释是什么？每月给父母3000算转移财产吗？
- 亲生父母能和成年子女断绝关系吗？子女的赡养义务有哪些？
- 怎么样才能办网贷延期？网贷延期办理方法有哪些？
- 赠予钱需要纳税吗？赠予钱财要交多少税？
- 房贷延期协商要满足哪些要求？怎么协商房贷延期？