元宇宙建设添利器 Meta强推视觉大模型 多模态AI有望加速发展

消费 >
科创板日报
分享

《科创板日报》4月21日讯(编辑 宋子乔)在AI大模型竞赛中,Meta选择重押视觉模型,继推出零样本分割一切的SAM后,扎克伯格亲自官宣了重量级开源项目DINOv2。

据介绍,DINOv2是计算机视觉领域的预训练大模型,模型参数量是10亿级,采用Transformer架构,能在语义分割、图像检索和深度估计等方面实现自监督训练,不需微调即可用于多种下游任务,可以被用于改善医学成像、粮食作物生长、地图绘制等。

DINOv2有何亮点?


(资料图片)

主要体现在两方面——DINOv2可以为大语言模型提供丰富的图像特征,有助于完善多模态GPT应用;其蒸馏成小模型后效果依然优秀,便于在各种边缘场景及本地化落地。

对于前者,Meta已表示计划将DINOv2集成到更大、更复杂的AI系统中,作为视觉主干提供丰富的图像特征与大型语言模型进行交互。

国盛证券分析师刘高畅表示,DINOv2能比用图像文本对做训练的模型得到更丰富的图像特征,这将让整个系统能更好地理解图像,对多模态AI的发展起到加速作用。

值得注意的是,多模态技术还能助力游戏内容与元宇宙构造,随着AR/VR技术的发展,未来将能构建逼真的虚拟现实。扎克伯格就强调,DINOv2可以极大地加持元宇宙的建设,让用户在元宇宙中的沉浸体验更出色。

上述分析师大胆预测,1-5年内,随着多模态的发展带来AI泛化能力提升,通用视觉、通用机械臂、通用物流搬运机器人、行业服务机器人、真正的智能家居会进入生活。未来5-10年内,结合复杂多模态方案的大模型有望具备完备的与世界交互的能力,在通用机器人、虚拟现实等领域得到应用。

对于边缘场景落地,简单来说是指将大模型移植到移动端或是算力有限的场景。

运行大型的模型需要强大的硬件,这可能会限制模型在C端场景的应用,为大模型“瘦身”成了手机等移动终端运行大模型的前提,其技术路径多样,包括通过剪枝让模型稀疏化、知识蒸馏对模型进行压缩、通过权重共享来减少参数量等。

DINOv2即采用模型蒸馏的方式,将大型模型的知识压缩为较小的模型,从而降低推理时的硬件要求。据官方介绍,Meta开源了多个不同参数规模的预训练模型,在相同的规模下比较,DINOv2在多种测试基准的得分都能优于目前开源视觉模型中表现最好的OpenCLIP。

Meta之外,高通、华为等科技巨头也在致力于实现AI大模型在终端的轻量化部署,谷歌、腾讯、百度等已将模型压缩技术紧密结合移动端模型部署框架/工具。

标签:

THE END
广告、内容合作请点击这里 寻求合作
免责声明:本文系转载,版权归原作者所有;旨在传递信息,不代表中国财投网的观点和立场。

相关热点

资讯播报

预售一般几天发货?预售不发货可以投诉吗?
今日热议:思科瑞:一季度净利润2341.34万元 同比增长24.02%
【全球播资讯】一镜到底丨带您沉浸式体验“壮族三月三” 乐翻天!
全球最新:美的集团分拆子公司上市 美智光电二度冲刺创业板
天天观焦点:机构:4月下旬电视各尺寸面板价格进一步上涨
元宇宙建设添利器 Meta强推视觉大模型 多模态AI有望加速发展
全款预售和普通发货的区别?付定金了为啥还要全款才能送货?
焦点简讯:【东海期货4月21日产业链日报】贵金属篇:初请失业金人数走高,金银震荡
今日最新!全媒传播新探索 这场发布会值得期待
热门:算力产业迎来发展机遇 23只概念股获两路资金加仓
【天天新要闻】AI+概念如期回调,软件ETF(515230)跌超5%,成交额超1亿元
【财经分析】陕鼓动力营收增速创6年新低 大手笔分红托不住股价
环球速讯:金石资源:2022年净利润下降9.19%至2.22亿元 拟10送4派1.60元
火热!“五一”假期铁路客票销售创同期历史新高
原始股东转让股权后是否承担责任?原始股东与股东的区别?
全球今头条!库存降至十年低位 工业金属板块价值显现
公司股东退出需要什么手续及流程?股东变更需要本人到场吗?
当前观察:现场直击|2023“壮族三月三八桂嘉年华”今日盛大开幕!
无线通信领域取得新突破 多家上市公司放眼6G时代
宁波汽配商身世坎坷 年入30亿冲刺IPO
“身份全靠编,文书全靠P”男子冒充假律师连骗三人被公诉
中俄、中蒙草原边境火已得到控制 森林消防队伍持续巡护扑救
广饶县:“亮剑护农”奏响农忙平安曲
当前快讯:AI会把我们带向何方?
公积金400是什么水平?每月公积金400元是高还是低?
公安局冻结银行卡是什么原因?涉案卡多久就不查了?
八点八折是不是0.88?8.8折怎么算用计算器?
公共预算收入和财政收入区别?一般公共预算收入包括什么?
公积金密码次数超限几天解除?住房公积金初始密码是多少?
100万满五不唯一要交多少税?满二唯一和满五唯一哪个划算?
非法搜集影视作品十万余部 这起侵犯影视作品著作权案判了!
全球信息:新民特写|一起来为地球充“植”吧!
宁夏发改委:锚定目标狠抓落实 全力冲刺二季度“双过半”
备战奥运新周期:中国三人女篮即将开启奥运积分征程
天天热推荐:江西最新最低工资标准2023调整为多少钱?2023年江西最低工资标准一览表
【世界热闻】52280867.88元!几个境外电话,差点清空杭州一个“半亿万富翁”
每日视讯:“东数”实现“西算”要迈几道坎
【新视野】杭州,头部私募机构“第三城”
天天头条:房建截水沟与排水沟的区别_截水沟与排水沟的区别
速看:陈飞宇回应运气差:演员最重要的是把本职工作做好
《无间》爱上花向雨,认贼作父,为闪官卖命
环球动态:这一次,“晚节不保”的杜旭东,不再被世界宽容
天天视点!新冠病毒XBB.1.16可能引发结膜炎,莎普爱思异动涨停
天天滚动:瑞幸咖啡再度下调产品价格 “9块9卖咖啡”将成市场常态?
绝地反击!库里开局就爆发,老婆连续鼓掌,生死战勇士队没有退路
马斯克背后的女人:58岁才创业,重仓特斯拉封神,5年年化超40%
当前头条:一季度经济发展实现良好开局 将多措并举巩固经济向好势头
国内超过星巴克,还要在4月反复摩擦,瑞幸杀疯了
全球头条:医药生物行业资金流出榜:药明康德等16股净流出资金超5000万元
环球即时看!打铁大战!库里半场18分卢尼12板5助勇士领先12分
世界播报:瞬息万变!快船3分19秒打出14-2的攻势实现反超
要闻速递:长安期货4月21日原油报告:衰退担忧持续压制油价,需求支撑下前空离场
世界观热点:红蜜柚几月份成熟_红心蜜柚什么时候才会成熟
简讯:四市广电主播隔空对山歌!来听听哪个台唱得最好听?
美国货币基金因纳税流失690亿美元 创两年多来最大单周跌幅
微动态丨光线传感器是什么_光线传感器的相关知识
世界短讯!摆地摊的货源从哪里批发_去什么地方找摆地摊的货源
天天速讯:初五是什么日子_正月初五的节日
环球微动态丨国家统计局:一季度住宿和餐饮业GDP同比增长13.6%
全球聚焦:日常生活健康小常识 健康小常识大全
全球快看点丨成本有关的分录_关于成本的会计分录
指数个股分化,港股通医药ETF(513200)今日微跌0.71%
信息:肾穿刺会不会对身体有伤害吗?有哪些危害呢?
丙肝怎么治疗?丙肝的治疗方法有什么?
函授本科能考研究生吗全日制_函授本科和全日制本科有什么区别
广州市特种设备检测研究院官网_广州市特种设备检测研究院
焦点速看:“三月三”的图书馆真香!广西将开展300多场图书馆服务宣传活动
全球短讯!Sensor Tower:3月腾讯(00700)《王者荣耀》吸金2.15亿美元 蝉联全球手游畅销榜冠军
如何改善平时的睡眠质量?每天坚持做这3件事 让你一觉睡到自然醒
全球热讯:2023年“四季村晚”示范展示点公布,广西11个村入选
「大国基理」党建引领网格化管理 解锁基层治理新密码
全球看热讯:中信建投期货4月21日贵金属早报:经济数据疲软,贵金属偏强运行
今日快讯:英雄传说之龙天翔传记_关于英雄传说之龙天翔传记的简介
短讯!“壮族三月三”官方新媒体矩阵来袭!带你“潮”玩三月三
【聚看点】美国4月费城联储制造业指数-31.3,预期-19.2,前值-23.2
【世界快播报】澳媒:枪支暴力事件激增使美国人权状况恶化 美政府放任危机蔓延
环球新动态:“潮聚三月三·和谐在八桂”九大活动亮点纷呈
世界通讯!蓝色光标一季度净利1.49亿元 2022年亏损21.75亿
全球百事通!4月24日-4月28日当周重点数据和大事件前瞻
天天观热点:普元信息2022扣非亏损 2019上市募6.4亿民生证券保荐
热推荐:惠城环保2022扣非亏损 正拟定增2019上市2募资共6.6亿
全球观速讯丨4月21日汇市观潮:欧元、英镑和澳元技术分析
安徽合肥:明起连续开展两轮核酸检测
2023年最新流行色曝光,买衣服前不妨看一看,高级显白显气质
刘诗诗米兰时装周最新红色皮衣造型 气质突出 赢麻了
天天观点:【读财报】持续回暖!TOP30上市房企3月销售额环比上升近三成
春天穿“风衣”的话,切记要过膝、露脚踝,不仅简洁大方还显气质
世界今日讯!“绩优生”华润有巢REIT:一季报多项运营指标超预期
快播:邻苯二甲酸二丁酯商品报价动态(2023-04-20)
环球观焦点:vivo发布三款年度扛鼎产品 折叠旗舰全新体验
环球简讯:推进到家业务,拓宽服务范围 实体店线上线下齐发力
中汽协:3月商用车产销均完成43.4万辆 环比分别增长37.1%和34.2%
世界热议:江永县科协开展廉政文化教育主题党日活动
观察:中国联通首季利润创上市后新高,多家机构给出“买入”评级
天天时讯:河南原阳县先进制造业开发区搭建产学研平台 助推企业做优做强
INMO&讯晟联合预售Air2
今日视点:阳河社区党建引领筑牢国家安全防线——“快乐社区365·全民反诈共同行”主题晚会举行
焦点滚动:北京:种植牙大幅降价首日候诊人多
环球快资讯丨美国仇恨犯罪案件创历史新高
每日简讯:今日南财市场情绪指数为61.9,市场投资热度提升

相关推荐

精彩推送

3