智东西(公众号:zhidxcom)作者 程茜编辑 心缘
智东西3月28日报道,阿里大模型表情包军团再添猛将!今日凌晨,大模型“劳模”阿里云通义团队发布其首款视觉推理模型QVQ-Max。
在数学问题、生活常识、编程代码、艺术创作等场景,该模型可以看懂图片和视频里的内容,还能结合这些信息进行分析、推理,并给出解决方案。
例如,QVQ-Max可以协助用户在工作中完成数据分析、信息整理、编程写代码等任务,帮助学生解答配有图表的数学、物理等科目的难题,并通过直观的方式讲解复杂概念,在生活中根据衣柜照片推荐穿搭方案、基于食谱图片指导用户烹饪。
用户只需上传任何图像或视频然后提出问题,点击 “思考 ”按钮,即可查看它如何逐步处理视觉信息。
多模态数学问题的数据集MathVision可以用来评估模型解决复杂数学问题的能力,研究人员发现,模型思考的token数越长,其MathVision的准确度就会越高。
博客中提到,他们设计QVQ-Max的目标,就是让它成为一个既“眼尖”又“脑快”的助手,帮助用户解决各种实际问题。
体验地址:https://chat.qwen.ai/ 一、秀多图识别、数学推理、看视频学习编程技能
阿里通义团队在博客中放出了几个新鲜的QVQ-Max演示案例。
首先是多图识别,QVQ-Max可以描述图片中的景色,并且通过分析图片信息找到这两张图片的相关之处。
其次是数学推理,这道难题需要模型从图片中找问题和答案,QVQ-Max通过分析其余8个数字之间的关系,得出了最后一格的数字应该是10的正确答案。
第三个是让QVQ-Max看手相,感情线、生命线、事业线分析得头头是道。
第四个考验了模型的视频理解能力,演示中模型对一个简笔画的蜗牛视频进行了分析,然后为这条视频创建了贴合的字幕。
最后一个是让QVQ-Max看视频自学编程,在观看了一个类似贪吃蛇的小游戏视频后,QVQ-Max很快就复刻了一个类似游戏,给出了完整的代码。
二、观察细致入微、深入分析,还能灵活创作
QVQ-Max的能力可以总结为三个方面:细致观察、深入推理和灵活应用。
细致观察方面,QVQ-Max能快速识别出复杂图表、日常随手拍照片中的关键元素,例如它可以找到图片中有哪些物品、有什么文字标识等。
深入推理就是让模型基于看到的内容进行分析,然后结合背景知识得出结论。例如,在一道几何题中,它可以根据题目附带的图形推导出答案;在一段视频里,它能根据画面内容推测出接下来可能发生的情节。
除了分析和推理,QVQ-Max还可以灵活应用这些能力进行创作,例如帮助用户设计插画、生成短视频脚本、创作角色扮演的内容,或者化身评论家、占卜师。
这使得其在用户工作、学习、生活中的应用场景增多。
一般而言,大模型在回答问题、写文章、生成代码时主要依赖文字输入。
但现实生活中,很多信息并不只是用文字表达,而是图片、图表、视频、文字交互出现,并且图片中包含的信息会比文字更直观、更复杂,如其中的颜色、形状、位置关系等。例如用户分析建筑图纸时,仅靠文字描述是无法判断其合理性的,需要结合图纸以及专业知识分析,这也是阿里通用团队研究视觉推理模型的原因。
结语:视觉推理模型的演进方向:更准确观察、视觉Agent、交互多元
目前发布的QVQ-Max是阿里通义视觉推理模型的第一版,未来,研究人员会重点关注以下几个方向:通过视觉内容的校验来检查观察内容的准确性提高识别能力;通过视觉Agent提升模型在处理多步和更复杂的任务,如手机电脑操控,玩游戏;让模型在思考和交互中不局限于文字,还可以涵盖更多的模态,比如工具校验,视觉生成等。
作为一款能看懂又能深度推理的视觉模型,QVQ-Max已经展现出了完成创造性任务的应用潜力。
《女朋友下边粉嫩粉嫩的怎么办》,《y85ouztigy6ysf5y》小兰被爆漫画羞羞动漫
“赵露思被❌到喷水18禁暗夜”
偷看76个美女撒尿
……
04月05日
“男生女生搞色a大全”轻轻松松喜剧节
↓↓↓
04月05日,陈国基将赴北京 就推动爱国主义教育工作交流意见,女人与公狍交酡女免费,挠痒痒裸男私㊙️无遮挡vk,女仆脱了个精光被主人摸,嗯~啊~快点死我代码
04月05日,【澜湄印象】玉树印象,成人国产AV精品㊙️影视,free❌❌❌国产麻豆,近相亲祖母六十网站的,再深点灬舒服灬太大了岳图片
04月05日,全国老字号福州展示展销 国货潮品贺新春,小心🐤入🍑🍑视频的动漫,嗯~老师你湿掉奶罩H漫画,美女裸体🔞🔞🔞网站春水,成人女同LV免费观看在线
04月05日|刘国中访问阿尔及利亚|刘亦菲自慰❌❌喷水好爽|他把黄瓜放进了我的下面|cos云缨被扒开腿部❌❌|唐三玩小舞腿内里面的的珍珠
04月05日|盖茨基金会宣布2024年预算达86亿美元 创历史新高|亲子乱高潮1000部|mm131黄雨纯被❌出水|男男GayGays✅免费网站 2022|日本69熟
04月05日|深聚焦 | 厚植民生福祉 绘就幸福底色|涩涩🔞动漫乱码精品APP|笔趣阁h1v1喷水射|姬小满裸乳被爆白浆|辛普森㊙️禁漫网站……
04月05日,全国政协十四届二次会议闭幕,美女C八衣服网站,猛男互摸🐔巴,❌❌❌❌学生XXXX18,灰原哀❌羞羞吸乳漫画
04月05日,近距离|习主席称赞法国总理中文“讲得很好,很标准”,www.校花被爆❌羞羞裸体,silk144,长瀞同学同人H,玖辛奈乳暴❌自慰naruto
04月05日|伦敦等地治安形势严峻 中国驻英使馆提示加强防护|日本❌❌❌❌护士6999|45番电车下载安装|馃崋馃崋馃崋|艾莎公主被调教到失禁高潮小说
04月05日,(新春走基层)探访中国彝家第一村攀枝花市迤沙拉村,里番 色列 全彩 h 本子大全,日本3d动漫,男生洗澡露j🔞🈲,BRAZZERS💋💋女
04月05日,依法遏制高额彩礼,小🐤🐤戳进🍑无遮挡变态,进里蓝莓视频,周防有希裸体㊙️无遮挡胸,我想我的小叔子免费观看电视剧
04月05日,中国历代绘画大系主题展在中华世纪坛开幕,打屁股免费网站,女帝被扒开腿爆❌乳液狂飙图片,日本无码av波多野吉衣,动漫女大胸泳衣
04月05日|宁夏贺兰山东麓借“算”发“力” 走上葡萄酒智慧发展之路|欧美AV无码成h人动漫奶头|老熟女胆肥大XXXWWW|粗大的🐔巴再里面进进出出网站|草莓视频芭乐视频ios官网入口
04月05日|医疗器械蓝皮书:中国创新医疗器械将迎来更大发展|国产做受高潮软件|男男GayGay互吃鳮吧网站|真人裸交动态图吃奶|巨乳美女❌❌巨乳影片动漫
04月05日|近十年最大规模吴湖帆作品展在上海举办|!脱让学生C🐻|挺进朋友老婆的骚B|扒开屁股眼乖乖灌肠|ⅩL司第二季末增减类型
雷军回应小米15涨价幅度,妈妈朋友的儿子|中非经贸总部大厦落户长沙 助推中非开展新兴领域合作|云曦被爆❌3D在线观看|动漫3D吸乳羞漫画软件|国产91♥️丝袜在线观看|农村妇女✘✘✘✘乳乱
监制:邓金木
策划:赖晗
主创:唐征宇 林箴贺 陈佛烘 颜亦阳 陈林韵
编辑:王家菁、段圣祺