大丈夫

谷歌 DeepMind 发布 GenCeption:打破计算机视觉桎梏_我的网站

少年派的奇幻漂流

一 |     近日,市强制隔离戒毒所、区人民法院、区司法局、马仗房街道、西街派出所在南山社区开展禁毒普法宣传活动。    IT之家 7 月 21 日消息,科技媒体 The Decoder 昨日(7 月 20 日)发布博文,报道称谷歌 DeepMind 发布 GenCeption 模型,将预训练的视频生成器重新用于深度估计和分割等经典计算机视觉任务。         IT之家援引博文介绍,大语言模型在学习预测下一个 Token 的时候,在训练过程中往往需要吸收语法、世界知识和上下文关系等内容。           活动中,工作人员通过放置禁毒宣传展板、展示毒品仿真模型等方式,向居民科普毒品的种类与危害,让大家更直观认识、了解毒品对个人、家庭、社会带来的危害。         但是在计算机视觉领域,视觉模型缺少等效的训练方法,主要由专业模型主导,包括用于分割的“Segment Anything”和用于深度估计的“Depth Anything”,每个模型都使用其特定的架构。         谷歌 DeepMind 团队为此提出 GenCeption 模型方案,尝试将一个“生成视频”的 AI 模型逆向改造成一个能“理解世界”的视觉分析引擎。         GenCeption 打破了传统计算机视觉“一个任务一个专用模型”的格局,仅凭单一模型就能同时做好深度估计、图像分割、3D 姿态估计、表面法线预测和相机姿态估计等核心视觉任务。随后,工作人员还发放了平安建设宣传手册、《中华人民共和国民法典》宣传资料,进一步增强居民法律意识,引导大家提高警惕、珍爱生命、远离毒品,共同打造无毒滨城。           此次活动,充分调动了居民参与禁毒的积极性,进一步引导居民当好禁毒宣传员,以点带面,扩大禁毒宣传覆盖面,共同营造全民禁毒的良好氛围。

二 |          GenCeption 基于阿里巴巴开源视频模型通义万相 Wan2.1 系列训练,与传统扩散模型需多步去噪不同,GenCeption 在一次前向传播中完成预测,从而提升视觉任务处理速度。模型通过文本提示指定任务,可输出深度图、表面法线图、分割掩码,并可处理相机运动表示。         训练数据以合成为主。论文称,数据集仅包含 7500 段视频,由 800 个数字人体模型与 200 段动作捕捉序列组合生成,再通过 Blender 在不同背景和镜头角度下渲染。         泛化方面,GenCeption 几乎只在单人合成视频上训练,但可处理真实多人视频,也可迁移到动物和类人机器人类别。论文称,部分输出细节甚至超过训练时 Blender 渲染结果,可保留猫胡须和单根发丝边缘。         性能方面,论文给出两组处理时间数据:小模型处理 81 帧视频约需 6 秒;大模型参数量为 140 亿,处理同样长度视频约需 10 秒。         参考。

三 |

Current article:http://0ua.wairanleichengwochengzhui.shop/news/20260826_7866481.html

Published on:03:59:39


用手机访问
下载APP
appicon 下载
扫一扫,手机浏览
code
休闲娱乐
综合热点资讯
单机游戏下载
精彩专栏
游民星空联运游戏