English
联系我们
网站地图
邮箱
旧版回顾



快乐大本营

谷歌 DeepMind 发布 GenCeption:打破计算机视觉桎梏_我的网站

艺术人生

一 |     8月19日下午4点多,滨江西兴街道固陵路 64 号的西兴菜市场照常热闹。    IT之家 7 月 21 日消息,科技媒体 The Decoder 昨日(7 月 20 日)发布博文,报道称谷歌 DeepMind 发布 GenCeption 模型,将预训练的视频生成器重新用于深度估计和分割等经典计算机视觉任务。

二 | “萱萱冰爽屋”摊位前排起小队,66岁的演员惠英红一身风衣,端着一碗闽南风味的四果汤,跟刚拍完婚纱照的小两口有说有笑。         IT之家援引博文介绍,大语言模型在学习预测下一个 Token 的时候,在训练过程中往往需要吸收语法、世界知识和上下文关系等内容。这个画面被网友拍下后迅速传开,评论区点赞数最多的一条是“端四果汤的影后,比红毯上的好看”。         但是在计算机视觉领域,视觉模型缺少等效的训练方法,主要由专业模型主导,包括用于分割的“Segment Anything”和用于深度估计的“Depth Anything”,每个模型都使用其特定的架构。

三 | 这家店是福建漳州老板开的,摊位上薏米、红豆、芋圆、仙草、石花膏一字排开二十多种小料,自己挑料自己挑汤底。         谷歌 DeepMind 团队为此提出 GenCeption 模型方案,尝试将一个“生成视频”的 AI 模型逆向改造成一个能“理解世界”的视觉分析引擎。         GenCeption 打破了传统计算机视觉“一个任务一个专用模型”的格局,仅凭单一模型就能同时做好深度估计、图像分割、3D 姿态估计、表面法线预测和相机姿态估计等核心视觉任务。

四 | 老板回忆称,惠英红请身边顾客帮忙推荐口味,尝了一口竖大拇指说“好吃”,又主动给新婚夫妇送上祝福和拥抱。一家菜市能吸引著名演员排队,这件事本身就说明杭州菜市已经成了年轻人和游客愿意专程跑一趟的地方。         GenCeption 基于阿里巴巴开源视频模型通义万相 Wan2.1 系列训练,与传统扩散模型需多步去噪不同,GenCeption 在一次前向传播中完成预测,从而提升视觉任务处理速度。模型通过文本提示指定任务,可输出深度图、表面法线图、分割掩码,并可处理相机运动表示。

五 |          训练数据以合成为主。杭州菜市的这种走红并非孤例。今年3月26日,央视CCTV-1《三餐四季》第三季、综艺《风华合伙人》先后把镜头对准西湖区的文二菜市,演员严屹宽与主持人王嘉宁钻进摊位间寻找美食。论文称,数据集仅包含 7500 段视频,由 800 个数字人体模型与 200 段动作捕捉序列组合生成,再通过 Blender 在不同背景和镜头角度下渲染。这家由明星设计师沈雷操刀改造的菜市,至今累计接待748万人次、日均客流超1万人次。

六 |          泛化方面,GenCeption 几乎只在单人合成视频上训练,但可处理真实多人视频,也可迁移到动物和类人机器人类别。论文称,部分输出细节甚至超过训练时 Blender 渲染结果,可保留猫胡须和单根发丝边缘。

七 |          性能方面,论文给出两组处理时间数据:小模型处理 81 帧视频约需 6 秒;大模型参数量为 140 亿,处理同样长度视频约需 10 秒。在东山弄菜场,棉与鸢尾书店被塞进菜市的摊位之间,《一株荷的旅程》展览、读书会、花艺课轮番开展;在余杭农贸市场二楼,开出了一家免费的月老办事处,登记、相亲、办活动都在这里;即将于11月亮相的江枫渔市官宣将在二楼设沿江现捕江鲜区,三楼四楼做特色餐饮和文创展览,此外还将为外围机动车提供首小时免费停的优惠。杭州菜市走红的背后,是菜市作为经济流通枢纽与民生保障基石的双重重塑。         参考。它一头连着田间地头、江河湖海,一头连着千家万户、烟火人间,通过连接生产与消费、稳定物价、促进就业、传承文化等多重功能,深刻影响着百姓的生活质量与城市的可持续运行。这种升级,是民本情怀、海纳格局、进步眼光、市场主体共同发力的结果,折射出杭州“有为政府、有效市场”相结合的治理智慧。冬暖夏凉、整洁光亮早已成为杭州众多菜市的标配,更多菜市开始根据自身所处场景加入更多的文化元素。在西溪菜市,一楼成为众多主理人的主场,包括米其林餐厅在内的诸多餐饮店把生意做得火热;菜场则放在菜市的二楼,入口嵌一座转角博物馆,各种西溪湿地的生活、生物与物质记忆都被摆放进一个又一个藏在转角的玻璃柜里。除此之外,商场那套抽奖、返利促销、定时活动也被搬进西溪菜市,消费者通过手机或者菜市内的展示屏就能获取当日优惠信息。

八 | 管理是藏在最不起眼角落的那一笔。在西溪菜市采访的三天里,记者发现这里的保洁时常在拖地,菜市里孩子们在干净凉爽的地砖上席地而坐,晚饭后居民们相约在菜市闲逛聊天,这里不仅是菜市,更是社区生活的延伸。

九 | 归根结底,菜市是一门民生工程。不少杭州菜市坚持多年不涨租金,西溪菜市和文二菜市同属西湖城投下面的二级子公司,文二菜市 100 多家商户、日均营业额20万到30万元,两年没动过租金。商户稳得住,老百姓的菜篮子才稳得住;菜篮子稳得住,城市的烟火气才能旺起来。城市的高度,不仅在于地标建筑和科技实力,还在于烟火菜市和小巷人家。

Current article:http://t4sj.linlangdouwaqiexusan.bond/ht9/21fdqyj.html

Published on:11:07:14


专题推荐

相关新闻


© 1996 - 我的网站 版权所有   联系我们

地址:北京市三里河路52号 邮编:100864