比个耶就打招呼,这个3D机器人能看懂你的手势

比个耶就打招呼,这个3D机器人能看懂你的手势

AI 资讯 来源:新闻/公众号 发布时间:2026-09-20 18:39:57 预计阅读 6 分钟

家人们,夕小瑶会动了,还能听我的“手势指挥”。对着摄像头比个耶,她就抬手打招呼;点个赞,她开始自信走秀;食指画个圈,她也跟着转身。这个网页我也放出来了,感兴趣的可以玩一下:https://xixiaoyao-gesture-studio.netlify.app/。初次加载3D模型会有点慢,建议用带摄像头的电脑打开,右下角点击开启互动,允许使用摄像头,再把手放进画面里。

以前夕小瑶只出现在我的头像、封面和配图里。这次我想让她从图片里走出来,变成能和大家互动的3D玩偶。起因是最近看到不少人用GPT-6 Astra操作Blender,搭建筑、做游戏,大家也在夸它的建模能力。比如创作者Hirokazu Yokohara把一张图片交给GPT-6 Astra后,它就在Blender中搭出了城市背景,还自动剪辑了展示制作过程的视频。创作者Tom Krcha给它一张蒸汽火车图纸,要求在Blender里重建,演示中烟囱、锅炉、车轮和驾驶室被搭了出来。

完整教程:用 GPT-6 Astra+Blender 从零开始搭建一个3D 手势交互机器人

于是我也试着做了一个:把夕小瑶做成Q版3D角色,放进网页,通过摄像头识别手势,让她走路、打招呼、跳舞和转圈。这个作品前后把我5X的周额度耗得差不多了,才勉强做成现在的样子。我主要在Codex里使用GPT-6 Astra,还用到了Meshy和Blender。GPT-6 Astra帮我生图和处理代码;Meshy生成3D人物、贴图、绑骨和挑选动作;Blender检查、修整模型。

第一步,准备人物三视图和Q版风格参考图。先准备人物IP的三视图,即同一角色的正面、侧面和背面。不会画也没关系,可以把已有角色图片交给Codex补齐视角;如果还没有自己的形象,就先描述发型、服装、配色等,生成一张满意的正面图,再以它为依据补侧面和背面。准备好三视图后,我还另外给了一张Q版风格参考图,主要喜欢它的大头小身体比例、圆润的脸和宽松卫衣的感觉。我特别强调,粉色头发、蓝色眼睛、猫耳、发饰和尾巴都要保留,不要把参考角色的绿色衣服和白色头发一起搬过来。Q版造型确认后,再按这个版本补齐正面、侧面和背面。需要留意AI生图模型推出的侧面和背面可能和正面不完全一致,生成后要对照尾巴、发夹、发束和衣服。背景也尽量简单。

完整教程:用 GPT-6 Astra+Blender 从零开始搭建一个3D 手势交互机器人

第二步,在Meshy生成基础白模。最初我确实试过直接让Codex在Blender里把人物做完,但做出来的人物和我想要的夕小瑶差得有点远。后来发现它在建筑类场景相对还行,到了建模人物就没那么容易满意。所以我换了个办法:先根据图片生成3D形象,然后进入Blender再修局部。这里我选的是Meshy,它是一个网页端AI 3D建模工具,可以把文字或图片转成可导出的3D模型。市面上也有其他工具,比如Tripo、腾讯旗下的混元Hyper3D。打开网站进入工作区,上传第一步生成的三视图,勾选多视图和拆分两个选项。“拆分”指的是把生成后的身体、衣服、配饰等尽量分成独立网格,方便后续在Blender里单独处理。通常这一步出来的基础模型叫白模,可以理解成还没上色的立体坯子。生成后不要只看正面,拖动模型转一圈,看看侧面的手臂有没有粘住衣服,背面的头发、尾巴有没有变形,再放大检查脸和手。我第一次生成的模型,尾巴就出了问题。不过不用担心,在页面点击绿色箭头,把导出文件交给Codex,让它直接去操作Blender修复。

第三步,让Codex在Blender里修尾巴。有了基础模型,Blender的任务就明确多了:直接把明显的瑕疵修好,已经满意的造型可以保留下来。让Codex操作Blender有两种常见方式:一种是直接操作软件界面;另一种是通过MCP连接,让Codex调用Blender的工具能力、执行脚本。MCP可以理解成两者之间的接口。处理重复或批量任务时,程序化操作能减少截图、找按钮的往返,通常更适合这类工作。这里建议使用Blender MCP,速度快还省额度。首先在Codex安装Blender MCP页面,然后把Meshy的导出文件地址发给它,让它根据要求修改。比如这次的尾巴,可以这样提:导入我下载的模型,先另存一个修复版本。检查尾巴的尖刺、连接处和形状,只修尾巴,保留脸、头发、衣服及人物比例。完成后给我正面、侧面和背面的截图,并说明修改了哪里。修整后的白模效果不错,但整体这一步耗时一个多小时。

完整教程:用 GPT-6 Astra+Blender 从零开始搭建一个3D 手势交互机器人

修复完基础白模,接下来还有重要的一步,就是减面。先了解一个知识点:面数。它指的是我们生成的白模表面由很多小面组成,三角面就是其中的一种。像我最初在Meshy生成的白模显示有3,074,822个三角面。面越多,描述的形状越细,但处理和显示的负担也会增加。由于我的网页还要开摄像头、识别手势、播放动作,所以没必要把所有细节都用几何结构硬撑出来。这里只需要告诉Codex完成修正后,进行减面,把白模的面数降到适合在网站交互的数量就可以。保留原始高面数模型,另外制作适合网页使用的减面版本。优先保护脸、手指、猫耳和尾巴的轮廓。完成后给出面数和对比图,检查破洞、尖角、手指粘连,以及轮廓是否明显变形。

第四步,贴图,让白模变

标签: AI 资讯 AI

更多推荐阅读

国产端侧600T算力将至,黄仁勋的小黄鸭训练能在本地跑了

国产端侧600T算力将至,黄仁勋的小黄鸭训练能在本地跑了

近年来,AI算力赛道持续升温。英伟达在柏林GTC大会上展示机器鸭Microduck,黄仁勋称其在RTX Spark上诞生、云端超级计算机训练、数字孪生中学习。近日,天数智芯在上海举办“从模型到世界”媒体开放日,这是其今年1月登陆港股以来首次系统性展示产品全貌。现场展示了通过3D打印和手工组装的“手搓版”Microduck,表演走路、打盹、起身等动作。与英伟达依赖云端算力不同,天数智芯的小黄鸭在一台...

2026-11-04 19:44:09
哈佛最年轻华人教授尹希离开OpenAI,仅待5个月

哈佛最年轻华人教授尹希离开OpenAI,仅待5个月

哈佛史上最年轻的华人正教授、斯隆奖和物理学新视野奖得主、弦理论领域明星学者尹希,官宣离开OpenAI。从今年5月底传出加盟消息到如今亲自宣布离开,前后仅半年。他在个人推特中表示,这是一段非常棒的旅程,不过打算提前下车,去探索新的方向。这是他的第一份企业工作,他特别感谢Alex Lupsasca和Boris Alexeev帮助自己适应工作,也感谢Dan Roberts的支持。至于下一站,尹希尚未透露...

2026-11-04 19:20:39
OpenAI发布AGI新标准LifeVal,影响全球80亿人

OpenAI发布AGI新标准LifeVal,影响全球80亿人

OpenAI今日推出AGI新基准LifeVal,宣称AGI正式从“考场”走向“生活”。该基准价值1.7万亿美元,若全球80亿人用上此级别AGI将受影响。与此同时,GPT-6.2 Astra实测在网上流传,奥特曼发推称“人们应永远掌控未来,不应将未来控制权拱手让给超级智能”。 LifeVal是全球首个“个性化代理消费者任务”基准,不测做题只测“办事”。OpenAI参考美国劳工统计局及25国时间使用...

2026-11-04 18:25:49
OpenAI神秘双模型闪现API又撤回,GPT-6.2 Astra真要来了?

OpenAI神秘双模型闪现API又撤回,GPT-6.2 Astra真要来了?

OpenAI下一代模型GPT-6.2 Astra发布在即。Codex负责人Tibo以“Le GPT Fat”暗示新模型将至,随后OpenAI官方API列表短暂出现两个未公开模型ID——rc-ada-or-vm和rc-ada-sh-vm,几分钟后被撤下,期间调用者均遇503容量受限错误。同日,OpenAI官博发布硬件工程长文,披露一个未发布的“内部新模型”,起步跑分即超过GPT-6 Astra最高档...

2026-11-04 18:22:14
DeepSeek Harness再发新版:优化代码审查与手机端体验

DeepSeek Harness再发新版:优化代码审查与手机端体验

智东西11月4日报道,DeepSeek Harness更新GitHub仓库,推出v0.2.2-alpha.3预发布版本,围绕代码审查、自动化任务管理、SDK和插件生态进行扩展。此前一天DeepSeek出现网页及API服务部分中断,网友猜测新模型将至。 代码审查方面,新增实验性“变更请求与工作树”统一入口,用户可通过可搜索文件树查看本地代码和PR差异,逐个文件查看修改内容,选中代码片段添加评论后交...

2026-11-04 17:46:57
腾讯Hy4正式版发布:首增视觉能力,实测操作微信与3D建模

腾讯Hy4正式版发布:首增视觉能力,实测操作微信与3D建模

腾讯11月4日发布最新一代旗舰模型Hy4正式版,并计划开源模型权重。相比今年8月发布的Hy4 preview,Hy4显著扩展了预训练和后训练规模,首次引入视觉能力,大幅提升指令遵循、长文理解、长程任务、深度研究等综合能力。 视觉能力的从无到有解锁了新玩法,用户可上传照片让Hy4确定地理位置并核实信息,或根据课本图片打造3D讲解网页。基准测试显示,Hy4在智能体编程、搜索、办公等领域多个公开测试中...

2026-11-04 17:14:18
订阅
关注

扫码关注公众号「60秒看懂AI」

扫码关注公众号 60秒看懂AI

微信搜索「60秒看懂AI」也可关注

顶部