炸裂,AI 打造了一个西部世界!
大家好,我是 Jack。
今天继续分享几个看到的,非常不错的 AI 项目。
如果感觉,项目更新太快,学不动了!
别慌,收藏等于学会。
一、PAniC-3D
Stable Diffusion 刚火的时候,我就说过:下一个突破的方向就是 3D 了。
没想到刚过几个月,PAniC-3D 就来了。
通过动漫头像的单视图,即可生成 3D 模型。
再配合上 talking head anime 2,就能实现一个可以说话的二次元头像。
放到直播里,配合着真人去驱动,大家都能低成本,制作专属的二次元头像,这也算二次元直播的福音了吧。
下一步,就是精细化 3D 模型的效果,然后就是真人 3D 模型建模了。
到了那时,网络上帅哥和美女的数量,可能会更多了。
项目地址:
https://github.com/ShuhongChen/panic3d-anime-reconstruction
Generative Agents
《西部世界》这个美剧,各位小伙伴看过吗?
在西部世界里,机器人能够像人类一样生活、学习,工作、社交,复刻人了的一举一动。
在他们的身体里,预装了各种各样的故事情节,它们可以像人类一样行事,记得自己讲过的人,看过的东西,说过的话。与进入“西部世界”的玩家,交流,引导玩家走进这个世界的核心故事情节中。
而这种曾在影视作品中的设想,现在通过 AI 实现了。
最近火爆的一篇论文中,研究者们成功地构建了一个「虚拟小镇」,里面有 25 个 AI 智能体在这个小镇上生活。
这些智能体(Agent)不仅能够从事各种复杂的行为,比如每天的学习和工作、举办情人节排队等,而且还很真实,不再是以往游戏中那种没有感情的 NPC。
而且,研究者还把这个「虚拟小镇」部署到了网站上!
体验地址(需要使用🪜):
https://reverie.herokuapp.com/arXiv_Demo/
论文地址:
https://arxiv.org/pdf/2304.03442v1.pdf
通过上述地址,你就能看到这 25 个 Agent,每天从早上 6 点开始的生活了。
25 个智能体居住在名为 Smallville 的小镇,每个智能体由一个简单的化身表示。所有的角色都可以:
与别人和环境交流; 记住并回忆它们所做的和观察到的事情; 反思这些观察结果; 制订每天的计划。
Smallville 小镇有许多公共场景,包括咖啡馆、酒吧、公园、学校、宿舍、房屋和商店。
智能体可以在 Smallville 内随处走动,进入或离开一座建筑,导航前行,甚至去接近另一个智能体。
你可以看到这个 Smallville 小镇上所有 Agent 一天的活动,与其他人的交流。
非常有意思的一项研究,感兴趣的小伙伴,可以去体验一下。
GPT-4-LLM
我们都知道 LLM(Large Language Model)的一个问题就是 hallucination,即一本正经地胡说八道。
Instruction Tuning 指令微调,可以大幅改善这类问题,提高模型在 Zero-Shot 任务上的性能表现。
GPT-4-LLM 就是通过 GPT4 的生成结果,指导 LLaMA 模型进行微调,有点像教师网络的结果指导学生网络学习的意思。
刚刚开源,新鲜热乎的。
正在尝试训练自己的 ChatGPT 的小伙伴,不要错过~
项目地址:
https://github.com/Instruction-Tuning-with-GPT-4/GPT-4-LLM
最后
今天的推送内容,你对哪个最感兴趣呢?
好了,先聊这么多吧,我是 Jack,我们下期见~
推荐阅读
微信扫码关注该文公众号作者