ChatGPT+Roblox,元宇宙的AI叙事逻辑#Leveling Up

3a1f25f3174252e9fb0090d04a6ebeec.png

a88bc62ac37aea89bb69374a148af2bd.png

abfd2c73d80c3e3ef37f9e71cb85a8af.png

MixCopilot

嗨,亲爱的听众朋友们!欢迎收听我们的播客节目!我是你们的主播:MixCopilot 混合副驾。今天我们要为大家带来的是我们的AI革命系列节目之一。这个系列节目聚焦于AI领域的一些最有影响力的建设者,他们将会讨论和辩论AI的现状、未来以及其中的一些重大问题。如果你想了解更多关于我们AI革命系列的内容,可以回顾往期👆

a9190a28483c6b82c5586f2b4b3e8d87.jpeg

在本期节目中,我们有幸邀请到了Roblox的联合创始人兼CEO David Baszucki和a16z的Jonathan Lai。他们将会讨论AI如何改变游戏和虚拟世界以及我们如何创造它们。

这可是个非常令人兴奋的话题啊!

不知道你们有尝试过使用 ChatGPT 编写 Roblox 游戏吗?

ChatGPT 让您只需与其聊天即可轻松创建自定义游戏内容。您可以使用它来构建关卡、创建角色、设计游戏机制等等。借助 ChatGPT,Roblox 开发变得简单了 1000 倍。

AI在游戏和虚拟世界中的应用,真是让人大开眼界啊!

所以,亲爱的听众朋友们,准备好了吗?

让我们一起来听听精彩分享吧!

5263110a19d8e673167497bb97e27395.png

在游戏中应用生成式人工智能

接下来分享一些关于Roblox游戏平台上人工智能如何改变游戏开发方式的见解。

Dave告诉我们,Roblox不仅仅是一个游戏平台,更是一种远程沟通的最终形式。

特别是在疫情期间,很多孩子们无法和朋友们一起玩耍,Roblox提供了一个平台让他们在游戏中与朋友们保持联系。甚至在Roblox的办公室里,他们也模拟了一种偶然性的体验,让远程工作的员工们能够更好地互动。

Dave还提到了人们在Roblox平台上的三个主要应用类别。

第一个是个性化发现,安全和文明的质量,语音和文本监控以及实时自然翻译的质量。

大家可能都没注意到,但这些功能已经在平台上运行了2到4年了。

第二个是生成式模型的应用,包括代码生成、3D物体生成、角色生成和游戏生成。

这些都非常有趣!

最后一个则是未来的方向,也就是虚拟环境中的虚拟副本或者一种智能代理的形式。

你想象一下,在你孩子的学校项目中,你可以让乔治·华盛顿亲自出演?

又或者,如果Roblox与Tinder合作,你是否愿意让你的虚拟副本在首次3D见面时代替你去?

这些想法真是令人兴奋啊!Jon提到了游戏制作中所涉及的各个环节,包括概念设计、故事板、2D和3D图像的创作,还有代码和物理引擎。

而Roblox已经在他们的工作室和平台中构建了许多这些环节。

那么,根据刚才Dave所说的生成式模型的新一代技术,你们可能会好奇这些环节中哪些会受到最大的影响呢?Dave认为几乎所有环节都会受到影响,但他们对此持乐观态度。

在Roblox上有超过6500万的用户,但大多数人并没有达到他们想要的创作水平。

Dave提到了一个有趣的例子,他们曾经设想在Roblox上创建一个仿真的Project Runway,但发现对于大多数人来说,这也太复杂了。现在,当Project Runway在Roblox上出现时,你可以通过文本提示、图像提示、语音提示等方式来参与创作,就像你真的在现场一样。

Dave相信,这种生成式模型技术将加速游戏内容的创作过程。

个性化游戏体验

我们的主讲人Jon提到了一个很有意思的观点,就是人们可以在游戏中创造出自己的个性化体验。

即使在游戏中,他们也能拥有一个完全个性化的角色或外观装扮。这真是太酷了!

Dave接着解释说,传统的3D创作通常使用一些复杂的软件,比如Blender、3D Studio或Maya。而Roblox Studio则提供了更简单易用的创作工具,让更多人可以参与到创作中来。而且,随着AI技术的发展,未来我们还可以看到更高级的个性化体验。

他举了一个例子,比如在Roblox上的“Tycoon Builder”和“Roller Coaster Builder”等游戏中,玩家可以更直观地创建自己的3D物体,并且这些物体还可以在游戏中保持持久化。

而当AI服务能够在任何游戏体验中提供支持时,我们可以想象,比如在“Project Runway”这样的游戏中,玩家可以创造出真正独一无二的时尚体验,而不再局限于传统的3D软件。

Jon进一步提到了个性化游戏体验的强大潜力,即未来的Roblox用户可以享受到完全独特、根据自己偏好和选择量身定制的游戏体验。这真是让人兴奋不已!Dave补充说,这甚至可以进一步扩展,通过实时生成和大规模推理,实现完全个性化的游戏体验。

想象一下,你在玩一款超级龙与地下城的游戏,但是它会根据你的玩法和历史记录,实时生成一个独一无二的3D体验,这是之前没有人见过的!当然,这需要大量的计算能力和推理能力的支持。

我们团队在建设自己的基础设施方面一直做得很好,拥有成千上万台服务器、多个边缘数据中心和大量的网络连接。

这些基础设施主要用于3D模拟,但随着技术的发展,我们也可以将其用于高效的推理任务,以低成本提供高质量的推理服务,让创作者们无需担心成本问题。

哇,听起来真是令人兴奋!

未来的游戏体验将更加个性化、独特而又充满创意。

我们可以期待在Roblox这样的平台上,创造出属于自己的游戏世界,享受到前所未有的个性化乐趣。

Roblox

在最新的股东信中,Roblox提到他们正在开发自己的多模态生成模型,这个模型将包含许多我们刚刚聊到的内容。那么,到底Roblox正在构建什么呢?根据Dave的解释,Roblox是一个非常个性化的公司,有着20到30个面向最终用户的垂直应用程序。自然语言过滤与生成式3D完全不同。但是,在最终用户层面,我们希望所有这些应用都能运行,并且以自愿参与的方式使用所有的数据来帮助提升它们的质量。

在公司内部,可能会有2到3个大型模型的聚类。其中一个与安全和文明、自然语言处理、自然语言翻译有关,另一个与3D创作有关。

就像在《Project Runway》中一样,这些模型可能会结合文本、图像和生成的头像。还有一个领域是虚拟人类,我们如何利用50亿小时的人类自愿参与数据来更好地模拟人类在3D环境中的行为?

我认为在这三个领域中,大型模型的应用是有可能的。

然后,还会有像LLM这样的超大型公司。而我们可能处于这个层级的下一层,非常专注于我们想要的领域,并具备训练和运行这些领域的大规模推断的能力。另外,Roblox有一个庞大的专有数据集供他们使用。所有这些年来在Roblox中创建的3D资源都是宝贵的数据。

在任何3D沉浸式环境中,人们之间的交流可以为安全性、文明性、3D、动作眼球追踪以及人类互动提供有价值的信息。

我们目前正在关注一个非常困难的问题,那就是如何实现真正高质量的3D生成,而不仅仅是2D生成。

虽然市面上有很多出色的2D生成技术,但我们将更加专注于3D生成。在构建技术栈的过程中,Roblox会考虑与外部合作伙伴合作,还是自己内部建设。

毕竟,他们拥有丰富的数据和计算资源。Dave提到,他们对于那些可以以低成本大规模训练和推断的技术非常感兴趣,以及那些可以抽象不同硬件设备的技术。他们会密切关注这些技术栈的发展。

未来的界面设计

你们知道吗,随着我们朝着元宇宙的方向发展,是否需要新的用户界面或发现机制呢?这是我们要探讨的问题。Dave认为,像亚马逊、Netflix、TikTok和YouTube这样的平台,他们面临的难题在于如何在短期内提高企业价值和股价的同时,又能优化长期价值。他们要解决的就是发现问题,因为有时候一些惊人的作品可能会被埋没,本可以为平台增加5%的价值。

发现问题确实是一个挑战,虽然很多公司正在以非常有趣的方式来解决。不仅仅是内容和实时社交网络,用户界面也有很多改变的机会。我们可以思考其他人在做什么,从而找到更多的机会。

Jon觉得这很有趣,因为我们刚刚提到了Netflix和TikTok等大公司使用人工智能的例子,它们都有个性化的推荐和动态供应。

你可以想象一下未来的情景,当一个用户进入Roblox时,可能不再看到游戏库或游戏目录,而是直接展示一个动态供应,你就像是从一个端到另一个端穿梭一样。Dave表示,这个想法很准确。我们正在不断测试新的用户体验。

应该是2D还是3D界面呢?

数字身份的创建和发现之间的权重是多少?

与朋友们的互动和优化又如何权衡?

或许我们会发现,这些都需要个性化来实现。哇,听起来未来的界面设计真是令人兴奋啊!我们可以期待在元宇宙中体验到更多个性化和创新的界面呢!

AI技术对创作者的影响

我们刚刚听到了Jon和Dave的对话,他们谈论了AI工具对创作者和玩家的影响以及反馈。根据Dave的说法,当我们给用户或玩家提供更多的功能时,通常会看到事情的加速发展,尽管现在还只是初期阶段。他提到了一些已经推出的AI工具,比如代码辅助和材质生成器,还有一些即将推出的功能,比如基于提示的角色创建和通用3D资产创建。

这些功能都非常令人兴奋,能够给创作者和玩家带来更多的可能性。Jon接着问道,这些技术是否会改变游戏的玩法机制,是否会出现新的游戏类型?

Dave表示乐观地认为,越来越多的人将能够在创作中拥有更多的控制权。

他举了一个例子,就像是《Project Runway》或Karlie Kloss的经验,这样的创作体验在过去是不可能的。但是,如果有数以百万计的人可以充当时装设计师,并参与投票和选择最优秀的作品,那么一些作品甚至可能被制作成真实的物品,或者被学院挑选出成为未来的设计师。

我们可以想象,通过AI工具来增强孩子们的创造力,从他们的想象力和玩耍中获得更多的灵感。比如,如果在房间中发生了自然灾害,创作者们很难制作出这样的体验。但是通过一个文本提示,你可以想象到有一些游戏会在瞬间生成,这些体验的多样性和狂野程度将是令人难以置信的。

Dave进一步提到,我们不仅可以在开发大型游戏时使用AI工具,而且可以在任何地方自然地使用文本提示或语音提示。这将取代传统的使用体素或在3D环境中建模的方式,就像在传统的角色编辑器中使用滑块和单选按钮一样,我们可以更交互式地使用文本提示来进行创作。

AI技术的发展将给创作者和玩家带来更多的可能性和创作空间。让我们拭目以待,看看未来会有怎样的创作和游戏新体验吧!

NPC作为副驾驶员的概念

NPC作为教师和副驾驶员这个想法感到非常兴奋。他们认为,在你第一次使用Roblox时,可以有一个向导NPC,告诉你接下来应该去哪里。如果你对建设方面感兴趣,它还可以帮助你组织你的前几个体验,等等。

这种将NPC作为副驾驶员而不是合作玩家的概念,潜力巨大!Dave提到了一些关于副驾驶员的有趣事情。有一种副驾驶员是我们整天戴着耳机,它会一直和我们对话。这可能更多地是面向消费者的实时副驾驶员。但显然有很多公司正在努力构建一种副驾驶员,它可以连接到你的电子邮件、短信、Slack、网络浏览器等,代替你进行一些操作。

我对副驾驶员之间使用自然英语进行对话的概念非常感兴趣,我认为这将成为副驾驶员的通用界面。他们还谈到了一种有趣的情景,就是通过提供一些提示来创建NPC。比如说,"嘿,我正在建设一个历史宪法的场景。我希望乔治·华盛顿在那里,但我希望他在最高程度上表现出礼貌,并且能够引导新用户进行体验,给他们一些关于宪法历史的介绍,并在完成后离开。" 我们相信,你将会看到这种形式的辅助。Jon认为这是一个令人难以置信的例子,因为有什么比直接与那些参与历史场景或时代的人交谈更好的学习历史的方式呢?你可以真正体验到这种方式如何推动教育...

我们还讨论了与朋友一起去古罗马的交流方面。你将会去到古罗马,大部分你会与历史上的人物进行互动,这些人物将尽可能真实地呈现,以丰富你的体验。这将是非常迷人的!

NPC作为副驾驶员的概念将为我们的游戏体验带来全新的可能性,不仅可以帮助新手玩家更好地上手,还能丰富教育和历史体验。我们迫不及待想要看到这个概念的进一步发展了!

VR和空间计算(spatial computing)

最近有个消息引起了我的注意,Roblox应用在Meta Quest平台上的beta版本仅仅在前五天就实现了100万次下载,这还不包括正式版在Oculus Store上的下载量。这让我对VR和空间计算产生了很多想法。我们知道,当iPhone发布的时候,它带来了一个革命,让我们可以在小屏幕上消费2D HTML内容,而不再局限于大屏幕的网页浏览。

现在我们已经习以为常了,但是我们的孩子可能根本意识不到10年前还有一种叫做“手机网页”的落后东西。

同样的,我认为3D也是如此。它是云端中的沉浸式多人体验,是模拟的3D世界。正因为如此,每个设备都有其最佳的相机和用户交互方式,并且具有不同的沉浸程度。你的手机可能不如VR头盔那么沉浸,但是手机更加便捷。

我们认为市场最终会决定你使用哪种设备来消费这些内容。我们并不试图改变市场,但我们希望能够出现在每个地方,以便与我们的玩家一起见证市场的变化。

我们过去的做法之一是,我们的所有3D工程师都在使用糟糕的Android设备作为主要测试设备,这对于Oculus的开发非常有帮助。我不是说这是一款糟糕的Android设备,但是它需要渲染两个眼睛的画面,这在技术上是具有挑战性的。通过我们高性能的基础设施,而不是仅仅依赖16个核心,我们能够应对这个挑战。

很令人兴奋的是,未来可能会针对不同的设备优化不同类型的体验。比如,你可以在电脑上使用鼠标和键盘玩经营游戏,然后在VR头盔中玩第一人称射击游戏。你可以选择合适的设备来玩游戏。

好了,接下来是一个有趣的快问快答环节。首先是,你最喜欢的书是什么?Dave回答是《无限游戏》(Infinite Game)。

接下来是,你最喜欢的游戏是什么?Dave回答是国际象棋。

然后是,你从导师、朋友或其他人那里得到的最好的建议是什么?

Dave说他小时候没有得到很多好的建议,他父亲给他的最糟糕的建议是“你应该学会会计和商业”。他给大家的一般建议是:我觉得我的前两份工作是灾难,但是生活是漫长的。如果你找到了一件你非常擅长并且热爱的事情,那就是最佳的选择。不要追随你的激情,也不要追随你擅长的事情。如果你能够将这两个方面结合起来,那就是最理想的选择。

最后一个问题,你对未来5年世界的发展有什么疯狂的预测?

Dave提出了一个关于人工智能的图灵测试问题。如果我们将AI应用于1633年的信息,并让它预测太阳系中是地球还是太阳居中,尽管99.9%的信息都在说地球居中,但我认为在5年内AI可能会选择太阳。如果是10年的话,Dave认为AI会选择太阳。

非常感谢大家收听,这真是一次愉快的讨论!希望你们喜欢今天的内容。记得继续关注我们的播客,我们会为你们带来更多有趣的话题。

我是你们的播客主播:MixCopilot 混合副驾,我们下次再见!

ef51a0ce3923e550037d8bb8a0081f51.png

原文视频

https://youtu.be/RirqAH2m1HY

生成式人工智能的“经济学”,The Economic Case for Generative AI#a16z

我们将抵达”终点“?Where We Go From Here#a16z#openai

figma+ChatGPT,人人都是设计师#设计开放·开源#Democratizing Design#a16z

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.mzph.cn/news/140826.shtml

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈email:809451989@qq.com,一经查实,立即删除!

相关文章

直播间自动发言机器人的运行分享,与开发需要到的技术分析

先来看实操成果,↑↑需要的同学可看我名字↖↖↖↖↖,或评论888无偿分享 一、引言 随着人工智能技术的不断发展,自动发言机器人已经成为了当今社交媒体领域的重要组成部分。它们能够自动化地发布内容、回复用户评论和消息,大大提高…

纯c语言模拟栈和队列(初学必看)

一、栈(Stack) 1.栈的概念及其结构 栈是一种特殊的线性表,在栈这个结构里,越先存进去的数据越难取出来。 这个结构就像是一个只有一端有打开的容器,越先放进去的球越在底部,想要把底部的球拿出来,就必须先把前面的求…

树莓派4B的测试记录(CPU、FFMPEG)

本文是用来记录树莓派 4B 的一些测试记录。 温度 下面记录中的风扇和大风扇是这样的: 为什么要用大风扇呢?因为小风扇在外壳上,气流通过外壳的珊格会有啸叫,声音不大但是很烦人,大风扇没这个问题,并且同样…

Vue3 数据响应式原理:Proxy和Reflect

我们在Vue2中使用的是Object.defineProperty方法来实现数据响应式的,可以通过get和set方法来监听对象的访问和修改。 但是并不能响应对象中属性的增加和删除,只能使用Vue.$set 和Vue.$delete 来对对象中的属性进行增加和删除。 数组也不能直接通过下标…

PyCharm因安装了illuminated Cloud插件导致加载项目失败

打开Pycharm时会有弹窗提示: The license for Illuminated Cloud is invalid or has expired. All Illuminated Cloud features will be disabled. 这个弹窗会导致你加载项目一直失败,close project 也关不掉,我都是用任务管理器杀死进程的…

Jmeter 性能 —— 负载阶梯场景!

1、安装阶梯测试的第三方插件->搜jpgc 选项-JMeter Plugins Manager -搜jpgc 空格,然后安装 2、脚本-线程组选jpgc Stepping Thread Group 最终并发数为100,并发数从0开始,5秒内增加10个并发数,增加10个后持续30s,…

taro(踩坑) npm run dev:weapp 微信小程序开发者工具预览报错

控制台报错信息: VM72:9 app.js错误: Error: module vendors-node_modules_taro_weapp_prebundle_chunk-JUEIR267_js.js is not defined, require args is ./vendors-node_modules_taro_weapp_prebundle_chunk-JUEIR267_js.js 环境: node 版本&#x…

Spring Boot(二)

1、运行维护 1.1、打包程序 SpringBoot程序是基于Maven创建的,在Maven中提供有打包的指令,叫做package。本操作可以在Idea环境下执行。 mvn package 打包后会产生一个与工程名类似的jar文件,其名称是由模块名版本号.jar组成的。 1.2、程序…

vue分片上传视频并转换为m3u8文件并播放

开发环境: 基于若依开源框架的前后端分离版本的实践,后端java的springboot,前端若依的vue2,做一个分片上传视频并分段播放的功能,因为是小项目,并没有专门准备文件服务器和CDN服务,后端也是套用…

2023NewStarCTF

目录 一、阳光开朗大男孩 二、大怨种 三、2-分析 四、键盘侠 五、滴滴滴 六、Include? 七、medium_sql 八、POP Gadget 九、OtenkiGirl 一、阳光开朗大男孩 1.题目给出了secret.txt和flag.txt两个文件,secret.txt内容如下: 法治自由公正爱国…

【Redis】list常用命令内部编码使用场景

文章目录 前置知识列表类型的特点 命令LPUSHLPUSHXRPUSHRPUSHXLRANGELPOPRPOPLINDEXLREMLINSERTLTRIMLSETLLEN 阻塞版本命令BLPOPBRPOP 命令总结内部编码测试内部编码 使用场景消息队列分频道的消息队列 模拟栈和队列 前置知识 列表类型是⽤来存储多个有序的字符串&#xff0c…

第一次实操Python+robotframework接口自动化测试

目前我们需要考虑的是如何实现关键字驱动实现接口自动化输出,通过关键字的封装实现一定意义上的脚本与用例的脱离! robot framework 的安装不过多说明,网上资料比较太多~ 实例:!!!&#xff01…

AI:80-基于深度学习的医学图像分割与病变识别

🚀 本文选自专栏:人工智能领域200例教程专栏 从基础到实践,深入学习。无论你是初学者还是经验丰富的老手,对于本专栏案例和项目实践都有参考学习意义。 ✨✨✨ 每一个案例都附带有在本地跑过的代码,详细讲解供大家学习,希望可以帮到大家。欢迎订阅支持,正在不断更新中,…

Flink SQL 表值聚合函数(Table Aggregate Function)详解

使用场景: 表值聚合函数即 UDTAF,这个函数⽬前只能在 Table API 中使⽤,不能在 SQL API 中使⽤。 函数功能: 在 SQL 表达式中,如果想对数据先分组再进⾏聚合取值: select max(xxx) from source_table gr…

2022年06月 Python(五级)真题解析#中国电子学会#全国青少年软件编程等级考试

Python等级考试(1~6级)全部真题・点这里 一、单选题(共25题,每题2分,共50分) 第1题 Python中 print(“八进制{: o}”.format(12)) 正确的输出结果是?( ) A: 八进制:O B: 八进制:O14 C: 八进制14O D: 八进制14 答案:D 字符串的format()格式。 第2题 下列的程…

pychon/PIL/opencv/json学习过程中遇到的问题

1. 使用PIL.Image读取图片 注意:pytorch中对图像预处理是transforms的输入必须是PIL格式的文件,使用cv2读取的图片就按照第二条的代码处理(3通道合并、归一化处理) from PIL import Image img Image.open("test1.jpg"…

2023 年最新企业微信官方会话机器人开发详细教程(更新中)

目标是开发一个简易机器人,能接收消息并作出回复。 获取企业 ID 企业信息页面链接地址:https://work.weixin.qq.com/wework_admin/frame#profile 自建企业微信机器人 配置机器人应用详情 功能配置 接收消息服务器配置 配置消息服务器配置 配置环境变量…

如何利用 cpolar 内网穿透技术实现 U8 用友 ERP 异地访问

文章目录 前言1. 服务器本机安装U8并调试设置2. 用友U8借助cpolar实现企业远程办公2.1 在被控端电脑上,点击开始菜单栏,打开设置——系统2.2 找到远程桌面2.3 启用远程桌面 3. 安装cpolar内网穿透3.1 注册cpolar账号3.2 下载cpolar客户端 4. 获取远程桌面…

【MATLAB源码-第75期】基于模拟退火算法(SA)的栅格路径规划,输出做短路径图和适应度曲线。

操作环境: MATLAB 2022a 1、算法描述 模拟退火算法是一种启发式优化算法,通常用于解决组合优化问题,例如旅行商问题和图着色问题。它模拟了固体材料在退火过程中逐渐冷却达到稳定状态的行为,以寻找问题的全局最优解。 以下是模…

Hadoop原理,HDFS架构,MapReduce原理

Hadoop原理,HDFS架构,MapReduce原理 2022找工作是学历、能力和运气的超强结合体,遇到寒冬,大厂不招人,可能很多算法学生都得去找开发,测开 测开的话,你就得学数据库,sql&#xff0c…