空间计算、物理计算、实时仿真与创造拥有「自主行为」的小狗

本节目由津津乐道制作播出。

嗯嗯，

能够各位听友大家好，

这里是 rte 开发者社区和津津乐道博客网络共同制作的博客节目编码人生。

今天我们是在 rte 开发者的开发者大会上啊，

跟大家来做的一期开放卖。

那么呢今天的话题其实有一些丰富。

那早晨和下午的话题呢，

我们聊了很多大模型实时音视频啊，

包括我们最近出的这个克劳德新出的这个啊可以操作电脑的这个这个 ai。

我给你讲了很多这些东西。

当然了，

我们的 ai 也好，

实时音视频也好，

其实并没有办法去摆脱我们真实的物理世界。

那我们今天下午最后一个议题呢，

其实是想跟大家聊聊到空间和物理计算这一方面的话题。

那首先介绍一下我们今天的嘉宾第一位嘉宾，

其实我是我们的返场嘉宾，inswiss 的一名老师。

嗨朋友们，

我是一鸣。

哎，

这次他在这儿有约展台，

而且恰巧跟我们的展台挨着。

昨天我已经看了一天了，

我估计你演示中的那个 visionanpro 已经被薅秃了，

是吧？

对，

所以一会儿呢我终于看见你们的产品了，

一会儿请你多介绍一下你的产品。

ok 好吧，

没问题。

我们第二位老师呢是那是大家好，

我是韩青来介绍介绍你的公司是做什么的吧。

因为他们的公司我可能都知道，

而是做什么的。

我们公司名字是 office，就是我们自创的一个合成词啊，

前面 mot 是代表 motion 代运运动，

然后后面 phy 是 physics 代表物理啊，

我们做的是实时的动作，

物理引擎就是做各种啊实时的物理仿真技术。

那你们的产品是面向怎么样的一个用户，

是谁会用你们的产品解决什么样的问题呢？

呃，

我们的产品现在是以 sdk 的形式存在的。

当然我们也是带呃一整套自研的工具链就是可视化的调试和性能分析的工具。

嗯，

那我们这套 sdk 是承担了实时物理访问的工作。

现在呃我们主要用户分布在游戏行业啊，

除了游戏行业之外，

还有一些做嗯实时失效的。

嗯，

比如说在手机上做做互动性的应用壁纸啊，

这些都会用到我们的技术。

嗯，

我们另外一个正在研发的方向，

就是我们已经除了做这种时效性的实时武力仿真，

就是看起来 ok 就行的。

嗯，

我们同时正在把它发展成为呃精度比较高的这种啊能够用于指导生产实践的啊高精度的实施五零擎。

所以呃目前我们我们这条线是目标的是矩阵智能，

这个仿真的赛道更偏向于工业应用。

这个领域是是嗯啊尤其是呃训练机器人的时候，

我们可以提供非常高性能和高精度的物理仿真环境。

然后让让这个机器人在环境里面他探索学习，

然后最终是可以呃提取很多合成数据出来，

用于增进巨神智能的。

这个让他变聪明。

明白。

那现在我们的公司在这个整个市场里属于什么样的一个生态位呢？

嗯，

我认为我们是处在这种中间件的生态位，

就是我们的底下是操作系统和硬件。

嗯，

啊我举例来说，

我们去年年终到今年花了很多时间啊，

对接华为。

华为现在是我们的客户。

那我我们系统是内置到呃前几天发布的那个哈尼 osnext 里面成为成为它内置的物理引擎。

然后那我们呃对接操作系统和呃华为这些芯片，

比如海思的 gpu 嗯，

做了很多适配的工作，

然后能能够把这些硬件和系统的算力发挥出来。

明白。

然后再我们出来这个中间层，

然后我们往上是呃对接的各种应用。

比如这个鸿蒙系统里面，

它的它的天气应用，

就是用我们的技术去做一些效果，

像下雨啊，

下雪这些这些效果，

它有它有互动性的呃效果。

嗯，ok 那一会儿也会请你慢慢的介绍一下你们的产品在应用过程中的一些故事。

好吧啊，

可以啊，

唉，

下一位嘉宾啊，

我这位嘉宾是昨天我一直绕着他的展台绕了好几圈的一个嘉宾，

甚至下午还做了这个视频的访问。

就是我们现在都在讲啊智能硬件啊啊 ai 硬件啊，

但是好像这些东西都是别人做了，

我来用，

但是并没有一个我可以去参与它这个制造过程的这样一个硬件产品。

昨天我终于发现了就是邵月老师的这个产品来介绍介绍吧。

可能我们很多的听众并没有看昨天的直播是吧？

可以给大家介绍介绍你是怎么样一个产品。

好的，

大家好，

我是邵月，

我是 michaelblouse。

这个社区的一个推广人在 michaelblows，他是一个受 scratch 启发为物理计算而生的一个图形化编程语言。

这里面有一个物理计算，

但它实际上更多的是像一个翻译过来的词，

就是我们很少会提到说叫物理计算。

嗯，

那简单解释一下，

实际上它就相当于是以前我们要对一个硬件进行编程，

我们要学阿 doo 然后我们要写很多的代码，

我能驱动一块 esp 三二或者是一块 pico 二零四零的板子。

那有了 michaelblogs 以后，

它为什么叫呃，

受到 screed 启发？

因为这是现在小孩子拼积木编成了一门语言。

那我们就可以用拼积木方式帮助我们去完成一个硬件的开发。

嗯，

那这样的话我们就可以有一个很低的门槛去完成这件事情。

嗯，

而它并不只是一种说我简单的把一个语言变成了一个 blowky 的一个积木块的模式。

它实际上是把一套就是我们基于 scratch 的一个 mysight，就是一个心智模型封装到了一个 vm 里面。

什么叫心智模型？

能给大家解释一下吗？

非常好，

但是还是需要有一些了解的。

比如说我们之前如果一些 donono 程程序的话，

它基本上是会有两个默认的方法。

比如说一个是叫做 loop，一个是叫做 setup。

那么这种模型就是说我所有的初始化要写在一个里面。

然后我整个的一个大程序就是一个 look，我要在里面去写所有的这些程序。

那它可以简单理解为是一个单线程的一套这样的一个工具。

所以你要用惯了这个 adilo 的话，

你就会认为好所有硬件开发基本都需要这样。

我需要在里面去考虑每一个事件它的一个处理方式。

当然你可以用一些中断比较复杂的方式可以实现其他的功能。

但你整个的 myside 就是呃会认为说我很多事情要一起做是一件很麻烦的事情啊，

就是它是一个单线程的循环，

它必须做完这个再做那个。

对对啊，

然后这个就是我们认为我我理解就是你要学 adoo 可能这个东西会深入到你的脑子里。

嗯，

但是如果你要是一个小朋友，

你从小学的是一个 scratch，那 scratch 里面它会有很多，

我们叫做做帽子积木。

那所所有的帽子积木都是可以开始一个任务的那就是在电脑里面的帽子积木，

你可以点击绿旗啊，

或者是点击角色啊。

因为它是控制电脑的，

所以有很多的帽子积木。

然后呢，

它在执行的过程中，

它会有一个叫做广播消息。

那这种广播消息实际上它就是一个并行处理的一个能力。

也就是说我广播一个消息，

我说那所有接收到这些消息的任务都可以同时执行。

那这种我们叫做 myside，就是说他会知道啊，

我其实更接近于我生活中实际在做的一件事情。

比如说我可以一边吃饭，

我可以一边看电视，

那两个任务是可以并时进行的。

嗯嗯，

那我就可以说好，

我需要这两个任务同时帮我去做，

我不需要关心底层是怎么实现的。

嗯，

所以我们就简单理解，

就是说我们认为有一种模型是叫做 scratch 的。

myinside 就是说它会非常擅长用于这种帽子积木和呃各种广播消息去串联程序。

那另外一种呢就是我们说基于 adoanal 的，

就是他必须知道是一个大 loop 啊，

在 loop 里面需要人工的去考虑啊，

我这个占用这段时间，

那我需要等待多少，

然后下一个要等待多少。

嗯嗯，

对，

所以就是简单理解，

这是两种不同的这种心智模型吧。

嗯，

更像我们以前用计算机，

可能以前是那大型机单机机的，

我一次只能跑一个任务。

那现在可能你在你的这个框架之下，

它可以同时跑多个任务，

同时执行一件事情。

对，

就是你完成一件事情的方法会有很多不同。

比如说你在 adonoo 里面，

你可以在那个 loop 里写超长的一段程序。

因为它不限制你。

但是你在 michaelbloss，它每一段程序的长度是有限制的。

比如说你不能超过一千个字节，

它有一些性能方面的考虑。

那这个时候我怎么样能够说把这些一段一段的程序拼起来呢？

嗯，

那其实对于呃学过 satch 的小朋友来说，

他会很自然的想到它。

相实际上可以一个程序执行，

完以后发一个广播。

嗯，

然后我我下一个再接到这个广播，

用一个帽子积木，

它相当于是两段程序。

嗯，

我就可以通过这样的方式，

把屏幕把这个程序自然的拼起来，

嗯，

更像我们编程里的消息机制。

对，

对它实际上整个的在 michaelblogs 里面的消息机制是它一个最核心的一个能力啊，

包括它内部的消息机制，

以及它最外的消息息机制。

比如说我们多块板子直接进行通讯的时候，

它也没没有用到一个类似于 api 的一个形式。

它更多的是用到一个叫做消息广播，

嗯，

它可以基于蓝牙广播消息，

也可以基于 wifi 广播消息。

所以就是它会有很多自己的一些处理的方式。

所以我们讲它会有不同的这种心智模型啊，

这个就叫心智模型。

而且我发现你的产品你还有一个特点，

没有线。

哎，

对，

就是哎他摆在桌上，

我说你线呢它就动起来了。

以前我们去搞一些智能硬件，

好像都要有一条线，

别管是 usb 线还是串口线，

是吧？

我必须插在上位机上，

然后他才能干活。

哎，

我说你这个厉害线呢？

是的，

这个这也是 michaelbloss 的一个特点。

就是说我们已经完成了一个蓝牙串口，

去直接跟我安装了 michaelblossvm 的硬件直接进行通讯。

也就是它在初始化的时候，

这个通信就已经建立了。

对，

然后它的通讯不只是说我的程序是在蓝牙端去去呃调用内部的一些能力。

然后呢，

我完全是在我的客户端做一个调用，

而是说他把客户端的写的程序可以实时的传到你的这块板子里面。

他传的是数据，

不是一些动作，

呃，

他传的是你整体的程序啊程序对程序。

也就是说我呃在这边拼接积木，

让他去做了一些操作，

这个操作实时的就会传到你的板子里。

并且你点击积木的时候，

这个板子，

比如这个小车，

它会自动就会跑起来。

所以这个也是一个它非常就是我们叫做构建实时应用实时环境的一个能力。

嗯，

就是呃也其实也是又回到了再重新讲一下这个还有一个麦 set，就是在 scratch 里面它非常重要的一点啊，

当然因为我是教小孩 scratch 的啊，

所以我经常会拿他来说，

可能有些大家不清楚，

就是还有一些特点，

就是所有的积木点击就能看到结果。

嗯，

也就是说我点这个小人，

让他走十步，

这个小时就能走十步能看到效果。

我加一个重复执行，

它就能一直走。

然后加了一个撞墙，

就反弹会一直反弹。

所以就是它虽然很简单，

但是它可以实时的获得反馈。

嗯，

那在原有的，

比如说你在呃 aouno 里面，

你是不具备这个能力的。

因为你所有的程序都需要写完以后编译上传运行。

然后运行的过程中，

你可能需要打开一个串口连着线，

你才能够知道它到底是怎么样的一个实时反馈信息。

那这个过程中，

如果你发现有问题，

你又得重新编译上传，

然后运行。

嗯，

那这个过程就是变成一个非常的没有及时提供反馈，

而且非常琐碎。

对，

嗯，

然后包括其他的一些硬件编程环境，

它基本上也是沿用了这个。

因为它只是用 blocky 封装的一些积木代码，

所以它的整个的这些流程是不能省略掉的。

明白，

而在 michaelbloss 里面，

它实际上是把这些我们老说，

就是为什么很多的这些编程工具它一下载要下载一个 g 的东西。

嗯，

然后 michaelbloss 的编程软件只有十兆，

就是这个差别是一个数量级的差别。

为什么呢？

其实你可以理解，

就是所有其他的编程工具是需要背着一个工厂到你的本机的。

而在 michaelbloss 里面，

它是这个 vm 就是针对这个板子所有能力的一个构造的工厂，

已经帮你录入到到这个板子里。

嗯，

嗯嗯，

所以你不需要背那个几个 g 的编译文件，

然后让你在本机里面能够去编译这些东西，

我所有能力他执行就好了。

对我已经帮你做到了 vm 里面。

然后这个 vm 又给你提供了一个对外的实时的一个蓝牙的操控能力。

等于你做了一个在硬件和软件之间做一个中间层做了一个框架。

对，

是的。

然后通过这个框架，

我们就可以像用 scratch 一样，

用积木去操控我们的硬件。

刚才邵悦介绍完这个东西呢，

我是觉得今天我们三个嘉宾是经过我们 rt 社区的小伙伴们精心挑全的，

为什么呢？

一位是自己搞了一个硬件，

一位呢是用 sdk 希望去驱动一些硬件。

还有一位呢是用现成的硬件做起自己的 app 的。

对我现在想继续来这个让一鸣老师返厂哈。

因为今天我看到了你们非常精彩的这个在 visionpro 上的应用。

嗯，

你那个展台应该是这次市级最火的展台之一了啊，

是有他他们反反馈一直在排排队。

对，

一直排队，

甚至把我们的展台都挡了。

所以想请你来介绍一下你们最近从上次录音到今天你们最近的一个进展，

包括 vivianpro 的一个话题。

昨天在访问的时候，

其实我也问到你们同事，

然后其实 visionpro 呢可能在大众的这个视线里面慢慢的好像被淡化了。

嗯，

不像一开始时候大家提的这么多了，

甚至呃我们上次录音的时候，

大家还在说唉体验一次一小时一百块钱啊。

现在好像大家慢慢的这些，

他的兴趣慢慢的消失了。

但是从开发者的视角可能有一些不同的理解。

嗯，

能给大家来分享一下微神 pro 在过去的这个几个月当中，

它的生态用户会发生了怎样的一个变化？okok 那我们就客观一点聊太好。

对，

客观的聊的话呢啊现在看来 visionpro 的整个热度啊确实是没有以前那么高的。

嗯，

那么现在 visionpro 购买了 applevisionpro 的用户呢，

有一部分是已经卖了。

嗯，

好就退，

有一部分是退了啊，

有分是闲鱼了啊，

对我从闲鱼上经常能搜着。

哎，

对对对，

然后还有一部分呢应该是在吃灰，

嗯，

啊这个 applevisionpro 也好，

或者是是其他的 vr 设备也好啊，

他们总有一个使命就是吃灰，

为什么呢？

我自己大概的判断了像 quest 也好，

或者是 apple 微么说也好，

当你把它带起来了之后，

它确实会给你一些非常 ok 的一些体验，

甚至是平时其他设备没有办法给你的题。

那么关键的问题是你没有一个非常清晰且足够的一个需求，

嗯，

能让你带起来啊，

这是比较难的一件事，

就是它的场景和需求。

没有这么强对对比。

我带这个二十斤沉的一个东西在脑袋上，

那可能就没有这么强，

因为人本身就非常懒。

如果我要看电影，

手机能满足，

我就用手机看，

那我随手拿起来就可以。

对，

要么我就用电视看。

嗯，

那那你想象一下，

比如说我想玩游戏什么时候打开，

我的 ps 五，

它都有升级系统九二，

真的，

你真不常玩，

真是这样，

我也 switch 也是这样。

对，

每次打开都是这样升级系统。

我现在是想玩游戏，

它会告诉我，

你先升级系统。

嗯，

那我就会纠结啊，

那你先升着吧。

嗯，

等我下一次玩游戏的时候再说，

等下一次的时候哎，

又需要升级，

又要升级系统。

哎，

不太真实了，

你这个说明玩的太少了呀。

对，

就是玩玩太少，

都吃灰了嘛。

那么为什么会出现玩的少的原因呢？

现在看来 inspace 是在 applevisionpro 或者是 regionalos 这个身态上面。

大家投票的话是在前十这个投票结果里面，

它是第三名的一个产品。

那么这样看来的话呢，

整个生态能打的产品或者是能让人想着去用的产品其实是不多的哦。

那一个游戏机如果它的游戏内容不够丰富的情况下，

那可能就会出现我这种想不起来打开啊，

好不容易想起来它也有升级系统，

就这种尴尬的局面。

那么同样在空间计算领域可能也有这个问题。

对，

那么像 inspace，它提供的是能让你认识全世界各地的其他 apple 微 sionpro 用户的一个机会。

嗯，ok 那么这个机会呢是如果你连续玩三四天，

你的需求就已经满满足了。

所以你在用试图用社群来吸引这些用户的对是的，

重复使用率。

是的。

嗯，

那么假如说我们有一些朋友在线下本身是非常聊得来的朋友，

嗯，

像我们这样 ok 那么现在 inspace 提供的是一个预约，

比如说我们周三下午聊空间计算，

嗯，

那么这个活动会在每周的固定的时间会进行。

对，

那么感兴趣的人都会参与进来。

对，

那么还有一部分人呢是非常想参与，

嗯，

但是它有一些临时的一些变化呀，

变动啊之类的，

有可能会出现这种没有办法用 applevisionpro 参与哦。

我昨天听你们同事说，

你们还有手机端。

对啊啊，

因为你设计了一个产品，

你不能呃因为你没有 applevisionpro，或者是现在不方便带 apple 游戏，

就是不能因为它懒，

所以就不用了。

对啊，

所以我们提供了手机版本 ok 啊嗯那么这样的结果就是又加剧了 apple 五零 pro 智慧的可能性。

手机太方便了，

不用手机了。

对，

手机很方便，

就很真实。

不不管我在什么，

你今天聊太客观了。

对，

不管我在什么地方，

我就可以拿出来。

因为我的核心诉求是和你们聊天，

嗯，

是社交，

对，

社交不是空间。

对，

嗯，

在空间聊天。

假如说我们现在的这个节目，

在同一个环境下，

我们大家的注意力啊，

想聊的话题是非常具体的，

我们不会走神。

嗯，

啊那么如果我们已经明确了非常明确的一个主题啊，

要是围绕这个主题来讲的话呢，

那其实这个环境是不是那么的重要呢？

未必也未必对，

所以可能还是一个话题的一个重要性。

嗯，

像这个沉浸空间，

它有它自己的一些问题，

一旦进入了沉浸空间，

你没有办法打开其他的 app。

对，

比如说我想和你聊着天，

嗯，

顺便看个电视没问题吧。

啊，

那么现在看来 regionalos 在底层的一些设计层面上面呢，

它确实是有这些。

嗯，

我个人觉得可以优化的一些点，

就是现在它实现不了这样一个对，

实现不了。

对，

就是这边是个电视屏幕，

那边是一个朋友坐在那儿，

但是还没有。

对对，

是对。

但是人实际上在一个空间里面，

同时我们做的基本都是多线程的工作。

对对，

是，

但我不可能，

我只对着你一个人聊天，

剩下事情我不看了。

不管比如说在现在录播，

我不可能不去看下面我们听众位的反馈。

对对，

是。

所以像这种这也算不算什么用户体验上面的冲突。

嗯嗯，

嗯总的来说我大概的感受就是还有一个比较重要的一个点。

嗯，

这个重量确实是不可忽视，

是有本事所有人跟我说的问题。

这个我。

我已经练出来了，

毕竟是我工作的一部分，

嗯，

习惯了习惯了练成一个铁脖这个脸。

我这苹果肌啊以前是非常 q 弹的啊啊，

现在你看那这叫苹果肌，

而且他对这个发型，

如果是如果今天有视频，

这就好了，

大家可以看一看。

我以前用 iphone 微信 pro 之前头发不是这样的那按道理讲它会压扁吗？

你现在反而你越来越像金毛狮王了。

对，

可用的次数多了可能就是这样哦。

然后这个对女性嗯，

如果我平时出门要是稍微抹点油啊或者怎么地的，

嗯，

我也不愿意不会愿意用 ippo 性零 pro 它会粘是吗？

它在使用的过程中，

一是压嗯压完了之后时间长了，

嗯，

等你摘下来，

它会有印子哦，

它可能会把你脸上的妆啊粉底啊之类的一起就啊带走了哦，

那确实是个问题。

嗯，

对，

这这个纸上摘下来之后，

完正是一个圈儿。

对对对对啊，

那它总之还是因为它这个体积现在还是没有办法控制，

导致其实体积和重量应该是有办法控制的。

嗯，

就只不过是我不觉得四百克和六百克有多大的区别。

一百克和六百克是有区别的对，

是是四百和六百他就是重。

嗯，

而且他如果追求这沉浸式的体验，

他必然还是别管多重，

哪怕是一百克他也照在你的眼睛上。

对，

还是解决不了。

你刚才说的这个对对问题对，

像瑞 ban 雷鹏也在出类似。

所以其实我下一个就想问题，

这个问题既然你主动提出来，

就聊聊雷朋吧。

像雷朋的它的体积和大小，

这方面呢可能是一个比较合适的一个状态。

嗯嗯，

因为我自己不戴眼镜，

我体验过戴墨镜。

我的墨镜差不多是一个五十克左右的一个墨镜。

嗯，

我依然觉得重就是 ok，非常不舒适。

因为你平时不戴眼镜，

嗯，

你像我平时戴眼镜可能会好一点是吧？

嗯，

是对我，

但换个墨镜可能没有特别大的压力。

而且雷朋的设计是又是作为一个智能眼镜啊，

也是太阳镜的。

这种情况下啊，

有些情况下可能有一些适当的装饰和美颜效果啊，

装逼属性啊。

对对，

如果它的电池比较 ok，就是我能拍个二三十张照片啊，

我是觉得是 ok 的。

嗯，

对，

但是它其实能够实现的沉浸性的这个体验就没有了嘛。

因为对这个呃毕竟是个开放式的眼镜，

它对带不了这样的东西是是是。

但是你们现在这个产品还是在微生 pro 上去做。

你既然刚才客观的提了这么多问题，

但为什么你们还是在坚持在这个生态里面去做这些事情。

首先我们先不说 applevisionpro 或者是其他的产品成功还是不成功，

或者是达到了什么样一个高度。

嗯，

这个方向我是认可的。

嗯，

对啊，

作为社交或者是作为互动。

因为今天上午的时候也有大概的聊过，

我们的前辈们从文字通讯，

然后后来的飞鸽传输嗯啊都是想办法在解决效率啊，

沟通啊，

社交啊这些问题。

嗯，

对，

那后来开始有的 bp 机传呼啊，

手机大哥大，

然后再后来开始慢慢的想办法让你的信息同步啊。

突然想到假如说七十年代你想象一下第一批买电视机的那些人嗯，

买来了没有？

节目就一个台。

对，

嗯，

还只有晚上七点之后放啊固定时间。

对，

然后随着这个时间其实呃从七十年代开始，

我们接触了屏幕。

那么关键的问题就是在这儿，

我现在手上拿着一个手机，

嗯，

呃整个互联网平台现在是连接了有差不多五十亿嗯啊左右的人。

不管是用啊微信聊天 imessage 或者其他的方式，

大家都在保持着这个社交联系啊，

但是人和人之间都是隔一块屏幕的对对，

不过我们都是把你的消息，

你的真人变成一个扁平的屏幕，

呈现在另外一个人。

面对对那么我们观察世界的这种方式，

原本从我们出生的那一刻开始，