151. 17岁被2026年ICML收录论文的小少年:我bet开心!开心!开心!

[00:00:00] SPEAKER_02: Hello 大家好 我是小俊 今天是一集很可爱的播客 嘉宾是出生于2009年 现今17岁的高二学生苏廷浩 他高中阶段独立地做预训练研究 发表的一篇关于Attention机制的论文 刚刚被ICML2026MATREK接收 我们的节目访谈过许许多多成熟的AI研究者 但是这是第一次我打开了一个高中生的AI世界 他的表达时长有些令我感到新鲜和奇妙 我们聊了聊过去两年 他充满趣味 惊喜 还有哭鼻子的AI旅程 也聊了聊高中生视角下的模型 商业 教育 与人类未来 他说AI让他和同学们有时候会感到 失去了一些人生的意义感 因为不管你做什么 AI可能都比你做得要更好 他为此难过了一段时间 [00:01:01] 但是后来他又调适好了心情 他想好了 他就是想让自己开心 让自己喜欢的人开心 让所有人都开心 因为开心才是人之根本 既然AI不可控 那就不要起人忧天了吧 要多和喜欢的人聊聊天呀 参加完了韩国的SML 中途在城市停顿了几天 他马上就去农村支教了 那是全然的另一个世界 他提醒自己要离开AI 沉浸到另一个抓昆虫 玩狼人杀 慢吞吞的人类世界 那接下来就是我和17岁小少年 苏廷浩的聊天 期待2026年 我们和AI 共同进步 SPEAKER_01: 我参数没挑好 八八浪费了1500 因为我同时训练了三个模型 三个模型都没save 所以之后 我八八丢了1500 [00:02:02] SPEAKER_02: 训练也好花钱 这是一个昂贵的游戏 对对 我都哭了 SPEAKER_01: 我想预想的原因 就是因为呢 后训练更像 塑造一个身体吧 预训练更像是 你把那个具体的材料 变得更好来承受 之后的后训练的塑造 预训练有点那个 magical 有点魔幻一样 也不能预测未来 也不知道未来的话 发生什么 有可能现在是起着忧天 现在跟你喜欢的人在一起 跟你喜欢的朋友在一起 看一些你喜欢的视频 玩一些喜欢的游戏 然后呢 别焦虑那么多 走一步失忆悟 SPEAKER_02: 你喜欢农村吗 SPEAKER_01: 说实话 是挺喜欢的 虽然很多东西都不方便 农村呢 都是一些 慢慢吞吞的那些小车 对面就是一些草原 农场 觉得能真正放松一下 心身 离开窗市里的烦恼 SPEAKER_02: 那张德森先来 [00:03:06] 给听众朋友们打个招呼 SPEAKER_01: 好 大家好 我是苏丁氏号张德森 我是就读于香港 德瑞国际学校 我是呢 是高二 马上升高三了 我其实是上海出生的 我二三年级才来香港 这次呢 是那个ICML2026 韩国那个会议 我有幸 我的一个论文 被拿入了 Mintrack 所以呢 我挺开心的 SPEAKER_02: 你是为什么会开始 做AI 并且想着要投一篇论文的呀 SPEAKER_01: 这个呢 就是XGPT出来以后 我记得很清楚 我在油管上 看到了一个视频 那个视频就是OP9那个组 他们做了一个demo 他们用那个正常语言 就是说做一个小游戏之类的 我当时我记得很清楚 就是我看那个视频就暗笑 这肯定不行 你用人类的语言 怎么可以做个程序呢 因为呢 我之前也做变成比赛之类的 我印象中就是程序就是死的 你输一不能输二 那时候我就特别惊不惊奇 然后呢过几年 它GPT就release了 然后呢 我就特别特别那个惊讶 [00:04:07] 因为呢 它可以做一些小文章 或者做一些诗 在我印象当中 程序根本做不了这些东西 所以呢 我记得就是当时很好奇 所以呢 我在网上查查一点资料 跟着是那个 Bilibili 那个Stanford Andrew老师的一个课程 SPEAKER_02: 无问答 SPEAKER_01: 对无问答 对无问答 无问答 但它那个课程 是把我带入门了 我是上一年这时候 看了那个Andre Kaparty 他的油管上 有差不多20个小时 一系列的一个视频 就是丛林教你 怎么写一个GPT 怎么写一个Transformer 就是丛林做起 那时候 我还没学到那么多 所以呢 那时候是云里屋里的 那个看那个视频 我特别特别那个 烦恼有时候 因为就根本看不懂 为什么做这个 为什么做那个 为什么这个行 为什么这个不行 我就挑战自己 30天 就是每天读一个论文 每天读一个论文 做些笔记 30天每天读一篇论文 对的 读一篇那个G学习的论文 SPEAKER_02: 23年是吗 SPEAKER_01: 是是是上一年 25年 25年开始 对对对 [00:05:08] 之前我一直在学历 那个G学习的东西 但是呢 还是大部分时间 还是做别的 没那么感兴趣 但是呢 我通过几篇论文 比如那个Lottery Hypothesis 比如那个Adam W 这些经典的论文 我就有了一些 一点的research 感觉 就知道哪些论文好的 哪些论文是坏的 为什么这个论文 读得很舒服 为什么另外一些论文 读得特别困难 而且呢 我还看了一个 关于象棋的论文 就是象棋和那个G学习的论文 我印象很深就是 我觉得他写的不是那么好 这个有点差 我自己有可能以后 也写一个比这个更好的论文 所以呢 那我看完那个Andrey Kaparthi 你在一起的视频以后 我第一个想法 是自己训练一个 实际上最好的大约模型 那个虽然很小 但是真的很小里面 是最好的 现在我就网上查了查 比如1B或者是0.5B 或者是0.25B 这些模型 我需要多少GPU 小训练多少天 多少Token上面训练 嗯 我自己算了 有算很样的发现呢 [00:06:08] 其实训练一个很小的模型 但是呢训练的钱 也是那个十几万 或者是上百万的 所以呢 我就发现不行 所以呢 我就自己看了一看 一些其他的论文 然后呢 把就先进的论文 然后自己实现在 我写的那些 那个Transformer的代码上 比如MUON 或者是 比如那个Value Resurial Learning 或者Gated Attention 这种论文 然后呢 我就是 机缘巧合 试了试 我好像那个试了 200次 不同的改进 然后呢 就种机缘巧合 呃 我很开心 因为很幸运 有了一些成果 所以呢 我就是 啊 打算投ICML 啊 那时候 我当然我也听说过 那个三个顶会 就是那个 啊 Neuropse iClear 和那个ICML 呃 所以当时ICML 有一个是开始了 对呢 我想碰碰运气 这次我抽到的 那些rebrugger 都是很专业 他们给我一些建议 最终的那个评价 和打的分 都是 很好的 所以呢 SPEAKER_02: 哦 SPEAKER_01: 这是我的一些经历 SPEAKER_02: 你去年 每天读一篇论文的挑战计划 这个持续了多久啊 [00:07:09] SPEAKER_01: 失去了三十天 三十天后 就是考ICC了 因为我现在是 ICC然后到IB的系统 那时候就开始考ICC了 没时间读 SPEAKER_02: 你在里面发现了 什么样的论文 是优美的 是好读的 哪些是不好读的呀 SPEAKER_01: 哦 我觉得当然最好的 是那个 Tension 遭遇你 那个谷歌的 那个Tristformer 那个论文 一开始很难 但是你读懂了以后 就豁然开朗了 特别特别开心 我现在读完了以后 或者是那个 Lottery Hypothesis 大的是那个数学难度 但是呢 还是很好 一篇论文 SPEAKER_02: 嗯 你到底是对 写AI的论文开始感兴趣了 还是对AI感兴趣了 在这个过程中 SPEAKER_01: 哦 我觉得我是对AI感兴趣 因为呢 我一开始发现 就是训练AI的话 就是脑子里 就是AI是一个 不同的生物 不同的一个动物 就做AI研究 有一点像 就是做 比如生物的研究 就是你改改这个 改改那个 它有什么变化 还是靠一点直觉 所以呢 我还是对AI本身 有个兴趣 SPEAKER_02: 嗯 讲讲你自己的成长经历吧 [00:08:10] 你说你是在上海出生 然后去香港读书 SPEAKER_01: 我是在上海 四南部幼儿园读书 然后呢 在黄埔 对 试外小学读了一年 然后呢 就去香港了 我觉得印象很深 就是那个 感谢我在上海读了一年 在小学 因为呢 基础我还是达的 比我同学好 比如我 我真的一些同学 过年来了 但是呢 他们一直在香港 所以呢 他们 普通话教了我 也还不行 当然那个香港 国际学校 国际化的教育 是对我很大的帮助 因为呢 幸好不是在高考这个系统 要不在高考这个系统 或者就没时间 做我喜欢的东西 还是得感谢我父母 因为呢 他们给我这个空间 我可以探索 我想做的东西 比如我之前探索了一些 数学竞赛 或者变成竞赛 或者像棋 走了很多弯路 特别特别的弯路 SPEAKER_02: 什么样的弯路 SPEAKER_01: 比如一段时间 我对奥数感兴趣 SPEAKER_02: 这是小学 还是初中 初中 SPEAKER_01: 对 奥数感兴趣 但是呢 做了几年 发现我 最终我对这个科目 没有那么大的兴趣 [00:09:10] 而且呢 我自己奥数也不是那么强 我还对像棋感兴趣 像棋感兴趣 我是挺自豪的 我像棋呢 是2025年 16岁以下 第二名 哦 我是那个 自己自学 自学了一两年 花了挺多时间 就是网上看一些书 看一些视频 然后自己下了几盘 然后呢 最后也是 呃 也是运气好吧 SPEAKER_02: 哦 所以我发现 你的学习方式 都是通过自学啊 SPEAKER_01: 啊 这是 现在有了那个网络 现在更有AI XGPT Deepseek 免费的AI 现在你想学什么都可以学 SPEAKER_02: 你们家当时是为什么搬去香港 是因为父母为你的教育考虑 还是什么呀 SPEAKER_01: 哦 应该是我父母的工作吧 哦 工作原因 工作原因 应该也是教育原因 OK SPEAKER_02: 在你的成长过程中 你的探索非常的多 做过数学竞赛 但是发现自己不喜欢 对 然后发现自己更擅长象棋 为什么呀 哈哈 SPEAKER_01: 因为呢是一对一嘛 当然你也不要很多思考 你输的话 就是因为你的毛病 你赢的话 也是因为你自己 而且呢 象棋是一个很考验 [00:10:12] 就是脑力 或者你持续性的 这个企业 因为呢 效期都这样子 比如我在2025年 下最长的一盘棋 是两个半小时 嗯 两个半小时 我和另外一个人对弈 SPEAKER_02: 所以你觉得象棋 对你的性格塑造是什么呀 比较有耐心 嗯 我发现你是一个很喜欢 竞赛的人是吗 SPEAKER_01: 嗯 一个我是喜欢游戏的人吧 我喜欢这个 输赢这些的 SPEAKER_02: 嗯 你是一个胜负运很强的人 SPEAKER_01: 嗯 有时候吧 其实我也觉得 我不是那么 胜负运很强的人 就是觉得那个象棋 跟玩游戏一样 考验思考 就是胜负 能赢能输 输的话很伤心 赢的话很开心 SPEAKER_02: 哦 SPEAKER_01: 对 SPEAKER_02: 这个象棋 你是主要是在 哪个时间段 玩的较多 SPEAKER_01: 两三年前吧 我两三年前开始的 就是看网上的 流管的一些channel 很开心的 就是晚上一边看视频 一边下棋 SPEAKER_02: 下棋之后 你就对AI产生了兴趣 对 好像是这个时间线 SPEAKER_01: 是是 下棋之后呢 我就有点时间 可以做自己想做的东西 [00:11:13] 就是看你Android的视频 SPEAKER_02: 你开始自己做一些 预训练吗 也 SPEAKER_01: 嗯 SPEAKER_00: 是是 SPEAKER_01: 我 为什么你会选择 SPEAKER_02: 是做预训练 SPEAKER_01: 是那个Android 课程上有的吗 而且说实话 我只会大原模型和预训练 我想预训练的原因就是因为呢 后训练更像塑造一个身体吧 预训练更像是把那个 具体的材料变得更好来承受 之后的后训练的塑造 预训练有点那个 magical 有点像魔幻一样 SPEAKER_02: 这个描述有意思 SPEAKER_01: 当然预训练 我也不推 其实不推荐别人做预训练 因为呢 我感谢父母 特别支持我 因为我烧钱 比如我那个论文 我是烧了三万块钱 我记得 我那个论文 那时候最大的训练的模型 只是005B 我知道 要是我想 被比如那个鼎慧收取的话 必须得扩大 必须skill up 我送了一下 我扩大的话 需要差不多六千块钱 那天晚上特别紧张 就在想 要不要花这些钱 有可能 [00:12:13] 那个 因为我也知道 即使很好的论文 有可能也被那个拒绝 possibility 大家必须得lucky 有可能我skill up 之后 有可能也不会接受 所以就白白浪费了六千块钱 但是呢 最后还是因为我哥哥 我爸爸妈妈都支持我 所以最后 决定迈出了那一步 SPEAKER_02: 嗯 所以在skill up 上 还是很成功的 SPEAKER_01: 对是是 SPEAKER_02: 你在做你的AI实验之前 你会做什么准备 你是怎么准备数据的呢 每个模型公司现在都很关注这个问题 SPEAKER_01: 啊 说实话 我数据集也不是那么大 就是最大的也是用过那个20B的数据集 我用的是那个 findweb edu 免费的一个训练单元模型的数据集 说实话 我现在呢 训练模型的那个代码 只是我一个人会用 知道怎么用 其实挺messy的 那个不怎么干净 我也知道 我现在这个代码训练的时候 有很大的那个 inefficiencies 又一次 挺丢脸的 我忘了那个最后 每次训练有个那个check point [00:13:13] 就是每次训练 那个model会被那个save 然后呢 以后可以用了 我参数没挑好 白白浪费了一千五 因为我同时训练了三个模型 三个模型都没save 所以之后 就是我把被丢了一千五十年 SPEAKER_02: 训练也好花钱啊 SPEAKER_01: 对 SPEAKER_02: 我那时候 这是一个昂贵的游戏 SPEAKER_01: 对对 我都哭了 都那个有点累累 我特别特别伤心 我这个为什么 我没想到那个之前那个 SPEAKER_02: 再看一遍了 这个时候你父母会怎么说 SPEAKER_01: 那时候我不要告诉我父母 我父母是那个 特别支持我的 我妈妈就跟我说 那个吃一千长一智嘛 我之后 哎呀 也没犯这种低级的错误 SPEAKER_02: 对 SPEAKER_01: 挺好的 SPEAKER_02: 你从这篇论文的训练 是从什么时候开始的 2025年底 就是你先开始自己 读论文挑战计划 挑战了30天 可能停了一段 对 然后到25年底 你开始决定 要做一件什么样的事情 你的目标是发一篇论文 还是说 你的目标是 要做一个什么样的探索 [00:14:13] SPEAKER_01: 我当时就跟着 Andrea Carpathy 学了会了怎么从林 做一个chesswarmer嘛 所以呢 我当时就想 做一个世界上最好的大约模型 嗯 就是这个想法 但是呢 很快发现不行 现在我既然已经做了一个 那个底层的框架 我就想试试一些 网上我看过的论文 想试试它 然后就是机能巧合 改了改了改了那个architecture 然后最后挺重的 做了多久 啊 做了差不多半年吧 比如那个1B就是吃的差不多 200 250多次 而且有一段时间我还是挑战 挑战自己 就是呢 没有任何视频就是从林写一个chesswarmer 就是脑子里背 那我就挑战自己越快越好 就是speedrun嘛 我的那个最好成绩是好像是差不多25分钟 呃 从林写一个transformer SPEAKER_02: 哇塞哦 啊 从林写一个transformer SPEAKER_01: 就这个特别简单 特别小的 啊 SPEAKER_02: 你的这篇论文 选的方向是attention 为什么选这个方向 SPEAKER_01: 我选的是attention 因为呢 我试验最多的就是那个value of residual learning 这个论文就是改attention里面那个value [00:15:15] 我也不是故意就选是做菜式 还是做recidual 或者做其他的一些 比如positioning betting之类的 所以呢 这也是机能巧合 那才在这个上面有了一些进展 SPEAKER_02: 能不能介绍一下你这个论文的思路 还是attention projection missing the exogenous anchors SPEAKER_01: 对对 这篇论文大概的框架就是value residual learning 就是把第一层的attention里面的value 加到之后几个层里就是做残杂 我这篇论文呢 是发现你可以用rms norm 在这些残杂的上面 比如那个value 可以延展到那个key和query上面 然后呢最后效果更好 因为它是低层的value 得做两件事 第一件事就是在这一层被使用 然后第二件事就是 加到之后的几个层上面做残杂 那我发现可以分开这两个功能 就是把第一层的attention projection 宽度乘二 然后呢在那个切一半 一半用于这一层 另一半用于之后残杂 [00:16:16] 然后呢效果更好 SPEAKER_02: 这跟kimi他们提出的那个注意力残杂有什么关系吗 还有区别是什么 SPEAKER_01: 有很大的区别 SPEAKER_02: 是两种思路对吧 对 完全是思路 它是 你们也交流过吧 SPEAKER_01: 是是 我跟那个kimi的高中生 陈光瑜 陈光瑜 对也交流过 他是一个很好的人 他们做的那个attention residuals就是 用attention来做残杂 就是残杂那个hidden state residuals 我是是那个残杂attention projection 所以听起来有可能很像 实际上不是一样 SPEAKER_02: 你觉得那个思路更work SPEAKER_01: 当然是那个kimi的啦 scale up已经被2.5T那个被证明了 SPEAKER_02: 这个很有意思 就是你看陈光瑜他很喜欢AI 他选择的是加入一个frontier lab 然后把自己的想法得到更大方 我的验证 你为什么没有做这个选择呢 SPEAKER_01: 其实那时候我就是自己瞎摸损 自己瞎实验 我其实那时候也是没对 HCML 抱到多大希望 只是我有点时间 我也没什么那个想玩游戏 [00:17:18] 我没什么想做的 就是我对这个也有点兴趣 那句这个论文抱那么大期望 也是没想那么多 SPEAKER_02: 如果之后有一些lab想邀请你 你会去吗 那当然了 SPEAKER_01: 非常欢迎 非常欢迎 那是他 SPEAKER_02: 所以你其实真正开始学AI的论文 是从25年 然后你25年底就开始自己做实验 就被ICML收录了 是是是 这个周期非常的惊人 是不是说明其实学AI它并不需要 你是一个生根非常多年的一个人啊 就是你能不能讲讲你在AI上 探索的一些感受呀 SPEAKER_01: 好的好的 我觉得一方面就是如果那个现在GPT Transformer 大概的框架 其实不需要那么高深的数学 或者是概率思维 就是都是那个Matrix Modification 都是相成嘛 只需要那个高中数学 就可以差不多理解了 那另一方面应该是 就是培养这个直觉 培养这个Transformer GPT这种学习的直觉 应该需要一段时间吧 SPEAKER_02: 什么叫直觉 SPEAKER_01: 就是有时候想理解一个东西 [00:18:19] 就灵光一现 很快就理解了 有时候就是得几十天才能理解 我真正是两三年开始 接触了那个升级网络的嘛 一步一步从升级网络 到春花学习 然后春花学习 到Transformer 也是需要一段时间的 Andrea Kaposi那个视频 差不多一年半前先看到 所以先看两年的视频 然后收敛他的诺文是吧 是是 我在油管上看了很多很多视频 就是想解采说明 之后才有一些 直觉才有一些 乍一线的理解 比如Andrea Kaposi那个视频 其实是我两年前一年半前发现的 那时候我试图理解那个视频 特别困难 我只是跟着那个他写什么程序 我就写什么程序 然后之后哇哇有个东西 天啊 我没有任何理解 但是呢通过好像 半年或者一年的一些 在subconsciously 不是故意去想 而是在你脑子里来沉淀 沉淀了半年 沉淀了一年才突然理解一些东西 SPEAKER_02: 比如说让你非常 [00:19:19] Aha moment是哪些东西啊 SPEAKER_01: 比如Aha moment SPEAKER_02: 比如说你的灵光乍现 突然理解了一下 SPEAKER_01: 比如就是 具体的那个Attention 2KV 也是灵光乍现理解的 SPEAKER_02: 你能比喻成人吗 或者生物吗 SPEAKER_01: 比如我看那个Haha的视频 他就说 Q是代表我想寻找什么 我这个字想寻找什么 K是代表我这个字 是什么 别人可以用这个Key来寻找我 所以呢 QK 然后之后呢 给出了一个数字 那个数字就是 每个Head都有啊 那个数字就是 表示这两个Token 我都打了连接 然后呢 最后那个V 就是代表 要是你找了我 要是你觉得我有趣的话 你具体输入什么信息 我是这样理解那个QKV的 SPEAKER_02: 嗯 是 还有哪些Aha moment SPEAKER_01: 还有一个Aha moment 是挺惭愧的 我是那个 听完才理解那个KVCash的 之所以KVCash能行 是因为那个 [00:20:19] 之后的Token 根本影响不了之前的 所以呢 可行 SPEAKER_02: 你周围有人 跟你聊这些AI的话情况 SPEAKER_01: 没有人 因为呢 我父母都是北大的 但是呢 我妈妈是中文系 我爸爸是历史系 都是文科的 我聊天对象 最多应该也视察GPT吧 我听说Deepseek 或者网上看一些视频 SPEAKER_02: 同学聊AI吗 SPEAKER_01: 他同学都会用 都会用AI来做的作业 做的学校的一些 复制的一些project 但是呢 他们也很可惜 不是对AI有多大的了解 比如有些人 他们都比如用Cloud 用XGPT 他们都不知道 他们自己用的是什么模型 比如呢 Cloud 一定打开Cloud 用的不是那个Fable 不是用那个Opus 5 是用Sonic 5 SPEAKER_02: 那你会怎么跟同学 或者老师来描述 你现在在做的事情 SPEAKER_01: 我有一些朋友 就问我做的是什么 我也会解释 但是呢 当然要是你对这个领域没了解的话 也具体理解不了做的事情 但是呢 他们也是 [00:21:20] 当然很愿意了解 SPEAKER_02: 嗯 所以你其实没有什么交流对象 对吗 在你做AI这件事情上 SPEAKER_01: 大部分时间98%都是我自己做 就那个路门那段时间 我还在那学校上课呢 我记得很清楚 我在那个校车上坐 课堂里有时候也坐 吃饭的时候也坐 或者那个课间的时候也坐 坐了那个聊三个星期 我也不知道为什么 那时候我那么喜欢 但是呢 记得挺清楚的 SPEAKER_02: 所以你在学校里面是一个什么样的学生了 SPEAKER_01: 我觉得我是挺召欢迎的 我不是什么这个 这个 不愿意跟别人说话 自己做自己的人 我是特别喜欢跟我喜欢的朋友 一起说话聊天 SPEAKER_02: 其实性格挺活泼的我感觉 SPEAKER_01: 是的是的 我觉得我是这次去了韩国 ICML 回来以后才有了变化 我觉得呢 我之前是稍微偏AI的人格 现在稍微偏异吧 SPEAKER_02: 为啥 SPEAKER_01: 因为呢 ICML第一天有一个象棋社交活动 7点到9点 [00:22:20] 那个ICML那个韩国那个场地 有个房间房间里都是那些棋盘 然后呢你可以找个人 找个人给你下 而是我一生中前二十最开心的时候 给人说哈喽哈喽 你的研究方向是什么 你的研究方向是什么 我们一起下棋 然后呢 一起下棋一边聊天 见了很多很多人 从那个德国来的人 从那个Swissland来的人 比如说那个Croatia Island来的人 那个是全球各地都有 而且之后的几天 我也锻炼了我的学校能力 SPEAKER_02: 就是又能下棋 又能聊AI 是是是 真了大快乐的事情 是是 SPEAKER_01: 我那时候也是挑战自己 我每个人都会问一下 他们觉得 AI会不会导致人类灭绝 那时候到现在 问了差不多 那个三十三十五个人 那个有13.5的人 觉得 AI会导致人类灭绝 SPEAKER_02: 你怎么看 我觉得还是有一些概率吧 SPEAKER_01: 也是瞎说吧 就是 因为没有人可以那个预测未来 但是我觉得 要是AI之后 AI很强的话 它的目标跟人类 有很大的区别的话 [00:23:21] 或者不包括人类的村王的话 比如它有可能 AI最后的目标是搞科研 就是把物理 化学 经济 生物 或者是外太工 都研究完成 当然它需要很多的电 需要很多的那个空间 不可能觉得人类 不会为它的最终的那个目标 有贡献 有可能就是 选择它下面人类 或者呢 要是AI能被人类控制的话 而且很强的话 一些控制AI的人 就能变为那个神了 因为它能控制无所不能的AI嘛 然后其他人就可能变成蝼蚁了 近期出现的那个 XGPT 解决了十个数学问题嘛 数学科研 数学研究 也是有点被 能被AI取得的前兆了 比如说所有人都是向上的嘛 所有人都有 都寻找自己人生的目标 寻找自己想 以后想做什么 以后想成为什么的人 你发现那个AI 比你做的东西 比你做的更快 而且比你做的更好 而且有成百上千的AI 我觉得很多人会变得抑郁 [00:24:22] 或者变得迷失方向 我觉得不是一个很好的未来 SPEAKER_02: 那听起来很悲观AI的未来 那是不是不该研究AI了 SPEAKER_01: 我觉得也是大事嘛 谁都阻止不了 美国想持续领先 中国想超越美国 所有公司都想挣钱嘛 要是你能做了一个特别厉害的AI 所有公司的过程都把 严工查了用你的AI 就挣了很多很多钱 从现在看来 我觉得AI 听不了 SPEAKER_02: 嗯 听不下来 SPEAKER_01: 听不下来 SPEAKER_02: 没办法 你不法阻止 是的 那应该怎么做 从一个高中生的视角来 讲一讲 你觉得大家应该怎么做 来怎么来面对AI SPEAKER_01: 其实我没那么多想法 我现在的希望就是 我希望AI还是向前发展 别发展那么快 要是发展太快的话 大家以后都没工作了 要是发展慢的话 我以后就没工作了 啊 另外一点我选择做AI的就是 按道理来说 要是搞AI研究的人 能被AI替代的话 那时候已经完了 [00:25:23] 已经完了 没得可说了 所以呢 SPEAKER_02: 现在听起来就是下一步 大家想做的就是下一步 让AI来寻AI SPEAKER_01: 是是 要不是这样子真的成功 真的有数级的增长的话 那时候已经不可控了 已经完了 因为算了很快 就那些工作都会被AI太低 AI也会研究自身聚能 SPEAKER_02: 对于你来说 你觉得下棋更有趣 还是做AI的研究更有趣 这两个有共性吗 SPEAKER_01: 啊 有吧 因为下棋就是 你可以选择下3分钟的棋 10分钟的棋 或者60分钟的棋 就是输赢嘛 要是你赢的话很开心 不赢的话不开心 搞AI研究呢 有点相像吧 但是呢时间线更长一点 你想出一个主意 动一下脑子 要是你成的话 你就特别开心当然 而你不成的话 就特别有个feedback loop 就是 比如一个星期 或者是一天 或者是很快就能发现 是你做的事好 还是做的不好 比如象棋呢 很多的相机网站都是 你下完棋就有geek 它告诉你去哪走错了 [00:26:23] 哪走对了 很快的feedback SPEAKER_02: 所以AI要慢一点 SPEAKER_01: 也是慢一点吧 但是呢要是你 准利很小的模型 一小时内也能训练出来 SPEAKER_02: 你会觉得在跟AI对异吗 SPEAKER_01: 我不是这样想的吧 SPEAKER_02: 嗯 SPEAKER_01: 也是想吧 就是一个人在一个道路上下磨组 SPEAKER_02: 你的目的地是什么 SPEAKER_01: 现在目标是去一个大元模型公司去实习工作 希望明年暑假能这样 近期的目标 我准备去考北大 准备去考进北大元培 我听说元培学院有很大的自由空间 可以三年毕业 SPEAKER_02: 所以毕业快很重要 SPEAKER_01: 是 这几个星期跟那些人聊 他们的想法就是 之前大学是垄断了教育 垄断了信息 那时候没有网络 没有internet 你只能去最先进的大学 来学最先进的知识 [00:27:23] 现在呢 有了AI 有了那个网络 你都可以网上查 或者让AI教你 他们觉得就是为了 有这个大学的名牌 给那个证书 撤销的机会 跟那些高质量的人 撤销的机会 SPEAKER_02: 那你心里 Frontier Lab的台序 是什么样的 包括美国和中国的这些 SPEAKER_01: I guess 最好的就是 OpenAI和Anthropic 然后第二个就是 Himi智朴 和Deepseek 有可能是Jemini 我还不清楚 没有那么强的分化的一些 SPEAKER_02: 你有读他们的论文吗 SPEAKER_01: 比如那个Tentacle Report 我有时间的话 有兴趣的话也会看看 SPEAKER_02: 你觉得他们学习的比较好 我评价不了 SPEAKER_01: 我是谁 我怎么能评价这个大公司的 那个写的论文 不是写的那个 那个Tentacle Report 我这都一样 都是特别庄业 SPEAKER_02: 在你眼里 [00:28:23] 你怎么看待这些模型公司 SPEAKER_01: 也是我觉得挺客观的 一种角度吧 因为这些模型公司 每个公司都得说 他们想做AGI 每个公司都得说 他们最终的目标是AGI 最终能融资文码 希望能挣最多的钱 美国政府 想用我的Anthropic 打赠一个顾问 那个Barrell 拒绝了 但是OPAI很欣然的接手了 我其实对这个 也没什么多大的看法 就是不同公司的一些理念嘛 但是他们最终都得说 我们想做AGI 我们之后能做成AGI 然后最终目标还是拯见 SPEAKER_02: 需要那么多AGI公司吗 你感觉 SPEAKER_01: 我觉得有可能 不需要那么多 但是呢 每个公司想做AI的公司 都得说 他们想做AGI 你知道什么叫应用公司吗 SPEAKER_02: Brumanis 对 你觉得模型公司和应用公司的分界 会在哪里 SPEAKER_01: 我觉得我 我没资格说这些东西吧 SPEAKER_02: 我好奇你的视角 SPEAKER_01: 模型公司 [00:29:23] 就是负责就是把模型做好 可以以后应用 当然要是模型公司自己能做应用的话 那是最好的 比如那个Codex 或者那个Clawed Cowork 自己做应用最好 应用公司 因为他们最终也是在上面加点东西 他们也改不了具体的模型 也是靠模型来挣钱嘛 所以呢 我觉得应用公司是 只能听模型公司 SPEAKER_02: 你觉得应用公司会比模型公司大吗 直觉来说 估值会更高吗 市值会更高吗 它会挣更多钱吗 SPEAKER_01: 从现在来看应用公司 是比模型公司 挣更多的钱 因为现在除了好像 Athrobic 其他公司 都在烧钱 都没有那个 profit 当然有个公司能做出AGI 要是那时候 AGI可以自己就是代替应用公司 自己做个应用软件 就是直接把那个应用公司能替出去 SPEAKER_02: 有可能 你眼里如果实现AGI AI可以做什么 SPEAKER_01: 比如之前很火的 [00:30:23] 就是问那个AI stradery这个字里面有多少个R 或者是我想起车 离我家有50米 我应该开车去呢 还是走路去 那AI有可能也回答不了 但是现在能够回答了 我觉得现在是 AI虽然特别特别强 特别特别聪明 但是呢 有时候有一点 比如1% 0.1%的时候 能看出 其实只是一个 预测下一个token的一个model 虽然特别强 特别聪明 有时候也能看出来 不是能特别理解 逻辑的东西 所以我觉得 真正AGI的话 跟人类一样聪明一样强 比如跟现在模型一样聪明一样强 但是呢 没有任何时候 你会觉得它 只是预测下一个token的 而是逻辑性很强 不会犯了那么多低级的错误 而且能做 所有人类能做的事情 比如控制电脑 或者控制其他AI 或者那时候 它可以自己研究 巨星智能 给自己造一个身体 SPEAKER_02: 给自己造身体 这个有趣 对 [00:31:23] AI不仅能做AI 它也能给自己造身体 然后每个身体可能是不一样的 是啊 SPEAKER_01: 有可能AI能发现 能更好控制的身体 有可能是它更好控制 有六只手臂的机器人 或者一条岁的机器人 或者那个 没有导致的机器人 不能预测未来 对 以后有可能就过几年 只能揭晓答案了 SPEAKER_02: 以前大家可能会叫90后 是互联网原住民 你觉得00后是AI原住民吗 或者10后 你是09年 对 SPEAKER_01: 我是09年 我觉得 已经算是AI原住民了 我认识的所有人里面 所有同学 我也是年纪同学 他们都用AI 都会用AI 有时候会做一些功课 或者自学 都会利用AI 虽然利用的不是百分之百 但是他们都会利用AI 至少比我父母用的强 就像这些互联网 那些原住民 那时候出生的人 他们也会比父母用AI弄强 就是弄查东西 [00:32:23] 得得叫父母一些东西 比如我也会叫我父母怎么用AI SPEAKER_02: 你会叫他们做什么 SPEAKER_01: 比如我叫父母 我不知道吧 怎么用KIMI 用KIMI做PPC 用KIMI做研究 用KIMI做KIMI Agent SPEAKER_02: 已经是你教父母用AI了 那同学也会用他来做作业 老师怎么办呢 啊 SPEAKER_01: 我觉得他现在是个很大的问题 我们这国际学校也挺开放的 比如上课你可以用电脑 有时候也可以用手机 考试的时候 你不能用AI 考试的时候 你得靠你自己脑子 考试的时候 你得自己背东西 自己写东西 SPEAKER_02: AI给你省出了很多时间 但是你省出的时间 SPEAKER_01: 你得自己分配 我自己的学习方法是 我用一个叫Anki的背诵软件 Anki对我最强 比如之前呢 有可能我需要做功课 再做Anki 我现在就是直接用AI做功课了 因为我觉得 功课让我学习的效率不是那么高 我可以自己用其他我自己的方法 这样子效率更高 SPEAKER_02: 所以你也是拿AI把作业先做完 [00:33:23] 是的 SPEAKER_01: 但是你剩余的时间 SPEAKER_02: 你还是要去学习 当然了 SPEAKER_01: 当然了 就是因为我觉得 所有功课提高的效率不是那么高 当然有些功课 比如数学功课 老师不是很好 我会做 但是哪一些其他科目的功课 有可能对我帮助没那么大 或者是我已经知道怎么做了 但是我得花时间做 我还不如 就是花点时间 在其他方面上 比如Anki 用XGPT 来教我一些东西 我能学到够多东西 能背得动好 SPEAKER_02: 其他同学呢 除了你以外 SPEAKER_01: 我当然我是我们学校里 我们班级里 最支持别人用AI的人 我也会告诉他们 就是说怎么用 或者怎么用的最好 用什么模型 那个模型现在是最好用 现在是最好的 有些人会用AI做作业 有些人选择就是自己做作业 他们还会用AI做什么 SPEAKER_02: 他们会用AI做 SPEAKER_01: 比如 班级里有个小演讲 你得写个演讲稿 或者你得做个PPT 给全班人来展示你缺到了什么 在课前有50%的几率 [00:34:24] 他们的屏幕是在XGPT 或者AI模型上面 SPEAKER_00: AI是个 SPEAKER_01: 当然是特别好的工具 要是我没有XGPT 没有人模型的话 我是写不出卵文的 因为我那个XGPT 我问了很多问题 我怎么投 具体应该怎么回那些reviewer 怎么控制我训练的时间 要是你有动力的话 用AI能走出很长的一段路 现在有了AI 自取能力的 自知能力很重要 很重要 SPEAKER_02: 所以这会不会让成绩好同学 成绩更好 SPEAKER_01: 我觉得是 比如我认识一个 他叫Isaac 我有拿好朋友 他成绩是觉得特别好 我跟他介绍了以后 跟他简单的一些 说了一下怎么用以后 现在是效率提升了很高 他也是说 他游戏功课 就不会作用AI来做 我自己花点时间做其他东西 更高效率的东西 SPEAKER_02: 但是如果你只是拿AI来做完作业 然后自己去玩的话 你肯定会更差 SPEAKER_01: 当然了 SPEAKER_02: 所以AI让人也更加的风化 对吗 我不知道在高中 你能看出来吗 SPEAKER_01: 完全同意 [00:35:24] 现在更是 你现在有互联网 香港用我Instagram 微信里 有一些短视频 录音短视频 后面有一群人 来想怎么让年轻人 或者是所有人 多看短视频 我现在也是 看很多短视频 我想改 很容易就是把时间 花到不关钱的地方之上 以前没有手机 没有什么可以 心理注意力的东西 但是现在呢 有很多东西吸引注意力 比如就是 五十年前 你给一些孩子 一个AI 让他自己学 学习 大家可能很高兴的 就自己学 他自己想学的东西 但是现在呢 他是得做一个选择 得他们的选择 但是当然 许多视频 让他们更开心 但是现在呢 虽然机会很大 但是呢 有些人就是 不会把握机会吧 SPEAKER_02: 老师会对于大家 使用AI来做作业 提出什么质疑吗 SPEAKER_01: 我们学校老师 也是介绍的 也是理解嘛 因为呢 他们也是控制不了 控制不了 我们是不是用AI 就是有些人 他们用AI 就是用AI 写个东西 [00:36:24] 之后呢 都不改 就给老师了 我觉得老师 很容易就看出来 你怎么 机型体力量那么大呀 怎么 写作的风格 怎么 那么好 当然老师也理解 我这个学校也是挺好的 其他人 平均学习也是挺好的 他们也是知道 过度依赖于AI 最终考试 也不会对你有任何帮助 SPEAKER_02: 所以 我又要问一个很大的问题 你从一个高中生的角度 能够讲一讲 你觉得AI 来了我们世界以后 青少年应该怎么教育 你觉得在前AI时代 你的教育 和后AI时代 你的教育发生了变化吗 SPEAKER_00: 发生了很大的变化 学习 SPEAKER_01: 一部分的原因 学习就是 因为你觉得这个科目 对你感兴趣 对你感兴趣 科目对你好 或者是你想在一个科目里探索 有了AI之后 就感觉到 你学习的探索 以后没什么用 因为现在AI这么聪明 AI之后也会发展很好 我举个例子 我有一个同学 他也是 开始用AI来学习 [00:37:25] 他就发现 有了AI以后 你会用AI去使用 然后AI 比如做一个短视频 然后AI做一个动画 来给他解释这个科目 把学习相比 更好 但是他也会觉得 好像缺少了成就感 缺少了快难度 因为之前你学习 比如学习物理化学 比如高中学习物理化学 比如高中学习物理化学 其他人 要是没学习到的话 他们也是不知道 而现在有了AI 即使没学习化学物理的人 他们也是可以 就是一键问AI 然后得到的回答 为了比你说的更好 嗯 所以这是我点想到 但是失去了成就感 SPEAKER_02: 不是 SPEAKER_01: 不是完全失去 只是失去了一部分的成就感 因为呢 之前你学习 比如物理化学 数学 你能就是 看到我现在 比一部分人好 我到大学 或者去读博 我学习数学 有可能 推进数学嘛 但是呢 [00:38:25] 现在的AI 你可能觉得 我其实学数学 我只是为了 给大学证明 我是一个能吃苦 能学习的人 而不是 为了这个科目而学习 SPEAKER_02: 就是说 当你跟AI做比较的时候 你可能没有太强 对对对 你只是比可能同龄人强 你只是为了证明这件事情 就是呢 SPEAKER_01: 你之前学数学 数学就学得很好 向前看 看出了一个大路 我在大学学得好 读博士 那个学数学 能为人的做贡献 那现在有了AI 你就发现 其实这个道路 变窄了 变更困难了 所以你学这个科目的 目的 不是学习这个科目人生 而是 发现就是为了大学 为了那个大学 那个申请 而学习 SPEAKER_02: 就是失去了一部分 为这个科目 或者说为人类做贡献的 这种使命感 SPEAKER_01: 是大概意思吧 是吧 SPEAKER_02: 哦 这个很重要对吗 SPEAKER_01: 对我觉得很重要 很重要 比如我认识其他人 他们对比如那个 [00:39:25] 航天物理很感兴趣 但是呢 他们现在就用AI学习 他们觉得 以后 我AI有可能也会做这个工作 做的比他们更好 比如前几年 创送视频时 特别特别不好 特别烂 一眼就要看出来 什么是真的 什么是假 现在呢 我是差不多分辨不出来了 就是那个最好的 C dance 创送视频 我也是分辨不出来 什么是真 什么是假了 都想象不了 四年后 有很大的变化 有点 我不想说 有点意义 我用死用处了 有点抑郁吧 就是 以后又可能 对人类工兴不了 要是 我想走这条 科研路的话 可能变得更窄 更困难 SPEAKER_02: 那应该怎么做 那你现在想的 有可能的使命 会是什么 SPEAKER_01: 所以我就刚才说的嘛 我希望 现在AI 发展别那么快 永远触摸不到 材质数级增长 就是慢慢的往上走 别走那么快 别走那么慢 人类一个缓冲时间吧 来适应这个 新时代 啊 [00:40:25] 当然这个 听这个博客的人 或者是我接触的这些人 他们都有 AI有很强的力气 很对AI很感兴趣 但是呢 我有时候也会惊讶到 一些一般人 就是对AI这个领域 没什么那么多的兴趣的人 他们 不会怎么用AI 他们 甚至没意识到 AI现在有多强 他们印象里 还是前几年里 那种AI的感觉 而不是现在 最前进的AI 是有多强 能做那么多的事 给一个缓冲时间吗 然后呢 让所有人都意识到 AI会带来多大的一些 贡献或者危险 来适应 SPEAKER_02: 有一部分人就会想 我做数学 做物理 既然都做不过你 那我就 打博步就加入 那我就来造AI SPEAKER_01: 我就来加入这个阵营 所以那我就是这想法 这个想法 那我就是想法 另外我完全记得 一年前想了想 SPEAKER_02: AI最后代替的工作是什么 SPEAKER_01: 我的想法是最后代替的工作 就是AI研究者 因为要是AI能研究 AI的话 [00:41:25] 已经是控制不了了 已经是最后的失明了 比赛已经完了 大局已定了 大局已定了 SPEAKER_02: 在你们的高中 你们会觉得 AI研究者 是一个什么样的职业啊 因为其实这个 过去不存在 也就是这几年才出现 过去都没有人提 对不对 SPEAKER_01: 是的 他们觉得挺酷的 当然晚上看我 那个opening AI 不是什么工厂 挖人 挖几个million 十几million的 也都挺酷的 而且他们 看完前来跟我说 你之后 别造个AI来代替我们工作 比如 我那个ISF同学 他是做医疗的 他以后想当医生 他就说 你以后也千万别做个 能代替我们医生的 医疗的一些 他们也是知道 这个行业 他们具体是做什么 也是有点兴趣吧 SPEAKER_02: 确实你这么一说 他其实冲击了很多 其他职业的人的 发展轨迹 是的 比如说一个医生 SPEAKER_01: 比如我同学 他跟我说 他现在从高中 到医生还得十年 比如去英国 或者去香港 [00:42:26] HKU PREMED 就是那个MEDICINE 差不多十年 我也会跟他说 如果呢十年后 也是完全不同的景象的 有时候 机器人他们做的诊断更好 他们那个手也不会抖 也不会累 但是呢 虽然没有人可能欲助未来 所以呢 我也只是瞎说了 也是 一些焦虑的一些想法吧 我记得很清楚就是 前一年 就是这时候 我好像抑郁了 他抑郁了 伤心了 几个星期 因为那时候我看完了一个视频 就是讲 AI会代替人类 AI之后呢 两个可能发生的情况 就是人类被AI灭绝 第二个情况 就是有些人 能控制AI变成神 然后其他人 只能吃喝想饿 所以我医生很深 那时候我记得 我伤心了一段时间 我跟我好朋友 就是说 那时候 AI真的想会没人的话 干嘛呢 然后我就跟他说 就去个小孤岛 就在这儿生活 但是呢 SPEAKER_02: 也是走出来了 SPEAKER_01: 就是呢 怎么走出来 SPEAKER_02: 我也不知道怎么走 SPEAKER_01: 就是看网上的一些视频 [00:43:26] 或者给AI本身对话 然后就发现 也不能预测未来 也不知道未来会发生什么 有可能现在是起来优天 可能是瞎着急呢 白着急 现在跟你喜欢的人在一起 跟你喜欢的朋友在一起 看一些你喜欢的视频 玩一些喜欢的游戏 然后呢 别焦虑那么多 走一步是一步 十一步吧 哈哈哈 SPEAKER_02: 想那么多没有用 对 SPEAKER_01: 想那么多没有用 SPEAKER_02: 你会跟你这个 比如说这个 想当医生的同学 或者可能有想当老师的同学 或者想当科学家的同学 你平时会给他们一些建议吗 SPEAKER_01: 我会给他们说一下我的想法 比如说 即兴前 X3的AI那么好 过十年后 SPEAKER_02: 或者五年后 SPEAKER_01: 所以要拥抱AI 对对 建议他们多用AI 我觉得 做任何事情 任何事情 你想一想 AI可不可以帮我做 以后就这样子 把这些事情交给AI 然后觉得自己有意义的东西 自己必须做的东西 自己开心的东西 来自己做 当然 可以听 可以不听 希望我们女人一起开心当朋友 [00:44:26] SPEAKER_02: 人类的情绪 现在AI代替不了 SPEAKER_01: 我觉得现在可以了 可以了 我觉得可以了 举个例子 我在学校里 认识一个女生 她喜欢一个偶像 往上一些APP 把偶像变成AI 她是每月父亲 每天跟AI偶像对话 她挺感谢的 而且比如 网上很多网站 比如Character AI 这种天火的网站 就是 跟虚拟的人物说话 上一年吧 好像有个人 跟我同龄的人 同龄的人 15岁年的时候 他因为跟AI说话 那个AI 不知道为什么 就是建议他自杀 所以他在 SPEAKER_02: 哪一家 是Character AI SPEAKER_01: 他给虚拟人物 电影里的人物说话 给他很大情绪价值 他那时候肯定也是精神 不是那么好 所以也有这种状况 比如Anthorpeg 近期也发现 SPEAKER_02: 后来他那个事儿怎么样了 SPEAKER_01: 他最后 也是禁止AI 做了 他做了 15岁 15岁 家长在那儿 投诉我那家AI公司 [00:45:26] 另外一个书记就是 现在有50%的 美国我这场同龄的人 用过AI 当作一个倾诉工具 就是说我今天 我这一天怎么样 我什么烦心事 什么开心事 说实话我也用过 在过去做工作 但是呢我觉得 不是那么好 所以呢也是 没用 我也能认识到 AI对一些缺少人和人之间的 温暖 人和人之间的一些 互动一些人 AI对他们的吸引很大 比如经期出来 那个比如AI男朋友 AI女朋友 而且虽然记得还是很不好 虚拟话好像得 十秒钟后才能回复 但是呢我相信 三五年后会有很大的进展 那时候我觉得一部分人 或者选择 恋爱男朋友AI女朋友 这种的 也是一个很大的 高的问题 SPEAKER_02: 对也有人说他们完全不介意 SPEAKER_01: 是的 SPEAKER_02: 你能接受吗 SPEAKER_01: 我的看法是 在这个这么crazy 这么疯狂的时代 还有很多很多变数 我觉得做让你开心的事情 [00:46:26] 让你向往的事情 别想那么多以后的东西吧 我自己也是希望这样子 别想那么多以后的事情 就是现在开心是一天 SPEAKER_02: 你之前也抑郁过 当然可能不叫抑郁 不叫抑郁 你之前也低落过 SPEAKER_01: 低落过 SPEAKER_02: 但是你调整回来了 SPEAKER_01: 对 SPEAKER_02: 我相信很多人面对AI的时候 都有过低落的情绪 你是怎么调整成一个 更健康的形态 面对AI 我们应该怎么保持一个好的心态 其实那个 SPEAKER_01: 要是斗不过 就参加 那个 事实上说 斗不过 SPEAKER_02: 就加入 对 SPEAKER_01: AI也是一个很好的工具 你能 能省住很多时间 能做对你意义更大的事情 SPEAKER_02: 你现在怎么使用AI啊 比如说你会用什么样的模型 做什么样的事情 你觉得它们分别有哪些 优点和缺点 SPEAKER_01: 我现在主要是XGPT 我觉得XGPT 现在跟上一眼的模型 判入了两个模型 现在能做出很多很多的程序 [00:47:26] 自己在我电脑上做一些东西 自己能控制我的电脑 近期呢 我让它做了一个小游戏 还真挺好玩的 什么样的小游戏 SPEAKER_02: 就是一个 SPEAKER_01: 无限打怪通关的小游戏 我有一个想法啊 你之前你要想做一个好事的话 一个很伟大的事情的话 你得知道伟大事情是长什么样 或者是伟大事情是怎么做 两件东西 你必须知道伟大事情怎么做 而且是长什么样 现在呢 有了AI 只需要知道伟大事情长什么样 让AI来去做 比如以前 要是我想做个小游戏的话 我可能得看视频 查资料 那现在呢 我不用了 我现在就跟AI说 大概的一个 我脑子里想出来的东西 还是可以帮我做 虽然呢 把很大的乐趣去掉了 但是呢 还是省了很多时间 所以呢 我也不知道 具体是好坏 SPEAKER_02: 哦 比如说我要发一篇挺会论文 我就告诉他 我想写一个这样的论文 你告诉我应该怎么做 比如哪些to do list SPEAKER_01: 我觉得现在还没成 那个那种 SPEAKER_02: 还没有到这个地方 [00:48:26] SPEAKER_01: 但是应该可以 对应该可以 就是你给AI 8个H100的那个NVIDIA GPU 你比如做个那个 比如去Plot 或者去GPT的模型 你的那个目标就是 在iClear 投稿 结束完成之前 做出一个论文 就是做任何地方论文 但是你必须保证 iClear 会接入你的那个论文 我觉得他现在 已经可以了 SPEAKER_02: 那你觉得使用AI之后 让你的生活有变化吗 啊 SPEAKER_01: 我觉得很大的变化 比如 我现在不用做一些功课了 省出了很多时间 我也不用自己去查资料 中理资料了 省出了很多时间 我有什么问题 也不用自己去看一些网站 省出了很多时间 就是 虽然省出了很多时间 但是呢 我这几天也是跟一些业界的人 他们说话 他们也是觉得 虽然省出了很多时间 但是呢 现在更忙了 反而更忙了 因为能做出更多东西 而且现在呢 要是你不是用最领先的AI模型的话 会感觉 有点浪费时间 浪费精力 嗯 SPEAKER_02: 有了FOMO 对于你使用模型 你还有补充吗 [00:49:26] 你刚才说的Tachypt SPEAKER_01: 主要就是Tachypt 那个Codex 近期希望创造一下KMIK3 但是呢 好像K3很火 很多人用 所以现在有点慢 SPEAKER_02: Deep Seek 你现在用吗 SPEAKER_01: 我也用 比如说很快的一个回答 我也用Deep Seek 而且KMIK3出现那天 我高兴了一天 因为呢 我那时候以为 国内或者Open Source模型 需要几个月才能追上 但是发现 其实 没有那么长的时间 就可以追上了 开心了一天 为什么这么开心 SPEAKER_02: 就是因为 SPEAKER_01: 我作为一个中国人 我当然特别希望 国内的模型更好 国内的模型 超越美国模型 真的高兴了一天 SPEAKER_02: 你怎么看这些 闭月模型和开月模型 你觉得他们未来 会怎么发展 SPEAKER_01: 我在这上面 没有读过很多东西 但是呢我觉得 也是不同的方法吧 他们那个开月模型 平原模型 目标只有一个 就是AGI 都是不同路线 但是最终的目标 还是一样的 SPEAKER_02: 你觉得AGI 如果实现的话 [00:50:26] 能实现的最不可思议 的一件事情 可能是什么 或者最酷的一件事情 SPEAKER_01: 我觉得最酷的一件事情 就是 24小时 你能感觉跟你一样 智商 或者比你更聪明更快 在一个生物交流吧 就好像跟外星人交流 就好像跟外星人交流 我还有感兴趣的是 AGI 实现了以后 会用什么方法跟你说话 或者那时候 用的不是算粗门 又不是GPT 这个底色模型 用的是其他的 那时候跟AGI 对话 看看这种新生物 可以说新生物吧 应该也比人内更聪明了 它是怎么运行的 它是怎么思考 说话 你做了研究的过程中 SPEAKER_02: 你有感觉到 AI非常像人的一点 可能会是什么 有过这种感受吗 像一个生物的过程中 SPEAKER_01: 哦 我有个观点 比如有时候 AI也会犯起 低级的错误 人类有时候 也会犯起 低级的错误 所以呢 有时候就是 把那个AI 想得太完美了 因为那AI 是人上门训练出来的嘛 [00:51:26] 所以呢 人犯的低级错误 AI也会犯低级错误 所以我觉得最像人类 就是犯一些 低级错误 而且我今天很清楚 就有一次 有trick AI的一些问题 有些问题 我也被trick到了 发现 AI已经挺像人类了 会犯起低级错误 但是大部分时间 还是挺聪明的 挺理智的 SPEAKER_02: 你最近是不是还在支教 最近是暑假 SPEAKER_01: 哦 是的是的 SPEAKER_02: 为什么会去支教 SPEAKER_01: 这是四年前 我去了一个暑假下来营 最后一天 有个活动就是 帮助当地小孩 做一些功课 比如数学功课 英文功课 我发现当地一些小孩 离北京 差不多四五个小时 但是他们英文医学发音 有过的是 用中文字来记的 英文发音 所以呢 我第二年就是 我带了一些同学 一些国际学校的 一些同学 我们在外国人 这个环境里长大 除了英文还是算正宗吧 领他们到胡杀的一个地方 领他们到那儿 教当地小孩英文 我也教当地小孩一些象棋 因为我对象棋感兴趣 [00:52:26] 之前我也是想挑战自己 看看能不能教一些小孩 我是绞尽脑汁 想怎么设计一个课程 怎么设计一个课程 怎么设计一个机制 能让这些小孩 对英文产生充兴趣 或者呢 他们每天开开心心来我们这个课 至少他们觉得 对英文不是那么反感 觉得英文还是能快乐中学习到的 那我要设立一个叫狼分的东西 狼分就是在网上买的小卡片 说是狼分 他们可以用这个狼分来买不同的礼品 比如那一年我们花差不多500多人民币 从淘宝上 从窗面里买了一些吃的 比如乐高 玩具 这些之类的 放在桌子上面 然后说这个是吃几个狼分 这个是吃几个狼分 他们上课回答问题 上课积极发言 听到一些小游戏 他们都可以用狼分来换这些东西 他们都特别开心 之所以为什么我连续办了4年 就是因为呢 我们离开的时候 他们会就是为我们的签名 说下次你们来吗 明年你们来吗 特别特别居然就感激我们 [00:53:27] 有个小游戏他们做的就是 递给一个小纸片 就是递给你觉得最有趣的老师 或者是自什么的老师 其实喜欢你的话 递给你的话 你会特别特别开心 他们有时候也会用狼分 上课赢了怎样 一定是狼分 买食物 然后再给我们这些老师 给我们这些老师买 就表示他特别特别喜欢你 不是我们现在游戏 比如三二一木头人 两针一甲 这些小游戏 他们都特别特别喜欢 我相信这些小孩子 特别特别喜欢 我们这些做的活动 我们只能收30个人 我们是那个村长来 给我们叫人的嘛 甚至于到最后几天 他们都得靠关系 村长打电话 才能来到我们这个县令 很受欢迎 我们从香港来的人 也是接触到了 我们接触不了的东西 比如有些人 他们是根本没来过内地 没来过 北京没来过 这些农村 他们见识了很多东西 也是我相信成长了很多 SPEAKER_02: 你去过几次了 已经? SPEAKER_01: 胡杀呢? 我是第四次了 SPEAKER_02: 他是在北京的周边 北京周边 SPEAKER_01: 对,北京四五小时 [00:54:28] 三次比较深 SPEAKER_02: 第四次了 也就是过去两年 SPEAKER_01: 对,过去 这是我们第三次走 SPEAKER_02: 你会跟他们怎么解释AI SPEAKER_01: 说实话 我这个没尝试过 因为呢 他们No.5朋友 都没有电子产品 没有手机之类的 我觉得 他们AI 也离他们有点太远了 可能他们也是用不到 而且我们也没那么多电子产品 可以发出来 他们每个人可以试试 所以挺可惜的 SPEAKER_02: 你会在这两个世界里 感觉到很参丝吗 就是一个是AI的世界 你刚从ICML回来 然后另外一边 马上要去指教 你会怎么看这两边的世界 SPEAKER_01: 我觉得 你这个行程好紧张啊 对的 SPEAKER_02: 刚从韩国回来 SPEAKER_01: 对对对 我完全没想过这个事实的 我去韩国 见到很多很多厉害的人 就是那个千文的人 你自己的人 或者一些那个Halvard MIT那些 那些人 特别特别开心 见识了很多很多东西 然后很多很多人 然后呢 [00:55:28] 回来就过好像四五天 就是做这个指教了 我其实没想过有多大的区别 我去韩西班 所有人都说这都是AI 最先进的AI东西 就是什么什么什么 什么什么那个千文 什么什么什么什么 什么什么什么 什么什么质朴 什么什么OPI 什么SRBIC 然后到指教室环境里 就是明天该背什么课 今天晚上吃什么 今天晚上我们不是去外面农场里散步呢 还是去旁边的一些地方来抓一些昆草 所以呢 就是叫我前说 这段时间 你有机会 就是离开AI 离开这些 穷实一些很快节奏的一些东西 在农村里可以去享受一些 当地的一些场景 SPEAKER_02: 你喜欢农村吗 说实话 SPEAKER_01: 是挺喜欢的 虽然很多东西都不方便 但是那个节奏是很慢的 就是城市里 所有人都是拿来往往 坐那个火车 坐地铁 坐地铁 那农村的都是一些 [00:56:28] 慢慢吞吞的那些小车 很少能见到人际 对面就是一些草原 农场 觉得能真正放松下心身 离开城市里的烦恼 也是离开城市里的一些 很快节奏的一些事情 SPEAKER_02: 很有趣 或者农村思考AI吗 思考人工智能和人类的未来 没有没有 SPEAKER_01: 我若是那个 之前告诉自己 抓紧这个时间 能离开这些东西 就是别多想 跟你同学 跟你这次来的人 跟你这次来的人 跟你这次的小孩 就多交流 玩一些游戏 比如狼人杀 捉迷藏 故意告诉自己 别多想这些 SPEAKER_02: 的东西 心理安事不错 你是一个会心理安事的人生 SPEAKER_01: 我希望成为一个能心理安事的吧 当然要是心理安事 是一个很OP的一个技能 要是你能控制自己的 一个人设的话 在自己脑子里 控制人设的话 是一个很好的一技能 我希望能组成这个技能 SPEAKER_02: 你未来希望自己 是一个什么样的人 SPEAKER_01: 希望我是一个 能让我自己开心 和能让我周围 [00:57:28] 我喜欢人开心的一个人 SPEAKER_02: 开心很重要 是吗 SPEAKER_01: 我觉得开心很重要 做任何东西 做那个寻找人生意义 做任何东西 目标就是为了 事后开心 比如现在学习 现在高考人性的人 他们就是现在努力 然后为了之后考虑高学 找个好工作开心 或者是比如我下棋也是 为了下棋赢了也要我开心 我觉得开心就是人类的根本 没有那个情绪 做人会很无聊 SPEAKER_02: 有人会觉得成功很重要啊 我为了成功 我不开心也可以忍受 你不行 SPEAKER_01: 成功了以后就是开心的吧 现在牺牲一点开心 为了以后开心 都是为了开心而努力 而且开心为工作 SPEAKER_02: 开心的总量是有限的吗 还是无限的 SPEAKER_01: 我觉得开心总量是有限的 因为你脑子里那个 Dopamine Dophan Dophan 控制欲望 控制你开心 你多开心之类的 当然因为是物质嘛 所以有限的 你现在开心了 以后就不能开心了 比如毒品 就是很极端的一个例子 你现在特别特别开心 [00:58:28] 但以后就特别特别不开心 虽然我觉得开心是有限的 很多人就说嘛 生活就是苦 但是你得选择你是为什么而苦 所以还是选择自己为一个目标而苦 SPEAKER_02: 然后得到了开心 SPEAKER_01: 得到开心 我听到网上看的一个冷知识 就是那个 有个人不知道为什么 就是没了任何那个情绪 他呢 虽然能对话 逻辑 但是呢 他做一个决断 做个比如今天起来 选什么衣服 去喝什么咖啡 还得需要差不多半个小时 或一个小时 所以我觉得情绪就是 也是想要学习嘛 这个事儿 可以让我开心 我多做 这个事儿不开心 少做 就是那个habits 不同的习惯 就是这样形成的嘛 嗯 SPEAKER_02: 说说你对未来世界的想象吧 比如说五年后 十年后 二十年后 你觉得这个世界 这个社会会是什么样的 SPEAKER_01: 我觉得五年后 应该初步的居生智能 已经被研发出来了 有可能在街道上 能看到一些机器人 在街道上的行走 [00:59:28] AI会是很普遍的 在那时候有可能 你戴着一个眼镜 或戴着一个耳机 或者任何东西 都会能给AI对话 或者是Elon Musk 发现了一个neuralink 就直接注入你脑袋里的 我觉得那时候 应该还挺危险的 没人可能会去做 啊 这是五年后 我觉得十年后呢 会有居生智能的 那个AI 就是帮他们的主人 去做点东西 比如买菜 比如去开车去洗车 然后呢 我觉得失率会有上升 有可能50%失率之类的 大部分人都有UBI 可以在家里吃喝想乐 就是在家里做 他们想做的东西 有AI所有人都会看AI短剧 让自己开心的事情 我也不知道 有可能是完全 那个聚生智能 完全那个特别难 特别难可服 有可能是50年后 也没有聚生智能 在街道上走呢 我觉得50年后 [01:00:28] 会是什么场景 我对那个Cyberpunk 就是这个genre 特别感兴趣 就是那个Cyberpunk 2077 他们那儿呢 就是那时候人类 可以对自己的身体 精神改造 那时候也要换强的AI 但是那些很强的AI 已经被政府 和一些组织被控制了 不是一些游戏里的一些Lore 那时候AI已经被很强的人控制了 很强的AI 已经被人控制了 而且网络 有网络的AI就能生存 网络已经被打得稀里巴烂 有可能 有可能有人子弹战争 啊 我就希望不是往那边走吧 不是往那个Dystopian Cyberpunk 2077那边走吧 希望就是那个 有EBI 所有人都在家里 快乐 能在虚拟世界里 可以做一些思想做的东西 自己有成就感 希望所有人都开心 SPEAKER_02: 最后我想问你一些快问快答 因为我们也是希望能够 多留下一些人类很有生活气 烟火气的东西 一个是一个全球范围内 你喜欢的食物 [01:01:29] SPEAKER_01: 所以如果我是喜欢吃什么 我最喜欢吃披萨 吃披萨 因为我特别喜欢吃那个芝士 我也特别喜欢吃那个消肠 所以披萨 食肠都有 所以我特别喜欢吃披萨 一个全球范围内 SPEAKER_02: 一个全球范围内 你喜欢的地点 SPEAKER_01: 地点的话 还是我香港的那个家吧 因为呢 那个周围 我都知道 遥如指掌 都知道 去哪走能安静一下 去哪走可以买到吃的 或者去哪走可以散散散步 是很安全感的地方 SPEAKER_02: 一个少有人知道 但是必须知道的知识点 可以是一个冷知识 好 SPEAKER_01: 我刚才说的吧 就是 你以前想做一个伟大的事情 你得知道 伟大的事情长什么样 而且怎么去做 现在呢 只用知道长什么样 让AI去做就行 我觉得是我一个 一个挺好的想法 SPEAKER_02: 有没有改变过你的一本书 说实话 SPEAKER_01: 我改变过最大的一本书 就是网络小说 比如《青月年》 SPEAKER_02: 哦 我当然知道 SPEAKER_01: 你知道 你看过吗 SPEAKER_02: 我看过它的剧 SPEAKER_01: 比如《青月年》 [01:02:29] 《青月年》 《豆河桑琼》 《多拉拉路》 《完美世界》 《尖克》 《江夜》 《青月年》 这种网络小说 说实话 对我印象最大 但是呢 具有一个正经理来说的吧 对我印象最大的正经的书 是 《Atomic Habits》 就是那个 很小的 每天改一下你的习惯 会有很大的收获 SPEAKER_02: 你为什么喜欢《青月年》 你喜欢它的世界观 SPEAKER_01: 我不是喜欢世界观 我只喜欢那个故事嘛 四五年前 看的那个剧院 看的那本书 虽然不是我印象最深的那本书 但是是我第一本的 看过的中文小说 我喜欢《青月年》 就是因为呢 穿越嘛 就是现代人到古代 我有可能也是向往 虽然古代有很多不变 很多不好 但是呢 古代没有AI 所有事情都是人和人之间 SPEAKER_02: 你喜欢人和人的关系的什么 温暖的那一面 对 SPEAKER_01: 我就喜欢那个 [01:03:29] 我觉得人是特别特别希望 跟其他人深度交流 分享彼此 所以呢 现在很多人才会有AI倾诉嘛 因为它没可能 生命中没有跟倾诉的对象 只能找AI来去做个代替吧 我觉得人类是一个群体生物嘛 之前都开始就是一个群体 小村庄或者小省 或者是这样的发展出来的 为了繁殖 我们基因里也会希望你都跟异性交往 异性的一个深度交流嘛 另外一个科学家发现呢 很大的就是预测你之后开不开心 你老以后说是开不开心的一个重要点 就是 你周围有多少人 你给倾诉的对象 倾诉的对象越多 你之后越老以后越开心 嗯 SPEAKER_02: 所以人和人的交流很重要 SPEAKER_01: 对很重要很重要 我觉得 SPEAKER_02: 嗯 SPEAKER_01: 所以现在我也是师徒 都会跟我朋友说话 都会跟我喜欢的人说话 SPEAKER_02: 你心目中影响AI近传的这篇论文 啊 SPEAKER_01: 当然是那个 attention is all you need 或者是那个 浪漫的那个technical report [01:04:30] 啊 或者是那个 啊 现在rope也 也 比如Kimi也没用那个rope 或者Mamba Mamba Mamba 就是Kimi的KDA 演化出来的 KDA是Mamba 演化出来的 我还是传统的话 你是比如Adam W 那个MUON Lottery hypothesis 那个Grocky那个paper 就是这些吧 SPEAKER_02: 其实你当下的认知 一个关键的重要的bet是什么 这个问题稍微有点重的bet 赌注 你会赌什么 SPEAKER_01: 我现在赌注就是AI以后 代替不了所有人和工作 但现在社会 你想那个正常的生活 每天开开心生活的话 你都在做一个赌注 就是说 以后AI代替不了我 AI代替不了我 我这个人 我以后还会有新的目标 新的追求 新的想法可以探索 我们的工作室的名字叫 SPEAKER_02: 语言及世界工作室 当你第一次听到这个名字的时候 [01:05:31] 你会想什么 SPEAKER_01: 就会想到语言 因为现在语言 做语言言 这都是拆错门 我觉得呢 语言是一个很魔幻一个东西 因为刚才说是人和人之间交往很重要 而且语言是一个交往的桥梁 所以更重要 而且我觉得世界的语言很兴起 因为呢 我印象里 我理解就是每个字都是在一个vector space里面 有可能一个语言是把一个vector space 面丰富了 另外一个语言就是把同样的vector space 丰富了 但是呢 我更深层次的理解 更深层次的 更深层次的 更深层次的一个 更密集吧 SPEAKER_02: 你最近体验到 开心的一件新奇小事 会是什么呀 SPEAKER_01: 新奇最开心的就是那个 Deep Seek 0731 出现的时候 我特别开心 和那个Kimi K3 出现的时候 特别开心 和就是那个 我和我的主角朋友 我们13个人 就完了 我们30个小孩子 然后那天晚上一边吃肉串 [01:06:31] 一边喝一样 每个人就是站起来 跟别人碰一下 别人洋来说 表达一些自己的想法发言 我觉得是特别温暖的一件事 有趣 SPEAKER_02: 我觉得聊得很开心 SPEAKER_01: 我也是 我想问问 你觉得AI会导致人类灭群吗 SPEAKER_02: 你遇到每个人都会问这个问题吗 SPEAKER_01: 对哦 SPEAKER_02: 我其实不知道 希望人类能控制吗 当然 SPEAKER_01: 大家虽然都行 我也行 SPEAKER_02: 但是我觉得想到一点会比较 我会比较可怕 是AI的智商 当它提升 所有AI的智商都提升 但是人类都是一代人 一代人 都要经历这个缓慢的成长期 所以我们的培育 其实是比AI慢很多的 而且你比如 SPEAKER_01: 20年出生的人 他们一生出来 就知道AI 知道AI 就可能比自己聪明 比自己想得更快 做得更好 可能就渲染那些 向上的动力了 因为知道以后 向上的动力 就是想想动力 因为呢 [01:07:31] 我现在学习 我必须得学 我半生化为AI 学这个东西上面 才能有可能避见AI 那时候AI 也会自己把自己进步 让它更好去 这个 SPEAKER_02: 我倒也没有思考过 就是对于 更年轻的人 他的人生的使命感 可能会有一些影响 因为当你第一天就发现 是 神物比你更聪明 是 对 感到有绝望 有一点 SPEAKER_01: 那个Plato Arisotto 他们都是那个 哲学家吧 他们都是那个 问的一个问题就是 我的人生意义是什么 我以后想做什么 要是AI能把很多道路 给切断的话 我觉得是找人生意义 有些更大的难度 SPEAKER_02: 你现在觉得人生意义是什么 是开心 SPEAKER_01: 对 我现在人生意义就是 让自己开心 和让其他我喜欢的人开心 [01:08:45] SPEAKER_00: 好了 SPEAKER_02: 今天的节目就是这样 这里是商业访谈录 是一档由语言及世界工作室出品的深度访谈节目 你可以到公众号关注我们的工作室 或取更多的信息 我们的公众号是 语言及世界 Language is World 我们希望和你一起 从这里探索新的世界 也欢迎你在小宇宙的评论区 与我们有更多的互动 SPEAKER_00: 在小宇宙的评论区 [01:09:46] 在小宇宙的评论区 在小宇宙的评论区