先见未‪明‬ 散装智能

AI资讯大爆炸，早知道，不如真知道。
新开一档AI新闻观察栏目，每周精选最值得关注的AI动态，尽可能为大家做客观、多维的AI趋势洞察。
以下是本期内容：
02:01 英特尔、谷歌们继续”围剿“英伟达
为何CUDA是英伟达AI霸主地位的护城河
TPU的诞生背景与发展经历
05:32 Transformer被优化：更省内存、更省计算资源
非Transformer架构的进展与猜想
Infini-attention论文原文
MoD论文原文
09:08 ChatGPT向付费用户开放GPT-4 Turbo
10:05 ChatGPT暗黑玩法Dan模式突然爆火社媒
在 ChatGPT 上，许多人开始主动追求被 AI 骂
11:17 谷歌搜索考虑对用户收“AI使用费“
知乎AI革命：智能搜索与事实问答的融合
《金融时报》报道原文
14:16 本周一问：你今天kimi了吗？
【很高兴认识你】
先见，必然未明。创新路上，我们一同求索。
当人们说“某人真有先见之明”时，它本身就已经是“后见之明”。任何创新，无论技术还是商业，都必须经过验证。验证的过程，往往是漫长、混乱、挣扎，充满失败的——甚至，验证的结果也可能是被证伪。
幸运的是，自人类在地球上扎根至今，创意不息，创新不止。这档播客希望发掘和记录生生不息的创新，探索创新背后的真价值，不人云亦云，不后见之明。
赛博认好友请搜微信ziyuanao。

过年期间听了一档YC集团合伙人的播客，聊到AI创业中的tarpit ideas（直译是“沥青坑想法”，意指某些创业想法看似fancy，但其实背后有种种难以解决的结构性问题，实际执行后会让你进退维谷，宛如深陷沥青坑）。
其中有一段讨论挺有趣。他们观察到当下很多人选择“摘星星”的创业方向，追求不平凡，但在这几个投资人看来，平平无奇也甚好。“Mundane is great”，“something boring can be amazing business”，他们说，尤其体现在LLM方向上，办公提效类需求非常旺盛，但收到的相关创业提案很少。
紧接着，开工首日，Sora来了，我们又被告（炒）知（作）要失业了。（如果你不是恰好在一家做视频生成的初创，大概率，今年，Sora干不掉你吧。。。
于是我想起mundane is great。咱仰望星辰也脚踏实地，概念是抽象的，体验才是具体的。不如就从用户的角度，来聊聊那些平平无奇但好用是宝、已经渗透到我日常工作、离取代我还有段距离的AI工具。
* 本期只分享无需科学上网、无需海外信用卡充值的产品，绿色无广
【本期嘉宾】
舒月 | AI圈内打工人
【时间轴】
01:35 AI产品从浅尝辄止的⌈玩具⌋，变成了每天在用的⌈助手⌋
07:00 有口皆碑KimiChat，万能效率助手，既免费又有自行车
15:14 AI生成PPT工具，难用，但有用
22:03 AI思维导图工具有助于提升结构思考效率，但总体较鸡肋
25:14 使用AI工具，须警惕思考懒惰和信息茧房加重的陷阱
28:00 AI几乎可以充当实习生，打工人的自我降本增效
33:53 亲测最有用、最好用的几个AI产品
【对话中提到的AI产品】
ReadPaper：AI辅助论文阅读工具
KimiChat：智能助手（ChatBot）
ChatMind：AI思维导图工具
Monica：基于ChatGPT的浏览器插件
Gamma、WPS AI：AI生成PPT工具
通义听悟：聚焦音、视频的工作学习AI助手
【扩展阅读】
如今AI初创企业的真相 | YC圆桌讨论 2024.2【很高兴认识你】
先见，必然未明。创新路上，我们一同求索。
当人们说“某人真有先见之明”时，它本身就已经是“后见之明”。任何创新，无论技术还是商业，都必须经过验证。验证的过程，往往是漫长、混乱、挣扎，充满失败的——甚至，验证的结果也可能是被证伪。
幸运的是，自人类在地球上扎根至今，创意不息，创新不止。这档播客希望发掘和记录生生不息的创新，探索创新背后的真价值，不人云亦云，不后见之明。
赛博认好友请搜微信ziyuanao。

刚刚结束的极客公园年终大会上，美国工程院院士、智源研究院原理事长张宏江和谷歌DeepMind资深工程师卢一峰进行了一场对话。
谈及大模型幻觉问题的难解，张院士提出了一个被卢一峰称为“价值百亿美金（甚至更多）”的问题：Transformer是否当下唯一可靠的架构？大模型向未来发展的过程中，技术路径上还会不会有新的、根本上的变化？
在这场对谈发生前不久，卡内基梅隆大学（人称全球AI专业“天花板”）和普林斯顿大学的研究者发布了一种名为Mamba的新架构，解决Transformer核心注意力层无法扩展的致命bug，推理速度提升5倍。论文一出，国内媒体惊呼：难道Transformer架构垄断终于要被打破了？
无独有偶，半年多前，我们采访了一个正在研发非Transformer架构模型的国内团队，RWKV。团队坚持模型开源（RWKV已成为Linux基金会孵化项目，所有底层模型的知识产权将放在这家非营利机构），并成立了一家商业公司，做围绕该模型的微调量化及To C、To B商业化落地。
采访中，团队核心成员罗璇说，自己在与国内AI圈、投资圈朋友交流时，经常会争论几个“非共识”：Transformer是不是唯一选择？AIGC的未来就是云服务了吗？小公司能不能做大模型？
随着时间推移，罗璇曾经的某些“非共识”观点似乎正在成为共识。在大模型底层架构创新上，除了上文提到的Mamba，微软和清华团队也在7月推出了RetNet架构；端上大模型更是近期的话题高地。RWKV自身，则累积了近万的全球开发者，与高通、MKT、英伟达等大厂展开合作（据悉，阿里达摩院近期在开发基于RWKV架构的语音识别模型）。
当然，RWKV要验证其可广泛应用性，还有更长的路要走。但正如我们节目名称想传达的，先见必然未明，生生不息的创新才是最为可贵。于是，我们特别邀请罗璇年终返场，聊聊他对大模型创业的新体会。
【本期嘉宾】
罗璇 元始智能（RWKV）联创兼CPO | 前阿里机器人产品总监
【时间轴】
02:49 “所有基于Transformer的基础设施和应用都值得用RWKV重做一遍”？
04:13 全球顶尖团队都在探索大模型底层架构创新
05:27 Transformer有多贵、效率瓶颈有多大？谁用过谁知道
07:36 RWKV比Transformer，具体效率提升几何？
09:24 身后站着近万全球开发者的“小团队”，成为高通端侧模型合作方
10:58 曾经被质疑“一个中国小团队做的方向是不是靠谱？”现在全球前沿研究所都在关注
13:09 Transformer的专利在商业公司（谷歌）手上，对其生态上的模型和应用公司都是风险
15:21 AI世界需要一个类似Linux的底座，开源生态上要长出繁荣的商业化
16:55 为什么国内鲜有公开讨论“Transformer架构是否足够好”？
19:35 端侧大模型离实际应用还有多远？
23:14 国内的AI发展其实就卡在“Transformer+GPU”上
24:58 Transformer天花板临近？PMF难寻
26:38 过去半年，看着自己的非共识逐渐变成共识
27:53 AI世界里数据既业务，应用类创业公司要自建数据飞轮
【扩展阅读】
智源张宏江对话谷歌卢一峰：什么才是大模型「皇冠上的明珠」？
五倍吞吐量，性能全面包围Transformer：新架构Mamba引爆AI圈
被Stability AI赞助算力，被Open AI招募，这个大模型小团队是？
【很高兴认识你】
先见，必然未明。创新路上，我们一同求索。
当人们说“某人真有先见之明”时，它本身就已经是“后见之明”。任何创新，无论技术还是商业，都必须经过验证。验证的过程，往往是漫长、混乱、挣扎，充满失败的——甚至，验证的结果也可能是被证伪。
幸运的是，自人类在地球上扎根至今，创意不息，创新不

这是一次发生在“深圳AI春晚”IDEA大会的即兴聊天。会上，IDEA研究院的创院理事长沈向洋（原微软全球执行副总裁）提到一位入驻创业者的项目——AI儿童玩伴。以儿童为用户的AI陪伴产品，和面向成人的多巴胺、荷尔蒙产品（又称character.ai与它的伙伴们）有何不同？陪伴产品和教育产品又有何不同？这是门儿童生意还是家长生意？带着许多好奇，我和项目负责人郭志聊了聊。
【本期嘉宾】
郭志 |  IDEA研究院entrepreneur in residence（入驻创业者）、前微软DPS全球方案创新部门总经理
【时间轴】
01：35 小朋友需要的高质量陪伴，AI可以补充满足
04：57 大模型的幻觉问题，在儿童陪伴场景却是加分项
06：46 面向小朋友的AI产品怎么做？
10：26 小朋友成长过程的真需求是什么？
14：42 拿手机当电子保姆非常糟糕，小朋友的AI玩伴需要是个实体
15：40 初心是AI for good，不想做花式鸡娃的产物
18：55 从AI玩伴看到了硅基家庭成员的可能性
21：33 非技术型创业者，关键是要攒一个好局
【很高兴认识你】
⌈先见未明⌋希望与你一起，发掘和记录生生不息的科技创新，探索创新背后的真价值，不人云亦云，不后见之明。
如果你在AI领域也颇有⌈先见⌋，欢迎添加微信ziyuanao交流。

本期开录之前，我在楼下买咖啡，嘉宾发来微信，他恰好也到了（此前我俩只是网友）。
远远地，人群中出现一个头顶亮粉色真发、all black装扮的年轻人，胸前挂着WeWork胸牌——是想象中95后游戏创业者的样子了。
事实上，这是张昊阳的第三次创业。经历“很遗憾不那么成功”（他原话）的前两次创业后，他加入腾讯，在现象级作品《和平精英》担任技术策划。今年5月，在斯坦福小镇的启发下，他在工作室内部带队研发了一款结合AI Agent的游戏《伊甸岛》。不久后，对AI原生游戏愈发坚定的他，决定出走鹅厂，提前启动自己的新一轮创业。
这次，我们从他对AI与游戏融合的理解、他们团队在AI agent游戏开发方面的工作（GameGPT），聊到了作为创业者，在当下创业环境中的复杂心态——复杂但真实，的心态。
【本期嘉宾】
张昊阳 | AutoGame创始人兼CEO、前和平精英技术策划、AI赛道连续创业者
【时间轴】
03：24 二次元少年的三度创业之路
07：17 目前AI在游戏领域的应用实况
12：34 离开鹅厂创立AutoGame，再不入局就晚了
16：48 用Agent做AI原生游戏的可能性与不足
27：20 寒冬下，创业者与投资人的恩怨情仇
30：37 对创业者来说，远处的愿景和脚下的现实同样重要
35：29 AI一定程度上砸掉了技术门槛，但不能取缔人的创造力
37：45 游戏公司是否需要自己的垂类模型？
41：53 AI将让更多人拥有创造的权力
【扩展阅读】
可能是全网最全面的AIGC+游戏分享！“全要素生成”会是未来的游戏形态吗？一文看懂AIGC在游戏领域的应用GameGPT: Using AI to Automate Game Development斯坦福爆火「小镇」开源，25个AI智能体恋爱交友
【很高兴认识你】
⌈先见未明⌋ 希望与你一起，发掘和记录生生不息的科技创新，探索创新背后的真价值，不人云亦云，不后见之明。
如果你在AI领域也颇有⌈先见⌋，欢迎添加微信ziyuanao交流。

雷海波作为中国视觉创意代表人物，经历过从设计师到创始人、CEO、投资人的转变。2000年互联网浪潮初起之际，他创办了视觉中国；2014年，“交足学费”离开的他，又成立了智能硬件孵化平台和专注设计科技投资的基金，投出AMIRO觅光等团队。
如今，他带着新项目灵动AI，加入拥挤的AIGC赛道。他说：“有刚需、有核心竞争力，就不怕卷。”
【本期嘉宾】
雷海波 | 前视觉中国创始人，太火鸟&灵动AI创始人/CEO
【时间轴】
02:26 一个电脑美术梦，造就了最初的视觉中国
06:51 不想做CEO的设计师不是好老板
10:34 成立设计科技投资基金，做设计师创业的布道者
21:21 顺应时代转型，以AI+Saas平台赋能工业设计行业
23:53 Diffusion Model出现，在GAN投入的几千万研发成本打了水漂
24:48 AI创业赛道无所谓卷，关键是有高频刚需和自身基因优势
33:54 AI将是设计师的工具，不会完全替代设计师的能力
37:21 商业的成功，才是设计的成功
【很高兴认识你】
散装智能，一档有人情味的科技播客。我们寻找科创和商业的交叉点，挖掘真价值，讲好真故事。
想交流？想表达？微信添加ziyuanao，或关注公号：散装智能