硅谷101|中国‪版‬ 泓君Jane

在今年的世界读书日，《硅谷101》编辑部与大家分享了四本书：从诺贝尔奖得主的人生旅程《Breaking Through: My Life in Science》到创作者的内心挣扎《The War of Art》，从《深度学习革命》的科学家群像故事到一个小镇女教师《奥丽芙·基特里奇》的生活写照。弗吉尼亚·吴尔夫说：”腋下夹着书的读者不需要奖赏，上帝也没有什么可以给他们，因为他们一生爱书。”我们希望和大家一起聆听这些关于热爱、信仰和坚持的故事，获得阅读的慰藉和力量。

【主播】泓君Jane，硅谷101创始人，播客主理人【嘉宾】陈茜，硅谷101联合创始人，视频主理人Jacob，硅谷101视频后期杜秀，硅谷101播客监制
【你将听到】
《Breaking Through: My Life in Science》作者：Katalin Karikó 推荐人：陈茜推荐语：这本书并非仅仅讲述了一个人如何成名的打鸡血故事，而是展现了Katalin如何因热爱自己的事业而坚持，并在科研事业和家庭生活中保持爱与尊重。03:23 作为小镇屠夫的女儿，经受了四十年的职业打压，三次被解雇，“mRNA疯女人“始终没有放弃06:52 被欺负、打压、不受重视，但家庭给了她足够的养分和支持10:10不为任何实验室或者老板，只为自己的信仰和热爱工作，那个东西叫科学14:40遇到有毒的老板，即使需要离家200公里也不能停下工作20:09 2005年就发表了mRNA修饰技术的论文，十多年无人问津《深度学习革命》（Genius Makers）作者： 凯德·梅茨（Cade Metz）推荐人：泓君推荐语：整本书围绕整个深度学习的几大关键人物，一群少数派学者在长期不被主流学术圈认可的情况下，坚信深度神经网络会改变世界，最终推动了整个人工智能技术突破性进展。23:18 被中译名耽误的深度学习发展史25:44 百度曾经差一点得到Geoffrey Hinton和他的团队27:42 创新源头是什么？最开始的三到五个人为什么坚信深度学习能改变世界？30:54 看似“偏执”的科学家的共同之处：靠信念扛住打压和质疑《The War of Art》作者： Steven Pressfield 推荐人：Jacob推荐语：Steven Pressfield 是著名的编剧和小说家。本书帮助了许多在创作行业挣扎的人找到了他们想要的答案，对抗阻力和拖延，成为一个专业的创作者。39:56 Burn out（职场倦怠）是很多创作者都会遇见的常态42:15 为什么总有一股“劝退的力量”阻挠你的创作43:52 创意不会随机产生，“专业”首先要直面每天重复的工作49:21 创作终究不是一次百米冲刺，而是一场马拉松51:01 “Doing itself is what matters.” 我们在打的是一场创作的战争，而不是一场流量的战争《奥丽芙·基特里奇》（Olive Kitteridge）作者：伊丽莎白·斯特劳特 推荐人：杜秀推荐语：本书曾获2009年普利策小说奖。13个独立的故事串联起一个普通美国小镇女教师的生活——当她站在不完美的人生路口，仍然需要与生活和解并继续前行。53:02 这是一个普通的中老年妇女的日常，不是大开大合的史诗，人物描写细腻精确56:00 不需要一气读完这13个故事，可以每天读一点，在你心里留下一点点波澜57:14 被HBO改编成了同名限定剧，豆瓣评分9.458:02 是老师，是妻子，是母亲，奥丽芙的不完美人生让人无限共鸣彩蛋时间：01:04:15《硅谷101》独家对话2023年诺贝尔生理学或医学奖得主Katalin Karikó
【监制】杜秀【后期】AMEI【Shownotes】杜秀
【BGM】Serenade of Dusty Trails - River FoxcroftSolitary Surrender - Rebecca MardalWe Were Golden - Anna Landstrom
【在这里找到我们】公众号：硅谷101收听渠道：苹果｜小宇宙｜喜马拉雅｜蜻蜓FM｜网易云音乐｜QQ音乐｜荔枝播客海外用户：Apple Podcast｜Spotify｜Tu

AIGC的风终究是吹到了音乐圈——今年3月，“音乐届的ChatGPT” Suno V3粉墨登场，用户只需要在Suno上输入一句话的提示词，即可在数秒内生成两首两分钟的完整歌曲，从作词、作曲、演奏到人声演唱一气呵成，大大降低了普通人创作音乐的门槛。
已经习惯了各类“AI歌手翻唱”的听众和用户迅速拥抱了Suno，从《宫保鸡丁咏叹调》到《让我们荡起双桨》重金属，从英语、日语、俄语到普通话甚至是粤语，网友们自发上传的作品包罗万象，网易云音乐、QQ音乐等平台也迅速上线了SunoAI音乐专区，甚至还推出了定期更新的官方推荐歌单。
本期《硅谷101》邀请到了来自音乐和AI音乐生成领域的两位嘉宾，分享他们对以Suno为代表的文生音乐模型的看法，以及AI如何影响音乐产业的未来。
【主播】泓君Jane，硅谷101创始人，播客主理人【嘉宾】冯建鹏，美国哈特福德大学哈特音乐学院打击乐讲师，百老汇全职演奏家，知名音乐博主“叨叨冯”（Youtube@daodaofeng）Roger Chen，Meta Music Tech Lead
【你将听到】02:26 为什么大家感觉是Suno是最火的呢？因为他敢最先把自己的文生音乐模型公之于众02:43 【测评一】“找不到工作的悲伤摇滚乐”，结果并不悲伤07:30 能听但没有态度，AI只能写出不愤怒的摇滚乐11:02 AI写的歌可以达到业界平均水平，但无法出挑成为头部作品14:40 速度是音乐创作最重要的指标之一，为什么AI写不出80 BPM的音乐？18:26 AI写歌与人类作曲不是一个逻辑，只能从左到右按顺序写，没有全局观22:07 训练素材足够全面和丰富，AI可能写出Taylor Swift水平的歌曲?25:55 同样的音乐，水平高低演唱者演奏出来也不一样26:03 【测评二】英雄主题的交响乐，听感能得7分，作为乙方它不及格33:40 Suno不能按提示词生成指定的乐器，它只追求听上去大概相似37:48 AI生成音乐是无法抗拒的洪流，但暂时做不到像音乐家一样写歌43:13 【测评三】挑战规则严谨的赋格，Suno会表现得更好吗？47:05 赋格研究在AI音乐有20年历史，不过在巴赫的原曲面前还很稚嫩52:32 音乐技术与心理学：Mp3技术是如何被发明出来的？53:57 音乐的本质是“有组织的声音”，这是文生音乐大模型的底层逻辑58:58 最怕无聊？艺术需要跳出人类总结63:12 创作者的脑洞打开：在音乐里加入随机数机制
【提示词参考】开场曲： 《The future is now》 by Suno, an opening music for a podcast called Silicon Valley 101, discussing innovative technology, AI and business stories, jazz, easy, catchy.【测评一】05: 56 《Struggling in the shadows》by Suno, sad Story of not finding a job, Classic Rock, 80 BPM, Guitar, Base, Drum, Keyboard.【测评二】27:46/29:42 《Hero themed symphony》by Suno, instrumental, strings, woodwinds, brass, timpani【测评二】30:27 《Hero themed symphony》by Suno, instrumental, strings, woodwinds, brass, timpani, Classical, 19th century.【测评三】46:21 赋格曲 by Suno,Toccata and Fugue in D Minor. Dark and dramatic, featuring solo organ creating a serious and powerful mood.结束曲：《Silicon Pulse》 by Udio, closing note for the episode of AIGC music, hip pop, extended intro and outro.
【补充信息】BPM: beats per minute，度量速度的音乐单位，每分钟多少拍（BPM）表示一个指定的音符，例如四分音符，在一分钟内出现的次数，BPM的数值越大代表速度越快。
Fairly Trained：由来自前Stability AI、Humanistic AI等科技公司高管、知名好莱坞律所和音乐界人士发起的非盈利组织，对涵盖图像、音乐和歌曲生成的人工智能模型进行认证，证明他们已申请使用受版权保护的训练数据的许可。
赋格：为拉丁文“fuga”的译音，

历经 4 年，美国再次对 TikTok 发难，要求 TikTok 从字节跳动剥离出售，否则就在美国禁用TikTok。一家价值 1500亿美元的公司， 1.7 亿美国用户， 6 个月的时间留给 TikTok 是一条非常艰难的路。
我们的节目录制于2024年3月31日，仅录制完后的一周，Tiktok事件还在持续发酵，复活节归来之后，美国参议院开始将Tiktok事件提上议程。不管是Tiktok的支持者还是反对者，双方都加大了宣传力度。
这一期我们邀请到了著名经济学家、清华大学中国经济思想与实践研究院院长李稻葵，聚焦TikTok事件发展的下一步法律流程与艰难博弈。
【VSP投资训练营报名】如果大家对VSP投资训练营感兴趣，可以发邮件到vsp@sav.vc咨询详情。本项目每个季度开营一次，报名链接长期有效。
【主播】泓君Jane，硅谷101创始人，播客主理人【嘉宾】李稻葵，清华大学中国经济思想与实践研究院院长，著名经济学家
【你将听到】00:03 VSP投资训练营01:48 正片03:40 TikTok事件的来龙去脉：四年后以一种更周密的方式进行06:45 参议院投票通过流程：委员会讨论、全体议员辩论和投票，每个环节都可能会被延长09:47 参议院组成分析：制衡之道，“大佬们”更加谨慎13:01 美国参议院多数党领袖Chuck Schumer的三重压力：犹太团体、竞选资金来源与选民的压力16:34 Tiktok的应对策略：国会游说、周受资听证会、德克萨斯计划20:12 美国对Tiktok发难的真实目的：争夺舆论控制权？22:03 “国家安全”的帽子背后：问题简单化，越简单约有传播力27:32 反向安全问题与算法29:02 卖与不卖？先把全部法律流程走完31:19 潜在买家分析：微软、苹果、英伟达、沃尔玛、甲骨文、姆努钦36:42 最高法的考量：为何牵扯1.7亿用户但受理概率不大？40:02 Tiktok的打法：拖，时间是Tiktok的朋友41:11 Facebook曾在大选中引发重大争议，但Tiktok尚未出现负面事件42:19 间接参考案例：英国石油公司漏油、大众汽车尾气门与肢解阿尔斯通43:36 方法论：不能上头、透明真诚、民众沟通
【相关信息拓展】TikTok德克萨斯计划将美国用户的数据存储在德克萨斯州的美国甲骨文公司以确保安全。该计划的总体目标是通过加强平台的数据保护系统以及权限管控措施，来帮助 TikTok 与用户和利益相关者之间建立信任关系。与此同时，该计划还会帮助 TikTok 与美国政府就保护用户数据和国家安全机密达成一致。
《美国陷阱》2013年4月，法国阿尔斯通集团锅炉部全球负责人弗雷德里克·皮耶鲁齐被美国联邦调查局抓捕。美国司法部指控皮耶鲁齐涉嫌商业贿赂，并对阿尔斯通处以超7亿美元罚款。这项指控不仅仅是针对皮耶鲁齐个人的行为，也是美国针对法国企业的系列行动之一。2018年9月，皮耶鲁齐重获自由，随后出版《美国陷阱》一书，以亲身经历披露美国利用《反海外腐败法》打击国际竞争对手的内幕，凸显了法国人所理解的美国司法的长臂原则，选择性执法，以及司法背后可能代表的商业利益裹挟。
【后期】AMEI【BGM】Cold and Blue - Roy Edwin WilliamsThe Deal - Ruiqi ZhaoReviving - Megan Wofford
【在这里找到我们】公众号：硅谷101收听渠道：苹果｜小宇宙｜喜马拉雅｜蜻蜓FM｜网易云音乐｜QQ音乐｜荔枝播客海外用户：Apple Podcast｜Spotify｜TuneIn｜Youtube｜Amazon Music联系我们：podcast@sv101.net

2017年，谷歌一篇划时代的论文《Attention is all you need》掀开这一轮人工智能的开幕式，这篇论文就是大名鼎鼎的Transformer。7年过去了，我们看到在这篇论文的基础上加入算力、算法开启了AI时代的第三次科技浪潮。
今天我们的嘉宾是来自Meta Fair的研究员田渊栋博士，他最近也发表了两片论文都在都与端侧小模型相关，一片论文是《 MobileLLM: Optimizing Sub-billion Parameter Language Models for On-Device Use Cases》中开始卷 10 亿以下参数小模型，主打在移动设备上运行 LLM；另一片论文是《GaLore: Memory-Efficient LLM Training by Gradient Low-Rank Projection》，由于离应用更近在解决更实际的问题，他的论文被业界很多人问到，而过去五年，他所有的研究都在回答一个问题：神经网络是如何工作的？
今天我们就一起来解读田渊栋最近的两篇论文，也一起聊聊最近大火的Sora、Transformer与AGI。
【老罗直播预告】
北京时间3月31号晚上七点，罗永浩会在直播间卖云产品。之前老罗也带火过很多概念，这次我们来看一看，老罗能不能引领一场企业级IT认知的运动，把云计算这个概念推向大众。他这次的选品涵盖阿里云众多的热门产品，价格也给出了史无前例的优惠，大家感兴趣去淘宝app搜索「罗永浩」，让我们一起围观连续创业者罗永浩卖云产品，以及他如何解决创业者的核心痛点的
【主播】
泓君，硅谷101创始人，播客主理人
【嘉宾】
田渊栋，Meta人工智能研究院（FAIR）研究员及高级经理
田渊栋博士，Meta AI人工智能研究院(FAIR)研究员及高级经理，2018年围棋开源项目（ELF OpenGo）研究及工程负责人和第一作者。曾获2021年国际机器学习大会（ICML）杰出论文奖提名（Outstanding Paper Honorable Mentions)及2013年国际计算机视觉大会（ICCV）马尔奖提名（Marr Prize Honorable Mentions）。研究方向为深度强化学习，表示学习和优化，历任机器学习国际会议ICML，NeurIPS，AAAI, AIStats领域主席。2013-2014年在Google无人驾驶团队任软件工程师。
【你将听到】
00:05 3月31号晚七点罗永浩直播间卖云
01:34 正片
【“斜杠”研究者】
02:55 从自动驾驶、围棋开源项目到神经网络研究
05:52 写科幻小说：不靠谱的想法放进小说，靠谱的想法用来做科研
07:24 理解神经网络如何工作or 研究大模型，2019年为何拒绝Ilya Sutskever加入OpenAI的邀请
08:44 最新两篇论文的诞生：曾被两次拒稿，三四年后才看到结果 
【GaLore和MobileLLM】
11:04 GaLore的主要特点：实现在英伟达RTX 4090上进行模型的从头训练
12:56 算法上改进让4090重获新生，省内存的同时获得高性能
16:56 MobileLLM：降低神经网络参数仍然保持好的效果
【实现AGI的路径】
17:40 Scaling Law带来的增长会越来越小，我们并没有完全理解为什么Transfomer的效果更好
19:17 完全无人驾驶难点：人工干预的频率越低，有效训练数据就越少
23:41 Transfomer很难做游戏式的推理：通过理解神经网络的工作原理来改进现有算法
【深度理解Transformer】
24:52 谷歌内部发现算力价格比通信便宜，所以想到要设计一个模型让算力获得更大优势
26:21 Transformer vs CNN：没有预设立场，并行效果更好
26:44 Transformer的缺点：需要大量算力、速度较慢、延迟高
28:01 强化学习的根本性问题：Exploration（探索）和Exploitation（开采）
【Sora、合成数据与Anthropic】
30:03 Sora的最让人惊艳的地方是所生成的内容一致性非常好，在技术上有根本的创新
33:07 世界模型并不“高大上”，对未来有看法和预测都可以成为称为“世界模型”
40:46 用合成数据训练大模型是趋势，其与真实数据之间

为什么空间计算带来了十倍于移动互联网的机会？今天我们邀请到了XR领域的天使投资人徐梧来讲一讲他的观点，徐梧曾经投资了VR游戏《Contractors》、《Battle talent》等。在过去的一个半月的时间里，徐梧每天都会花3-5个小时在VisionPro这款设备上。今天我们会聊一聊他的使用体验与他对XR的深度思考。
本期节目参与Tech Podfest和 Let's visionOS 开发者大会合作的 「XR系列专题」。如果硅谷101的听众对Let‘s Vision OS的大会感兴趣，欢迎给我们留言，我们将送出一张免费门票。
【主播】泓君，硅谷101创始人，播客主理人【嘉宾】徐梧，XR天使投资人，真格基金投资合伙人，猫眼电影创始人
【你将听到】00:40 观点：空间计算时代，将是移动互联网十倍的机会?02:05 Vision Pro两次不同体验：从Vision实验室到家庭使用，更好的显示体验05:39 从垂直设备到通用设备：每天3-5个小时，但是并不知道在Vision Pro上做了什么07:40 为更大的屏幕付出溢价：大量平面应用空间升级之后的新体验12:30 VisionOS的空间操作系统，人机交互的三维革命性创新14:30 更加注重效率还是拟真？苹果对空间的三层定义16:59 Puzzling Places拼图游戏，为何在Quest放弃使用但在 Vision Pro上拼完了？18:14 同是VR会议软件的本质区别： Horizon workrooms vs Persona21:19 民间智慧如何让Vision Pro减重：移除面罩、使用3D打印配件、人体工程学24:51 手势交互：当使用手势交互之后很难再退回手柄28:06 核心吐槽：贵、重、没有内容28:47 空间应用部门正在快速增长，Vision Pro应用一个月从600快速增长到1200个36:05 恐龙Demo里的开发机会：能够与现实交互的全新的设计范式38:05 Vision Pro变成大众设备的六大临界点：三维交互、显示、操作系统、MR、重量、算力44:17 一个大胆的预测：三年后Vision Pro应用大爆发，创业的傻瓜窗口期消失50:32 谷歌Meta抱团，苹果与其他硅谷大厂的相爱相杀53:50 创始人的坚持与远见：内心深处有坚持，看明白了就去做55:55 投资方法论：投资优秀的产品经理，放下ego关注变量59:58 行业内认知最厉害的人：Meta、苹果、John Carmark、Michael Abrash以及前十大排行榜开发者
【后期】AMEI【BGM】Polarity - Sum WaveChasing Horizons - Victor Lundberg
【在这里找到我们】公众号：硅谷101收听渠道：苹果｜小宇宙｜喜马拉雅｜蜻蜓FM｜网易云音乐｜QQ音乐｜荔枝播客海外用户：Apple Podcast｜Spotify｜TuneIn｜Youtube｜Amazon Music联系我们：podcast@sv101.net

从古至今，人类对长生不老的追求似乎从未停歇。随着近年来生物技术的进步，越来越多对于逆转衰老和永生的实践与思考开始出现在我们的真实生活中。今天，我们就来聊这样一个神秘而充满着吸引力的话题。
最近，有一群想法和理念非常超前的生物极客们，他们在世界上谋杀率最高的国家洪都拉斯“盘”下了一个岛，并在上面打造了一个“长寿快闪城市“Vitalia，宣称要将“死亡变成一种选择”，共同探究如何实现人类长寿永生的秘密。大量知名生物保健领域的企业家、投资者、学者都慕名前往Vitalia，其中也包括了以“换血疗法”闻名世界的硅谷富豪Bryan Johnson。
此次，我们也邀请到了两位刚从Vitalia活动结束回来的参与者Boyang和Shina，他们不仅在Vitalia上见到了很多神奇有趣的人和项目，甚至博洋还作为第一位亚洲人亲自接受了一种新型基因疗法。
那么，Vitalia到底是一个什么样的存在，为什么它会坐落在洪都拉斯？在这个世界第一座“长寿快闪城市”中，人们过着什么样的生活？关于逆转衰老的技术人类目前进展到哪一步了，又面临着哪些技术、伦理和哲学争议？下面，就让我们跟随着两位亲历者的见闻，一起深入到Vitalia里去一探究竟。
本期内容不构成任何营养与医疗建议，嘉宾提到的诸多做法也缺乏实验数据，请大家不要盲目效仿。
【主播】泓君，硅谷101创始人，播客主理人【嘉宾】Boyang，Project Twelve 的创始人，首位接受MiniCircle基因疗法亚洲人Shina， 艺术爱好者、设计师，清华区块链协会和College DAO核心成员
【你将听到】【神秘城市】03:36 Vitalia：一个以长寿和生物科技为主题的Pop-up City，信条是“让死亡变得有选择”04:56 洪都拉斯划定了一块名为Prospera的特区，拥有更灵活的监管和更创新的法律
【转基因人、克隆人与生物极客】06:07 转基因人：接受Follistatin创新基因疗法的亚洲人，给身体进行“升级”10:22 Follistatin基因疗法：用Plasmid把新的基因加到人的身体里11:32 美国监管体系遇阻，Minicircle的双国运营方式13:54 基因疗法带火医疗旅游，目前大约有300个人到洪都拉斯接受该疗法14:53 Plasmid技术的争议：伦理性争议占60-70%，安全性争议占30-40%16:58 通过控制基因让“克隆”的老鼠其它方面正常生长，但大脑不发育17:56 克隆人的作用是让人在受了严重伤害或者衰老之后，把大脑移植到年轻的身体里22:20 一些Biohacker（生物极客）会在自己身体里做各种实验，比如将磁铁缝入手内24:13 延缓衰老的方法主要是通过对身体指标严格监控，其中血糖和饮食结构最为重要28:35 不同的饮食路径：一些人主张餐食要以素食为主，一些人只吃肉
【抗衰届网红Bryan Johnson】32:40 Bryan Johnson用换血疗法和严格饮食让自己延缓衰老，但极端做法受到争议35:38 有信仰、偏执的创业者才能生存36:18 一场人工制造出来的帅：Bryan Johnson像下一代人类，陶瓷娃娃一般的肌肉39:21 Bryan Johnson的宗旨是把抗衰运动作为一种信仰，从富人阶级开始再逐渐普及化
【投资项目】41:52 替换身体、重新生长大脑、基因生发，疯狂的抗衰项目并不容易融资45:28 FDA固有运行机制反而让医药领域创新昂贵、官僚、缓慢？47:26 那些来到Vitalia的学术圈名人
【关于永生的哲学思考】50:35 长寿研究的哲学思考：治愈疾病、减少医疗支出、推动生产力、提高文明发展上限等53:38 长寿技术目前面对跟AGI类似的争议，安全、伦理层面并没有得到充分验证56:55 当人真的获得了永生的权利、死亡变成一项选择的时候，价值的定义将变得困难60:50 Vitalia