零、导读
报告内容均源自海内外主流媒体报道、高校官网等公开信息梳理、相关领域优质KOL原创深度，主要包括硅谷产品圈、硅谷高校研讨会、创投圈、大佬动态、前沿科技好文等。 本报告共7000字，预计阅读时间40分钟，如果您只有15分钟，可以重点专注以下内容。欢迎享用~- 本周产品圈快讯：OpenAI突发更新！GPT-3.5正式开放微调，人人可打造专属ChatGPT； Meta联手CMU打造通用机器人智能体！轻松泛化100多种未知任务； Excel变天！微软把Python「塞」进去了，直接可搞机器学习
- 学界动态：Bengio等人88页新论文：构建有意识的AI没有明显障碍
- 本周创投圈关注：OpenAI创始人远赴中东 寻求千亿美元融资； “OpenAI劲敌”Cohere现估值约30亿美元 传老虎环球将出售部分股权； 对话硅谷投资人张璐：生成式模型走向技术应用创新，医疗或将成为首个爆发性增长领域
- 大佬动态：彭博社对话微软及OpenAI CEO：人工智能大战的开始； Adobe联创去世，没他就没有PDF，乔布斯也因他逆风翻盘； 深度访谈｜DeepMind联合创始人：AI的下一个10年，世界还没准备好
- 深度好文推荐：暴走的英伟达：Q2净利润暴涨843%，靠生成式AI赚疯了； 揭秘Transformer创始八子：聚是一团火，散是满天星； 微软OpenAI联盟的“裂痕”，藏不住了
- 播客推荐：英伟达与芯片史上的大赢家们：凡是伟大的，都是叛逆的； AI Agent 智能体 真相和未来 | 硅谷徐老师对话英伟达、DeepMind大模型专家（上）； 贫穷限制 AI 想象？｜硅谷徐老师对话英伟达、DeepMind 大模型专家（下）； 萨姆·班克曼·弗里德 (Sam Bankman-Fried) 入狱，带着人工智能和自动驾驶汽车更新重返学校
- 其他讯息：实锤！村上春树、史蒂芬·金盗版书成训练数据，AI 巨头无一幸免； 硅谷Robotaxi完全放开后事故频发，问题充分暴露，正好摸着过河； 马斯克：正如许多人预测的那样，X（推特）可能会失败
一、硅谷产品圈快讯💡
英伟达推出DLSS 3.5光线重建技术：为游戏画质升级注入新动力英伟达近日在Gamescom 2023上宣布推出了一项重磅技术——DLSS 3.5光线重建技术。这项技术专为改善游戏中光追物件的视觉效果而设计，无疑将为游戏玩家提供更加震撼、逼真的视觉体验。DLSS 3.5光线重建技术将降噪和超分两个步骤融合在一起，为GPU在渲染画面时提供了更多的参考。
Midjourney画出七夕神图，震惊网友！局部重绘功能上新最近，Midjourney上新了一项用户期待已久的功能——修复（inpainting）。通过修复，我们就可以通过提示编辑图像的各个区域了。这个功能对应的选项的「Vary Region」，位于「Vary Strong」功能和「Vary Subtle」功能旁边。使用时需要启用Remix Mode，否则这个选项按钮不会显示。我们可以选择放大图像的某个区域，然后使用文本提示对它进行编辑。
OpenAI突发更新！GPT-3.5正式开放微调，人人可打造专属ChatGPTOpenAI正式开放GPT-3.5微调API，GPT-4版本也即将推出。这意味着，继插件「APP Store」大爆发后，所有人皆可以打造个性化的专属「类ChatGPT应用」。微调后的GPT-3.5 Turbo，在具体任务中，性能与GPT-4实力相当，甚至反超GPT-4。
100种语言任意翻译！科幻电影中的“巴别鱼”，Meta用AI实现了科幻电影中的“巴别鱼”，Meta 用 AI 真的实现了——推出大规模多语言和多模态机器翻译模型 SeamlessM4T。据介绍，SeamlessM4T 可以在语音和文本之间实现即时翻译和转录，支持近 100 种语言的自动语音识别、近 100种输入和输出语言的语音到文本翻译等功能，在模型方面，Meta 采用了多任务 UnitY 模型架构，这一架构能够直接生成翻译文本和语音。
Excel变天！微软把Python「塞」进去了，直接可搞机器学习微软把Python弄进Excel了！搭建一个机器学习天气预测模型，在Excel里即可实现，而且无需任何设置，在单元格里输入“=PY”，就能开搞，数据清理、预测分析、可视化等等任务，都能轻松实现。还和Anaconda达成了合作。各种常见Python库都能直接用，如Matplotlib、Seaborn等。
特斯拉新款 Model 3 预计 9 月底量产，上海电池 1 厂重启
特斯拉新款 Model 3 将于 9 月底开始集中交付，为了保证产能供应，原先已经停摆的上海工厂电池 1 期产线，也计划于 9 月重新恢复生产。销量预期和降价带来的新增订单，显然让特斯拉快速调整了这一举措，决定加大电池供应。
Meta联手CMU打造通用机器人智能体！轻松泛化100多种未知任务在迈向「通用机器人智能体」的路上，谷歌凭借RT-2火了一把。现在，Meta、CMU团队耗时2年打造的RoboAgent，用少量数据实现12种复杂技能，烘培上茶擦桌子样样行。具体而言，RoboAgent仅在7500个轨迹上完成了训练，在38个任务中，实现了12种不同的复杂技能，烘培、拾取物品、上茶、清洁厨房等等，它的能力还能够泛化到100种未知的场景中。不论你怎么干扰它，RoboAgent依旧设法去完成任务。
与马斯克硬刚！扎克伯格社交平台Threads推出网页版Meta公司的联合创始人扎克伯格将在本周早些时候推出其新社交软件Threads网页版。Threads功能不足是用户流失的原因之一，其中最大的缺陷是没有可用的网页版。目前，Threads 的网页界面只能让用户通过浏览器查看特定的帖子。据悉，了解Meta计划的人士表示，虽然目前计划在本周推出网页版，但这些计划并不确定，可能会改变。
Meta 或将推出自动代码生成软件，可供用户开源使用据 The Informaiton报道，Meta 正计划推出一款帮助开发人员自动生成编码的软件，名为Code Llama，最早或在下周推出。这将是一款开源软件，Code Llama 将会建立在 Llama 2 的基础之上。如果消息属实，Code Llama 将会对 OpenAI 等公司构成挑战。
二、学界动态📒
Bengio等人88页新论文：构建有意识的AI没有明显障碍最近，图灵奖得主Bengio 等人发布了一篇 88 页的系统性的论文，深入探讨了当前主流的意识科学理论以及构建有意识的人工智能系统的可能性。在论文中，他们得出结论：目前，没有哪个人工智能系统是有意识的，包括谷歌的 PaLM-E 等前沿具身智能研究，但构建有意识的人工智能系统没有明显的障碍。这篇论文的一作和通讯作者是来自牛津大学的 Patrick Butlin 和 Center for AI Safety 组织的 Robert Long。
三、硅谷创投圈在关注什么💸
OpenAI创始人远赴中东 寻求千亿美元融资一位中东创投圈知情人士向腾讯新闻《深网》透露，OpenAI首席执行官山姆·奥特曼下半年奔赴阿联酋首都阿布扎比等地寻求融资，此次融资的规模巨大，不低于1000亿美元。如何打动中东财团？山姆奥特曼讲的故事不仅仅是AGI通用人工智能，他描述OpenAI的目标是要实现Super intelligence（超级智能），比人类智能要更高级。毫无疑问，绝对足够的资金，才能为OpenAI建立安全感。
“OpenAI劲敌”Cohere现估值约30亿美元 传老虎环球将出售部分股权据知情人士透露，科技媒体周二报道称，老虎环球基金将以约6300万美元的价格出售AI大语言模型(LLMs)开发商Cohere 2.1%的股份。出售后，老虎环球将保留约5%的Cohere股份。老虎环球出售所持股份将使Cohere的每股估值在130至140美元之间，而在最近一轮融资中，Cohere的每股估值为95美元。
对话硅谷投资人张璐：生成式模型走向技术应用创新，医疗或将成为首个爆发性增长领域对ChatGPT背后的生成式模型来说，积累了海量优质数据、迫切需要降本增效的医疗行业很可能成为其最集中、来得也最快的爆发点。硅谷投资人张璐表示，医疗领域是她创立的Fusion Fund的一个重要投资方向。最令她兴奋的是生成式人工智能在数字生物学的应用，尤其是它与AlphaFold结合后，未来对于数字生物学及它包含的合成生物学的推动。作为工作提升的效率工具，生成式模型仍旧有巨大的潜力。
四、硅谷大佬动态👀
彭博社对话微软及OpenAI CEO：人工智能大战的开始微软现在是OpenAI的主要商业合作伙伴，用丰富的服务器资源和和数十亿美元换取了ChatGPT的使用权，为旧产品注入了新生命，尤其是陷入困境的引擎产品。微软CEO萨蒂亚·纳德拉直言，AI不是新鲜事物，它现在已经普及了。OpenAI CEO萨姆·奥特曼希望继续制作更好、更有能力的模型，使它们更广泛、更便宜的使用。
马斯克竟是“复仇”关键：众多格斗高手无偿指点 只因看不惯扎克伯格财联社8月21日讯，特斯拉首席执行官马斯克与Meta首席执行官扎克伯格之间的“马扎笼斗”出现了新的剧情：以前MMA冠军Chad Robichaux为首的8名综合格斗选手公开表态，愿意为马斯克提供培训，以便他打败扎克伯格。现担任美国退伍军人组织Mighty Oaks基金会负责人的Robichaux透露，没有人喜欢扎克伯格，因为他压制了人们的言论，毁掉了大部分的业务。
Adobe联创去世，没他就没有PDF，乔布斯也因他逆风翻盘Adobe联合创始人John Warnock去世了，享年82岁。他是PDF格式的发明人之一，贡献了PDF中的核心技术PostScript，如果没有它，打印机就无法打印复杂页面。可以说，Warnock的这项发明，在上世纪80年代彻底变革了媒体和出版行业。而Adobe不仅仅改变媒体和出版业，还拯救了苹果。乔布斯在苹果电脑早期接连商业失败后，就通过与Warnock的合作完成一次翻盘。R.I.P
深度访谈｜DeepMind联合创始人：AI的下一个10年，世界还没准备好近日，DeepMind（现与 Google Brain 一起合并为 Google DeepMind）联合创始人 Mustafa Suleyman 接受了美国数字媒体 WIRED 主编 的采访，就其新书《即将到来的浪潮》中的主要观点和其他 AI 领域重点问题展开了深度讨论。Mustafa 预测，AI 的下一波浪潮将会是人类与 AI 进行对话的浪潮，在发布新产品时，我们必须非常谨慎，因为世界可能尚未准备好应对变革。遏制将是下一个 10 年的主题。
Meta生成式AI团队主管名单披露，由前苹果高管带领The Information于8月16日披露了一份Meta生成式AI团队的主管名单，该团队由苹果前高管艾哈迈德·阿尔·达勒（Ahmad Al-Dahle）带领，6名由AI研究所等部门调来的主管共同管理。该团队目前有551名员工，由研究人员和产品人员共同组成。Meta似乎刻意要让两个不同领域的员工相互磨合，但部分员工并不买账。
Transformer出逃八子最后一人正式创业！坐标日本搞AI“群”模型谷歌经典Transformer论文8位作者的最后一位，创业去向已定！新公司base东京，名为sakana.ai，目标是做一家“世界级人工智能研究室”，目前已知的创始成员有两位，Transformer作者Llion Jones和另一位谷歌前同事。创业之前，Llion Jones在谷歌已经干了8年。之所以选择离开谷歌，是因为公司目前已经发展到一种规模，使得他无法继续进行自己想做的工作。
五、深度好文💎
暴走的英伟达：Q2净利润暴涨843%，靠生成式AI赚疯了8月24日凌晨，生成式AI时代的芯片大赢家英伟达公布最新季度财报，业绩和预测都远超预期。值得一提的是，这是英伟达的季度营收首次超过英特尔（129亿美元）。这不仅是英伟达打赢的又一场新仗，也是Fabless（无晶圆厂）设计公司战胜IDM巨头的一次里程碑时刻。财报公布后，英伟达的股价在盘后交易中上涨了9.6%，创历史新高。
Stable Diffusion一周年：这份扩散模型编年简史值得拥有一年前的 8月22日，Stable Diffusion公开发布，集扩散模型之大成，也真正意义上从大众层面开启了AIGC时代。这篇文章全面总结了自2020年来扩散模型与AIGC的牵手历程，从问世到Stable Diffusion开源再到最近研究，堪称扩散模型编年简史。AIGC的热议热潮，应当溯源至去年年底2022年，即Stable Diffusion的开源公布，这些成果使得人工智能绘画领域呈现出前所未有的高品质创作与创意，而开源工具Stable Diffusion WebUI和ComfyUI与商业化产品Midjourney的问世，则大幅降低了普罗大众使用此类工具的门槛。
揭秘Transformer创始八子：聚是一团火，散是满天星Transformer的创始八子分别是Ashish Vaswani、Niki Parmar、Jakob Uszkoreit、Illia Polosukhin、Noam Shazeer、Llion Jones、Lukasz Kaiser和Aidan Gomez。他们的一个改进机器翻译的想法推进了Transformer的发布，而这如同人工智能领域的“宇宙大爆炸”，如今绝大多数的人工智能应用都是以Transformer为基础架构。现在，八位作者均已离开谷歌，八人聚则为Transformer，散则成人工智能宇宙。
微软OpenAI联盟的“裂痕”，藏不住了
走过四年蜜月期，微软与OpenAI的“天作之合”正在出现裂痕。一方面，微软和OpenAI不得不面对同客户竞争，因此小动作不断。另一方面，双方似乎都找起了“第三者”。就在上个月Meta重磅发布开源大语言模型LIama55 2的同时，微软宣布成为Llama 2的首发伙伴。OpenAI这边也在频频接触新的“金主”。在大模型竞争加剧的背景下，微软和OpenAI之间的关系正变得越来越复杂。
如日中天的英伟达，下一个目标是抢走云厂商的生意？来自美国的一家云初创公司 CoreWeave宣布融资23亿美金，而让人震惊的是这笔钱的抵押物是其拥有的GPU——英伟达稀缺物品。CoreWeave自称是世界上唯一一个可以大规模提供H100算力的公司，也摇身一变成为了一家“云厂商”，只因为它是最忠诚的英伟达门徒。其实，英伟达也在建设自己的云，不仅包括算力，还包括一整套 AI 解决方案，这展现着黄仁勋的野心与现实。
价格战，特斯拉也怕了降价是一把双刃剑。上半年的价格战，让特斯拉打出了近三年来的最低毛利率，让新势力们亏损加剧。现在的局面是，所有车企都不想打价格战，但都逃不开打价格战。特斯拉能任性降价，是因为超过25%的毛利率、接近15%的净利率，让它有足够的底气打价格战。但特斯拉需要权衡，降价使得其今年二季度的利润率，跌至2019年以来新低。价格战或许最后没有赢家，最后活下来的，一定不是降价最凶猛的，而是成本控制最出色的。
六、播客推荐🎧
英伟达与芯片史上的大赢家们：凡是伟大的，都是叛逆的人工智能在今年上半年出现了爆发式的发展，芯片尤其是GPU是这轮人工智能热潮背后真正的大赢家。中国芯片发展会何去何从，从历史的角度去看待这些问题，更能给当下的这些问题以启发。“失败、背叛、不被理解，硅谷精神领袖一直都不是完美的存在；他们是科学家，创造者，行动派，他们有独立的价值观。”这期节目我们从底层逻辑和历史的角度聊了聊英伟达的崛起、中国芯片的困难与机遇，以及芯片史上的英雄人物们。
AI Agent 智能体 真相和未来 | 硅谷徐老师对话英伟达、DeepMind大模型专家（上） 贫穷限制 AI 想象？｜硅谷徐老师对话英伟达、DeepMind 大模型专家（下）年初火爆一时的斯坦福 Smallville「虚拟小镇」，现在宣布正式开源。硅谷人正在全力投入 AI 智能体，希望能够创造出一个真实存在，又让人惊喜的「西部世界」，甚至让 AI 智能体们走入寻常人家，为人类的生活和工作效率带来巨大提升。本期「科技早知道」与「OnBoard!」串台，由硅谷徐老师和合作主播 Monica 共同主持，邀请了曾在 OpenAI 工作和实习，从事 AI 智能体、大模型研究领域的两位大牛——英伟达高级 AI 研究科学家 Jim Fan和谷歌 DeepMind 研究员戴涵俊，共同讨论AI 智能体何时能够进入我们的生活，面临哪些挑战？为什么当今的大模型更像是「炼金术」？ Llama 2 为何刚一发布就刺激大量创新出现？ 在 AI 研究的道路上，如何避免被「贫穷限制了想象」等问题。
萨姆·班克曼·弗里德 (Sam Bankman-Fried) 入狱，带着人工智能和自动驾驶汽车更新重返学校在本周的节目中，萨姆·班克曼-弗里德入狱，我们会告诉您原因以及接下来会发生什么。然后，我们回到学校，与沃顿商学院教授 Ethan Malek 一起，他告诉我们教师和学生今年需要了解人工智能领域的哪些内容。最后，机器人出租车世界又经历了疯狂的一周，发生了什么，以及有关自动驾驶汽车看法。
七、其他讯息😜
甲骨文如何逆袭云计算：狂揽AI创企大单，超半数高管来自AWS或微软The Information于8月21日发布了一份包括甲骨文80名高管的组织结构图。图表显示，甲骨文的高管组织以首席执行官萨弗拉·卡茨和董事长兼首席技术官拉里·埃里森为首，后者主要负责云业务部门的监管，其云业务虽然起步较晚，但公司抓住了AI产品爆炸式增长的需求，短短几个月内与30多家AI公司签订了总金额20亿美元以上的合同。在云基础设施的高管中，有多名都来自AWS（亚马逊云服务）或微软。
实锤！村上春树、史蒂芬·金盗版书成训练数据，AI 巨头无一幸免为了训练大型语言模型，OpenAI、Meta、谷歌、微软等公司未经许可，从互联网上收割了数百万受版权保护的作品，在版权法的灰色地带中游弋。近日，有人发现一个叫 Book3 的数据集，包含近 20 万本书籍，囊括村上春树、史蒂芬·金等畅销书作家的著作，这个数据集被用在了训练 AI 模型上，包括 Meta 在内的一些公司曾经使用过 Book3。AI公司正面临法律诉讼。
硅谷Robotaxi完全放开后事故频发，问题充分暴露，正好摸着过河硅谷解禁无人车已经过去一周，同时也是事故频发的一周，例如十辆Cruise的Robotaxi突然在路上集体熄火，造成交通堵塞......这切实反映出自动驾驶不等于零事故，事故、案例，以及后续的处理方法也对探索无人车落地给出实际的参考。
一月裁员8万多人！科技行业裁员名单公布，X一次性裁掉一半员工！经济寒冬加剧全球科技行业裁员潮，各大企业裁员人数名单汇总。巨头裁员人数触目惊心，全行业无一能够幸免。始于今年初这一次科技行业的大裁员，是由谷歌、亚马逊、微软、雅虎、Meta和Zoom等科技巨头推动的，初创公司也紧随其后。谷歌和Meta是裁员大户，X（前Twitter）一下裁掉了一半的员工，裁员数量最多的一次是谷歌的12000人的裁员。
马斯克：正如许多人预测的那样，X（推特）可能会失败亿万富翁马斯克本月 20 日在 X 平台上发布了一条消息，暗示他以 440 亿美元（当前约 3216.4 亿元人民币）收购的社交网络平台 X（原推特）可能会失败。马斯克此前还因为宣布取消 X 平台上的屏蔽功能而受到了批评。
AI怀疑论蔓延！Bing没有赢谷歌，Office AI版成败备受关注今年2月份，微软推出了ChatGPT版Bing搜索引擎。分析公司的数据报道，Bing在1月份占据了搜索市场3%的份额，7月份的市场份额仍是3% 。7月份，Bing的月度用户数量仅为谷歌的1%，新Bing的表现，再次证明了AI怀疑论者的观点。Bing表现令人失望，Office AI成败备受关注。但在AI被证明是扩收增利的利器之前，将生成式AI嵌入更多产品和服务中，或产生更大的风险。
英伟达赚翻了，消息人士称 H100 GPU 的成本仅为售价的近 1/108 月 18 日消息，随着 AI 大模型的爆火，英伟达的 GPU 供不应求，外媒此前表示英伟达的订单迅速增加，乃至已经排到 2024 年，其中，性能最强的 AI 训练 H100 GPU 更是成为抢手货。根据 Barron's 的资深作家 Tae Kim 估计，英伟达正从这一浪潮中获得巨大利益，有可能打破所有纪录，从生产成本 / 售价比来看，英伟达 H100 GPU 就是一个“超级大金矿”。
最火的几个大语言模型都爱“胡说八道”，谁的“幻觉”问题最糟？
Arthur AI于8月17日发布最新研报，比较了微软支持的OpenAI、“元宇宙”Meta、谷歌支持的Anthropic，以及英伟达支持的生成式AI独角兽Cohere等公司大语言模型（LLM）“产生幻觉”（AKA胡说八道）的能力。研究发现，OpenAI的GPT-4在所有测试的模型中表现最好，Meta的Llama-2表现居中，Anthropic的Claude-2表现排名第二，仅次于GPT-4，而Cohere的LLM模型最能“胡说八道”。