scripod.com

113: 秘塔闵可锐 1:回到故事开始,那些「神预言」

晚点聊 LateTalk
本期《晚点聊》聚焦大模型热潮初期的行业洞察,嘉宾秘塔创始人闵可锐分享了对 AI 技术发展和创业路径的独特见解。从预训练模型的重要性到 Transformer 架构的实际意义,再到中国投资机构可能错过的潜在机会,节目深入探讨了 AI 领域的发展趋势与挑战。
闵可锐在访谈中强调,预训练模型的出现是 AI 技术的关键转折点,相较于具体架构如 Transformer,其思想更为重要。他指出,传统组织方式在基础大模型创业中已失效,而研发投入的大部分可能是浪费的,但顶尖研究者能显著提高效率。同时,他认为 AI 应用正进入‘战国时代’,所有参与者都在激烈竞争。他还提到,中国 VC 可能错过有雄心的大模型创业者,因为这些项目需要巨额资金且可能多年亏损。此外,开源模型成为一股重要力量,改变了行业的资源分配和技术门槛。尽管大模型领域看似热闹,但真正具有竞争力的模型数量有限,行业发展仍需探索明确的盈利模式。最后,闵可锐提醒,短期应用与长期研发之间存在矛盾,企业需在两者间找到平衡,而这一平衡并非易事。
00:05
00:05
中国 VC 可能错过有雄心的大模型创业者
03:21
03:21
波森数据与 Facebook 域名冲突,但仍取得成功
10:35
10:35
AGI 尚远,特定领域有逻辑规则的任务机器可完成
13:49
13:49
近期有工作用 RNN 达到接近 Transformer 的效果
21:44
21:44
长序列处理效率问题是 Transformer 应用的关键挑战
23:20
23:20
天才级算法能在准线性时间复杂度解决传统高复杂度问题
26:27
26:27
深度学习虽强大但需更高监管,因其不可解释性可能带来严重后果
29:12
29:12
使用 GPT 技术于每次搜索查询,年成本将超百亿
33:54
33:54
国外律所对中国软件 IC 审查变严,进入美国律所难度增加
37:21
37:21
AI 应解决当前无人解决好的场景问题
44:48
44:48
商业模式的关键在于提供难以复制的价值
45:56
45:56
个人开发者试错成本低,各方都在相互竞争
48:41
48:41
AI 并非从 0 到 1 的转变,而是从做不好到做得更好
56:42
56:42
算力有限也能取得成果,关键在于工程能力与成本控制
1:06:42
1:06:42
开源模型的核心在于代码、参数和权重,但复现效果还需依赖数据支持。
1:09:09
1:09:09
ChatGPT 两三个月内爆火,普及全民技术认知
1:12:11
1:12:11
中国投资更依赖大佬站台,而 OpenAI 靠一线工作者推动
1:18:12
1:18:12
AI 终局可能不在于行业内影响,而在于对其他行业造成破坏性变化
1:22:37
1:22:37
未来半年 AI 投入将持续增加,可能导致资源过剩
1:24:58
1:24:58
阿里参投可能带来较多干预,但可商谈
1:29:54
1:29:54
研究方向应注重创新或广泛应用的产品
1:34:16
1:34:16
OpenAI 核心人员多为 30 岁左右年轻创业者
1:43:57
1:43:57
国内大模型厂商或看到机会,在国内市场获利足够
1:46:17
1:46:17
即便拿到资金,也需分阶段投入以保证产品优化
1:53:46
1:53:46
预训练是重要范式转变,架构改动次之