一个人、两周、数百美元,如何训出登顶 Hugging Face 的模型 | 对谈研究员逯雨鑫
42章经
1 DAYS AGO
一个人、两周、数百美元,如何训出登顶 Hugging Face 的模型 | 对谈研究员逯雨鑫
一个人、两周、数百美元,如何训出登顶 Hugging Face 的模型 | 对谈研究员逯雨鑫

42章经
1 DAYS AGO
本期节目聚焦个人与应用公司如何进入模型训练领域,分享从数据工程转向 AI 研究的实践经验,并进一步讨论主权 AI、应用公司的角色变化与 Local AI 的发展前景。
嘉宾认为,训练小模型并非只有 AI 博士或顶尖实验室才能完成,借助开源底座、现成工具和较低成本,个人也能围绕具体场景快速完成训练。完整流程中,真正决定效果的不是算力,而是场景选择、数据工程、质量评估与持续迭代。数据既是最大瓶颈,也构成模型能力的核心壁垒;合成数据需要与公开数据、真实反馈和人工复核结合,并通过反复实验弥补小模型与教师模型之间的 Capacity Gap。相比追求 Benchmark,蒸馏和后训练更应服务于真实的 Agentic、Coding 等需求。随着训练流程商品化和硬件成本下降,应用公司可能逐步建立自己的模型团队,成为 “Neo Lab”,而 AI Lab 更专注基础模型与前沿研究。未来,隐私、安全、成本和个性化需求或将推动 Local AI 普及,但用户是否选择本地模型,仍取决于具体场景与性价比。
00:20
00:20
个人开发者也能登顶模型榜单
01:33
01:33
AI 学习不设学历门槛
05:32
05:32
模型训练的门槛远低于想象
08:22
08:22
真正的难点在于数据质量
13:27
13:27
训练难点在数据处理而非算力
15:34
15:34
蒸馏效果需要反复训练验证
19:15
19:15
Benchmark 只是考试,目标是满足真实需求
20:03
20:03
真正昂贵的是模型落地
22:10
22:10
更多人参与,社区才能持续壮大
23:44
23:44
模型训练将从大公司走向更多企业
25:25
25:25
模型训练将成为可购买的完整服务
31:17
31:17
数据质量决定模型表现
32:07
32:07
应用公司将逐步成为新的 AI 实验室
33:39
33:39
真实使用数据才是模型进化的燃料
35:31
35:31
应用公司应尽早掌握后训练能力
38:52
38:52
真正的竞争力来自数据与模型能力
42:31
42:31
模型选择首先要服从真实需求