llm 训练最 dirty work 的就是数据处理！

ai help ai

让 ai 帮你干活

有多少人工，就有多智能 https://i.imgur.com/NIvxivj.png

别急，等你处理完数据开始训练就要对付梯度爆炸了

大模型微调吗 我现在找不到场景（微调>> RAG+提示词）

1. 在模型底座不强的时候 微调>> RAG+提示词 如果模型底座比较强，这个差距就不明显，因为微调的场景就是模型+提示词+RAG+MCP 不好用，现在大模型这么强，微调的投入回报率不高了
2. 微调除了私有化+特定场景拔高（速度、省 token ）还有其他场景吗 你们是什么场景需要微调

这就是为啥数据标注公司都能拿到好几亿融资, 都有人直接去 meta 当领导了, 数据比架构还重要了