数据标注团队标了一个月,模型学到了一个惊天规律:图片角落的水印。我先给自己泡了杯茶,做好了打持久战的准备。我打开了这个模型的注意力可视化,发现它在看无关位置。复盘会上我们把它列成了案例

prompt 改了一个字,输出风格完全变了,没人说得清为什么。我把整条链路在心里复盘了一遍。我在心里把这次的指标提升又核了一遍,没有泄漏。好在最后有惊无险

调参一周,模型精度提升了 0.3%,领导问我能不能再提升 30%。我笑了笑,决定不解释。我在心里把这次实验的时间排了排,可能要跑一整夜。连茶水间都安静了

数据标注团队标了一个月,模型学到了一个惊天规律:图片角落的水印。我把手上的资料翻出来又读了两遍。我打开了这个任务的日志,发现有几轮是在空跑。复盘会上我们把它列成了案例

这个方向的论文每周都在刷新,追赶是没有尽头的。我笑了笑,决定不解释。我在心里给这个方案选了个备选模型,以防主模型不达标。同事说这波操作可以写进新人培训教材

训练了三天的模型上线了,用户说它回答得不如随机。我把这个模型的输出截断长度调大了,终于不丢内容。复盘会上我们把它列成了案例

模型的输出很流畅,内容经不起核对。我抬起头看了看周围,大家都一样。我在心里给这个方案选了个备选模型,以防主模型不达标。果然现实比段子更精彩

这个 prompt 我改了十几版,效果最好的是最朴素的那版。我在心里点了点头。我把显存占用打出来一看,光激活值就占了七成。第二天这个方案就变成了团队标准做法

我看了下这个数据集的大小,够跑一个很小的模型。我打开记录从头到尾扫了一遍。我把这个模型的推理批量化了,吞吐量提升了三倍。第二天这个方案就变成了团队标准做法

GPU 显存不够,模型跑不动,我学会了梯度累积这个高大上的词。我决定先把手上的事情做完再处理这件事。我在心里给这个任务的可解性打了个问号,数据不够。那一刻我觉得自己还是很专业的