DS这几天热度真是居高不下啊。8.12晚11点多突然发布了DSV4pro正式版,版本名称为DeepSeek-V4-Pro-0813,但在更新日志和公告中都没相关信息,只有模型与价格页面更新了版本,上线后短时间内出现版本异常、短暂撤回,随后完成修复全量推送,同步官宣峰谷定价新机制。如果事情到这就结束了,那也太不抽象了。基于7月中旬v4pro正式版灰测比肩甚至超越Fable5的表现,以及7月底v4flash重新后训练的重大提升,ds的忠实用户(包括我在内)对v4pro正式版都抱着极大期待。12晚v4p发布我也是立马收到消息,很想立刻起床实测,但是第二天还要早起,遂作罢。不过还是没忍住在B站搜索了相关视频,这里比较有意思,一类是看到基准测试跑分就开始猛吹ds,另一类则是直接实战,使用灰测时期的项目进行比较,而第二类的结果普遍是”拉完了“,效果甚至不如v4flash正式版...第二天抱着怀疑的心情使用自己一个小项目的问题实测后,悬着的心彻底死了,思维链起手就是”Let me“,结果也是不尽人意,与v4p preview版本感受不到任何差别。这中间也是出了各种奇葩事情,比如ds官网上宣布v4pro正式版发布的横幅上了又下,下了又上,huggingface上也同样是把权重上了又下,下了又上,聪明的网友很快发现了不对,第一次上传的权重与v4flash高度一致,也开始怀疑是否现在使用的v4p正式版其实就是flash,在第二次上传权重后,B友们也是再次开始测试,结果还是拉完了,部分人抽奖到不错效果,但概率较低,事情仍未结束。昨晚八点多,Deepseek Harness终于发布了,我猜测要不是GUI,要不是CLI,再不济就是TUI,结果端上来了个webui,核心理念是“Everything is a plugin”,一切皆插件,安装方式为npm,对于普通用户不太友好。随后,就是网友对v4pro + ds harness的大量测试,普遍的结论是,结合自家harness也并无明显提升...但是,今天早上(其实昨天就反转了,我没关注到)似乎有了反转,Linux环境下 ds harness极简模式 + v4pro max 效果开始逼近灰测初期强度,WTF?看到这个,我直接瘫坐在椅子上,犹如看到核弹爆炸...坐不住了,真坐不住了,打开电脑,服务器上安装ds harness,解决博客一直存在的几个小问题,一个是足迹页面的加载页和博客风格不一致,一个是足迹页面的友链最新文章时间和徽标时间不一致,第一个问题比较简单,第二个问题之前让GLM5.2改过几轮,都没解决。使用ds harness极简模式 + v4pro max差不多一轮就解决了眼尖的网友很快发现了端倪,官网早有说明也就是,经过此次后训练,模型过拟合了,在极简模式提示词下的突出表现无法泛化到其他场景。太有节目效果了,果然,世界是个巨大的草台班子
DS这几天热度真是居高不下啊。
8.12晚11点多突然发布了DSV4pro正式版,版本名称为DeepSeek-V4-Pro-0813,但在更新日志和公告中都没相关信息,只有模型与价格页面更新了版本,上线后短时间内出现版本异常、短暂撤回,随后完成修复全量推送,同步官宣峰谷定价新机制。如果事情到这就结束了,那也太不抽象了。
基于7月中旬v4pro正式版灰测比肩甚至超越Fable5的表现,以及7月底v4flash重新后训练的重大提升,ds的忠实用户(包括我在内)对v4pro正式版都抱着极大期待。12晚v4p发布我也是立马收到消息,很想立刻起床实测,但是第二天还要早起,遂作罢。不过还是没忍住在B站搜索了相关视频,这里比较有意思,一类是看到基准测试跑分就开始猛吹ds,另一类则是直接实战,使用灰测时期的项目进行比较,而第二类的结果普遍是”拉完了“,效果甚至不如v4flash正式版...
第二天抱着怀疑的心情使用自己一个小项目的问题实测后,悬着的心彻底死了,思维链起手就是”Let me“,结果也是不尽人意,与v4p preview版本感受不到任何差别。
这中间也是出了各种奇葩事情,比如ds官网上宣布v4pro正式版发布的横幅上了又下,下了又上,huggingface上也同样是把权重上了又下,下了又上,聪明的网友很快发现了不对,第一次上传的权重与v4flash高度一致,也开始怀疑是否现在使用的v4p正式版其实就是flash,在第二次上传权重后,B友们也是再次开始测试,结果还是拉完了,部分人抽奖到不错效果,但概率较低,事情仍未结束。
昨晚八点多,Deepseek Harness终于发布了,我猜测要不是GUI,要不是CLI,再不济就是TUI,结果端上来了个webui,核心理念是“Everything is a plugin”,一切皆插件,安装方式为npm,对于普通用户不太友好。
随后,就是网友对v4pro + ds harness的大量测试,普遍的结论是,结合自家harness也并无明显提升...
但是,今天早上(其实昨天就反转了,我没关注到)似乎有了反转,Linux环境下 ds harness极简模式 + v4pro max 效果开始逼近灰测初期强度,WTF?看到这个,我直接瘫坐在椅子上,犹如看到核弹爆炸...
坐不住了,真坐不住了,打开电脑,服务器上安装ds harness,解决博客一直存在的几个小问题,一个是足迹页面的加载页和博客风格不一致,一个是足迹页面的友链最新文章时间和徽标时间不一致,第一个问题比较简单,第二个问题之前让GLM5.2改过几轮,都没解决。使用ds harness极简模式 + v4pro max差不多一轮就解决了
眼尖的网友很快发现了端倪,官网早有说明
也就是,经过此次后训练,模型过拟合了,在极简模式提示词下的突出表现无法泛化到其他场景。
太有节目效果了,果然,世界是个巨大的草台班子