deepseek-v4.1POST
Benchmarking whether DeepSeek V4.1 Flash 1017 needs the official API
The author is paying out of pocket to benchmark DeepSeek V4.1 Flash 1017, testing the claim that the official API is better than quantized versions, with local quant tests planned.
金のニワトリ
@gosrumArchived 3 days agoOriginally posted 2026.10.26
金のニワトリ @gosrumOriginally posted 2026.10.26
気になっている人が多いようなので 「DeepSeek V4.1-Flash-1017 は DeepSeek 公式API を使うべし！」という言説の真偽を確認するため、ベンチマーク評価中... 従量課金なので身銭切ってます😇 量子化による影響評価という観点では ローカルLLM でも確認したいところ
This post quotes another post: “DeepSeek V4.1-Flash-1017 underperforms the earlier V4.1 Flash on Terminal-Bench 4.0”
x.com/gosrum/status/2114507628630192438Archived 2026.10.26 12:02