BENCHMARK / 2026-09-01 / OPENROUTER
Edit kecil. Perbedaan terukur.
Dalam CRUD HTML dua tahap, Simplicio mengurangi biaya pengeditan 96,62%. Total token turun 61,51% dan biaya turun 55,66%.
Metode pengujian
Kedua alur membuat CRUD HTML, lalu mengganti kolom dan warna serta menyembunyikan telepon sambil menjaga datanya. Pembanding membuat ulang seluruh HTML; Simplicio menerapkan rencana ringkas melalui MCP.
Arti angka
Pengeditan memakai 473 token, bukan 10.574. Totalnya 6.175, bukan 16.043. Ini pengukuran penyedia, bukan proyeksi.
Batasan
Hanya satu pasangan alur, bukan benchmark keluaran identik atau statistik. Saat pembuatan, Simplicio memakai 4,26% lebih banyak token. Pengeditan lolos delapan pemeriksaan; pembanding gagal dua. Penghematan bergantung pada tugas, model, dan alur.
DeepSeek V4 Flash · OpenRouter · Simplicio 3.8.40
temperature: 0 · seed: 42 · max_tokens: 12000 · reasoning: disabled
