# MTP açık/kapalı: doğruluk ve eşzamanlı istekler

13 Ekim 2026, ZAI-15. Ölçüm tamamlandı ve üretim Qwen geri açılıp gerçek JSON yanıtıyla doğrulandı. Bu çalışma önceki tek sohbet hız testinin devamı. İki RTX 5090 üzerinde Qwen3.8-27B NVFP4 / TP2; yalnız MTP3 açık veya kapalı. Üçüncü karttaki coder ve embedding çalışmaya devam etti.

## Doğruluk

| Kontrol | MTP kapalı | MTP3 açık |
|---|---:|---:|
| JSON: tüm alanlar doğru | 80/80 | 80/80 |
| JavaScript: bütün testleri geçen çalıştırma | 8/12 | 8/12 |
| JavaScript: geçen tekil kontrol | 136/144 | 140/144 |

20 farklı sentetik sipariş ve üç JavaScript görevi kullanıldı. İki seed ve iki blokla her profil için 80 JSON ve 12 kod yanıtı alındı. Bu tekrarlar 92 bağımsız problem değildir. Temperature 0, top_p 1, top_k 1, presence penalty 0, thinking kapalı; JSON 256, kod 2048 token bütçesi ve doğal bitiş. JSON şeması çıktı üretimine zorlanmadı. Kodlar ağsız bwrap/Node VM ortamında, görev başına önceden sabit 12 testle değerlendirildi; düzeltme hakkı verilmedi.

Aralık birleştirme ve topolojik sıralama tüm kontrolleri geçti. CSV parser MTP kapalıyken 10/12, açıkken 11/12 kontrol geçti; hata veren testler de farklıydı. Bu örnekte tekil kontrollerde küçük bir fark var, fakat üç görevden genel coding kalitesi veya MTP'nin kalite garantisi çıkarılmaz.

Aynı blok/görev/seed ile eşleştirilen 92 yanıt çiftinin yalnız 40'ında metin SHA256'sı aynıydı. Tam geçiş oranının eşit olması, aynı metin/kod üretildiği anlamına gelmiyor. JSON alan doğruluğu ile ham metin eşitliği ayrı kontrollerdir.

## Eşzamanlı istekler

| İstek sayısı | Kapalı toplam token/sn | Açık toplam token/sn | Kapalı kişi başına yaklaşık decode | Açık kişi başına yaklaşık decode |
|---|---:|---:|---:|---:|
| 1 | 62,02 | 113,31 | 62,25 | 114,37 |
| 5 | 239,34 | 379,07 | 48,71 | 77,85 |
| 10 | 398,24 | 698,96 | 40,48 | 72,47 |

| İstek sayısı | Kapalı TTFT p50/p95 ms | Açık TTFT p50/p95 ms |
|---|---:|---:|
| 1 | 50,13 / 54,68 | 49,95 / 55,77 |
| 5 | 200,45 / 207,18 | 216,00 / 223,53 |
| 10 | 266,20 / 288,30 | 286,40 / 315,26 |

MTP açıkken üretim hızı yükseldi. İlk yanıt süresinde aynı kazanç yok; beş ve on istekte medyan TTFT biraz daha yüksek. Bu veride daha hızlı çıktı üretimi ile daha erken ilk yanıt farklı sonuçlar verdi.

Açıklama, kod ve hikâye istemlerinde 512 sabit çıktı tokenı üretildi. Her koşulda iki tur ve her profilde iki blok var. Profil/istek sayısı başına 12 yük grubu; toplam 384 yük isteği, 72 grup. Grup toplam hızı, bütün çıktı tokenlarının ilk istek başlangıcından son yanıt bitişine kadar geçen süreye bölümüdür. Kişi başına decode ilk/son içerik parçalarından hesaplanır; MTP bir parçada birkaç token verebildiği için bu sunucunun token başına gecikmesi değildir. İstemci hazırlığı ve model başlangıcı ana hız hesabında yok; ham kayıtlarda grup duvar saati ve istek aralığı ayrı tutulur.

Ölçümler doğrudan localhost backend üzerinden. Eşzamanlı HTTP istekleri gerçek on müşteri, gateway/HTTPS kapasitesi veya hizmet garantisi değildir. Her istekte ayrı sentetik cache_salt kullanıldı: prefix soğuk, model/kernel cache'leri soğuk olmak zorunda değil. Önceki sosyal MTP testi sıcak prefix kullandığından mutlak hız sayıları birebir kıyaslanmaz.

## Tekrarlar ve çalışma koşulları

Sıra açık–kapalı–kapalı–açık (ABBA). İki blokta 10 istek toplam medyanları:

- MTP açık: 703,74 ve 695,38 token/sn.
- MTP kapalı: 390,10 ve 406,86 token/sn.

Her aşama ayrı transient servisle localhost 18001 üzerinde çalıştı. Üretim scriptinin yalnız portu değiştirildi; kapalı profilde speculative-config kaldırıldı. Ağırlık revision'ı `482ca0f3832238542f8f5295dde86b5f22711d80`, TP2, 16K bağlam, 10 sequence, batch 2048, graph 128, BF16 KV, FlashInfer koşulları korundu. vLLM 0.30.0; PyTorch 2.13.0+cu132; FlashInfer 0.6.18.post1; Transformers 5.18.0. Başlangıç ve kaynak sürümleri INITIAL.json, versions.json ve geçici profil scriptlerinde bulunur.

Her aşamada üç tek istekli, 128 tokenlık ısınma yapıldı. Bu her concurrency/çıktı şeklini ısıtmaz. Başlangıç loglarında ek kernel/JIT derlemeleri görüldü; bazı ilk gecikmelere girmiş olabilir. Sonradan bu ölçümler elenmedi. ABBA zaman etkisini azaltır ama tam randomize bağımsız donanım deneyi değildir. Global backend sayaçları ve GPU durumları her yük grubunda kaydedildi.

## Kayıt ve geri dönüş

184 doğruluk + 384 yük = 568 ana çağrı. Ayrı 12 ısınma ve bir geri dönüş isteğiyle 581 kullanım bildiren yanıt, sıfır hata. Bu toplamda 64.631 girdi + 217.823 çıktı = 282.454 token var; Codex tokenları veya tüm proje geliştirme süresi değildir. Yük telemetrisinde görülen en yüksek sıcaklık 51°C; uzun donanım kararlılığı testi değil.

Üretim Qwen PID 172119 ile active ve gerçek JSON yanıtı verdi. Coder 2391, embedding 14557, router 14397 ve gateway 146431 süreçleri korundu. Üretim script SHA256 değişmedi, bağımsız kurtarma zamanlayıcısı başarılı dönüşten sonra kaldırıldı. Public HTTPS veya bağımsız firma kabul testi yapılmadı.

PLAN.md, DATASET.json, checker, runner ve reporter ilk çağrı öncesi FROZEN.json ile sabitlendi. Ham request/response/SSE/usage, değerlendirmeler ve telemetri `runs/` altında; hiçbir müşteri verisi veya anahtar kullanılmadı. OVERVIEW.json küçük özet, SUMMARY.json tam detaydır. Raporlar ve grafikler yeni inference göndermeden üretilir. Ham kaynaklar ve PNG'ler Proyz ZAI-15 görev eki olan ZIP'te teslim edilir; SHA256 DELIVERY.json içindedir.

Sosyal devam taslağı XTW-15'te; önceki XTW-14 gönderisine platform içi referans verecek, dış link içermeyecek. Henüz yeni sosyal yayın yapılmadı.
