429 Too Many RequestsConcurrency limit exceeded for user, please retry laterA batch script that works with 1 worker and fails with 20An agent that fails only when it starts several subtasks at onceTwo apps on the same account that break each otherMesaj, birçok API aktarma hizmetinin üzerinde çalıştığı açık kaynaklı ağ geçidi sub2api'den gelir; bu yüzden birden fazla sağlayıcıda karşınıza çıkabilir. Limit anahtar başına değil, kullanıcı hesabı başınadır: aynı hesaptaki iki anahtar aynı havuzu kullanır. sub2api varsayılanı aynı anda 5 istektir.
Ağ geçidi altıncı isteği hemen reddetmez. Onu sıraya alır ve bir yer boşalır boşalmaz başlatır. Bunu 14 Ekim 2026'da kendi ağ geçidimizde limit 5 iken ölçtük: aynı anda 10 istek – 10'u da başarılı, en yavaşı 8,3 saniye; aynı anda 25 istek – 25'i de başarılı, en yavaşı 18,8 saniye. Fazla istekler başarısız olmak yerine bekledi. Yani bu hatayı gördüğünüzde limiti bir an için değil, bir isteğin zamanında yer bulamayacağı kadar uzun süre aşmışsınızdır.
Bu yüzden çok sayıda kısa istekte değil, uzun isteklerde çıkar. Akışlı (streaming) bir yanıt, bir dakika düşünen bir akıl yürütme modeli ya da bir aracı bekleyen bir ajan yerini bu süre boyunca tutar. Aynı anda beş tanesi hesabı doldurur; arkadaki her şey vazgeçene kadar bekler.
On aynı isteği aynı anda gönderin ve sürelere bakın:
seq 1 10 | xargs -P 10 -I{} curl -s -o /dev/null \
-w '%{http_code} %{time_total}s\n' \
'YOUR_BASE_URL/chat/completions' \
-H 'Authorization: Bearer YOUR_KEY' \
-H 'Content-Type: application/json' \
-d '{"model":"YOUR_MODEL","messages":[{"role":"user","content":"Count from 1 to 150."}]}'
İlk birkaçı hızlı dönüp gerisi sonraki dalgalarla geliyorsa, o dalgalar sizin limitinizdir. Bazıları bu mesajla 429 dönüyorsa sıra taşmıştır – hiçbiri dönmeyene kadar -P değerini düşürün. Hesabınızın gerçekten taşıyabildiği paralellik budur.
asyncio.Semaphore(5), Node'da p-limit. Daha yavaş bir yeniden deneme döngüsü işe yaramaz; limit açık istekleri sayar, yalnızca daha az açık istek çözer.| Aynı anda gönderilen istek | Başarılı | En yavaş yanıt |
|---|---|---|
| 10 (limit 5) | 10'da 10 | 8,3 sn |
| 25 (limit 5) | 25'te 25 | 18,8 sn |
Son kontrol: 2026-10-14. Canlı bir OpenAI uyumlu ağ geçidinde teşhis edilen sorunlardan yazılmıştır, başka sitelerden derlenmemiştir.