TotalApp Docs

Ajan Test Altyapısı

Yapay zeka ajanlarınızı üretim ortamına almadan önce izole sandbox'larda test edin ve doğrulayın.

Genel Bakış

Sandbox Ortamı

Ajanları izole edilmiş sanal ortamlarda çalıştırarak üretim verilerini etkilemeden test edin.

Senaryo Tabanlı Test

Önceden tanımlanmış kullanıcı senaryoları ve konuşma akışlarıyla kapsamlı test setleri oluşturun.

Regresyon Testleri

Her model veya ajan güncellemesinden sonra otomatik regresyon testlerini çalıştırarak gerilemeleri önleyin.

Performans Profilleme

Yanıt süresi, token kullanımı ve araç çağrısı gecikmelerini ölçün ve karşılaştırın.

Mock Araç Entegrasyonu

Gerçek API çağrıları yapmadan araç davranışlarını simüle eden mock'lar kullanın.

Test Raporlama

Ayrıntılı test raporları ve geçmiş karşılaştırmaları ile ajan kalitesini takip edin.

Ekran önizlemeler

Ekranlara kısa bir bakış. Koyu ve açık tema arasında geçmek için her önizlemenin köşesindeki anahtarı kullanın.

app.totalapp.app/analytics/observability
📡 Gözlemlenebilirlik ● Canlı
142ms
P50 Gecikme
0.4%
Hata Oranı
8.2K
İstek / dk
Gecikme — Son 30 dk
API Gateway 98ms OK
Analytics Service 142ms OK
Graph Engine 380ms Yavaş
Veri Alımı 54ms OK

Servis gözlemlenebilirliği

app.totalapp.app/observability
Gözlemlenebilirlik
Analytics ServiceTamam
Graph EngineDüşük performans
Veri AlımıYavaş
Haftalık özetZamanlandı

Servis sağlığı ve haftalık özet

app.totalapp.app/orch-observability
Toplam Çağrı
2,847
Kullanılan Belirteç
1.2M
Ort. Gecikme
342ms
Hata Oranı
0.8%
SaatKaynakModelBelirteçms
14:22:01 Ajan Mim. claude-sonnet-4-6 1,247 284
14:21:58 İstem Laboratuvarı claude-sonnet-4-6 847 312
14:21:45 İK Raporları claude-sonnet-4-6 2,103 891
14:21:30 Araç Kaydı tinyllama-1.1b 312 124
14:21:12 E-ticaret claude-sonnet-4-6 3,891 timeout
14:20:57 Knowledge Base claude-sonnet-4-6 1,530 402
14:20:41 Model Center tinyllama-1.1b 268 97
14:20:15 Persona Editor claude-sonnet-4-6 964 655

Gözlemlenebilirlik: canlı AI çağrı günlüğü

Test Türleri

Test Türü Açıklama Kapsam Otomasyon
Birim Testi Tek bir araç veya fonksiyonun doğruluğunu doğrular Dar Tam
Entegrasyon Testi Ajan ile dış servisler arasındaki etkileşimi test eder Orta Kısmi
Uçtan Uca Tam bir kullanıcı senaryosunu baştan sona doğrular Geniş Kısmi
Stres Testi Yüksek yük altında ajan kararlılığını ölçer Sistem Manuel
Regresyon Güncellemeler sonrası bilinen davranışların korunduğunu kontrol eder Değişken Tam

Test Akışı

Test Senaryosu Oluştur → Sandbox Ortamı Kur → Testi Çalıştır → Sonuçları Analiz Et → Rapora Aktar

Sık Sorulan Sorular

Sandbox ortamı üretim verilerine erişebilir mi?
Hayır, sandbox ortamları tamamen izole edilmiştir. Gerçek üretim verileri yerine sahte (mock) veriler kullanılır.
Test senaryolarını nasıl oluşturabilirim?
Senaryo editöründe adım adım konuşma akışları, beklenen çıktılar ve başarı kriterleri tanımlayabilirsiniz.
Regresyon testleri ne sıklıkla çalıştırılmalı?
Her ajan veya model güncellemesinden önce ve sonra olmak üzere CI/CD hattınıza entegre edilmesi önerilir.
Mock araçlar gerçek API'ları tam olarak simüle edebilir mi?
Mock'lar yapılandırılabilir yanıt şablonları ve gecikme simülasyonuyla gerçek API davranışını yakından taklit eder.