Bir denetim raporu
gerçekte nasıl
görünür?
Sentetik Acme Health Network senaryosu üzerine hazırlanmış, gerçek müşteri verisi içermeyen herkese açık bir örnek rapor. Raporun tamamı gösterilir: kapak sayfası, görülme sıklıkları ve birebir kanıtlarla birlikte bulgular, iş etkisi değerlendirmeleri, uyumluluk dosyaları ve çerçeveler arası eşleştirmeler. Yalnızca dahili test kimlikleri ve saldırı imzaları gizlenmiştir; geri kalan her şey müşteriye teslim edildiği şekliyle sunulur.
Her bulgu, görülme sıklığıyla birlikte.
Her rapor aynı bulgu kaydıyla açılır: önem seviyesi, OWASP veya Agentic kategorisi ve saldırının gerçekte ne sıklıkla başarılı olduğu. Teknik olmayan bir okuyucu, risk görünümünün tamamını bir dakikadan kısa sürede değerlendirebilir. Geçti/kaldı sütunu yoktur; bunun yerine, başarılı olmayan testler için istatistiksel bir tespit sınırı raporlanır.
Her bulgu, görülme sıklığıyla birlikte.
Önem seviyesi, kategori ve gözlemlenen başarısızlık sıklığı sayesinde teknik olmayan bir okuyucu risk görünümünü bir dakikadan kısa sürede değerlendirebilir. Deneme sayısı, güven aralığı ve birebir kanıtlar ise bir sonraki sayfada yer alır.
MAD. 15 · ISO 42001 · NIST
Kapsam, sisteminizin yeteneklerine göre belirlenir. Yapay zekâ sisteminiz için uygulanabilir olan tüm testler çalıştırılır. Mimarinize uymayan testler N/A olarak işaretlenir ve puana dahil edilmez.
Her rapor, bağımsız baş denetçi Burcin Sarac tarafından imzalanır.
Yapay zekâ sistemleri her çalıştırmada aynı şekilde davranmaz. Aynı prompt, temperature değeri 0 olsa bile farklı sonuçlar üretebilir. Bu nedenle tek bir çalıştırma çok az şey söyler. Uygulanabilir her saldırı birden fazla kez çalıştırılır; her bulgu, gözlemlenen görülme sıklığı, güven aralığı ve deneme sayısıyla birlikte raporlanır. Bir saldırının başarılı olduğu gözlemlenmezse raporda "geçti" ifadesi yer almaz; bunun yerine istatistiksel bir tespit sınırı belirtilir. Örneğin: "20 denemede gözlemlenmedi. Bu test derinliği, yaklaşık her 7 denemede 1'den daha sık görülen davranışları güvenilir şekilde tespit eder." Örneğin %35 görülme sıklığına sahip bir bulgu, tek bir manuel yeniden denemede tekrar ortaya çıkmayabilir; bu beklenen bir durumdur. İşte bu nedenle sonuçları evet/hayır yerine görülme sıklığı olarak raporlarız.
Tam denetim. Her bulgu. Her görülme sıklığı.
Sentetik Acme Health Network senaryosu üzerine hazırlanmıştır ve gerçek müşteri verisi içermez. Her bulgu; gözlemlenen görülme sıklığı, güven aralığı ve deneme sayısıyla birlikte sunulur. Rapora ayrıca üç uyumluluk dosyası (AB Yapay Zekâ Yasası Madde 15, ISO/IEC 42001, NIST AI RMF), yönetim kuruluna hazır bir yönetici özeti ve aynı sürüm üzerinde 30 gün içinde gerçekleştirilen bir doğrulama testi dahildir. Bu herkese açık sürümde yalnızca dahili test kimlikleri ve saldırı imzaları gizlenmiştir; diğer tüm içerikler müşteriye teslim edildiği şekliyle gösterilir.
Tam örnek rapor
Sizin raporunuz. Sizin yapay zekâ sisteminiz.
Bize bir yapay zekâ sistemi ve bir yetkilendirme başlığı verin. Size hukuk ekibinizin, güvenlik ekibinizin ve yönetim kurulunuzun hepsinin açabileceği bir rapor verelim.