Bir metrik seçmeden önce sonucu tanımlayın
Bir kimlik doğrulama projesi, daha fazla alıcının mesajları gördüğünü veya okuduğunu kanıtlamadan meşru gönderen kimlikler üzerindeki kontrolü iyileştirebilir. DMARC uyumlu kimlik doğrulama ve politika bağlamını değerlendirir; teslimatın, alıcı katılımının veya iş değerinin her yönünü belirlemez. Bu nedenle bir ölçüm planı, bir kontrol paneli metriği seçmeden önce değerlendirilen sonucu adlandırmalıdır.
Yararlı sonuçlar arasında sınırlı bir rota için hizalanmış kimlik doğrulama, daha az sayıda belirli SMTP reddi, alıcı-sunucu kabulü veya ayrı olarak ölçülen yerleştirme sonucu bulunabilir. Bunlar birbirinin yerine kullanılamaz. Daha yüksek bir DMARC geçiş hızı, diğer faktörlerin neden olduğu değişmeyen dağıtım sorunlarıyla birlikte mevcut olabilir. Tersine, kimlik doğrulama değişmeden kalırken teslimat iyileşebilir. Mekanizmayı ve sonucu ayrı kanıt alanlarında tutun. RFC 9989 , bölüm 2.4 ve 4.4
Teslimat aşamasını tam olarak seçin
Gönderici uygulamaları ve sağlayıcıları farklı aşamaları ortaya çıkarır. Kabul edilen bir API isteği kuyruğa alınmadan ve teslimat girişiminden önce gelebilir. Geçici bir erteleme, nihai bir ret değildir ve alıcı-sunucunun kabulü, gelen kutusu yerleşiminin kanıtı değildir. Bir insanın mesajı açması, kendi ölçüm sınırlamaları olan başka bir olaydır. Tüm bu aşamaları kapsayacak şekilde verilen tek kelimeyi kullanmaktan kaçının.
Saklanan SendGrid olay belgeleri somut bir örnek sağlar: işlenmiş, mesajın alındığını ve teslim edilmeye hazır olduğunu belirtir; teslim edilen, alıcı sunucuyla ilgilidir; ertelenmiş ve bırakılmış diğer farklı sonuçları tanımlar. Bu tanımlar, her platform için evrensel bir şemayı değil, o sağlayıcının olaylarını yorumlamayı destekler. Analizde kullanılan sağlayıcı tanımını ve sürümünü tam olarak koruyun. SendGrid Etkinliği Web Kancası Referansı
Mevcut veriler alıcı-sunucu kabulünde durursa bu sınırı belirtin. Gelen kutusu yerleşimini yeniden adlandırmayın çünkü bu, sonucun ticari açıdan daha çekici görünmesini sağlar. Ölçüm, paydaşın sormak istediği her soruyu yanıtlayamasa bile faydalı kalmalıdır.
Önceki ve sonraki popülasyonları karşılaştırılabilir tutun
Dahil edilen akışları, alıcı sağlayıcılarını, etki alanlarını, mesaj kategorilerini, zaman pencerelerini ve sayma birimlerini tanımlayın. Yeniden deneme ve çoklu alıcı işleme kurallarını koruyun. Bir tatil kampanyası ile sakin bir işlem dönemi arasındaki karşılaştırma, teknik bir müdahaleden ziyade nüfus değişikliklerini yansıtabilir. Benzer şekilde, sorunlu bir akışı paydadan çıkarmak, o akışı iyileştirmeden bir oranın daha iyi görünmesini sağlayabilir.
Karşılaştırma boyunca tutarlı olay tanımları ve toplama yöntemleri kullanın. Herhangi bir enstrümantasyon değişikliğini, eksik aralığı, geç raporu veya hariç tutulan artefaktı kaydedin. Bir sağlayıcı müdahaleden sonra daha fazla ayrıntı raporlamaya başlarsa, görünen eğilim kısmen davranıştan ziyade görünürlüğü yansıtabilir. Başka bir analistin sonucu yeniden üretebilmesi için veri kümesi sürümlerini ve çıkarma yöntemlerini saklayın.
Hiçbiri mevcut olmadığında bir temel oluşturmayın. Güncel bir anlık görüntü, mevcut gözlemleri tanımlayabilir ancak belgelenmemiş geçmiş bir duruma göre iyileşmeyi kanıtlayamaz. Geçmiş veriler eksikse, sınırlı bir karşılaştırma sunun veya uygun sayıları tahmin etmek yerine ileriye dönük bir temel oluşturun.
Rakip açıklamaları kaydedin
Sonucu etkileyebilecek önemli değişiklikleri listeleyin: gönderme hacmi, alıcı karışımı, içerik, liste hijyeni, şikayet kalıpları, sağlayıcı yönlendirmesi, itibar, sezonluk ve uygulama değişiklikleri. Amaç, her değişkenin kontrol edilebileceğini iddia etmek değil, bir kimlik doğrulama düzeltmesinin, teslimat ölçümlerindeki sonraki tüm hareketler için otomatik kredi almasını önlemektir.
Zamansal ilişkiyi desteklenen bir nedensel sonuçtan ayırt edin. Öncesi ve sonrası grafiği, ölçülen bir sonucun konfigürasyon düzeltmesinden sonra değiştiğini gösterebilir. Yalnızca zamanlamayla düzeltmenin tüm değişikliğe neden olduğunu tespit edemez. Kontrollü bir tasarımın mümkün ve yetkili olduğu durumlarda onu dikkatli bir şekilde tanımlayın; aksi takdirde karşılaştırmanın gözlemsel niteliği açıklanır.
Desteklenmeyen finansal çıkarımları sonuçların dışında tutun. Daha fazla kabul edilen mesaj, otomatik olarak ek satışlara, dolandırıcılığın önlenmesine veya belirli bir yatırım getirisine eşit değildir. Bu iddialar kendi verilerini ve analitik varsayımlarını gerektirir. Bu yazıda herhangi bir artış, tasarruf veya zararın önlenmesi tahmini icat edilmemiştir.
Ölçüm çalışma sayfası ve kabul kriterleri
Çalışma sayfası müdahale açıklamasını, tam değişiklik zamanını, etkilenen rotaları, önceki ve sonraki pencereleri, olay aşamasını, payı, paydayı, kaynak sistemlerini, sorgu sürümünü, istisnaları ve dış etkileri içermelidir. Gözden geçiren kişinin gözlemlenen kimlik düzeltmesi ve teslimat sonucunun aynı kapsamı kapsayıp kapsamadığını görebilmesi için ayrı kimlik doğrulama ve teslimat sütunları ekleyin.
Kimlik doğrulama için ham sonuçların yerine hizalanmış sonuçları koruyun SPF geçmek. Teslimat için gerçek SMTP veya sağlayıcı olay kanıtlarını saklayın ve geçici durumları nihai sonuçlardan ayırın. Kaynak, işlem düzeyinde birleştirmeyi desteklemiyorsa, tam yazışmayı ima etmek yerine gruplandırılmış ilişkiyi ve belirsizliği açıklayın.
Kabul, beyan edilen veri seti versiyonundan tekrarlanabilir sayımlar, kararlı tanımlar ve kanıtlardan daha geniş olmayan bir sonuç gerektirir. Rapor, karşılaştırmanın tanımlayıcı olup olmadığını veya daha güçlü bir çıkarımı destekleyip desteklemediğini açıklamalıdır. Gerçek bir operasyonel inceleme aynı zamanda herhangi bir veri erişiminin veya test tasarımının onaylanmasını da gerektirir; çalışma sayfasının kendisi dışa aktarımlara veya mesaj gönderimlerine izin vermez.
Kurgusal teşhis: Kabullenme değişirken uyum iyileşir
Özel imzalama yapılandırması düzeltilmiş kurgusal bir makbuz rotası hayal edin. Önerilen bir karşılaştırma, hizalanmış kimlik doğrulamayı alıcı-sunucu kabulünden ayrı olarak gösterecektir. Aynı dönemde kuruluş, alıcı hedeflemesini ve gönderme hacmini de değiştirir. Bu örnek için hiçbir gerçek mesaj, sayım veya oran toplanmadı.
Her iki ölçüm de daha sonra gelişirse, analist ölçülen popülasyonda gözlemlenen değişiklikleri açıklayabilir ancak diğer değişiklikleri ele almadan tüm kabul değişikliğini kimlik doğrulamaya bağlamamalıdır. Eğer hizalama Gelişmeler olsa da kabuller artmasa da, kimlik doğrulama çalışması yine de kapsamlı teknik hedefine ulaşmış olabilir. Sadece farklı bir teslimat sorunu var diye buna arıza denilmemelidir.
Sonraki dönem sorunlu bir alıcı sağlayıcıyı hariç tutuyorsa, popülasyonun yeniden belirtilmesi veya karşılaştırmanın düzeltilmesi gerekir. Bu sağlayıcıyı sessizce bırakmak yapay bir gelişme yaratacaktır. Yararlı sonuç, DMARC teslimatı garanti ettiğine dair evrensel bir iddia değil, dahil edilen rotaları, etkinlik aşamasını ve belirsizliği adlandırır.
Orijinal kanıt ve yayın durumu
Katalog, sabit popülasyon, teslimat aşaması ve dış etkilerin kaydedildiği bir öncesi ve sonrası ölçümünü gerektirir. Bu taslakta yalnızca metodoloji ve kurgusal bir örnek verilmektedir. Hiçbir temel değer, üretim olayı aktarımı, kontrollü deneme veya ölçülen iyileştirme iddia edilmemektedir.
Altı serbest bırakma kapısının tümü açık kalır. Operasyonel yayınlamadan önce yetkili kaynak verilerini edinin, sayım kurallarını doğrulayın ve nitelikli bir incelemecinin popülasyonu ve nedensel dili incelemesini sağlayın. Paydaş özeti, kısalığın önemli olduğu durumlarda bile kimlik doğrulama kapsamı ile teslimat sonuçları arasındaki ayrımı korumalıdır. Dürüst sınırlar, hangi sorunun gerçekten iyileştirildiğini ve hangisinin hâlâ araştırılmayı gerektirdiğini göstererek sonucu daha uygulanabilir hale getirir.