시드 테스트는 유용하지만 좁은 질문에 대한 답변입니다. 특정 테스트 메시지가 선택한 메일함의 어디에 나타납니까? 모든 제작 수신자가 캠페인을 본 위치는 자동으로 응답되지 않습니다. 누군가가 결과를 사용하여 주요 인프라 변경을 정당화하기 전에 한계가 명확하도록 테스트를 설계하십시오.
관찰해야 할 이벤트를 선택하세요.
SMTP 수락과 사서함 배치는 서로 다른 이벤트입니다. 최종 SMTP 성공은 눈에 보이는 폴더나 인간 상호 작용이 아닌 해당 수신 홉에 책임을 설정합니다. 사서함 관찰과 함께 전송 로그를 유지하되 이를 다른 것으로 대체하지 마십시오. RFC 5321.
보고서에서 구별되는 폴더 또는 범주를 정의합니다. 받은 편지함, 스팸, 격리, 누락 및 관찰되지 않음은 설명 없이 단일 이진 값으로 축소되어서는 안 됩니다. 공급자의 범주는 다른 공급자의 폴더 모델과 다를 수도 있습니다. 실제 라벨과 보고 매핑을 기록합니다.
비교할 수 있을 만큼 샘플을 안정적으로 유지하십시오.
각 테스트 사서함의 공급자, 계정 유형, 관련 규칙 및 최근 테스트 기록을 문서화합니다. 검사 권한이 있는 계정을 사용하세요. 개인 필터, 허용 목록 및 이전 상호 작용으로 인해 시드가 의도한 대상과 다르게 행동할 수 있습니다. 모든 테스트 메시지를 반복적으로 열면 사서함 기록이 변경될 수 있습니다.
비교를 위해 가능한 경우 조사되는 변수를 제외하고 수신자 패널, 메시지 구성 및 전송 경로를 고정된 상태로 유지하십시오. 전체 테스트 개정판과 경로 식별자를 유지합니다. 한 번에 여러 가지 사항이 변경된 경우 결과를 새 제목 줄이나 IP에만 적용하기보다는 통합된 변경으로 보고하세요.
누락된 관찰 사례를 통해 작업
가상의 패널에는 20개의 발명된 시드가 포함되어 있습니다. 즉, 받은 편지함 12개, 스팸 4개, 관찰되지 않은 4개입니다. 관찰 전용 받은편지함 비율은 12를 16으로 나눈 75%입니다. 인박스에서 확인된 전체 패널의 비율은 12를 20으로 나눈 60%입니다. 두 진술은 서로 다른 질문에 답하기 때문에 사실일 수 있습니다.
관찰되지 않은 4개는 자동으로 스팸이 되지 않습니다. 추가 검사가 필요하거나 누락된 상태로 남아 있어야 합니다. 수작업으로 계산한 결과 네 가지 알려지지 않은 관찰 결과가 모두 보존됩니다. 스크립트나 메일함 테스트는 청구되지 않습니다. 메일을 보내거나 실제 시드 계정을 검사하지 않으며, 어느 비율도 제작 청중에 대한 주장이 아닙니다.
변화를 가설의 증거로 해석
제어된 테스트가 한 제공업체에서 개선되고 다른 제공업체는 변경되지 않은 상태로 유지된다고 가정합니다. 그 결과 공급자별 라우팅, 메시지 처리 및 샘플 조건을 검사해야 하는 이유가 됩니다. 보편적 평판 점수가 향상되었다는 증거는 아닙니다. 마찬가지로 깨끗한 시드 결과는 다른 수신자나 경로에 영향을 미치는 문제를 배제할 수 없습니다.
실제 거부 진단, 승인된 수신자 보고서 및 공급자 자체 범위 원격 측정과 같은 추가 신호를 사용합니다. 예를 들어 Google은 가능한 모든 대상이 아닌 개인 Gmail 트래픽에 대한 Postmaster 관찰을 설명합니다. 우체국장 대시보드. 증거를 결합할 때 해당 범위를 유지하십시오.
결정과 그 한계를 보고합니다.
유용한 테스트 보고서에는 메시지 개정, 경로, 패널, 타임스탬프, 폴더 관찰 및 누락된 데이터가 명시되어 있습니다. 그런 다음 결과가 어떤 가설을 뒷받침하는지, 어떤 대안이 남아 있는지 설명합니다. 적절한 표본추출 설계가 부족한 편의 패널에서 모집단 신뢰구간을 제작하지 마세요.
나머지 원인을 구별할 수 있는 다음으로 가장 작은 조사를 선택합니다. 통제된 변경으로 반복하거나 허가를 받아 관련 생산 샘플을 얻으십시오. 시드 테스트의 가치는 모든 수신자에게 동일한 경험을 약속하는 비율이 아니라 규율 있는 관찰입니다.
네 가지 미지수에 대한 다음 검사를 선택하세요.
관찰되지 않은 두 개의 시드가 최종 SMTP 수락을 확인했고 두 개는 확인된 전송 결과가 부족하다고 가정하여 가상 패널을 확장합니다. 첫 번째 쌍의 경우 승인된 사서함 소유자에게 폴더, 격리 또는 규칙 증거를 요청하세요. 두 번째 쌍의 경우 먼저 전송 큐와 트랜잭션 추적을 가져옵니다. 이는 측정된 4개의 스팸 배치가 아니라 서로 다른 누락 단계입니다.
안정적인 레이블, 테스트 개정, 경로, 타임스탬프, SMTP 상태, 폴더 관찰 및 해결되지 않은 검사가 포함된 각 시드에 대한 행을 사용합니다. 동의한 경우에만 실제 수집자를 할당합니다. 이는 공급자 내보내기 또는 실행된 분류가 아닌 제안된 보고서 구조입니다. 필요한 증거를 사용할 수 없는 경우 행이 해결되지 않은 상태로 남아 있을 수 있습니다.
각 누락된 관찰을 해당 단계에서 해결합니다.
- 수락 및 받은 편지함 관찰: 편지함 증거와 시간을 기록합니다.
- 수락 및 스팸 관찰: 해당 수신 처리를 검사합니다.
- 허용되지만 관찰되지 않음: 승인된 폴더 또는 격리 증거를 확보합니다.
- 알 수 없는 SMTP 결과: 먼저 보내고 받는 추적을 수집합니다.
- 보고서: 해결되지 않은 모든 행을 표시하고 편의 패널을 모든 사람에게 추정하지 마십시오.