내부 웹 크롤러 트래픽 및 콘텐츠 요청 사용량 계산
이 문서에서는 Adobe Experience Manager(AEM) as a Cloud Service이 사용 계산에서 내부 웹 크롤러 트래픽을 식별 및 처리하는 방법을 설명하고 적절한 제외 메커니즘을 명확히 합니다.
설명 description
환경
Adobe Experience Manager as a Cloud Service
문제/증상
검색 솔루션을 사용하는 조직은 AEM 콘텐츠를 색인화하는 내부 웹 크롤러를 실행할 수 있습니다. 이러한 웹 크롤러는 트래픽 로그에 표시될 수 있는 많은 양의 요청을 생성하고 청구 가능한 사용량 계산에 미치는 영향에 대한 우려를 제기할 수 있습니다.
원인
내부 웹 크롤러는 일반적으로 고유한 User-Agent 문자열과 알려진 IP 범위를 사용합니다. 이러한 시스템 간 트래픽이 비사용자 트래픽으로 제외되지 않고 청구 가능한 AEMaaCS 콘텐츠 요청에 계산된다는 우려가 있을 수 있습니다.
해결 방법 resolution
콘텐츠 요청 사용량 계산에 영향을 주는 내부 웹 크롤러 트래픽에 대한 문제를 해결하려면 다음 단계를 따르십시오.
- 내부 웹 크롤러가 고유한
User-Agent문자열을 사용하고 가능한 경우 알려진 IP 범위에서 작동하는지 확인하십시오. - 웹 크롤러의 요청 경로가 예상 웹 크롤러 활동(예: 사이트맵 기반 URL)과 일치하는지 확인합니다.
- AEMaaCS 사용 보고서 및 트래픽 로그를 검토하여 웹 크롤러 트래픽 패턴을 식별하십시오.
- 콘텐츠 요청에 대한 Adobe의 사용량 계산은 게시 계층 트래픽을 기반으로 합니다. 알려진 특정 봇 및 시스템 트래픽은 인식된 서명(
User-Agent또는 IP)을 기반으로 하는 사용 계산에서 제외됩니다. - 내부 또는 고객별 웹 크롤러는 설정된 제외 패턴과 일치하는 경우에만 사용 계산에서 제외됩니다. 웹 크롤러가 인식된 서명을 사용하는 경우 해당 트래픽은 청구 가능한 사용량으로 계산되지 않습니다.
- 웹 크롤러으로 인해 예기치 않은 사용이 발생하는 경우 관련 로그 세부 정보(예:
User-Agent, IP 범위 및 요청 경로)를 수집한 후 Adobe 지원에 연락하여 추가 검토를 받으십시오.
참고: 웹 크롤러 서명을 확인한 후 사용 보고서를 검토하여 해당 트래픽이 청구 가능한 콘텐츠 요청 횟수에서 제외되는지 확인하십시오.
recommendation-more-help
experience-cloud-kcs-help-kbarticles