구글 애드센스 광고 크롤링 에러 발생

구글 에드센스 홈으로 가서 수익을 체크할때  "You have ad crawler errors, which can result in lost revenue"라는 메세지를 보셨나요? 이것은 광고 크롤러가 사이트의 일부 페이지를 크롤링하는 데 문제가 발생했다는 의미로 이 오류를 해결하지 않으면 광고 수익에 영향을 줄 수 있다는 것입니다. 이 문제를 확인하기 위해 찾아보았습니다.

Google AdSense 크라울링 에러 fix

 

지난 글- 구글 자동 광고 인텐트(Intent):수익 잠재력 늘리기

1. 구글 애드센스 계정에서 오류 확인

• 애드센스 계정에 로그인 > [사이트] 섹션으로 이동한 후, **[문제 해결]**을 클릭
• [크롤링 오류] 섹션에서 어떤 페이지에 문제가 있는지 확인합니다.

2. 오류 세부사항 확인

• 오류 메시지에서 어떤 페이지가 크롤링되지 않았는지 확인하세요.
• 오류의 종류와 발생 원인을 파악하세요. 일반적인 오류는 페이지가 차단되었거나, 존재하지 않거나, 서버 오류가 발생했을 때 발생합니다.

3. robots.txt 파일 확인 및 수정

• 웹사이트의 루트 디렉토리에 있는 robots.txt 파일을 확인하세요. 이 파일이 광고 크롤러가 접근해야 할 페이지를 차단하고 있는지 확인하세요.
• User-agent: AdsBot-Google Disallow:
• 위의 예시처럼 AdsBot-Google에 대한 차단이 없도록 설정해야 합니다.

4. 페이지 상태 확인

• 문제가 되는 페이지가 실제로 존재하는지, 정상적으로 로드되는지 확인하세요.
• 페이지가 존재하지 않거나 404 오류를 반환하는 경우, 이를 수정하거나 리디렉션 설정을 통해 해결해야 합니다.

5. 서버 오류 확인

• 웹 서버 로그를 확인하여 광고 크롤러가 접근할 때 서버 오류가 발생하지 않는지 확인하세요.
• 서버 측에서 광고 크롤러의 IP를 차단하지 않는지 확인하세요.

6. 구글 서치 콘솔 사용

• 구글 서치 콘솔(옛 구글 웹마스터 도구)에 사이트를 등록하고, 해당 도구를 사용하여 크롤링 오류를 추가로 확인하세요.
• 서치 콘솔에서 사이트맵을 제출하고, 크롤링 오류를 모니터링하세요.

광고 크롤러가 일부 페이지를 크롤링하는 데 문제가 발생했을 경우 오류 해결에 대해 알아보았습니다. 어떠한 것이 문제가 되었는지 하나씩 체크하며 해결하여 광고 수익에 영향을 받지 않도록 하시기 바랍니다. 

 

구글 자동 광고 인텐트(Intent):수익 잠재력 늘리기

 

구글 애드센스 광고 유닛(단위) 생성 가이드