본문 바로가기
알찬 여행과 생활/티스토리 라이프

'크롤러: 알 수 없는 오류' 어떻게 해결하지? 애드센스 광고 게재 제한 해결 방법과 시도

by 히동동이 2023. 2. 10.
반응형

오늘은 애드센스 광고 게재 제한 원인 중 하나인 '크롤러: 알 수 없는 오류'에 대한 주제로 포스팅해 보겠습니다. 아침에 일어나서 습관적으로 티스토리 방문자 수와 애드센스 수익을 확인하던 중, 노란색 경고문을 발견했습니다. 광고 크롤러 오류가 있으며, 이 때문에 수익 손실이 발생할 수 있다고 하는 문구가 보였습니다. 저도 처음 보는 문구여서 무척 당황스러웠습니다. 애드센스 크롤러 오류는 블로그를 운영하는 사람이라면 한 번은 거치는 단계인 것 같습니다. 그래서 크롤러 오류에 대해 정리하고, 해결해 보는 시간을 갖겠습니다.

 

 


  애드센스 크롤러 오류란 무엇인가?

크롤러(Crawler)란 우리가 쉽게 이야기하고 있는 '구글 봇'을 의미합니다. 흔히 우리가 "구글 봇이 내 사이트를 훑어갔어."라고 말할 때의 '구글 봇'이 바로 크롤러입니다. 크롤러의 역할은 웹 사이트를 찾아다니며 항상 최신 상태를 유지하기 위해 수시로 색인을 합니다.

당연히 애드센스에도 크롤러가 존재합니다. 애드센스 크롤러는 애드센스 승인이 난 사이트를 수시로 드나듭니다. 왜냐하면 자동으로 광고를 배치하도록 세팅한 경우, 적합한 광고 위치를 찾기 위해서는 애드센스 크롤러가 사이트를 탐색해야 하기 때문입니다. 쉽게 말해 크롤러 오류란, 애드센스 크롤러가 내 웹 사이트 혹은 페이지에서 제대로 크롤링을 하지 못했다는 것을 말합니다.

 

  • 크롤러 오류: 페이지를 찾을 수 없음
  • 크롤러 오류: 호스팅 서버 과부하
  • 크롤러 오류: 알 수 없는 오류

 

제가 확인한 바로는, 크롤러 오류에는 크게 3가지가 있었습니다. 애드센스 공식 고객센터 페이지에서 참조했습니다. 보통 크롤러 오류가 발생하는 원인으로 '페이지를 찾을 수 없음'이 가장 많았고, 순서대로 '호스팅 서버 과부하'와 '알 수 없는 오류'가 있었습니다. 구글링을 통해 수십 개의 블로그를 수집해 본 결과입니다.

 

애드센스 크롤러 문제 해결 - Google 애드센스 고객센터

도움이 되었나요? 어떻게 하면 개선할 수 있을까요? 예아니요

support.google.com

 

그중에서 저는 세 번째 오류인, '알 수 없는 오류'로 광고 게재 제한을 받은 상태입니다. 그래서 이번 포스팅은 '알 수 없는 오류'에 대해 써보고자 합니다. '알 수 없는 오류'가 아닌 다른 오류의 해결책을 알고 싶은 분들도 따라오셔도 됩니다. 세 오류의 해결 방법이 비슷하기 때문입니다.

'페이지를 찾을 수 없음' 오류는 일반적으로 포스팅을 삭제한 뒤에도 여전히 색인에 반영이 되지 않았을 경우에 발생하는 문제입니다. 그러니 시간이 지나면 자연스럽게 사라집니다. 혹은 서치 콘솔에서 해당 페이지를 직접 색인 생성을 요청하거나, 반대로 삭제 요청을 해주면 됩니다.

'호스팅 서버 과부하' 오류는 색인이 되어 있지 않을 때 주로 발생합니다. 서치 콘솔에 들어가 색인을 해주면 대부분 해결됩니다. 포스팅이 업로드되는 동시에 부지런히 색인 요청을 해준다면, 이 오류는 거의 발생하지 않습니다.

 

 


  크롤러: '알 수 없는 오류'. 정말 원인을 알 수가 없다...

 

크롤러-알수없는-오류
크롤러: 알 수 없는 오류

오늘 아침 저의 포스팅 하나가 광고 게재 제한이 되었다고 합니다. 문제의 포스팅은 이것입니다. 드라마 미스터션샤인의 주인공 고애신이 드라마에서 말했던 명대사가 역사적으로 어떤 의미를 가지고 있는지 나름대로 해석한 역사 및 인물 포스팅입니다. 

 

미스터션샤인 고애신 명대사 "나란히 걷는다는 것이 참 좋소" 구한말 시대상과 실존인물 2명

오늘은 미스터션샤인 고애신이 유진 초이와 함께 걸으며 "나란히 걷는다는 것이 참 좋소."라고 말했던 장면에 대해서 포스팅해보려고 합니다. 단순히 연모의 정을 품고 있는 유진 초이와 나란히

heedoee.tistory.com

 

2월 7일에 작성해서, 2월 8일 자정에 공개되도록 예약 포스팅 설정을 했습니다. 그런데 신고 날짜는 2023년 2월 6일로 나와 있습니다. 저는 미스터션샤인 포스팅을 2월 7일에 썼는데 말입니다. 애드센스는 제가 언제 글을 쓰는지 미래도 예측할 수 있나요? 덜덜.

다행히 '정책 위반'은 아니라고 합니다. 해결해야 하는 문제는 아닌 것으로 나옵니다. 하지만 해결하지 않으면 이 포스팅에서만큼은 저의 수익이 줄어들거나, 발생하지 않을 위험 요소가 존재합니다. 가급적이면 해결할 필요가 있습니다. 참고로 '정책 위반' 포스팅은 문제가 정말 큽니다. 애드센스 정책을 위반한 게시물을 계속 방치할 경우, 전체 포스팅에서 광고 게재 제한이 걸리고, 심하면 애드센스 파트너십이 정지되기도 합니다. 혹시나 여러분의 광고 게재 제한 사유가 '정책 위반'이라면 필히 그 포스팅을 삭제하시길 바랍니다.

 

해당-페이지-광고-상태
해당 페이지 광고

정말 아이러니한 것은 광고 게재 제한이 되었다면서, 정작 해당 페이지에서는 여전히 정상적으로 광고가 송출되고 있습니다. 모바일에서도 문제없이 광고가 송출되고 있습니다. 티스토리 약관 변경의 여파로 생긴 오류인가 싶어서 티스토리 관리 페이지도 꼼꼼히 살펴봤는데, 특별한 문제점은 없었습니다.

 

구글-서치-콘솔
구글 서치 콘솔

구글링을 해보니 '크롤러: 알 수 없는 오류'의 경우, 색인 생성이 안 되어 있을 가능성이 높다고 합니다. 하지만 저는 포스팅을 업로드하자마자 부지런히 '구글 서치 콘솔'과 '네이버 서치 어드바이저'에 일일이 색인을 생성하기 때문에, 해당 url이 이미 구글에 색인이 생성되어 있습니다. 아무런 문제 없이 색인이 생성되어 있는 모습을 확인할 수 있습니다.

 

반응형

 


  크롤러 오류를 해결하는 대표적인 방법 3가지

 

  • 구글 서치 콘솔을 통해 색인을 생성하거나 삭제한다.
  • 시간을 믿고 내버려 둔다.
  • 사이트 로그인 정보를 추가한다. (비추천)

 

1. 가장 일반적인 해결 방법은 '구글 서치 콘솔'을 통해 색인을 생성하는 것입니다. 거의 대부분 색인이 생성되어 있지 않을 확률이 높습니다. 만약 색인이 생성되어 있는 상태라고 하더라도, 다시 실시간 url 검사와 함께 색인 생성을 다시 한번 요청하면 좋을 것 같습니다. 사이트맵과 rss도 다시 한 번 제출해 보세요.

url을 검사할 때는 등록되어 있다고 하더라도, 서치 콘솔 메인 페이지 '색인 생성' 보고서에서는 해당 url이 반영이 안 되어 있을 수 있습니다. 그 색인 보고서는 크롤러가 직접 등록하는 거라서 url이 색인될 때까지 기다리셔야 합니다. 저도 그 보고서에는 위의 미스터션샤인 포스팅이 아직 생성이 안 되어 있었습니다. 거기에 생성이 될 때까지 기다려보는 것도 좋을 것 같습니다.

 

2. 두 번째는 시간을 믿고 내버려 두는 것입니다. 구글 크롤러도 결국 방대한 양의 웹사이트를 크롤링하다 보면 조금씩 오차가 발생하기 마련입니다. 예를 들면 서치 콘솔에서 실시간 url 검사를 했을 때는 '모바일 미지원 페이지' 오류가 발생했지만, 나중에 다시 url 검사를 해보면 '모바일 지원 페이지'로 바뀌어 있는 것처럼, 구글 크롤러도 종종 실수하거나 놓치는 것이 있기 마련입니다. 구글 크롤러가 실수를 했을 경우, 시간이 지나면 자연스럽게 정상으로 돌아옵니다. 서치 콘솔에 사이트맵이 정상적으로 등록이 되어 있다면, 시간이 지나면 자연스럽게 색인이 되기 때문에 내버려 두시는 것도 좋은 해결책입니다.

 

3. 세 번째 방법은 애드센스에 블로그의 로그인 정보를 등록하는 것입니다. 애드센스-계정-크롤러 액세스-로그인 정보 등록의 순서를 통해 블로그의 로그인 정보를 등록할 수 있습니다. 하지만 이 방법은 결국 내 블로그의 개인 정보를 애드센스에 연동해야 하는 것이기 때문에, 별로 권장하지 않습니다.

한국 사람들이 대부분 사용하는 블로그는 네이버 블로그, 카카오 티스토리 블로그, 구글 블로그 스팟, 워드프레스, 이렇게 4종류의 블로그를 사용합니다. 4개의 블로그 모두 구글 서치 콘솔과 상당히 친화적인 블로그이므로 굳이 로그인 정보를 추가할 필요가 없습니다.

 

 


필자의 경우 광고 게재 제한이 걸렸음에도, 그 어디에서도 특별한 문제점을 발견할 수 없었습니다. 서치 콘솔도 정상적으로 등록이 되어 있었고, 문제가 있다고 하는 해당 포스팅에서도 광고가 정상적으로 송출되고 있었습니다. PC버전과 모바일에서 아무런 문제를 발견할 수 없었습니다. 검색엔진에도 포스팅이 정상적으로 노출되고 있습니다.

뭘 더 건드리면 크게 잘못될 수도 있을 것 같아서, 저는 시간의 힘을 믿어보기로 했습니다. 간단하게 구글 서치 콘솔에 색인 생성만 한번 더 요청했습니다. 크롤러가 최대 2~3일 후에 다시 방문한다고 하니, 3일 후에 다시 한번 확인을 해보려고 합니다. 아무것도 건드리지 않고도 부디 문제가 잘 해결되길 바랍니다. 시간적 여유가 있다면 문제가 해결되었는지 추후에 한 번 더 포스팅을 해보겠습니다.

 

승인 직후, 티스토리 애드센스 광고 안나옴 현상 해결 방법 3가지

 

승인 직후, 티스토리 애드센스 광고 안나옴 현상 해결 방법 3가지

처음 애드센스가 승인되었다는 이메일을 받은 기쁨도 잠시, 내 티스토리가 변화가 없다는 점에 당황하는 분들이 많습니다. 티스토리 애드센스 광고 안나옴 현상을 겪는 분들이 많습니다. 광고

heedoee.tistory.com

 

티스토리 애드센스 승인. 한 번만에 통과한 애드센스 신청 당시 블로그 상태 3가지 공유

 

티스토리 애드센스 승인. 한 번만에 통과한 애드센스 신청 당시 블로그 상태 3가지 공유

포스팅 작성 중인 1월 17일 기준, 티스토리 애드센스가 승인되었다는 희소식이 날아왔습니다. 티스토리 애드센스 승인 신청하고 나서 한 번만에 승인이 되었습니다. 저는 승인이 안 될 거라고 생

heedoee.tistory.com

 

여유를 갖는 법과 여유 있는 사람의 특징 4가지. 마라톤과 티스토리의 공통점?

 

여유를 갖는 법과 여유 있는 사람의 특징 4가지. 마라톤과 티스토리의 공통점?

오늘은 오랜만에 태도와 마음가짐에 대해 포스팅하려고 합니다. 제가 직접 겪고 깨달은 경험을 통해 여유를 갖는 법과 여유 있는 사람들의 특징을 공유합니다. 저는 취미로 마라톤을 뛰고, 티스

heedoee.tistory.com

 

댓글