구글 서치 콘솔, 리디렉션 오류 해결하기

이번에 새로 만든 블로그에서 구글 서치 콘솔에 등록을 하니, 대부분의 글들이 제대로 색인이 되지 않았습니다. 우선 기존과 다른점은 다른 블로그는 이미 오래전에 만들었던 블로그이고, 유료 블로그 스킨을 쓰고 있다는 차이가 있긴 하지만 너무나 색인이 안돼서 시간이 해결해 주겠지 생각을 했는데...

아예 안되는 것은 아니고, 매우 극히 적은 블로그는 색인이 되었는데 대부분의 블로그 글이 색인되지 않았다는 것이 너무나 이상했습니다. 그러다가 차이점을 알게 되었는데 바로 아래와 같았습니다.

크롤링 에이전트

위 이미지는 이 블로그에서 뜨문뜨문 색인이 성공한 글의 캡쳐 이미지입니다. 읽어보면 크롤링에 사용된 에이전트가 Googlebot 데스크톱이라는 것을 알 수 있습니다.

그리고 실패한 페이지 내용을 보면크롤링 에이전트가 Googlebot 스마트폰이라는 것을 알 수 있습니다. 최근에 구글은 크롤링을 할 때 모바일을 기반으로 크롤링을 하게 정책을 변경했다고 하는데요. 즉, 예전에는 크롤링이 데스크탑이다보니 문제가 없었지만 최근에는 스마트폰 에이전트가 섞이다보니 이런 문제가 발생하고 있는 것입니다.

리디렉션 원인

리디렉션이라는 것은 페이지에 들어갔는데 다시 다른 페이지로 전환을 시키는 것을 말합니다. 한마디로 ARS로 고객센터에 전화를 걸었는데 상담원이 다른 사람에게 전화를 돌린 거랑 같은거죠. 즉, 한번 더 내부적으로 페이지를 전환을 시키니 크롤링 입장에서는 상당히 문제가 있는 페이지로 비춰질 수 있습니다.

처음에는 모바일로 크롤링을 할 거라 생각을 못하는 바람에 리디렉션을 아무리 찾아도 기본 스킨이 그런 기능이 있을리 만무해서 계속 구글의 장애라 판단하고 요청을 계속하였는데 에이전트가 스마트폰인 것을 보고 순간 아차~ 싶었습니다.

티스토리 모바일 설정

현재 블로그의 모바일 설정이 위와 같은데요. 보다시피 모바일웹 자동 연결이라는 옵션이 활성화 되어 있습니다. 즉, 모바일로 페이지에 접속하면 m이 붙은 다른 페이지로 전환을 시켜버리는 것이죠. 결국 제가 모바일 설정을 제대로 하지 못한 것과 구글이 스마트폰 기반의 크롤링으로 전환을 하는 예상치 못한 조합으로 제 블로그는 제대로 크롤링이 되지 않았던 것입니다.

그리고 이 설정으로 인해서 현재 애드센스에 사이트 등록도 제대로 안되는 것으로 보입니다. 현재 제 애드센스에 사이트를 추가하였는데 계속 robot이 접근을 못한다라는 이상한 소리만 해댔는데 알고보니 이 원인일 가능성이 상당히 높아진 것 같네요.

확실히 이상이 없는 다른 블로그는 모두 위와 같이 "자동 연결"을 사용하지 않고 있습니다. 결국 이 모든 문제는 모바일웹 자동 연결을 사용하지 않습니다로 설정을 해야 하는 것으로 결론을 내렸고, 다시 서치 콘솔에서 몇몇개의 글을 재수집 요청 후 애드센스를 신청까지 완료되면 하단에 결과를 붙이도록 하겠습니다.

리디렉션 해결 확인

어제 모바일웹 자동 연결 사용하지 않습니다 설정을 한 이후에 테스트로 포스팅 하나를 색인 요청 하였는데 아래와 같이 색인이 성공되었고, 구글 스마트폰 에이전트가 색인을 한 것까지 확인이 되었습니다.

결국 모든 문제는 모바일 연결 설정이 맞으니 꼭 해당 설정은 사용하지 않음으로 변경하시기 바랍니다. 구글은 동일한 포스팅을 2번 색인하지 않기 때문에 PC버전의 포스팅과 모바일 버전의 포스팅을 2번 색인하지 않습니다. 그래서 m 버전의 포스팅을 보통 제거하게 됩니다.

모바일로 연결하게 설정하면, 티스토리 내부에서 PC와 M버전의 URL을 2개 만들게 되는데 이렇게 하면 구글입장에서는 2개의 색인을 시도하게 되는 귀찮은 문제가 발생하고 하나의 색인을 없애게 됩니다. 그러니 꼭 해당 설정은 삭제하시고 대신 블로그 스킨은 반응형으로 만드시길 바랍니다.