우리가 구글봇이라고 부르는 Googlebot은 티스토리, 워드프레스 및 기타 웹사이트를 운영하는 사람들이 간택당하길 기다리는 존재이다. 우리가 SEO(검색엔진최적화)를 다해놓고, 콘텐츠를 기획해서 발행하고 구글 상위노출이 되는 순간까지 몇 가지 단계가 존재하는데 이는 아래와 같다. 구글봇이 내 웹사이트의 정보를 크롤링(Crawling)한다. ▶ 크롤링된 웹페이지(문서, 콘텐츠)가 정상적으로 구글에 색인된다. ▶ 구글 검색 시 검색 이용자들에게 내 문서가 노출된다. 위와 같은 과정에서 SEO에 맞지 않는 문서나 문서 내 유해 콘텐츠 및 어떠한 에러가 발생할 경우 제대로 색인되지 않는 문제가 발생한다. 아무튼, 우리는 이렇게 검색 봇이 크롤링하는 과정 속에서 노출과 누락의 희로애락을 함께하게 되는데 이는 구..
