구글 서치 콘솔은 웹사이트 소유자와 마케터가 검색 엔진 최적화 (SEO)를 개선하고 웹사이트의 성능을 모니터링하는 데 사용하는 강력한 도구 중 하나입니다. 이 글에서는 구글 서치 콘솔에서 URL 검사 시, 실패: 호스트 로드 초과 로 인해 페이지 가져오기를 실패하는 문제에 대한 해결 방법을 제시합니다.
1. 구글 서치 콘솔에서 실패: 호스트 로드 초과 해결 방법
이 문제에 직면했을 때, 일반적으로 떠오르는 생각은 트래픽 용량이 한계에 달한 것이 아닌가? 일 것입니다. 그래서 제가 처음으로 확인한 것은 호스팅 업체인 cafe24에 접속하여 트래픽 용량을 확인한 것이었습니다. 하지만, 여러가지 확인과 테스트를 해 본 결과, 트래픽 문제나 호스팅 문제는 아니라는 판단을 내렸습니다.
2. 검색을 통해 확인 된 해결 방법들, 하지만 도움이 되진 않았습니다.
Google 크롤링 및 호스트 제한 초과와 관련된 문제가 발생한 것 같습니다. 이 문제는 Google 봇이 웹사이트를 크롤링하려고 할 때 호스팅 제공업체나 웹사이트 자체에서 설정한 제한에 직면할 때 발생합니다. 이 문제를 해결하려면 다음 단계를 수행할 수 있습니다.
- 호스팅 계획 확인 : 호스팅 계획이 Google 크롤러를 처리하기에 충분한 서버 리소스와 대역폭을 허용하는지 확인하세요. 공유 호스팅 계획을 사용 중이라면 보다 강력한 호스팅 솔루션으로 업그레이드하는 것을 고려해 보세요.
- 웹사이트 최적화 : 이미지를 최적화하고, 불필요한 스크립트를 줄이고, 서버 부하를 최소화하여 웹사이트의 효율성을 향상시킵니다. 이렇게 하면 Google 크롤러가 호스팅 리소스에 너무 많은 부담을 주지 않도록 할 수 있습니다.
- 크롤링 속도 조정 : Google Search Console에서 웹사이트의 크롤링 속도를 조정할 수 있습니다. 크롤링 속도를 낮추면 서버의 부담을 줄일 수 있습니다. 그러나 사이트의 검색 성능에 영향을 미칠 수 있으므로 너무 낮게 설정하지 않도록 주의하세요.
- CDN(콘텐츠 전송 네트워크) 사용 : CDN은 웹 요청 로드를 여러 서버에 분산하여 Google 크롤러가 호스팅 리소스에 미치는 영향을 줄일 수 있습니다.
- Robots.txt에 크롤링 지연 구현 : 웹사이트 파일에 크롤링 지연 명령을 추가하여
robots.txtGoogle의 크롤링 속도를 늦출 수 있습니다. 예를 들어:User-agent: Googlebot
Crawl-delay: 10
이렇게 하면 Googlebot이 요청 사이에 10초를 기다리도록 지시합니다.
- 호스팅 제공업체에 문의하세요 . 호스트 한도 초과 문제가 계속해서 발생하는 경우 호스팅 제공업체의 지원팀에 문의하세요. 그들은 서버 설정을 조정하거나 Google 크롤러를 보다 효과적으로 처리하는 방법에 대한 지침을 제공할 수 있습니다.
문제가 해결되고 사이트가 효과적으로 크롤링되고 있는지 확인하려면 Google Search Console에서 웹사이트 성능과 크롤링 통계를 모니터링하는 것을 잊지 마세요.
3. Google Search Console Fails: How to Resolve Host Load Overload
수 많은 시행 착오 끝에 알아낸, 이 문제를 해결한 방법은 간단했습니다. 구글 서치 콘솔에 사이트를 연결 할 때, URL접두어 연결 방식이 아닌, 도메인 연결 방식으로 사이트를 등록하는 것이었습니다.
도메인 연결 방식으로 사이트를 등록한 후, 위 문제는 해결 되었습니다. 위 문제로 고통 받으시는 분들에게 이 방법이 통하여, 문제가 해결되기를 기원합니다.
구글 서치 콘솔 바로가기 : https://search.google.com/search-console/about?hl=ko
이 블로그에서 추천 글
현재 유일하게 남은 쿠팡 할인카드: 쿠팡패밀리하나카드 혜택 분석
부모님 운동화 추천: 7종류의 운동화 파헤치기(디자인, 미드솔, 아웃솔, 힐컵, 설포, 무게 위주로 분석)
