빙(Bing) 웹마스터 도구 색인 오류: 티스토리에서 HTTP 429 에러가 뜨는 이유와 해결법

 

안녕하세요! 칼랭의 편집 공장, 칼랭입니다.

 

정성껏 블로그 포스팅을 발행하고 검색 유입을 늘리기 위해 빙(Bing) 웹마스터 도구에 색인(인덱싱)을 요청하러 갔다가, 새빨간 엑스박스와 함께 'HTTP 429 오류'를 마주친 적 있으신가요? 혹은 '검사 대상 URL은 Bing에 알려져 있지 않습니다'라며 수집 자체를 거부당해 당황하셨을 수도 있습니다.

 

"내 글에 문제가 있나?", "혹시 블로그가 저품질에 걸린 건가?" 덜컥 겁부터 나실 텐데요. 결론부터 말씀드리면 여러분의 블로그 글에는 아무런 문제가 없습니다!

 

오늘은 수많은 티스토리 블로거들의 혈압을 올리는 빙(Bing) 색인 429 오류의 진짜 원인과, 스트레스받지 않고 대처하는 가장 현명한 방법을 깔끔하게 정리해 드립니다.

 

티스토리 블로그와 빙(Bing) 웹마스터 도구 사이에서 발생하는 429 오류의 원인

 

---

1. HTTP 429 오류, 도대체 무슨 뜻일까?

웹 서버 용어인 HTTP 429 코드는 "Too Many Requests(요청이 너무 많음)"를 의미합니다.

 

쉽게 말해 특정 사용자가 아주 짧은 시간 안에 서버가 감당하기 힘들 정도로 너무 많은 페이지 정보를 요구했을 때, 서버가 보호 차원에서 "잠깐 멈춰!" 하고 띄우는 방어 메시지입니다.

단기간에 과도한 수집 요청(Too Many Requests)을 시도하다가 서버 보호 방패에 가로막힌 빙(Bing) 로봇

 

그렇다면 나는 방금 글 하나 썼을 뿐인데, 왜 빙(Bing)은 수집을 거부하며 429 오류를 뿜어내는 걸까요?

 

---

2. 티스토리와 빙(Bing) 로봇의 피 튀기는 기싸움

구글(Google)이나 네이버(Naver) 로봇은 아무 문제 없이 새 글을 잘 주워 가는데, 유독 빙(Bing) 로봇만 에러가 나는 이유는 티스토리 방화벽과 빙 로봇의 성향 차이 때문입니다.

 

1. 눈치 없는 빙봇(Bingbot): 빙의 검색 로봇은 다른 검색엔진에 비해 한 번에 아주 많은 데이터를 다소 거칠게(?) 긁어가는 경향이 있습니다.
2. 철벽 방어 티스토리: 티스토리(카카오) 서버는 트래픽 과부하나 디도스(DDoS) 공격에 굉장히 예민하게 세팅되어 있습니다.

 

결과적으로 빙 로봇이 칼랭의 블로그를 색인하겠다고 한꺼번에 들이대면, 티스토리 서버는 이를 '비정상적인 외부 공격'으로 간주해 버립니다. 결국 매몰차게 서버 출입문을 닫아버리고 빙 로봇을 튕겨내는데, 이것이 우리 화면에 '429 오류'로 나타나는 것입니다.

 

빙 웹마스터 도구에서 흔하게 발생하는 URL 검사 429 오류

 

 

 

인덱싱 실패 화면

---

3. 완벽한 해결책? "방치 플레이가 답이다"

그렇다면 이 문제를 어떻게 해결해야 할까요? 안타깝게도 우리가 시스템을 뜯어고칠 수는 없습니다. 대신 스트레스받지 않는 3가지 확실한 대처법을 알려드립니다.

 

• 색인 요청 버튼 연타는 절대 금물! 수집이 안 된다고 화가 나서 [인덱싱 요청] 버튼을 계속 누르시면 안 됩니다. 티스토리 서버는 이를 '지속적인 공격'으로 오해해 차단 시간을 더 늘려버립니다.
• RSS와 사이트맵(Sitemap) 믿고 놔두기 블로그 초기 세팅 때 빙 웹마스터 도구에 사이트맵과 RSS를 제출해 두셨나요? 그렇다면 할 일은 끝났습니다. 빙 로봇이 며칠에 걸쳐 알아서 천천히 수집해가도록 쿨하게 놔두시는 것이 (방치 플레이) 가장 확실한 정답입니다. 매번 수동으로 인덱싱할 필요가 없습니다.
• 구글과 네이버에 에너지 집중하기 냉정하게 말해, 국내 IT 튜토리얼이나 실무 팁 검색 유입의 90% 이상은 구글과 네이버에서 발생합니다. 전체 트래픽 비중이 아주 작은 빙(Bing) 때문에 매번 429 오류와 씨름하며 에너지를 낭비하지 마세요!

 

4. 마치며: 마음을 비우세요!

정성 들여 쓴 퀄리티 높은 내 글을 빙이 당장 못 알아봐서 괘씸하시겠지만, 글에는 아무런 문제가 없다는 사실! 이제 명확히 아셨죠?

오늘 발생한 빙 429 오류 창은 가벼운 마음으로 닫아버리시고, 우리는 쿨하게 다음 양질의 포스팅을 준비하면 됩니다.

 

지금까지 칼랭이었습니다.