Blogspot에서 "X-Robots-Tag: noindex" 문제 해결 방법

Blogspot에서 "X-Robots-Tag: noindex" 문제 해결 방법

Blogspot에서 "X-Robots-Tag: noindex" 문제 해결 방법

검색엔진에 내 블로그가 안 뜬다고요? 그 원인, 어쩌면 이 설정 하나 때문일 수도 있어요.

안녕하세요! 요즘 개인 블로그 하나쯤은 다들 운영하시잖아요. 저도 제 취미를 기록하려고 Blogspot을 사용하고 있는데, 얼마 전 Google Search Console에서 "X-Robots-Tag: noindex" 오류 알림을 받았어요. 처음엔 무슨 말인지도 모르고 당황했는데, 조금씩 찾아보고 수정해 보니 생각보다 간단한 문제더라고요. 같은 문제로 고민하신 분들 많을 것 같아서, 오늘은 그 해결 방법을 정리해보려고 해요. 혹시 저처럼 블로그가 검색에 안 잡혀서 답답하셨던 분이라면 끝까지 읽어보세요. 꼭 도움이 되실 거예요!

Blogspot 설정에서 noindex 옵션 비활성화

가장 먼저 확인해야 할 건 바로 Blogspot 설정입니다. 생각보다 많은 분들이 크롤러 및 색인 생성 메뉴에서 잘못된 설정을 해두고 계시더라고요. Blogspot의 관리자 메뉴에서 좌측 ☰ 메뉴를 눌러 [설정 > 크롤러 및 색인 생성]으로 이동해 보세요. 여기서 "맞춤 robots.txt 사용", "맞춤 헤더 태그 사용" 등을 활성화한 뒤, 홈페이지 태그, 글 및 페이지 태그, 자료실 및 검색 페이지 태그를 꼭 확인해야 해요.

이 항목들에 noindex가 체크되어 있다면, 검색 엔진에 노출되지 않겠다는 의미예요. 중요한 페이지들은 "all" 또는 "사용 안 함"으로 설정해 주셔야 합니다. 설정을 바꾼 후에는 저장도 꼭 잊지 마세요!

HTTP 헤더에서 X-Robots-Tag 제거

Blogspot은 RSS 피드, 검색 결과 페이지 등 일부 시스템 페이지에 자동으로 X-Robots-Tag: noindex를 삽입하는 경우가 있습니다. 이건 서버 단에서 설정되는 것이기 때문에 블로거 입장에서는 수정이 어렵습니다. 다만 HTML 편집 기능을 활용해 덮어쓰는 방식으로 해결이 가능해요.

해결 방법 비고
템플릿 편집 <head> 안에 meta 태그 삽입 예: <meta name="robots" content="all">
색인 재요청 필수 Google에 수동 요청 필요

Google Search Console에서 색인 재요청

설정을 수정했다면, Google에게 “이제 이 페이지 다시 봐줘!” 하고 알려야겠죠? 그럴 땐 Search Console에서 색인 요청을 보내면 됩니다. 아주 간단해요. 아래 단계를 따라 해보세요.

  1. Google Search Console 접속 후 좌측 메뉴에서 "URL 검사" 클릭
  2. 검색되지 않던 페이지 URL을 입력
  3. "색인 생성 요청" 버튼 클릭
  4. 사이트맵도 업데이트해 다시 제출하면 금상첨화!

robots.txt 확인 (필요 시)

의외로 많은 블로거들이 robots.txt 설정을 방치하고 계시더라고요. 설정이 잘못돼 있다면 Google이 아예 사이트를 긁지 못하게 되니까, 꼭 확인하셔야 해요. 기본적으로 아래처럼 설정되어 있는 게 가장 좋아요.


User-agent: *
Allow: /

만약 여기에 Disallow: /가 들어 있다면 전면 차단이에요. 꼭 수정해 주세요!

최종 확인

설정을 다 끝냈다면, 이제 결과를 기다리는 일만 남았습니다. 보통은 색인 요청 후 24~48시간 이내에 Google Search Console에서 변화가 감지돼요. 하지만 간혹 며칠이 더 걸릴 수도 있으니, 너무 조급해하지 마세요. 아래 표를 참고하시면 상태를 체크하는 데 도움이 될 거예요.

확인 항목 설명
색인 상태 Search Console에서 ‘색인됨’으로 표시되는지 확인
사이트맵 제출 업데이트한 사이트맵이 제출되어 있는지 확인
템플릿 이상 여부 템플릿 구조가 비정상적이면 색인에 방해됨

무시해도 되는 시스템 페이지는?

"X-Robots-Tag: noindex" 경고가 모든 페이지에서 문제 되는 건 아닙니다. 사실 일부 시스템 페이지는 Google이 의도적으로 색인하지 않도록 만들어진 거거든요. 예를 들어 아래와 같은 페이지는 검색 노출되지 않아도 괜찮아요.

  • 검색 결과 페이지 (/search)
  • RSS 피드 (/feeds/posts)
  • 레이블 페이지 (카테고리 링크)

추가 팁: meta 태그로 대체하는 법

서버에서 보내는 X-Robots-Tag를 직접 제거할 수 없다면, HTML 상에서 meta 태그를 활용해 Google에게 색인을 요청할 수 있습니다. 템플릿 편집 모드에서 <head> 내부에 아래 태그를 추가해 보세요.


<meta name="robots" content="index, follow">

색인 복구까지 얼마나 걸릴까?

이건 Google의 크롤링 스케줄에 따라 달라요. 경험상 빠르면 몇 시간 내에 복구되는 경우도 있지만, 보통은 2~5일 정도 걸리더라고요. 중요한 건 너무 자주 색인 요청을 반복하지 않는 거예요. Google이 스팸성 요청으로 간주하면 오히려 역효과가 날 수도 있거든요. 하루에 1~2회 정도만 시도하는 걸 추천드립니다.

Q Blogspot에서 X-Robots-Tag: noindex 오류가 왜 생기나요?

Blogspot은 일부 페이지(예: 검색결과, 피드)에 자동으로 noindex를 설정하는데, 설정 오류나 과도한 차단 설정으로 인해 검색 엔진 색인이 차단되기도 합니다.

A 설정 실수 또는 기본 시스템 페이지에서 발생합니다.

관리자가 직접 설정한 것이 아니더라도 시스템이 자동 삽입하기 때문에 오류처럼 보일 수 있습니다. 이 경우 설정 수정 또는 무시할 수 있습니다.

Q meta 태그로 X-Robots-Tag를 덮어쓸 수 있나요?

일부 경우 meta name="robots" 태그를 HTML에 삽입하면 효과를 줄 수 있지만, 서버 헤더 수준의 설정은 완전히 덮어쓰지 못합니다.

A 완전한 덮어쓰기는 어렵지만 보완 가능합니다.

템플릿에 meta 태그를 추가하면 Google이 HTML 우선 순위를 적용하여 색인할 가능성이 높아집니다.

Q 색인 요청은 하루에 몇 번까지 해도 되나요?

너무 자주 요청하면 Google이 스팸성 요청으로 판단할 수 있으므로, 하루 1~2회 정도가 적당합니다.

A 하루 1~2회 요청이 적절합니다.

지속적으로 오류가 발생한다면 설정을 재점검하고 일정 시간 기다리는 것이 좋습니다.

Q robots.txt에 Disallow가 있으면 무조건 차단인가요?

Disallow 규칙은 해당 경로에 대해 크롤러 접근을 막습니다. "/"만 쓰면 사이트 전체가 차단됩니다.

A 네, 전체 차단될 수 있어요.

특정 디렉토리만 차단하고 싶다면 경로를 명확히 지정하는 것이 중요합니다.

Q 검색결과 페이지를 색인에서 제외해도 괜찮나요?

네, 검색결과 페이지나 RSS 피드는 색인이 필요하지 않기 때문에 noindex 설정이 유지돼도 무방합니다.

A 중요 콘텐츠가 아니라면 무시해도 됩니다.

검색엔진 입장에서도 중복 콘텐츠로 간주되어 색인에 불리할 수 있어요.

Q 템플릿을 초기화하면 문제 해결될까요?

템플릿 커스터마이징 중 생긴 오류라면 초기화로 문제가 해결되기도 합니다. 다만 꼭 백업 후 진행하세요.

A 네, 종종 해결됩니다.

템플릿 오류가 색인에 영향을 주는 경우가 있어요. 초기화는 최후의 수단으로 고려해보세요.

여기까지 따라오시느라 정말 고생 많으셨어요! 솔직히 말하면, 저도 처음엔 이 "X-Robots-Tag: noindex" 오류가 뭔 소린지 몰라서 진짜 당황했거든요. 근데 하나하나 설정을 살펴보고 수정해보니까, 별거 아니더라고요. 문제는 대부분 설정 실수거나, Google이 의도적으로 색인을 막는 페이지들이었어요.

중요한 건요, 당황하지 말고 차근차근 체크하는 거예요. 설정을 바꾸고 나서도 Search Console에서 색인 요청 잊지 마시고요. 혹시 글을 보시고도 해결이 안 되셨다면, 댓글로 질문 주세요. 최대한 빠르게 도와드릴게요!

그럼 우리 블로그, 검색 상위에 올리는 그날까지 함께 해봐요! 다음엔 Blogspot SEO 최적화 팁도 정리해드릴게요. 기대해주세요 😊

blogspot, x-robots-tag, noindex 오류, 색인 문제, 구글 서치 콘솔, blogspot seo, robots.txt 설정, 메타 태그 설정, rss 피드, 검색 페이지 색인

댓글 쓰기