다국어 사이트에서 특정 언어의 색인 수가 6개월 후 감소했을 때 어떻게 점검해야 하나요?

다국어 독립 웹사이트를 약 반년간 운영한 후 특정 언어의 색인된 페이지가 지속적으로 감소하는 경우, 이는 대개 “검색 엔진이 갑자기 해당 시장을 선호하지 않게 된 것”이 아니라 크롤링, 정규화, 언어 타기팅 또는 콘텐츠 품질 신호에 변화가 생긴 것입니다. 링크를 일괄 제출하거나 제목을 대량으로 수정하기에 앞서, 감소가 ‘유효 색인’에서 발생한 것인지 아니면 보고서 집계 기준의 변화인지 먼저 확인해야 합니다. 이후 페이지가 크롤링 가능한지, 독립된 언어 버전으로 인식될 수 있는지, 그리고 유지할 가치가 있는지를 중심으로 점검해야 합니다.

이 문제는 해당 언어의 자연 검색 노출에 직접적인 영향을 미칩니다. 기존에 롱테일 방문을 유입하던 제품 페이지, 카테고리 페이지 또는 게시글 페이지가 검색 결과에 더 이상 표시되지 않을 수 있으며, 이후 새 콘텐츠를 추가하더라도 유사한 기술적 문제로 계속 제외될 수 있습니다. 점검 시에는 검색 엔진 콘솔 데이터를 우선으로 하고, 감소 전후의 페이지를 추출하여 하나씩 검증해야 합니다. 사이트 검색 명령어나 타사 도구의 추정 수치만으로 판단해서는 안 됩니다.

먼저 확인: 실제로 색인이 감소한 것인지, 페이지 수가 변경된 것인지

해당 사이트 속성의 ‘페이지 색인’ 또는 유사한 보고서에 들어가 최근 3개월의 추세를 감소 이전 기간과 비교합니다. ‘색인 생성됨’ 수가 줄었는지에 중점을 두고, 제외된 페이지의 사유가 특정 항목에 집중되어 증가했는지도 확인합니다. 상태별로 대응 방법은 서로 다릅니다:

동시에 웹사이트 관리자 화면의 실제 페이지 수도 확인해야 합니다. 일부 팀은 제품 업데이트, 카테고리 조정 또는 언어 플러그인 전환 시 기존 페이지를 내리거나 URL 규칙을 변경하고, 페이지네이션 및 필터 페이지를 색인 가능 상태에서 색인 불가 상태로 전환할 수 있습니다. 이 경우 ‘색인 감소’는 정상적인 결과일 수 있지만, 중요한 랜딩 페이지가 잘못 영향을 받지 않았는지는 여전히 확인해야 합니다.

한 번에 전체 사이트를 점검하지 말고, 감소한 몇 개의 페이지부터 시작하세요

이전에 색인되었으나 현재 제외된 페이지를 5~10개 선택하여 URL 검사 도구로 페이지별로 확인합니다. 마지막 크롤링 시간, 크롤링 성공 여부, 색인 허용 상태, 사용자가 선언한 canonical 및 검색 엔진이 최종 선택한 canonical을 확인합니다. 이어서 브라우저에서 페이지를 열어 일반 방문자가 접속할 때 리디렉션, 빈 콘텐츠, 소프트 404 또는 스크립트 로딩에 오랜 시간이 걸리는 페이지가 아니라 200 상태 코드를 반환하는지 확인합니다.

특히 언어 전환 로직에 유의해야 합니다. 일부 사이트는 브라우저 언어나 방문 지역에 따라 자동으로 리디렉션합니다. 예를 들어 프랑스어 페이지에 접속했는데 곧바로 영어 홈페이지로 이동한다면 크롤러가 프랑스어 콘텐츠를 안정적으로 가져오기 어렵습니다. 언어 버전에는 고정된 직접 접근 가능 URL이 있어야 합니다. 언어 자동 추천 기능은 유지할 수 있지만, 사용자와 크롤러가 요청한 주소를 강제로 덮어써서는 안 됩니다.

언어 태그와 정규 태그는 서로 충돌하기 가장 쉽습니다

다국어 페이지는 어떤 URL이 동일 콘텐츠의 서로 다른 언어 버전인지, 어떤 페이지가 현재 URL의 정규 버전인지를 검색 엔진에 명확히 알려야 합니다. 흔한 오류는 프랑스어 페이지, 독일어 페이지 및 영어 페이지가 모두 canonical을 영어 페이지로 지정하는 것입니다. 기술적으로 이는 비영어 버전이 중복 페이지임을 자발적으로 선언하는 것과 같으므로, 이후 병합되거나 색인에서 제외되는 것은 놀라운 일이 아닙니다.

• 색인 가능한 각 언어 페이지의 canonical은 일반적으로 자체의 전체 URL을 가리켜야 하며, 모두 기본 언어 페이지로 지정해서는 안 됩니다.
• hreflang에는 올바른 언어 또는 언어-지역 코드를 사용하고, 각 언어 버전이 서로를 참조하도록 해야 하며 필요 시 기본 버전도 포함해야 합니다.
• 태그 내 URL은 접근 가능하고 200을 반환해야 하며, noindex가 없어야 하고 다른 언어로 다시 리디렉션되어서도 안 됩니다.
• 사이트맵에는 정규 URL을 나열해야 하며, 매개변수 페이지, 이전 경로, 리디렉션 주소 또는 삭제된 페이지를 혼합해서는 안 됩니다.

hreflang을 색인 스위치로 간주하지 마세요. 이는 주로 검색 엔진이 적절한 언어 버전을 연결하도록 돕는 역할을 하며, 저품질 콘텐츠, 잘못된 canonical 또는 크롤링 불가 문제를 해결하지는 못합니다. 태그를 수정한 후에는 페이지 본문, 제목, 내비게이션 및 구조화된 정보가 실제로 대상 언어를 사용하는지도 확인해야 합니다. 본문만 번역하고 메뉴, 브레드크럼 및 제품 속성에 다른 언어가 대량으로 남아 있는 상황을 피해야 합니다.

콘텐츠가 ‘번역되었다고 해서’ 언어 페이지에 독립적인 가치가 생기는 것은 아닙니다

특정 언어의 색인이 반년 후 감소하는 현상은 초기에는 페이지가 시험적으로 색인되었다가 이후 재평가 과정에서 발생하기도 합니다. 기계 번역 흔적이 강하거나 여러 제품 페이지에서 모델명만 바꾸었거나 카테고리 페이지의 콘텐츠가 지나치게 짧다면, 해당 언어 버전은 유지 가치가 부족해질 수 있습니다. 특히 B2B 제품 페이지에서 이런 상황이 쉽게 발생합니다. 서로 다른 페이지의 이미지와 사양표가 같고 본문에서 한두 문장만 바뀌면 검색 엔진은 그중 하나의 버전을 유지하는 경향이 있습니다.

먼저 감소가 제품 상세 페이지, 태그 페이지, 필터 조합 페이지 또는 자동 생성된 지역 페이지에 집중되는지 확인합니다. 실제로 리드 확보 역할을 하는 페이지에는 대상 시장의 독자가 관심을 가질 정보, 예를 들어 적용 시나리오, 사양 설명, 제공 범위, 문의 조건, 자주 묻는 질문 및 명확한 제품 차이점을 보완합니다. 독립적인 검색 수요가 없는 필터 페이지와 중복 태그 페이지는 굳이 색인을 확보하려 하지 않아도 되며, 정규화, 색인 차단 또는 내부 링크 조정을 통해 간섭을 줄일 수 있습니다.

크롤링 진입 경로와 서버 응답을 점검하세요

페이지 콘텐츠가 적합한데도 오랫동안 회복되지 않는다면 크롤링 측면으로 다시 돌아가야 합니다. 서버 로그 또는 콘솔의 크롤링 통계를 확인하여 해당 언어 디렉터리에 5xx, 429, 시간 초과 또는 로딩 실패가 대량으로 존재하는지 관찰합니다. 다국어 사이트는 번역 서비스, 이미지 리소스 또는 지역별 스크립트를 페이지 렌더링 경로에 배치하는 경우가 많습니다. 외부 리소스 하나만 불안정해도 크롤러가 불완전한 페이지를 가져갈 수 있습니다.

내부 링크 역시 언어 전환기에만 의존해서는 안 됩니다. 대상 언어의 홈페이지, 카테고리 페이지 및 관련 게시글은 주요 상세 페이지로 자연스럽게 링크할 수 있어야 합니다. 모든 페이지를 XML 사이트맵에서만 찾을 수 있거나 페이지 계층이 너무 깊다면 크롤링 우선순위가 낮아질 수 있습니다. 새 내비게이션을 배포하거나 URL을 개편하거나 CMS를 이전한 후에는 해당 언어 디렉터리가 내비게이션, 브레드크럼 및 관련 콘텐츠 모듈에서 여전히 유효한 진입 경로를 확보하고 있는지 다시 점검해야 합니다.

수정 후에는 영향도에 따라 진행하고, 모든 페이지를 반복 제출하지 마세요

먼저 사이트 전체 canonical이 기본 언어를 가리키는 문제, 템플릿에 noindex가 잘못 추가된 문제, 언어 페이지가 리디렉션되거나 robots 규칙에 의해 잘못 차단된 문제처럼 시스템적인 제외를 유발하는 오류를 처리합니다. 이후 비즈니스 가치가 있고 과거 노출을 확보했던 페이지를 우선 보완한 다음 롱테일 페이지를 처리합니다. 수정 후 사이트맵을 업데이트하고, 대표 URL에 대해 검사 도구로 검증 또는 재크롤링을 요청하면 됩니다. 빈번한 일괄 제출은 콘텐츠 및 기술적 수정을 대체할 수 없습니다.

이후 매주 색인 보고서의 제외 사유, 주요 페이지의 크롤링 시간 및 대상 언어의 검색 노출 변화를 관찰합니다. 소수의 저가치 페이지만 감소하고 핵심 카테고리와 제품 페이지가 정상적으로 유지된다면 ‘총 색인 수’를 유일한 목표로 삼을 필요는 없습니다. 정말 주의해야 할 상황은 중요한 페이지가 지속적으로 다른 언어의 중복 페이지로 선택되거나, 크롤링에 성공한 후에도 장기간 색인에 포함되지 못하는 경우입니다.