피드로 돌아가기
Dev.toFrontend
원문 읽기
8,600개 SSR 페이지 인덱싱 실패를 통한 Crawl Budget 최적화 전략
"I built 8,000 programmatic SEO pages. Google indexed zero. A GSC postmortem."
AI 요약
Context
Express 기반 SSR로 서울 카페 8,000여 개의 Programmatic SEO 페이지를 구축했으나, 신규 도메인의 낮은 권한과 대량의 Thin Content 생성으로 인해 Google 인덱싱 0건 발생. 기술적 결함이 없는 상태에서도 검색 엔진의 Index Quota 제한으로 인한 시스템적 노출 차단 상황 분석.
Technical Solution
- Sitemaps 규모 축소를 통한 Crawl Budget 집중: 8,600개 URL에서 560개의 고가치 URL로 축소하여 검색 엔진의 리소스 낭비 방지
- Thin Content 제거 로직 적용: 단순 조합으로 생성된 Station × Purpose 페이지(2,191개)를 Sitemaps에서 제외하여 도메인 평균 품질 신호 개선
- Internal Linking 구조 재설계: Homepage에서 SEO 섹션으로 이어지는 직접 링크를 추가하여 Page Equity 전달 경로 확보
- De-submit 전략 채택: Route는 유지하여 내부 링크를 통한 Crawl 가능성을 열어두되 Sitemaps 제출만 제외하는 방식으로 인덱싱 전략 수정
- 외부 Trust Signal 확보: App Store 및 Play Store 리스팅을 통한 High-authority Backlink 생성으로 도메인 신뢰도 구축
실천 포인트
- 신규 도메인 배포 시 전체 Long-tail 페이지를 즉시 제출하지 말고 고가치 페이지 중심의 타이트한 Sitemaps로 시작할 것 - 'Crawled - currently not indexed' 상태 확인 시 렌더러 버그 수정보다 콘텐츠 품질과 도메인 권한(Authority) 분석을 우선할 것 - 가장 트래픽이 높은 페이지(Homepage)가 핵심 전환 페이지로 적절한 내부 링크를 제공하는지 검토할 것 - 불필요한 페이지 제거 시 물리적 삭제(De-index) 대신 Sitemaps 제외(De-submit)를 통해 점진적 인덱싱 전략을 취할 것