Crawl Depth 3단계 제한 및 JSON-LD 표준화를 통한 검색 엔진 최적화 기반 구축

Context

웹사이트의 검색 엔진 가시성을 확보하기 위해 Crawlability와 Indexing의 기술적 무결성이 요구되는 상황임. 일관성 없는 URL 구조와 복잡한 페이지 계층으로 인한 인덱싱 효율 저하 문제를 해결하고자 함.

Technical Solution

• URL Case-sensitivity 및 WWW/Non-WWW 중복 제거를 위한 301 Redirect 단일 홉 설계
• Homepage 기준 최대 3-click 이내 도달 가능한 Hub-and-Spoke 아키텍처 구현을 통한 Crawl Depth 최적화
• @id 그래프 패턴을 적용한 JSON-LD Structured Data 설계를 통해 엔티티 간 관계 정의 및 검색 엔진의 시맨틱 이해도 증진
• Sitemap Index 분할 전략(50,000 URL 또는 50MB 기준)을 통한 대규모 페이지의 효율적인 인덱싱 보장
• GPTBot, ClaudeBot 등 최신 AI Bot에 대한 개별 제어 규칙을 robots.txt에 정의하여 데이터 노출 전략 차별화
• Next.js의 file-based routing과 일관된 trailing-slash 정책 적용으로 URL 정규화 달성