고아 페이지는 같은 사이트의 다른 페이지에서 들어오는 내부 링크가 없는 페이지입니다. 사이트맵에 주소가 있더라도 메뉴와 목록, 다른 글에서 연결하지 않으면 고아 페이지가 될 수 있습니다. ‘고립 페이지’라는 번역도 쓰입니다.
내부 링크가 없을 때 생기는 문제
검색로봇은 이미 알고 있는 페이지의 링크를 따라 새 URL을 찾습니다. 내부 링크가 없으면 이 경로로 페이지를 발견할 수 없고, 주변 콘텐츠와의 관계도 파악하기 어렵습니다. 사용자 역시 메뉴나 관련 글에서 해당 페이지로 이동할 수 없습니다.
고아 페이지도 검색 색인에 들어가 있을 수 있습니다. 검색엔진이 XML 사이트맵이나 외부 백링크에서 주소를 찾거나, 과거에 수집한 URL을 다시 방문할 수 있기 때문입니다. 고아 페이지 여부는 사이트 안의 연결 상태이며, 색인 여부와는 별개입니다.
고아 페이지가 생기는 원인
- 개편한 메뉴에서 기존 페이지 링크가 빠집니다.
- 발행한 글이 카테고리와 목록에 반영되지 않습니다.
- 종료 상품을 카탈로그에서 빼고 상세 URL은 남깁니다.
- 광고용 랜딩 페이지를 일반 탐색에서 의도적으로 제외합니다.
- 테스트 페이지와 이전 CMS 주소가 남아 있습니다.
- 페이지네이션이나 JavaScript 목록이 링크를 제대로 생성하지 않습니다.
내부 크롤링과 다른 URL 목록 대조
홈페이지에서 내부 링크만 따라 수집하면 연결이 끊긴 페이지는 결과에 나타나지 않습니다. CMS에 등록된 페이지, 사이트맵, 검색이나 방문 기록에 남은 URL을 모아 대조해야 합니다.
- 홈페이지를 시작점으로 사이트를 크롤링해 내부 링크로 도달할 수 있는 URL을 모읍니다.
- CMS와 XML 사이트맵, Search Console의 색인 및 실적 보고서에서 URL을 모읍니다. 분석 도구의 방문 페이지, 서버 로그, 외부 백링크의 도착 주소도 추가합니다.
- 다른 목록에는 있지만 내부 링크 크롤링 결과에는 없는 URL을 후보로 추립니다.
- 후보 URL을 직접 열어 현재도 콘텐츠를 제공하는지 확인하고, 그 페이지로 들어오는 링크가 실제로 없는지 검사합니다.
링크가 있는데 도구만 놓친 경우도 있습니다. JavaScript 실행 뒤 링크가 생성되는지, 로그인이나 접근 차단 때문에 연결 페이지를 읽지 못했는지 확인합니다. 검사 설정을 수정한 뒤 링크를 발견했다면 실제 고아 페이지로 확정하지 않습니다.
페이지 목적에 따른 처리
| 페이지의 상태 | 검토할 조치 |
|---|---|
| 사용자와 검색에 필요한 페이지 | 관련 카테고리와 본문에서 연결합니다. |
| 다른 페이지와 중복 | 필요한 내용을 통합하고 기존 URL을 통합한 페이지로 리디렉션합니다. |
| 가치가 없고 사용하지 않는 페이지 | 삭제하고 404 또는 410을 반환합니다. |
| 광고 전용 랜딩 페이지 | 의도한 분리를 유지하고 필요하면 noindex를 검토합니다. |
| 외부 링크가 있는 이전 페이지 | 내용이 유효하면 복구해 다시 연결하고, 같은 목적의 대체 페이지로 옮겼다면 그 주소로 리디렉션합니다. |
중요한 페이지는 관련 카테고리나 본문에 연결합니다. Google도 중요한 페이지마다 같은 사이트의 다른 페이지에서 들어오는 링크가 하나 이상 있어야 한다고 권합니다. 사용자가 해당 정보를 찾을 만한 위치에, 연결 대상의 내용을 알 수 있는 링크 문구를 넣습니다.
도구마다 다른 고아 페이지 판정 범위
일반적으로는 들어오는 내부 링크가 없는 페이지를 뜻하지만, 감사 도구는 크롤 시작점에서 도달할 수 있는지도 봅니다. Screaming Frog는 시작점인 홈페이지에서 내부 링크를 따라 도달할 경로가 없으면 고아 페이지로 분류합니다. 고립된 페이지끼리 서로 링크하고 있어도 이 판정에 해당할 수 있습니다.
따라서 보고서의 내부 링크 수와 크롤 시작점을 함께 확인해야 합니다. 홈페이지에서 여러 번 클릭해야 하지만 경로가 이어져 있는 페이지는 단순히 깊다는 이유만으로 고아 페이지가 되지 않습니다.
자주 묻는 질문
사이트맵에 있으면 고아 페이지가 아닌가요?
사이트맵에 있어도 고아 페이지일 수 있습니다. 사이트맵은 검색엔진에 주소를 알려 주는 파일이며, 메뉴나 본문에서 해당 페이지로 이동할 내부 링크를 대신하지는 않습니다.
고아 페이지는 무조건 삭제해야 하나요?
아닙니다. 계속 제공해야 할 정보라면 관련 페이지에서 다시 연결합니다. 광고 전용처럼 일반 탐색에서 의도적으로 제외한 페이지도 있으므로, 내부 링크가 없다는 이유만으로 삭제해서는 안 됩니다.
noindex를 넣으면 고아 페이지 문제가 해결되나요?
아닙니다. noindex는 검색 색인에서 제외하라는 지시입니다. 사용자가 사이트 안에서 찾아갈 경로는 여전히 없으므로, 필요한 페이지라면 내부 링크를 추가해야 합니다.
함께 알아두면 좋은 용어
- 내부 링크: 같은 사이트의 페이지끼리 연결하는 링크
- 사이트맵: 검색엔진에 중요 URL을 알려 주는 파일
- 크롤링: 검색로봇이 웹페이지를 요청해 내용과 파일을 가져오는 과정
- noindex: 페이지를 검색 색인에서 제외하라는 규칙