웹페이지 수집 정책

웹마스터도구에서 제공하는 웹 페이지 수집요청은 검색로봇이 미처 방문하지 못한 사이트의 주요 웹페이지를 사용자가 직접 수집요청을 하는 기능으로서, 사이트 별로 제한된 범위 내에서 수집요청을 실행할 수 있습니다.

수집 요청 후 해당 URL 방문하여 수집을 진행하는 일련의 과정은 큰 비용이 발생하는 작업입니다. 알고리즘으로 동작하는 검색로봇의 수집 과정과 동일하게 웹마스터도구를 통해 사용자가 요청한 개별 URL에 대한 수집도 우선순위에 기반하여 동작합니다. 그러므로 사용자가 직접 웹페이지를 수집 요청하더라도 검색로봇이 실시간으로 요청된 URL을 방문하지 않습니다.

웹마스터도구에서 여러분이 요청한 수집요청 URL이 수집 시스템에 전달되면 우선순위에 따라 최소 1일에서 몇 주간의 시간이 소요될 수 있습니다. 그러므로, 동일 URL에 대해서 매일 반복적으로 수집요청을 제출할 필요는 없습니다. 수집보류로 처리결과가 변경되더라도 검색로봇이 다른 경로를 통해서 해당 URL을 수집할 수 있습니다. 다만, 이 경우 웹마스터도구의 수집요청 결과에는 반영되지 않습니다.

웹마스터도구의 수집요청 기능은 수집 시스템에게 수집 대상 URL을 전달하는 도우미의 역할만을 담당합니다. 또한, 수집성공이 되더라도 네이버의 검색결과에 노출된다는 보장은 없습니다. 여러분 사이트의 품질을 높이고 타 사이트에서 여러분의 콘텐츠가 인용이 되면 자연스럽게 검색로봇이 이를 인식하여 방문하므로

인위적인 수집요청 처리보다는 검색로봇의 자연스러운 수집을 권장합니다.

수집 요청 결과 설명

처리결과 설명

요청완료 사용자가 수집 요청을 처리하고 수집 시스템이 이를 인식

수집보류 수집 요청한 웹사이트의 수집 여부를 판단하기 어려워 보류가 된 경우

수집중복 수집시스템이 최근 수집한 웹페이지를 다시 수집 요청한 경우

서버오류 수집 요청한 웹사이트의 웹서버가 오류 코드를 반환 하는 경우

수집차단 수집 요청한 웹사이트의 robots.txt 에 의해 네이버 검색 로봇 방문이 차단이 된 경우

연결실패 도메인 미연동, 방화벽으로 인한 접근차단 등으로 웹사이트의 접근 불가능한 경우

수집성공 정상적으로 수집처리가 된 경우

간혹 스패머들이 대량의 스팸 사이트를 등록 후 수집요청을 악용 하는 경우도 있습니다. 이를 위해서 웹마스터도구에서는 수집요청에 대한 모니터링을 강화하고 있으며 자체 알고리즘을 통하여 스팸으로 판단되는 사이트의 수집요청을 제한하고 있습니다.

웹페이지 검색 제외

웹마스터도구에서 제공하는 웹 페이지 검색 제외는 사이트내 특정 콘텐츠를 네이버 검색엔진의 색인에서 제외시키는 기능입니다. 검색에 노출된 특정 콘텐츠가 제외되는 과정은 "재 색인"을 거쳐야 하므로 실시간으로 반영되지 않습니다.

사이트의 원본 콘텐츠를 먼저 삭제해주세요.

웹마스터도구 > 사이트 > 검증 > 웹페이지 최적화에서 삭제된 문서에 검색 로봇이 접근시 http 응답코드가 404 Not Found 로 지정되는 것을 확인합니다.

웹마스터도구 > 사이트 > 요청 > 웹 페이지 검색 제외에서 삭제 대상 URL을 입력해주세요

색인 정보가 업데이트 되면서 검색결과에서 해당 문서가 제외처리 됩니다.