sitemap.xml과 robots.txt: 주소 목록·수집 접근·색인 설정을 구분하세요

낯선 용어는 아래 뜻과 예시를 참고하세요.

사이트맵검색엔진에 알려주는 페이지 주소 목록

공개할 페이지의 주소를 정리한 파일입니다. 검색엔진이 페이지를 발견하는 데 참고할 수 있지만 검색 등록이나 순위를 보장하지는 않습니다.

예를 들면 메뉴에서 찾기 어려운 하위 페이지 주소도 목록으로 정리할 수 있습니다.

robots.txt검색 수집 프로그램에 주는 접근 안내 파일

어떤 경로를 수집해도 되는지 안내합니다. 이 파일로 접근을 제한하는 것과 검색 결과에서 페이지를 제외하는 것은 같은 설정이 아닙니다.

예를 들면 비공개 자료를 보호하려면 로그인·권한 설정이 필요하며 robots.txt만으로 보호하지 않습니다.

noindex검색 결과에 넣지 말라는 설정

검색엔진에 해당 페이지를 검색 결과에 등록하지 않도록 요청하는 설정입니다. 설정을 읽을 수 있도록 검색 프로그램의 접근 조건도 확인해야 합니다.

예를 들면 내부 확인용 페이지와 공개할 서비스 페이지에 같은 설정이 잘못 들어갔는지 살펴봅니다.

canonical여러 비슷한 주소 중 대표 주소를 알려주는 표시

같거나 비슷한 내용의 주소가 여럿일 때 우선 참고할 주소를 검색엔진에 알립니다. 방문자를 자동으로 이동시키는 기능과는 다릅니다.

예를 들면 같은 상품 안내가 여러 주소로 열리면 어떤 주소를 대표로 사용할지 정합니다.