네이버 검색엔진 최적화 robots.txt 설정

1.robots.txt란?

 

robots.txt는 검색엔진 로봇(크롤러)에게 "어디를 크롤링해도 되고, 어디는 하지 마"라고 알려주는 지침서입니다. 이 파일을 잘 설정하면 블로그의 검색 노출과 성능을 더 효율적으로 관리할 수 있습니다.

 

1.불필요한 페이지 크롤링 방지

관리자 페이지, 로그인 화면, 태그 정렬 페이지 등은 검색에 노출될 필요가 없습니다.
이런 페이지를 차단하면 검색엔진이 중요한 콘텐츠에 더 집중할 수 있습니다.

 

2.중복 콘텐츠 문제 해결

동일한 글이 여러 URL로 접근 가능하면 검색엔진은 혼란스러워합니다.
robots.txt로 중복 페이지를 차단하면 SEO 점수를 깎이지 않게 막을 수 있습니다.

 

3.사이트맵 연결

robots.txt에 사이트맵 주소를 추가하면 검색엔진이 블로그 구조를 더 잘 이해하고 빠르게 인덱싱할 수 있습니다.

 

 

robots.txt가 존재하지 않습니다.

 

위 문제를 해결하려면 아래 단계들을 참고해 주세요. 

 

 

네이버 서치어드바이저 접속 

네이버 서치어드바이저

 

해당 링크를 클릭해줍니다.

검증 탭에서 -> rotots.txt 클릭

robots.txt간단 생성 -> 다운로드 클릭

티스토리 관리 버튼클릭

 

티스토리 스킨 편집 버튼 클릭

 

파일업로드 클릭 -> 추가 버튼 클릭 -> 네이버 서치어드바이저에서 다운 받았던 robots.txt 파일 업로드 -> 뒤로가기 버튼 클릭

 

1. 파일업로드 클릭
2. 추가 클릭 
3. 위에서 다운 받았던 robots.txt 파일 업로드
4. 뒤로가기

robots.txt 검증에 도메인 입력 후 확인 버튼을 눌러줍니다.

수집요청을 누르면 위와 같은 정보들이 생성됩니다.

 

수집 주기 설정을 빠르게로 변경해줍니다.

 

 

 

 

여기까지 잘 따라 오셨다면 robots.txt 설정은 모두 완료됐습니다. 

 

 

이제 여러분의 블로그는 검색엔진과 더 똑똑하게 소통할 준비가 되었습니다.
robots.txt 하나로 크롤링 효율을 높이고, SEO 점수를 지키며, 중요한 콘텐츠에 집중할 수 있게 되었죠.

작은 설정 하나가 블로그 전체의 퍼포먼스를 바꿀 수 있다는 사실, 꼭 기억하세요!
궁금한 점이나 도움이 필요하시면 댓글로 남겨주세요. 함께 성장하는 블로거가 되길 응원합니다.

 

 

끝.

 

 

네이버 서치어드바이저 설정 방법

티스토리 네이버 검색엔진최적화(SEO) 설정

 

네이버 서치어드바이저 웹페이지 수집

티스토리 네이버 웹페이지 수집