티스토리 네이버 robots.txt 존재하지 않습니다. 간단 해결!

robots.txt 해결 방법과 해결해야 하는 이유

 

페이지 수집과 블로그가 네이버에서 검색되지않아서 이유를 알아보니 아래와 같은 문제가 발생했습니다. 해결 방법이 간단하여 공유합니다.

 

 

네이버에 site:alltold.echolearns.com를 검색하였고 검색이 되지 않아 네이버 서치어드바이저에서 "간단 체크"를 해보았습니다.

 

robots.txt가 존재하지 않습니다. 메시지를 확인했습니다.

 

걱정하지 마세요. 몇 번 클릭만으로도 해결할 수 있으니 잘 따라오시면 되겠습니다.

 

 

1. https://searchadvisor.naver.com/ (네이버 서치어드바이) 로그인 후 웹마스터 도구 선택해 주세요

 

2. 사이트 목록에서 파란색 주소 선택해 주세요

 

3. 요약란 검증을 펼치면 robots.txt를 클릭 해주세요

 

4. 수집요청 클릭 후, 검증에서 수집할 사이트 주소를 적고 확인 누르됩니다.(완료)

 

5. 다시 간단 체크 검색

이렇게 robots.txt에서 상태 체크가 되어 있는 걸 확인이 가능합니다.

 

☞ 네이버 서치어드바이저에서 robots.txt를 해결해야 하는 이유

1. 검색엔진 최적화(SEO) 향상

- 수집 누락: robots.txt 문제 발생 시 페이지 수집 못하여, 검색 결과에 노출이 안됩니다.

- 검색 순위 하락: 수집 누락으로 사이트 중요도를 낮게 평가되어 순위 하락이 됩니다.

 

2. 사이트 인덱싱 문제 해결

- 설정 오류로 인해 내용을 잘못 이해하여 잘못된 키워드로 인덱싱 될 수 있고, 페이지가 중복으로 노출될 위험성이 있습니다.

 

3. 사이트 관리 및 분석 향상

방문자 분석: 어떤 검색엔진에서 어떤 키워드로 사이트에 방문하는지 분석할 수 있습니다.

스팸 방지: 스팸 봇이나 악성 크롤러의 접근을 차단하여 사이트를 보호할 수 있습니다.