본문 바로가기
정보공유/블로그

네이버 검색엔진 최적화 - robots.txt 접근 차단 해결 방법

by 채연2 2022. 12. 23.

 

 

 

 

 

네이버 서치어드바이저를 통해서 내 사이트를 등록하던 중 내 사이트를 진단할 수 있길래 해보았다.

 

 

우선 네이버 서치 어드바이저 사이트를 들어가보자!

>> 네이버 서치 어드바이저 바로가기 <<

 

 

 

그런다음 우측 상단에 [웹마스터 도구] 클릭!

 

 

 

그럼 사이트 등록 화면이 나오는데, 좌측 상단에 [간단체크] 클릭!

 

 

 

짜잔@! 내 사이트를 간단히 체크할 수 있는 화면이 나왔다.

여기서 내 티스토리 URL을 입력해주자.

(ex. http://cording-cossk3.tistory.com)

 

 

 

그런데 이게 뭘까... robots.txt 항목에서 네이버 검색로봇의 접근을 차단하고 있단다..

근데 이게 중요한걸까? 이 파일을 꼭 로봇이 접근할 수 있도록 허용을 해줘야 하나 ?

 

 

 

네이버 서치어드바이저 웹마스터도구 가이드에 들어가보면 다음과 같이 설명이 나와있다.

 

검색엔진 최적화 작업은 여러분의 사이트 내 콘텐츠 정보를 검색엔진이 잘 이해할 수 있도록 정리하는 작업입니다. 이 작업을 통하여 사이트 내 콘텐츠가 네이버의 검색 결과에 누락되지 않도록 조치할 수 있으며, 무엇보다 사용자가 원하는 콘텐츠의 내용을 명확하게 네이버 검색엔진에게 알려 줄 수 있습니다.

네이버 검색로봇이 사이트에 접근할 수 있도록 허용해주세요.
사이트의 문서에 네이버 검색로봇의 접근이 가능하게 하려면 robots.txt를 아래처럼 설정하세요.

 

 

즉, 검색 엔진 최적화를 위해서는 검색 로봇의 접근이 필요하다는 말 같다.!!

그럼 뭐.. 허용해줘야지 ^.^

 

 

방법은 좀.. 복잡했다. 아닌가 난 귀차니즘이 심해서 복잡했나 .. :(

 

 

 

 

320x100

 

 

 

해결방법

 

01. [사이트 등록] 페이지에서 내가 등록한 사이트를 클릭한다.

 

 

 

02. 사이트를 클릭하면 다음과 같이 뜨는데, 여기서 좌측 메뉴 리스트에서 [검증] 클릭!

 

 

 

 

03. [검증] > [robots.txt] 클릭! 하면 다음과 같이 뜬다.

 

 

 

04.  스크롤을 내리면 [robots.txt 간단 생성]이 보인다. 여기서 [네이버 검색 로봇] [수집을 허용합니다] 클릭 후 [[다운로드]] 클릭!

 

 

 

05. 창을 닫지 말고 내 [티스토리 관리자 모드]페이지로 와서 좌측에 [스킨 편집] 클릭!

 

 

 

06. html 편집 클릭!

 

 

 

07. 상단 [파일업로드] 클릭 후 하단 [+추가] 클릭!

 

 

 

08. 아까 네이버 서치어드바이저에서 다운받았던 [robots.txt 파일] 클릭 후 [열기]

 

 

 

 

09. 그럼 업로드 리스트에 robots.txt 파일이 올라간 걸 확인 가능하다! 상단에 적용 클릭!

(적용 클릭해도 아무런 반응이 없다. 그냥 바로 적용이 되는 것 같음!)

 

 

 

 

 

 

 

 

 

10. 다시 아까 robots.txt 파일 생성했던 곳으로 돌아와서 robots.txt 검증에서 내 url 입력 후 확인!

검증 url은 내사이트/robots.txt 만 입력해주면 된다.

※ ★아래와 같이 "수집이 가능합니다." 라는 말이 뜨면 성공적으로 완료된 것이라고 한다!

 

 

 

11.  그럼 다시 간단 체크를 해보자!

 

 

 

 

12. 내 robots.txt를 찾지 못하지만.. 다른 항목은 제대로 검색이 된 것을 확인 가능했다!

다른 사람은 robots.txt도 정상적으로 찾던데.. 이 점은 잘 모르겠지만 어쨌든 허용 가능하게 된거니까 ㅎㅎ... 긍정적으로... 

 

 

 

이렇게 해결 완료했다!

 

 

혹시 이 포스팅을 보고 따라하다가 저와 같이 robots.txt를 찾지 못한다고 뜨는 분 중에 괜히 불안해서 상태를 정상적으로 변경하고 싶다면.. 말씀해주시면 빨리 구글링해서 해결 방안을 다시 찾아보도록 할게용 :)

저는 뭐 상관 없어서 그냥 냅두겠습니다!

 

 

 

 

네이버 서치 어드바이저 RSS 제출 및 사이트맵 제출하기 ▼

https://cording-cossk3.tistory.com/233

 

네이버 서치어드바이저 RSS 및 사이트맵 제출 방법

네이버 서치어드바이저 RSS 및 사이트맵 제출 방법 01. 네이버 서치어드바이저 검색해서 들어가기! 또는 링크 클릭하기 >>네이버 서치어드바이저 바로가기 [사이트맵 제출] 클릭! url은 내사이트/si

cording-cossk3.tistory.com

 

 

네이버 검색 유입에 도움이 되는 방법 

https://cording-cossk3.tistory.com/242

 

드디어 나도 네이버 검색 유입이 됐다!! - 티스토리 네이버 검색 유입 방법

드디어 네이버 검색 유입이 됐다 😁 비록 1번이지만 ㅋㅋㅋ 숫자 1이 이렇게 기쁠수가!! 사실 네이버 서치어드바이저에 등록을 하고도 유입이 0이라서 괜히 혼자 왜 안들어오지.. 이러고 있었다.

cording-cossk3.tistory.com

 

 

 

 

 

 

 

320x100

댓글