네이버서치어드바이저 robots.txt가 존재하지 않습니다. 잘못된 정보

네이버 서치 어드바이저 robots.txt가 존재하지 않습니다 잘못된 해결방법들

네이버 서치 어드바이저 등록 후 웹페이지 최적화를 통해 내 티스토리가 얼마나 정상적으로 작동하고 있는지 확인이 가능한데요. 초반에 많이들 겪으시는 문제가 robots.txt가 존재하지 않습니다.라는 문구입니다. 인터넷상에 해당 문제를 해결하는 많은 방법들이 있는데 잘못된 정보들이 많아 소개합니다.

robott.txt 잘못된 정보

1. robots.txt란

우선 robots.txt 가 뭔지 아시면 추후에 블로그를 작성해 나가시고 관리해 나가실때 도움이 되실 거 같아 설명을 드립니다. 인터넷의 세상에는 수없이 많은 사이트가 있고 수없이 많은 검색엔진들이 존재합니다. 이 수없이 많은 사이트 중에서는 자신의 사이트가 노출되길 원하지 않는 경우도 있고, 자신의 사이트가 특정 검색엔진에서는 노출이 되지 않기를 원하는 경우도 있습니다. 그래서 robots.txt의 내용에 따라서 내 사이트에 대한 수집 권한을 허용하거나 제한을 할 수가 있습니다. 이것은 특정한 스킬이 아니라 국제권고안입니다. 그래서 해당 사이트에 robots.txt가 없으면 검색엔진들이 내 티스토리를 확인하지 못하게 됩니다.

 

결론부터 말씀드리면 인터넷에 해결방법이라고 돌아다니는 수많은 방법들은 정확히 말씀드리면 티스토리의 해결방법이 아닙니다.

 

2. 잘못된 해결방법 A

네이버 서치어드바이저 기능 중에 robots.txt를 간단하게 생성할 수 있다는 방법입니다. 실제로 네이버 서치어드바이저에는 robots.txt를 이런저런 설정을 한 이후에 간단하게 생성할 수 있는 기능이 있습니다. 도움말에도 빨간색으로 해당 반드시 해당 사이트의 루트 디렉터리에 위치해야 접근이 가능하다 라는 말도 적혀있습니다.

 

간단하게 생성한 robots.txt 파일을 티스토리 스킨편집에서 html 편집을 통해 업로드하라고 하는데요. 해당 파일을 업로드하시고 해당 파일의 주소를 확인해보시면 아까 위의 도움말처럼 사이트의 루트 디렉터리에 위치하는 것이 아니라 전혀 다른 주소가 나옵니다. 네이버 웹마스터 도구에서 생성한 robots.txt 파일은 저희같은 서비스를 통해 웹사이트를 이용하는 사람들이 아니라 본인들이 직접 만들어서 사용을 하는 경우에 필요한 것입니다. 

 

3. 잘못된 해결방법 B

티스토리 내에 있는 플러그인에서 메타태그등록을 사용하라는 방법입니다. 이 내용은 네이버 서치 어드바이저에 내 티스토리를 등록할 때 소유권 확인 등과 관련이 된 내용이지 robots.txt와는 상관이 없습니다.

 

4. robots.txt 진짜 해결하기

티스토리는 블로그를 생성하면 내 의도와는 1도 상관없이 자동으로 robots.txt 가 생성됩니다. 첨부터 그냥 만들어져 있습니다. 확인을 할수있는 방법이 있는데요, 내 티스토리 주소/robots.txt 입력하고 인터넷 주소창에 써보시면 쭉 내용이 나옵니다. 이건 존재한다는 얘기입니다.

 

간혹 존재하지 않는 경우가 있습니다. 이럴때는 티스토리 고객센터에 문의를 해보셔야 합니다.

또 간혹 존재한다고 나오는데 네이버 서치어드바이저에서는 계속 존재하지 않는다고 나올 때가 있습니다. 이럴 때는 네이버 고객센터에 문의를 해보셔야 합니다.

 

총 9개의 티스토리를 만들었고, 딱 한번 처음 블로그를 등록할 때 제 아이디가 해킹을 당한 적이 있어서 네이버 서치 어드바이저 이용상의 문제가 있었던 적을 제외하고는 모두 시간이 지나면 자동으로 robots.txt의 문제는 해결이 되었습니다. 일정 시간이 지나야 robots.txt가 정상으로 나오는 것이지 등록하자마자 바로 정상으로 뜨는 건 아닙니다. 길게는 4일 정도가 지나서 정상이 된 경우도 있고 그 기간 동안에 하나하나 포스팅하면서 글을 쓰시면 자연스레 등록이 됩니다.