개발 Q&A

제목 구글에서 사이트 정보를 봇이 긁어갈때 ..
글쓴이 수야디벨 작성시각 2015/03/20 10:02:32
댓글 : 3 추천 : 1 스크랩 : 0 조회수 : 12951   RSS

구글에서 사이트의 정보를 GoogleBot 이 긁어갈때 ,

정확히 어떤 원리로 긁어가는지는 해당 기업만 알고 있겠습니다만,

그로인해서 저희는 단지 사이트를 잘 읽어갈 수 있도록 알맞은 설정 해주는게 전부라고 알고 있는데.

여기서 문득 궁금한 점 하나 !


모름지기 사이트라면 , 권한에 따라서 볼수있는글 , 볼수 없는글이 존재 할 텐데,

일반 사용자가 볼수 없는 내용도 구글 Bot이 긁어가서, 구글에서 어쩌다 키워드가 맞아서 검색하면

그 글이 노출 될까요? 

(페이지를 클릭하면 해당 사이트의 권한때문에 접속은 안되지만, 기본적으로 구글에서 검색하면 제목과 
내용이 약 2줄 정도 보이니까요 ..)


대표적으로 CI 포럼 글이 구글에 잘 노출이 되던데요 .

여기 CI  같은 경우도 운영진들만 보실 수 있는 글이 있던데,

거기에 등록된 글 제목으로 검색하면 노출이 되시나요?

만약 노출이 된다면 ,이건 해결할수 없는 문제겠죠 ~?
 다음글 크롬 새창 띄우기 (7)
 이전글 프레임워크 조합과 웹서비스에 대한 궁금증 (2)
목록

댓글

변종원(웅파) / 2015/03/20 11:02:59 / 추천 0
로그인한 내용까지 긁어가지 않을겁니다. 그 내용이 보인다면 명백한 해킹이거나 프로그램을 잘못 만든겁니다
들국화 / 2015/03/20 11:45:12 / 추천 0
봇도 일반 브라우저 이용자와 같다고 보시면 됩니다.
링크를 자동으로 탐색하는 것일뿐이고요. 당연히 권한이 있어야  하고 볼수없는건 못보겠죠.
그리고 서버에서 어느봇만 허용할건지와 가져갈수 있는 부분과 가져가지 말라고 설정을 할수 있습니다.
그것도 규칙을 따르는 봇에만 해당 되기는 하겠죠.
수야디벨 / 2015/03/23 15:00:06 / 추천 0
그렇군요 . 감사합니다 ㅎ