구글이 불필요한 파일을 크롤링 해가는데 어떻게 막을 수 있을까요? > 질문과 답변

본문 바로가기

질문과답변

[해결] 구글이 불필요한 파일을 크롤링 해가는데 어떻게 막을 수 있을까요?

총 채택 포인트
50 포인트
채택된 회원에게 주는 후원 포인트
25 포인트
채택 후 작성자(코린) 회수 포인트
25 포인트

본문

안녕하세요 현재접속자를 보게 되면 구글이 크롤링을 해가는 것 같은데, 맞팔친구, 팔로워, 팔로잉, 구독회원만 퍼가는 것 같습니다. 심한 것은 &page=200이 넘습니다. ![!\[image\]](https://eyoom.net/data/editor/2411/2944235902_1731163443.02516.jpg) 그래서 구글에서 검색했을 때 아래와 같이 맞팔친구, 팔로워, 팔로잉, 구독회원만 구글 조회시 30페이지 넘게 나옵니다. 다른 게시글들은 거의 잘 안 보여요...ㅜㅜ ![!\[image\]](https://eyoom.net/data/editor/2411/2944235902_1731163523.96434.jpg) 화면에서 저 페이지로 들어가는 링크도 막아버렸고, sitemap.xml에도 php파일이 아니라서 따로 설정도 안되어 있는데 왜 그런걸까요...? 그리고 &page=숫자 이건 어떻게 생기는 걸까요??

댓글목록2

이윰EGG님의 댓글

채택
profile_image
아래의 링크 참고해 보기 바라며 이미 크롤링된 검색내용은 따로 요청하지 않는한 계속 검색 될 것 입니다.
https://developers.google.com/search/docs/crawling-indexing/robots/create-robots-txt?hl=ko&visit_id=638669660965608022-2990803054&rd=1

고맙습니다.

코린님의 댓글

profile_image
넵 감사합니다!
이윰빌더 시즌4 질문과 답변 게시판입니다.

질문과 답변 게시판에는 가능한 이윰 관리자가 답변을 드리지 않습니다. 회원간 활성화 될수 있도록 도움 부탁드리며, 질문자는 원하는 답변이 달릴경우 꼭 채택하여 주시기 바랍니다.

상품구매 및 유료상품 문의는 1:1문의 게시판을 이용해 주시기 바랍니다.

1:1문의 바로가기 : https://eyoom.net/bbs/qalist.php

전체 1,956 건 - 1 페이지
번호
제목
글쓴이
채택포인트
사이트 내 전체검색