close
menu
search

C# 으로 robots.txt 파일을 읽어 해당 URL이 봇 접근이 제한되는 URL인지 판단하는 소스

님
0 투표
C# 으로 robots.txt 파일을 읽어 해당 URL이 봇 접근이 제한되는 URL인지 판단하는 소스좀 알려주세요.

당신의 답변

보여지는 당신의 이름 (옵션):
개인정보 보호: 이메일 주소는 이 알림을 발송하기 위해 사용됩니다.
안티-스팸 확인:
앞으로 이 검증을 피하려면,로그인 혹은 가입 하시기바랍니다.

관련 질문

구로역 맛집 시흥동 맛집
이 포스팅은 쿠팡 파트너스 활동의 일환으로, 이에 따른 일정액의 수수료를 제공받습니다.
Powered by NANUMTiP
add
...