웹 크롤러 차단하는 방법

제 웹사이트에 악성 크롤러가 과도하게 접근합니다. 효과적으로 차단하는 방법이 있나요?