정답: 1. 웹 로봇(web robot)은 인터넷을 자동으로 탐색하며 정보를 수집하는 프로그램으로, 크롤링의 주체입니다. 따라서 크롤링과 가장 밀접한 관계가 있습니다. 웹 로딩, 블로그, 웹 로그 데이터는 크롤링 자체와 직접적인 관련이 없습니다.