검색 서비스 방식

검색 서비스는 웹 로봇을 이용하여 여러 웹 사이트의 콘텐츠를 수집함.

웹 로봇은 무작위 접근 방식의 크롤링 기법을 이용하여 콘텐츠를 수집. 웹서버에 많은 부하를 줄 수 있고 정형화 되지 않은 URL과 수집 내용 때문에 검색 서비스에서도 수집 결과를 분석하기 어려운 단점이 있음.