وب اسکرپینگ یا جستجوگر داده‌ها هنوز در محافل عمومی و دانشگاهی مورد توجه قرار نگرفته است. با این حال، با افزایش حجم داده‌های وب در هر سال، تجزیه و تحلیل کلان داده‌ها به تدریج به بخشی اجتناب‌ناپذیر از تحقیقات علمی تبدیل می‌شود.