ইন্টারনেট দুনিয়ার বস এবং সবচেয়ে জনপ্রিয় সার্চ ইঞ্জিন গুগল প্রতিদিন লক্ষ লক্ষ পেইজ ইন্ডেক্স করে চলেছে। এই কাজে বিশেষ ধরনের গুগল এলগরিদম ব্যবহৃত হয় যাকে বলা হয় গুগল বট বা স্পাইডার। এইসব বট বিভিন্ন  ওয়েব সাইটে থাকা লিংক ধরে নতুন নতুন পেইজ ক্রল করে আরও জানুন…