تفاوت بین index و crawl آگاه چیست؟
crawling: ربات گوگل هرازگاهی به‌ سایت‌ها مراجعه کرده و تمامی محتویات و کدهای موجود در صفحات را آنالیز می‌کند. درواقع crawling یعنی دنبال‌کردن لینک‌ها، پیداکردن صفحات و بررسی محتوای موجود در آن. ربات گوگل باید بتواند به‌راحتی تمامی اطلاعات موجود در صفحات سایت شما را تجزیه‌و‌تحلیل کند. جالب است بدانید که ساختار ربات گوگل مبتنی‌بر آخرین نسخه‌‌ی مرورگر کروم ساخته شده است و بر این اساس پشت‌صحنه سایت‌ها را بررسی می کند. البته مسلماً نحوه‌ی عملکرد آن‌ها یکسان نیست.
 indexing: گوگل یک فضای (مانند هارد کامپیوتر) عظیم تحت عنوان index دراختیار دارد که اصطلاحاً دیتابیس گوگل نامیده می‌شود. بنابراین indexing به‌معنیِ ذخیره‌سازی اطلاعات صفحات وب در دیتابیس گوگل است. ربات گوگل پس از crawl کردن صفحات، با استفاده از یکسری معیارها تصمیم می‌گیرد که کدام‌یک از آن‌ها شایستگیِ حضور در نتایج جستجو را دارند، سپس آن صفحات را در index خود ذخیره می‌کند.
از آنجایی که ربات گوگل با استفاده از نوعی headless browser (تعریف ساده: مرورگری که صرفاً کدها را نمایش می‌دهد) سایت‌ها را تحلیل می‌کند، به همین جهت تمامی کدهای پشت‌صحنه را نیز درک خواهد کرد.
اما صرفاً به کدهای سمت کاربر (client side) دسترسی دارد. بنابراین برای ربات گوگل هیچ فرقی ندارد که وب‌سایت شما با چه پلت‌فرمی پیاده‌سازی شده باشد. پس اگر نابغه‌ای در جهان فرمود؛ وردپرس برای سئو مضر است، بدانید و آگاه باشید که او یک استنداپ کمدین بی‌نظیر خواهد شد.