خزش Crawl

خزش Crawl : وب بات‌ها که با نام خزنده یا اسپایدر نیز نامیده می‌شوند، به طور سیستماتیک اینترنت را خزش کرده، لینک‌ها را از صفحه‌ای به صفحه‌ی دیگر دنبال می‌کنند و ارتباطات میان صفحات را می‌یابند، کاری که در عمل دنیای وب را پایدار می‌کند. این عمل در حد چند ده میلیارد صفحه در روز توسط گوگل انجام می‌شود. البته سایت‌های دیگری نیز هستند که این کار را برای بررسی وضعیت سئو سایت شما انجام می دهند مانند MOZ و ahrefs . باز بودن و هدایت درست مسیر کراول یا خزش سبب می‌شود سایت شما بهترین نتایج را در سئو به دست آورد.