A crawlerek linkek követésével fedezik fel az oldalakat — ami működik, majd egyszer, és csak a jól linkeltekre. A sitemap az explicit leltár: minden URL, mikor változott utoljára, esetleg milyen másnyelvű alternatívái vannak. Nyilatkozat, nem garancia — de kiveszi a „sosem crawleltük azt az oldalt”-ot a kifogáslistából.
A lastmod-mező az, ami megéri a fenntartást: a becsületes időbélyeg arra utasítja a crawlereket, hogy a keretüket a változottra költsék. A sitemap, ami szerint ma minden módosult, arra tanítja a crawlereket, hogy figyelmen hagyják — ritka eset, amikor a robotnak hazudni aktívan árt.
Kapcsolódó fogalmak
robots.txt
Egyszerű szövegfájl a site gyökerében, ami megmondja a crawlereknek, mit hozhatnak le — utasítás gépeknek, nem lakat az ajtón.
Indexelés
A keresőmotor felvétele egy oldalt a kereshető adatbázisába — a crawling letölti, az indexelés megtalálhatóvá teszi; ami nincs indexelve, az láthatatlan.
Kanonikus URL
Címke, ami megnevezi azt az egy „igazi” címet, ami alatt a több URL-en elérhető tartalom él — hogy a keresők egyszer, a szánt példányt rangsorolják.
Ide tartozó munkapad
WebteljesítményÚjraépítés, ami mobilneten, telefonon is betölt, abban az országban, ahol az ügyfeleid tényleg vannak. A Core Web Vitals a mérőszám, a bevétel a cél.
