Grunnen til at gammelt innhold fortsatt er søkbart i søkemotorene er at nettstedet ikke gir beskjed til søkemotorene om at sidene ikke lenger finnes.
I siste versjon av tellUs Search © har vi gjort det enkelt for utviklere å tilpasse nettsidene slik at man unngår dette problemet. Vi anbefaler alle våre kunder å ta dette i bruk snarest mulig.
Søkemotorene jobber på to måter for å vedlikeholde sine indekser;
1) De leter etter nytt innhold ("crawler")
2) De verifiserer allerede indeksert innhold
Dersom søkemotorene har indeksert innhold på en gammel lenke, for så å besøke samme lenke igjen for å oppdatere indekseringen av innholdet, vil søkemotoren slette hele indeksen dersom siden ikke finnes.
NB! Det er viktig å forstå at det ikke har noen betydning om nettstedet ikke lenger har noen aktive menyer til denne lenken. Søkemotoren har lenken lagret og har ikke behov for å navigere nettstedets menyer for å finne den.
Løsningen
Problemet ligger ofte i at nettstedet ikke forteller søkemotorene at siden ikke lenger finnes på gamle lenker ("404 page not found"). Dette gjelder også sider bygget med tellUs Search ©. Det er mulig å bygge disse sidene slik at de rapporterer til søkemotorene at siden ikke lenger eksisterer dersom et produkt er avpublisert/slettet. Dette er helt nødvendig dersom sidene skal forsvinne fra søkemotorene. Siste versjon av tellUs Search © har nå fått utvidelser som indikerer at produktet er borte og på denne måten blir det lettere å bygge den lille utvidelsen ("404 status header") som skal til for at utdaterte sider skal fjernes fra søkemotorene.
NB! Alle utviklere får dokumentasjon på hvordan dette kan gjøres i forbindelse med lanseringen av forrige versjon.
