C
Na-crawl na Website
Kahulugan
(Konteksto: Pangkalahatan)
Isang web site na ang nilalaman ay naa-access ng mga search engine upang ang nilalaman ay ma-index.
Sinusundan ng isang crawler ang mga link sa web. Ang crawler ay tinatawag ding robot, bot, o gagamba. Pumupunta ito sa internet 24/7. Sa sandaling dumating ito sa isang website, nai-save nito ang bersyon ng HTML ng isang pahina sa isang napakalaking database, na tinatawag na index. Ina-update ang index na ito sa tuwing darating ang crawler sa iyong website at makakahanap ng bago o binagong bersyon nito.
Sanggunian:
Tingnan din:
Alternatibong "non-crawable" na website. Walang nangyayaring pag-index.