Semalt: Mis on Googlebot?



  1. Sissejuhatus
  2. Mis on Googlebot?
  3. Miks peaks Googleboti pärast muretsema?
  4. Miks ei indekseeri Googlebot mõnel saidil kõiki lehti?
  5. Kuidas optimeerida oma saiti Googleboti eelarve maksimeerimiseks
  6. Järeldus

Sissejuhatus

Kas teate, kuidas Google otsingu jaoks ressursse leiab? Nagu laialdaselt arvatakse, ei ole Google kõikehõlmav vaim, kes teab, mis on kogu veebis olev sisu. See pole mingi selgeltnägija, kes teab, kus on teie küsimusele täpne vastus.

Nagu igal teisel otsingumootoril, on ka sellel tarkvara, mis indekseerib teabe kogumiseks iga sekund miljardeid lehti (ja saite); eraldage sisu väärtus ja selle teema. Nii et otsingu tegemisel ammutatakse vastus nendelt lehtedelt - nagu raamatukogu.


See kõlab palju nagu SEO ja seda seetõttu, et sellel on palju pistmist. Kui sait on tõhusalt optimeeritud, näeb Google seda saiti kiiresti, loeb selle lehed läbi ja avab selle, kui otsingumootoriga seotud otsinguid tehakse.

Kuid seda ei juhtu kõigi saidi lehtede puhul, tehes mõned lehed nähtamatu maailmale. Miks see juhtub? Ja mida saab selle vastu teha (eriti väga oluliste lehtede puhul)? Siin on juhend, mis kirjeldab üksikasjalikult kõike Google'i veebisaitide indekseerimise (Googlebot) kohta, miks see ei indekseeri piisavalt lehti ja kuidas veebisaidi omanik saab veebisaidi optimeerimist ja SEO -d kasutada Googleboti indekseerimise eelarve maksimeerimiseks.

Mis on Googlebot?



Ämblik! Roomik! Need on Googlebotile antud populaarsed nimed. Seda seetõttu, et see toimib nii. Tarkvara on loodud indekseerimiseks ja miljardite veebisaitide lehtede vaatamiseks, mis on avalikkusele avaldatud.

See on õige - kui veebisait jääb privaatseks, ei saa Googlebot lihtsalt oma lehti läbi skannida, tuletage meelde, et ämblik pole selgeltnägija. See järgib lihtsalt lehe linke (ühelt lehelt teisele), seejärel jätkab andmetöötlust. Kui see on lõpule viidud, koondatakse teave seejärel indeksisse (lihtne meelde jätta Goggle'i raamatukoguna või poes).

Selle tarkvara olemasolu tõttu saab Google vähem kui sekundiga kokku koguda ja koguda teavet, mis ulatub üle miljoni gigabaidi (GB) (okei - nüüd on see võlu). Seejärel tõmbab Google selle regulaarselt uuendatava indeksi hulgast välja ressursse iga Interneti -otsingu jaoks nii lauaarvutis kui ka mobiilseadmes.

Miks peaks Googlebot muretsema?

Googleboti indekseerimisel on palju pistmist veebisaidi SEO -ga (otsingumootori optimeerimine). Ämbliku kogu olemus on koguda teavet saidi lehtedelt, et seotud teemadel otsinguid tehes saaks see lehte kuvada ühe online -otsingutulemusena. Seega, kui Googlebot indekseerib enamiku saidi lehtedest pidevalt, suureneb nähtavus, mis suurendab saidi liiklust sellisel lehel (mis on üks eesmärkidest?).

Kasutage seda illustratsiooni:

X -l on veebisait, mille leht on sellel teemal: professionaalne SEO veebisaitidele. Ja Y otsib veebisaidi SEO -d. Kui Googlebot on indekseerinud X -i lehe SEO -s ja selle indekseerinud, oleks see üks Google'i otsingutulemustes ilmuvatest tulemustest. Sama kehtib ka muude seotud otsingute kohta, isegi kui seda juhtub sada korda päevas kogu maailmas.

Pange tähele, et sellel on ka teisi rõhutavaid tegureid, näiteks veebisaidi hea struktuur, seostatav ja kiire saidi laadimisaeg. Kuid ainult a SEO ekspert aitab tagada, et neid tehakse õigesti ja et saidi leht kuvatakse Google'i otsingutulemuste esimesel lehel.


Miks ei indekseeri Googlebot mõnel saidil kõiki lehti?

Google'i SEO kontoritunnil toimunud hangoutides esitati küsimus, miks Googlebot ei indekseerinud mõnel saidil piisavalt lehti. Veebiserverile on avalikult avaldatud üle sadade miljardite lehtede. Inimesed avaldavad serveris iga päev uue lehe, mis tähendab, et Googlebot saab rohkem lehti indekseerida. Kuid mõnikord ei tööta robot ootustele; see on; koguda vähem kui sekundiga üle miljoni GB teavet. Selle põhjuseks võib olla mitu põhjust.

Esiteks võib juhtuda, et indekseerimiseks on võrgus liiga palju sisu, lehti ja veebisaite. Ja mõned neist on madala kvaliteediga, teistel on saidi aeglane laadimiskiirus ja ülejäänutel võib olla ebaoluline sisu, millel on keeruline saidistruktuur (või midagi muud, mis töötab vastu heale kasutajakogemusele). Seetõttu lõi Google strateegia ainult kvaliteetsete veebilehtede indekseerimiseks ja madalama kvaliteediga lehtede välistamiseks. Nii saab lehti filtreerida ja vähendada (selle asemel, et indekseerida kõiki lehti veebis - nii väärtuslikke kui ka mitteväärtuslikke lehti).

Kuid ülaltoodud ei vasta täielikult küsimusele: Miks ei indekseeri Googlebot kõiki saite? Huvitav küsimus on pigem see, miks Googlebot ei indekseeri saidi kõiki lehti (või piisavalt lehti). Ja sellele on kaks vastust. Pikk ja lühike vastus:

Lühike vastus

Google omistab iga saidi indekseerimisele teatud hulga ressursse ja aega päevas. Seda nimetatakse saidi indekseerimiseelarveks. Seetõttu teeb robot selle eelarve piires oma indekseerimise ja indekseerimise. Niisiis, üle kümne tuhande lehega veebisaidi puhul ei indekseeritaks kõiki lehti.

Siiski on sellel veel midagi, mis viib meid pika vastuseni:

Pikk vastus


Roomamiseelarve määrab lehtede arvu, mida Googlebot saab iga päev saidi kohta indekseerida ja indekseerida. Kuid nagu varem mainitud, on selles palju muudki. Mõned tegurid määravad ämbliku tempo, indekseerimise eelarve piires iga saidi kaudu roomates. On loogiline? See tähendab, et kuigi eelarve on loonud piirangu, võivad mõned tegurid robotti kiirust kiirendada või aeglustada. Nad sisaldavad:
  1. Aeglane server: Kui serveri reageerimisaeg on oluliselt aeglane, võib see muuta kiirust, millega robot indekseerimise eelarve piires iga lehe läbi roomab. Veebisaitide omanikud saavad neid oma roomamisstatistika aruandes kontrollida. Soovitatav on, et kõik, mis ületab 300 millisekundit, pole hea reageerimisaeg.
  2. Veebisaidi serveri host: Kui veebisaiti hostitakse jagatud serveris, võib see aeglustada iga lehe Google'ile esitamise kiirust indekseerimise ajal. Seda seetõttu, et teised sama serveri saidid võivad suurte ressursside kasutamisel seda aeglustada. See on veelgi hullem, kui sama server majutab paljusid saite.
  3. Rouge robotid: Need on muud robotid, mis võivad Googleboti tegevust takistada, blokeerida või aeglustada. Neid võib esineda erinevates vormides ja mõnikord vajab veebisait nende robotite toimingute haldamiseks ja kontrollimiseks professionaalset abi.
  4. Veebisaidi roomatavus: See on indekseerija juurdepääs veebisaidi kõikidele lehtedele. Kui tarkvaral on lihtne juurdepääs saidi sisule, indekseeritakse paljud lehed indekseerimise eelarve piires.

Kuidas oma saiti optimeerida, et maksimeerida Googleboti eelarvet


Eelmises osas arutasime tegureid, mis määravad, kui kiiresti (või kui aeglaselt) Googlebot lehte roomab. Kuid inimene saab enamat teha, et maksimeerida, mitu lehekülge robot eelarve piires roomab. Lühidalt, siin on mõned asjad, mida veebisaidi omanik saab teha, et maksimeerida, kui palju lehti Googlebot roomamiseelarve piires päevas indekseerib ja indekseerib.
  1. Koostage saidikaart: See on üks asi, mida saab teha, et aidata Googlebotil saidil kiiremini läbi roomata. Saidi kaardi saab installida, luua saidiplaani generaatorist või luua nullist.
  2. Investeerige saidi korraldamisse: See on seotud veebisaidi struktuuri ja saidi lehtede kategoriseerimisega. Kui sait on üles ehitatud nii, et külastajad saavad hõlpsasti aru saada ja selles navigeerida, on suure tõenäosusega Googlebotil lihtne seda läbi vaadata.
  3. Veebisaidi optimeerimine: See võtab kokku kõik ülaltoodud punktid. Kui veebisaiti pidevalt (õigel viisil) optimeeritakse, struktureeritakse veebisaidi liides õigesti ja luuakse saidiplaan. Muude asjade hulka kuulub kontroll indekseerimist blokeerivate tegurite üle (nt robots.txt), pealkirjade optimeerimine, sisu loetavus, sisu väärtus ja palju muud. Veebisaidi õige optimeerimine aitab Googlebotil sellise saidi lehti kiiremini skannida.

Järeldus

Googlebotit võib vaadelda väikese Interneti -robotina, kes töötab Google'i heaks. See käib veebisaitide saamise kohta veebiserverist veebisaitide linkide kaudu. Seejärel vaatab see iga lehe läbi ja lisab selle indekseeritud teabe kogusse. Kuid mitmete tegurite ja muutujate tõttu ei saa robot indekseerida iga saidi kõiki lehti (tegelikult mõnikord sellest ei piisa). Ja kõigist mainitud teguritest ja lahendustest on lihtsaim lahendus palgata selline professionaalne ettevõte Semalt mis suudab teha kõike vajalikku õigel viisil ja õigel ajal, et tagada teie veebisaidi oluliste lehtede - kui mitte kõigi lehtede - indekseerimine ja indekseerimine.

send email