Kako pretraživači pronalaze, indeksiraju i indeksiraju vaš sadržaj?

Ne preporučujem često klijentima da izgrade sopstvenu e-trgovinu ili sisteme za upravljanje sadržajem zbog neviđenih opcija proširivosti koje su danas potrebne – prvenstveno fokusirane na pretragu i društvenu optimizaciju. Napisao sam članak o odabirom CMS-a, a to još uvijek pokazujem kompanijama s kojima radim i koje su u iskušenju da izgrade svoj sistem upravljanja sadržajem.

Kako funkcioniraju pretraživači?

Počnimo s radom pretraživača. Evo sjajnog Google pregleda.

Međutim, apsolutno postoje situacije u kojima je prilagođena platforma neophodna. Kada je to optimalno rješenje, i dalje tjeram svoje klijente da izgrade potrebne funkcije za optimizaciju svojih web stranica za pretragu i društvene medije. Tri ključne karakteristike su neophodne.

• robots.txt
• XML Sitemap
• Metadata

Što je datoteka Robots.txt?

robots.txt datoteka - robots.txt datoteka je obična tekstualna datoteka u korijenskom direktoriju web-mjesta i govori tražilicama što bi trebali uključiti i isključiti iz rezultata pretraživanja. Poslednjih godina pretraživači su takođe tražili da u datoteku uključite putanju do XML mape sajta. Evo jednog mog primjera, koji omogućava svim botovima da indeksiraju moju stranicu i također ih usmjerava na moju XML mapu stranice:

User-agent: *
Sitemap: https://martech.zone/sitemap_index.xml

Što je XML karta web stranice?

XML Sitemap - Kao HTML je za gledanje u pretraživaču, XML je napisan da se programski probavlja. An XML sitemap je tabela svake stranice na vašem sajtu i kada je zadnji put ažurirana. XML mape sajta takođe mogu biti lančano povezane… to jest, jedan XML Sitemap se može odnositi na drugi. To je sjajno ako želite organizirati i logično raščlaniti elemente svoje stranice (Pitanja i odgovori, stranice, proizvodi, itd.) u njihove vlastite Sitemapove.

Sitemapovi su od suštinskog značaja da bi tražilice efektivno saznale koji sadržaj ste kreirali i kada je zadnji put uređen. Proces pretraživača prilikom odlaska na vašu web lokaciju nije efikasan bez implementacije mape stranice i isječaka.

Bez XML karte web mjesta, rizikujete da vaše stranice nikada ne budu otkrivene. Što ako imate novu odredišnu stranicu proizvoda koja nije povezana interno ili eksterno? Kako to Google otkriva? Pa, dok se ne pronađe link do njega, nećete biti otkriveni. Srećom, pretraživači omogućavaju sistemima za upravljanje sadržajem i platformama za e-trgovinu da im otvore crveni tepih!

1. Google otkriva vanjsku ili unutarnju vezu do vaše web lokacije.
2. Google indeksira stranicu i rangira je prema njenom sadržaju i sadržaju i kvalitetu web stranice koja upućuje na link.

Sa XML Sitemapom, otkrivanje ili ažuriranje vašeg sadržaja ne prepuštate slučaju! Previše programera pokušava koristiti prečice koje i njima škode. Oni objavljuju isti bogati isječak na cijeloj web lokaciji, pružajući informacije koje nisu relevantne za informacije o stranici. Oni objavljuju mapu sajta sa istim datumima na svakoj stranici (ili se sve ažuriraju kada se jedna stranica ažurira), postavljajući pretraživačima u redove da se igraju sa sistemom ili da su nepouzdani. Ili uopšte ne pinguju pretraživače... tako da pretraživač ne shvata da je objavljena nova informacija.

Šta su metapodaci? Mikropodaci? Rich Snippets?

Bogati isječci pažljivo su označeni mikropodacima skriveno od gledatelja, ali vidljivo na stranici za korištenje pretraživačima ili stranicama društvenih medija. Ovo je poznato kao metapodaci. Google se pridržava Schema.org kao standard za uključivanje stvari kao što su slike, naslovi, opisi i mnoštvo drugih informativnih isječaka kao što su cijena, količina, informacije o lokaciji, ocjene, itd. Šema će značajno poboljšati vidljivost vašeg pretraživača i vjerovatnoću da će korisnik kliknuti.

Facebook koristi OpenGraph protokol (naravno, ne mogu biti isti), X čak ima isječak za navođenje vašeg X profila. Sve više i više platformi koristi ove metapodatke za pregled ugrađenih veza i drugih informacija kada se objave.

Vaše web stranice imaju osnovno značenje koje ljudi razumiju kada čitaju web stranice. Ali pretraživači slabo razumiju ono o čemu se raspravlja na tim stranicama. Dodavanjem dodatnih oznaka u HTML vaših web stranica - oznaka koje kažu: "Hej pretraživač, ove informacije opisuju ovaj određeni film, mjesto, osobu ili videozapis" - možete pomoći pretraživačima i drugim aplikacijama da bolje razumiju vaš sadržaj i prikazati ga na koristan, relevantan način. Mikropodaci su skup oznaka, uveden sa HTML5, koji vam omogućava da to učinite.

Schema.org, što su MicroData?

Naravno, ništa od toga nije potrebno ... ali toplo ih preporučujem. Na primjer, kada podijelite vezu na Facebooku, a ne pojavi se slika, naslov ili opis ... malo će ljudi biti zainteresirano i stvarno kliknuti. A ako se vaši isječci sheme ne nalaze na svakoj stranici, naravno da se i dalje možete pojaviti u rezultatima pretraživanja ... ali konkurenti vas mogu pobijediti kada prikažu dodatne informacije.

Registrirajte svoje XML karte web mjesta pomoću Search Consolea

Ako ste izgradili vlastiti sadržaj ili platformu za e-trgovinu, imperativ je da imate podsistem koji pinguje pretraživače, objavljuje mikropodatke, a zatim daje važeći XML sitemap za sadržaj ili informacije o proizvodu koji se mogu pronaći!

Kada se vaša datoteka robots.txt, XML sitemap i bogati isječci prilagode i optimiziraju na cijeloj web lokaciji, ne zaboravite se registrirati za svaku tražilicu Pretraga Console (takođe poznat kao webmaster alat) gdje možete pratiti zdravlje i vidljivost vaše stranice na pretraživačima. Možete čak odrediti putanju vašeg Sitemap-a ako nijedna nije navedena i vidjeti kako ga tražilica konzumira, ima li problema s njim ili ne, pa čak i kako ih ispraviti.

Provucite crveni tepih na pretraživače i društvene mreže i vidjet ćete da je vaša web stranica bolje rangirana, vaši unosi na stranicama rezultata tražilice su više kliknuli, a vaše stranice više se dijele na društvenim mrežama. Sve se zbraja!

Kako Robots.txt, Sitemaps i MetaData rade zajedno

Kombinacija svih ovih elemenata je poput postavljanja crvenog tepiha za svoju web lokaciju. Evo procesa indeksiranja koji bot provodi zajedno sa načinom na koji pretraživač indeksira vaš sadržaj.

1. Vaša web lokacija ima datoteku robots.txt koja se također odnosi na vašu XML lokaciju web lokacije.
2. Vaš CMS ili sistem e-trgovine ažurira XML Sitemap sa bilo kojom stranicom i datumom objavljivanja ili uređuje informacije o datumu.
3. Vaš CMS ili sistem e-trgovine pinguje pretraživače kako bi ih obavijestio da je vaša stranica ažurirana. Možete ih direktno pingovati ili koristiti RPC i uslugu kao što je Ping-o-matic za slanje na sve ključne tražilice.
4. Tražilica se odmah vraća, poštuje datoteku Robots.txt, pronalazi nove ili ažurirane stranice putem mape stranice, a zatim indeksira stranicu.
5. Kada indeksira vašu stranicu, koristi naslov, meta opis, HTML5 elemente, naslove, slike, alt oznake i druge informacije kako bi pravilno indeksirao stranicu za primjenjiva pretraživanja.
6. Kada indeksira vašu stranicu, ona koristi naslov, meta opis i mikropodatke bogatog isječka kako bi poboljšala stranicu rezultata tražilice.
7. Kako druge relevantne web lokacije vode do vašeg sadržaja, vaš se sadržaj bolje rangira.
8. Kako se vaš sadržaj dijeli na društvenim mrežama, navedeni bogati isječci informacija mogu pomoći u pravilnom pregledu vašeg sadržaja i usmjeriti ga na vaš društveni profil.