Opis spletne strani

Pozdravljeni,

pred kratkim sem se za hobi začel ukvarjati z izdelavo spletnih strani. Svojo spletno stran(template) sem že postavil na internet z uporabo .tk domene in 1freehostinga toda ko iščem spletno stran v google iskalniku spletno stran najdem le tako da vpišem link(ker seveda ni optimizirana), ko pa jo najdem mi ne prikaže opisa spletne strani ampak piše le "Opis tega rezultata ni na voljo zaradi datoteke robots.txt za to spletno mesto – več o tem ."

moj robots.txt izgleda tako:
User-Agent: *
Disallow:
Disallow: /Images

Ko pa iščem druge dele strani kot je naprimer kontakt.html mi v opisu pokaže del vsebine s strani. V izvorni kodi imam tudi meta tag-e za description in keywords. Vnaprej hvala za odgovore. :D.

A ni funkcija robotov ravno to, da prečesajo vsebino in tako se ustrezno podatki vpišejo v iskalnike?

Tako je.

Recimo, da imaš CSS in JS datoteke pod /_common/ --> torej tam nima smisla, da Google brska za HTML datotekami ali kako drugo vsebino.
In takih direktorijev oz. lokacij je lahko kar precej na kakšni spletnih strani / aplikaciji in je fino preprečit indeksacijo oz. vsaj povedat SE (search enginu), da to ni vsebina.