Robots txt -Pirmas žvilgsnis - WordPress, Shopify ir PHPFusion programuotojų bendruomenė

Navigacija

Vartotojų tinkle

Prisijungusių svečių: 76
Prisijungusių narių: 0
Prisijungusių narių nėra

Registruoti nariai: 25,959
Naujausias narys: Simbijanas

Naujausi straipsniai

Įprasti:

IMG BBKodas

Pamoka ,nemokamo php...

HTML lentelės

Išnykstanti reklama

Kalendorius

Skirti naujokams:

Mano profilis įdėj...

PHP-Fusion V7.02.03 ...

Keletas pamokėlių ...

Paskutiniai nariai

Reikalas	19:12:26
Simbijanas	5 savaitės
Karinacraft	6 savaitės
Žmogus	9 savaitės
Bruksnys	13 savaitės
Darexs	16 savaitės
Nepas	17 savaitės
keistuole	19 savaitės
Gizmis	20 savaitės
Rytis	30 savaitės
MaFetas	34 savaitės
ozzWANTED	35 savaitės
saulyzas	37 savaitės
TOMIJUS	38 savaitės
Jaunelis	54 savaitės
lanis	54 savaitės
And2s	55 savaitės
Memento Mori	60 savaitės
Quwqkibor	62 savaitės
asirija	66 savaitės

Informacija:

OS: Unknown
Naršyklė: Nežinoma
IP: 216.73.216.195
Naujienų: 529
Straipsnių: 235
Temų: 52,589
Postų: 522,547
Postų pask. parą: 1
Shout'ų pask. parą: 0
P.S.C. pask. parą: 1
Nuorodų kataloge: 13

Lankomumo Statistika

Peržiūrų šiandien: 22

Iš viso peržiūrų: 22948724

Prisijungti

REGISTRUOTIS

Pamiršai slaptažodį?
Paprašyk naujo
Aktyvuoti save

Šaukykla

Jei norite rašyti žinutes, turite prisijungti.

Žmogus
2025 Geg. 31 10:05:18
Kas geresnio?

Nepas
2025 Bal. 9 17:04:13

Nepas
2025 Bal. 9 17:04:08

Gizmis
2025 Kov. 15 14:03:50
OMG, smagu matyt sita puslapi veikianti

ozzWANTED
2024 Lap. 30 15:11:14
Taip, vis dar up

Šaukyklos archyvas

Apklausa

Archyvas

Reklama 400x60

Automatizuotas hostingas

Robots.txt -Pirmas žvilgsnis

Robots.txt failas naudojamas paieškos varikliams teisingai oreantuoti svetainėje, nurodant kokį turinį indeksuoti o kurio nerodyti. Šio failo pagalba galite ir visiškai uždrausti paieškos vorams matyti jūsų svetainę

Robots.txt Pradmenys
Norėdami pasidaryti robots.txt jūms tereikia atsidaryti notepad (ar kitą tekstų redaktorių) ir išsaugoti parašytą failą kaip robots.txt Tada jūms teliks patalpinti robots.txt faila pagrindinėje tinklapio direktorijoje.

Yra keletas svrbiausių parametrų rašant šį failą: ā€User-agentā€™ ā€Allowā€™ ā€Disallowā€™. User agent parametras nurodo kuriam paieškos voriukui skirta komanda. Disallow parametras nurodo kurias vietas ar failus/pletinius neindeksuoti.

Leisti visus paieškos robotus
User-agent: *
Disallow:

Uždrausti visus paiesškos robotus
User-agent: *
Disallow: /

Neleisti Google paieškos robotui pas jus lankytis
User-agent: Googlebot
Disallow:

Daugiau paremetrų
Galite naudoti parametrą ā€Allowā€™. Jei pavyzdžiui norite uždrausti googlei indeksuoti visus paveikslėlius išskyrus vieną

Leidžiame indeksuoti tik vieną išskirtinį paveikslėlį

User-Agent: Googlebot
Disallow: /images/
Allow: /images/example.gif

Kitas svarbus parametras kurį rekomenduoju naudoti - ā€Sitemapā€™.

Nurodome kur yra tinklapio žemelapis (sitemap)
User-agent: *
Disallow:
Sitemap: http://www.uzdarbis.biz/sitemap.xml

Wordpress pavyzdys
Štai pavyzdys kurį naudoja manasis wordpress naudojantis blogas

User-agent: *
# Neleidžiame indeksuoti failų esančių šiose direktorijose

Disallow: /cgi-bin/
Disallow: /stats/
Disallow: /dh_
Disallow: /wp-admin/
Disallow: /wp-includes/
Disallow: /contact/
Disallow: /wp-content/b
Disallow: /wp-content/p
Disallow: /wp-content/themes/askapache/4
Disallow: /wp-content/themes/askapache/c
Disallow: /wp-content/themes/askapache/d
Disallow: /wp-content/themes/askapache/f
Disallow: /wp-content/themes/askapache/h
Disallow: /wp-content/themes/askapache/in
Disallow: /wp-content/themes/askapache/p
Disallow: /wp-content/themes/askapache/s
Disallow: /trackback/
Disallow: /*?*
Disallow: */trackback/

User-agent: Googlebot
# Neleidžiame indeksuoti failų su šiais plėtiniais

Disallow: /*.php$
Disallow: /*.js$
Disallow: /*.cgi$
Disallow: /*.xhtml$
Disallow: /*.php*
Disallow: */trackback*
Disallow: /*?*
Disallow: /z/
Disallow: /wp-*
Allow: /wp-content/uploads/

# Leidžiame google robotui indeksuoti paveikslėlius.

User-agent: Googlebot-Image
Allow: /*

# Leidžiame adsense botui naršyti ir ieškoti raktažodžių

User-agent: Mediapartners-Google*
Disallow: /*?*
Allow: /about/
Allow: /contact/
Allow: /wp-content/
Allow: /tag/
Allow: /*.php$
Allow: /*.js$

# Neleidžiame archyvuoti tinklapio

User-agent: ia_archiver
Disallow: /

# uždraudžiame lankytis duggmirror
User-agent: duggmirror
Disallow: /
Apibendrinimas
Robots.txt nėra kažkas labai sudėtingo, tačiau pravers apsaugant administratoriau ā€ploteliā€¯ ar privačias zonas tinklapyje. Jei turite minčių kaip papildyti šį straipniuką leiskite man žinoti :)

Norėdami patalpinti šią informaciją savo tinklalapyje, nepamirškite nurodyti straipsnio autoriaus tinklalapio adreso: [url]http://uzdarbis.biz[/url]