Back to Question Center
0

Semalt: Joang ho thibela Darodar Robots.txt

1 answers:

Fomoro ea Robots.txt ke feshene e tloaelehileng ea litlhaku e nang le litaelo tsa hore na marang-rang a marang-rang kapa bots a lokela ho khasa site. Kopo ea bona e totobetse ho boitsebiso ba bots bo tloaelehileng libakeng tse ngata tse ntlafalitsoeng. Joaloka karolo ea Robot Exclusion Protocol (REP), faele ea robots.txt e etsa karolo ea bohlokoa ea ho kenya lihlooho tsa marang-rang le ho thusa seva ho netefatsa likōpo tsa mochine ka tsela e nepahetseng.

Julia Vashneva, e leng Semalt Mookameli ea Phahameng ea Bakhanni ba Phahameng, o hlalosa hore ho hokahanya ke karolo ea Search Engine Optimization (SEO), e leng ho akarelletsang ho fumana sephethephethe ho tsoa libakeng tse ling ka har'a marang-rang a hau. Bakeng sa li-link tse latelang "ho latela" ho fetisetsa motsoako oa motsoako, ho bohlokoa ho kenyelletsa faele ea robots.txt ho websaeteng ea hau ea marang-rang ho nka morupeli oa hore na seva se sebelisana joang le saete ea hau. Ho tsoa ho li-archive tsena, litaelo li teng ka ho lumella kapa ho hana litsela tse ling tsa mekhoa ea basebelisi ba ho sebelisa.

The Basic Format ea faele ea robots.txt

Faele ea robots.txt e na le mela e 'meli ea bohlokoa:

Moemeli oa moemeli: [lebitso la moemeli oa mochine]

Lumella: [URL mohala o sa lokelang ho khahloa]

Faele e feletseng ea robots.txt e lokela ho ba le melapo ena e 'meli. Leha ho le joalo, tse ling tsa tsona li ka ba le mela e mengata ea basebelisi le litaelo. Melao ena e ka 'na ea e-ba le lintho tse kang ho lumella, ho thibela kapa ho lieha ho tsuba. Ka tloaelo ho na le khetho ea moeli e arohanyang sete ka seng sa thuto. Ntho e 'ngoe le e' ngoe e lumellang kapa e sa lumelle taeo e arohane le khethollo ena, haholo-holo bakeng sa liroboto.txt le mela e mengata.

Mehlala

Ka mohlala, faele ea robots.txt e ka 'na ea e-na le lintlha tse kang:

Moemeli oa moemeli: darodar

Lumella: / plugin

Lumella: / API

Qoba: / _comments

Tabeng ena, ena ke thibelo ea robots.txt e thibelang moqapi oa websaete ea Darodar ho kena websaeteng ea hau. Ketsahalong e ka holimo, khoutu e thibela likarolo tsa marang-rang a kang li-plugins, API, le karolo ea litlhaloso. Ho tsoa tsebong ena, ho ka khoneha ho finyella melemo e mengata ho phethahatsa fomete ea mongolo oa robot ka katleho. Liroboto..Li-file tsa txt li ka khona ho etsa mesebetsi e mengata. Ka mohlala, ba ka ba ba loketse ho:

1. Lumella batho bohle ba ts'oang marang-rang hore ba khotsofalle leqephe la marang-rang. Ka mohlala;

Moemeli oa moemeli: *

Qoba:

Tabeng ena, tsohle tse ka sebelisoang ke basebetsi li ka finyelloa ke motho leha e le ofe ea ts'oang marang-rang a kōptjoang ho ea mocheng oa marang-rang.

2. Thibela li-websaete tse itseng ho tloha fensetereng e itseng. Ka mohlala;

Moemeli oa basebelisi: Googlebot

Qoba: / mohlala-subfolder /

Syntax ena e nang le lebitso la mosebedisi-agent Googlebot ke la Google. E thibela bot ho kena ho leha e le efe leqepheng la websaeteng ka khoele www.ourexample.com/example-subfolder/.

3. Thibela moqapi oa websaete e itseng ho tsoa leqepheng le itseng la websaete. Ka mohlala;

Moemeli oa moemeli: Bingbot

Qoba: / mohlala -subfolder/blocked-page.html

Bot ea botsebi ba motlakase ea motlakase ke ea Bing web crawlers. Mofuta ona oa li-robot.txt o thibela moqapi oa websaete oa Bing ho kena leqepheng le itseng ka mohala www.ourexample.com/example-subfolder/blocked-page.

Lintlha tsa bohlokoa

  • Ha ho motho e mong le e mong ea sebelisang faele ea hau ea robts.txt. Basebelisi ba bang ba ka 'na ba etsa qeto ea ho iphapanyetsa eona. Boholo ba baetsi ba marang-rang ba joalo ba kenyeletsa Trojans le malware.
  • Bakeng sa faele ea Robots.txt e lokelang ho bonahala, e lokela ho fumaneha ka har'a lihlooho tsa marang-rang ea marang-rang.
  • Batho ba hlalosang "robots.txt" ba na le bothata bo tebileng. Ka lebaka leo, ha ua tšoanela ho li fetola ka tsela leha e le efe ho kenyelletsoa likhallelo tsa lihlooho tse ling.
  • "/robots.txt" ke taolo ea sechaba. Motho e mong le e mong o ka khona ho fumana tlhahisoleseding ena ha ae kenya ho tse ling tsa URL. Ha ua lokela ho ngola lintlha tsa bohlokoa kapa maqephe ao u batlang hore ba lule ba le bang.
November 29, 2017
Semalt: Joang ho thibela Darodar Robots.txt
Reply