Back to Question Center
0

Semalt: Auala e Palo ai Darodar Robots.txt

1 answers:

O le faila file Robots.txt o se faila faila masani lea e aofia ai faʻamatalaga ile auala e tatau ai ona togi e se taʻavale i luga o le 'upega tafaʻilagi. O lo latou faʻaaogaina o loʻo faʻaalia i totonu o sailiga suʻesuʻeina bots e taatele i le tele o 'upega tafaʻilagi. I le avea ai o se vaega o le Malie Exclusion Protocol (REP), faila file robots.txt o se vaega taua o le upega tafailagi o upega tafaʻilagi o loʻo i luga o le upega tafaʻilagi faapea foi le mafai e se faʻaumau ona faʻamaonia faʻamaonia talosaga e tusa ai.

Julia Vashneva, le Semalt Faʻasologa o Success Senior Client, faʻamatalaina o le fesoʻotaʻiga o se vaega o le Suʻesuʻega o Initaneti Suʻesuʻega (SEO), e aofia ai le mauaina o fefaʻatauaʻiga mai isi itū i lau niche. Mo le "mulimuli" sootaga e faʻafefe ai le sua o le sootaga, e taua le aofia ai o se faila robots.txt i luga o lau upega tafaʻilagi o loʻo ofoina avanoa e galue ai o se faiaoga i auala e fesootai ai le 'au ma lau' upega tafaʻilagi. Mai lenei faʻamaumauga, o loʻo i ai faʻamatalaga i le faatagaina poʻo le le faʻamaloloina o le auala e amio ai nisi tagata faʻapitoa e faʻaaogaina.

Le Faʻatulagaga Autu o se faila robots.txt

O se faila robots.txt e lua laina taua:

Sui sooupu: [igoa-sui sui]

Faʻalēaogāina: [Lā o le URL e le faʻafefe]

O se faila atoa robots.txt e tatau ona aofia ai nei laina e lua. Ae ui i lea, o nisi oi latou e mafai ona aofia ai laina tele o tagata faʻaoga-sooupu ma faatonuga. O nei faʻatonuga e mafai ona i ai ni vaega e pei o le avanoa, faʻavaivai poʻo le tolotolo-tolopo. E masani lava o se laina laina lea e vavaeeseina ai seti o faatonuga. O faʻatagaina pe faʻasalaga faatonuga e vaeluaina e lenei laina laina, aemaise lava mo le robots.txt ma laina tele

Faataitaiga

Mo se faʻataʻitaʻiga, o se faila robots.txt e aofia ai tulafono laiti e pei o:

Sui tagata faigaluega: darodar

Faalēaogāina: / plugin

Faalēaogāina: / API

Faalēaogāina: / _comments

I lenei tulaga, o le poloka robots.txt faila e faʻasaina ai le crawler web mai le Darodar mai le faʻafeiloaʻi i lau 'upega tafaʻilagi. I le faʻasologa o loʻo i luga, o poloka poloka poloka o le upega tafaʻilagi e pei o plugins, API, ma le vaega o faʻamatalaga. Mai lenei malamalamaaga, e mafai ona ausia le tele o aogā mai le faʻaaoga lelei o le failaina o le faila. Pulou..txt faila e mafai ona mafai ona faatino le tele o galuega. Mo se faʻataʻitaʻiga, e mafai ona latou sauni e:

1. Faʻatagaina mea uma e maua i luga o upega tafaʻilagi i totonu o le upega tafaʻilagi. Mo se faʻataʻitaʻiga;

Sui o tagata faigaluega: *

Faalēaogāina:

I lenei tulaga, o mea uma e mafai ona faʻaaogaina e le soʻo se masini komepiuta e talosagaina e alu i se 'upega tafaʻilagi.

2. Faʻamau se 'upega tafaʻilagi patino mai se faila patino. Mo se faataitaiga;

Sui-tagata: Googlebot

Faalēaogāina: / faʻataʻitaʻiga-failautusi /

O lenei syntax o loʻo i ai le igoa sui-igoa Googlebot o Google. E faʻasaina ai le mea e te le maua i soʻo se itulau web i le manoa www.ourexample.com/example-subfolder/.

3. Faʻamau se vaʻavaʻa faʻapipiʻi patino mai se 'upega tafaʻilagi patino. Mo se faataitaiga;

Sui tagata faigaluega: Bingbot

Faalēaogāina: /example-subfolder/blocked-page.html

O le faʻaaogaina o le Bing Bing-le tagata e faʻaaogaina-mea e faʻaaogaina i luga o taʻavale web Bing. Ole ituaiga o robots.txt faila e faatapulaa ai le taofiofi ole Bing mai le mauaina o se itulau patino i le manoa www.ourexample.com/example-subfolder/blocked-page.

Faamatalaga taua

  • E le o tagata faʻaoga uma e faʻaaoga lau laupepa robot.txt. O nisi tagata faaaoga e mafai ona filifili e le amanaiaina. O le tele o ia mea e aofia ai Trojans ma siama.
  • Mo se laupepa Robots.txt e mafai ona iloa, e tatau ona maua i luga o le upega tafaʻilagi o le upega tafaʻilagi.
  • O tagata o le "robots.txt" o ni mataupu maʻaleʻale. O se taunuuga, e le tatau ona e suia i soo se auala e aofia ai mataitusi tetele o nisi vaega.
  • O le "/robots.txt" o le lautele lautele. Soʻo se tasi e mafai ona maua lenei faʻamatalaga pe a faʻaopopo i mea o loʻo i totonu o soʻo se URL. E le tatau ona e faʻailoa mai ni auiliiliga taua poʻo ni itulau e te manaʻo latou te nonofo faʻatasi Source .
November 29, 2017