Izvēle

Es neesmu pārliecināts, vai man vajadzētu pievienot savas vietnes konfidencialitātes politiku failam robots.txt vai nē. Es vēlos ievērot labu SEO praksi. Man nav pamata slēpt savu privātuma politiku.

Argumenti pret: Es vēlos, lai es būtu redzams un netiktu slēpts juridiskās lapas. Tas ir maz ticams, taču daži lietotāji varētu patiesi vēlēties to atrast meklētājprogrammā.

Argumenti par: advokāti / advokāti mēdz atkārtoti izmantot šos dokumentus, tāpēc manis iesniegtais teksts var nebūt unikāls. Lapa nav īsti tāda, kas cilvēkiem būtu svarīga, lai nokļūtu no meklētājprogrammas.

Kāds padoms?

  • Skatiet arī: Izmantojiet robots.txt, lai nepieļautu, ka Google pārmeklē un indeksē privātuma politiku, noteikumus un nosacījumus un garantijas

Jūsu argumenti pret šo juridisko lapu indeksēšanas nebloķēšanu ir pamatoti. Mets Cuts 2009. gadā šeit izveidoja videoklipu par šo pašu tēmu:

https://www.youtube.com/watch?v=unEML5n5vTo

Lai gan tas nav skaidrs “jā” vai “nē” no Google puses, otrs svarīgais jautājums ir "vai šīs lapas ir svarīgas maniem lietotājiem?". Ja jā, Google tie ir jāatrod.

Pamatojoties uz mūsu pētījumu, kuru esam rakstījuši par šo tēmu savā emuārā, mēs atklājam, ka šīs ir izplatītas juridiskas lapas. Google zina, ka šīs politikas ir noteiktas likumā un ka juridiskās lapas nav bagātas ar saturu un ka jums, visticamāk, ir līdzīgs saturs kā citām vietnēm šajās lapās.

Ja jūs nolemjat bloķēt šo lapu indeksēšanu, izmantojiet meta robots taga vietā robots.txt:

<meta name='robots' content='noindex, nofollow' />

Jebkura kļūda robots.txt iespējams, visu jūsu vietni Google neatstās. The meta robots tag ir droša iespēja to pārvaldīt.

  • Es gribētu teikt, ka Google cer atrast šīs lapas augstas kvalitātes vietnēs. Jums vajadzētu ļaut šos juridiskos dokumentus pārmeklēt un indeksēt, jo Google jau zina, kā ar tiem rīkoties, un tie ir kvalitatīvs signāls.
  • Mazs punkts: kļūda robots.txt var apturēt visas jūsu vietnes pastāvēšanu rāpoja, bet pats par sevi vietne netiks indeksēta. Svarīga atšķirība.

Izvairieties atsaukties uz lapu robots.txt par privātuma vai pakalpojumu sniegšanas noteikumiem. Vislabākā SEO prakse būtu izveidot meta robotus ar noindex un nofollow norādījumiem galvas sadaļā šādi:

<meta name='robots' content='noindex,nofollow'> 

Tādā veidā jūsu privātuma lapa netiks indeksēta.

Lietotājam šī lapa ir jāpadara pieejama, kājenē izveidojot iekšēju saiti. Tādā veidā arī meklētājprogrammas varēs atrast lapu un pēc tam atrast noindex, nofollow instrukcijas.

Jūs varat izmantot citas pieejas, bet man tas ir labākais. Padariet savu vietni vienmēr rāpojamu un izmantojiet robotu failu, lai aizsargātu sevi un citus rāpojošos resursus.

  • Ja tas ir "noindex, nofollow", kāpēc gan neievietot to robots.txt? Būtu labi saprast iemeslu.
  • Robotu fails @keith negarantēs izvairīšanos no lapu indeksēšanas. Ja kāds cits avots novirza uz konkrētu lapu, šī lapa joprojām var tikt indeksēta. Manuprāt, vēlams to izmantot noteikumu noteikšanai, lai izvairītos no robotiem, kas pārmeklē mapes, konkrētus URL modeļus, tikai atļautas vietņu sadaļas utt. Dažreiz roboti var vai neievēro tā norādījumus, citi apgalvo, ka tas ir arhaisks. Kā jau teicu, izmantojiet to, lai ietaupītu robotus, bet lielākām vietnēm - kādu joslas platumu vai servera resursus.
  • Pateicība, kurai ir daudz jēgas (es esmu nobalsojis, jo tas bija ļoti noderīgi).
  • @keith neuztraucieties, es priecājos, ka es varētu precizēt, kāpēc izmantot meta tagu :)

strādāja par jums: Charles Robertson | Vēlies ar mums sazināties?