Uued vaatenurgad dubleerivale sisule

Soovin lubada Google'i robotitel indekseerida ainult minu index.php-d ja mõne kausta sisu. Kas see toimiks?

User-agent: * Allow: /index*.php Allow: /folder1/ Allow: /folder2/ Allow: /folder3/ Allow: /folder4/ Disallow: / 

Idee on see, et Google indekseerib järgmised URL-id:

  • http://example.com/folder1/discussionA/topic/
  • http://example.com/folder1/discussionB/topic/
  • http://example.com/folder1/discussionC/topic/
  • http://example.com/folder2/discussionD/topic/

ja välistada kõik muu.

  • 1 Mis on idee * aastal /index*.php?
  • Ütlete, et Google, aga kasutage User-agent: *. Kas soovite sihtida ainult Google'i robotit või mõnda robotit?

Keskendun üldiselt sellele, mida ma ei taha, et nad roomaksid, kuid arvan, et teie proov näib olevat sihtmärk. Ma eemaldaksin siiski esimese ja teise rea tühiku:

User-agent: * Allow: /index*.php Allow: /folder1/ 

Mozilla selgitab seda üksikasjalikumalt

none: Charles Robertson | none