Apache'i logi kontrollides näen, et baidu on viimase 2 nädala jooksul 10 korda päevas minu veebisaiti roomanud.

Asi pole selles, et ma sellest väga hooliksin, aga ma olen tõesti uudishimulik, miks ta seda teeb. See on tõesti väike üheleheline veebisait, kus pole palju sissetulevaid linke.

Kas selle taga on mingi põhjus?

220.181.108.169 [10/Mar/2012:10:41:29 +0100] 'GET / ... +http://www.baidu.com/search/spider.html)' 180.76.5.197 [10/Mar/2012:11:02:02 +0100] 'GET / ...robots.txt +(+http://www.baidu.com/search/spider.htm)' 123.125.71.100 [10/Mar/2012:11:33:15 +0100] 'GET / ... +http://www.baidu.com/search/spider.html)' 220.181.108.167 [10/Mar/2012:11:33:52 +0100] 'GET / ... +http://www.baidu.com/search/spider.html)' 123.125.71.116 [10/Mar/2012:12:24:48 +0100] 'GET / ... +http://www.baidu.com/search/spider.html)' 220.181.108.172 [10/Mar/2012:12:25:05 +0100] 'GET / ... +http://www.baidu.com/search/spider.html)' 123.125.71.111 [10/Mar/2012:13:33:22 +0100] 'GET / ... +http://www.baidu.com/search/spider.html)' 220.181.108.167 [10/Mar/2012:13:34:03 +0100] 'GET / ... +http://www.baidu.com/search/spider.html)' 220.181.108.168 [10/Mar/2012:14:12:05 +0100] 'GET / ... +http://www.baidu.com/search/spider.html)' 123.125.71.107 [10/Mar/2012:14:23:41 +0100] 'GET / ... +http://www.baidu.com/search/spider.html)' 220.181.108.176 [10/Mar/2012:14:23:58 +0100] 'GET / ... +http://www.baidu.com/search/spider.html)' 123.125.71.94 [10/Mar/2012:15:25:59 +0100] 'GET / ... +http://www.baidu.com/search/spider.html)' 220.181.108.183 [10/Mar/2012:15:26:21 +0100] 'GET / ... +http://www.baidu.com/search/spider.html)' 123.125.71.92 [10/Mar/2012:17:45:55 +0100] 'GET / ...robots.txt +http://www.baidu.com/search/spider.html)' 123.125.71.71 [10/Mar/2012:17:45:57 +0100] 'GET / ...robots.txt +http://www.baidu.com/search/spider.html)' 123.125.71.79 [10/Mar/2012:17:46:04 +0100] 'GET / ...robots.txt +http://www.baidu.com/search/spider.html)' 123.125.71.103 [10/Mar/2012:17:47:32 +0100] 'GET / ... +http://www.baidu.com/search/spider.html)' 220.181.108.179 [10/Mar/2012:17:48:37 +0100] 'GET / ... +http://www.baidu.com/search/spider.html)' 123.125.71.108 [10/Mar/2012:18:37:21 +0100] 'GET / ... +http://www.baidu.com/search/spider.html)' 220.181.108.185 [10/Mar/2012:18:38:13 +0100] 'GET / ... +http://www.baidu.com/search/spider.html)' 123.125.71.96 [10/Mar/2012:19:25:50 +0100] 'GET / ... +http://www.baidu.com/search/spider.html)' 220.181.108.169 [10/Mar/2012:19:25:59 +0100] 'GET / ... +http://www.baidu.com/search/spider.html)' 123.125.71.101 [10/Mar/2012:20:25:51 +0100] 'GET / ... +http://www.baidu.com/search/spider.html)' 220.181.108.176 [10/Mar/2012:20:26:09 +0100] 'GET / ... +http://www.baidu.com/search/spider.html)' 123.125.71.105 [10/Mar/2012:21:33:38 +0100] 'GET / ... +http://www.baidu.com/search/spider.html)' 220.181.108.178 [10/Mar/2012:21:34:15 +0100] 'GET / ... +http://www.baidu.com/search/spider.html)' 180.76.5.170 [10/Mar/2012:21:57:39 +0100] 'GET / ... +http://www.baidu.com/search/spider.html)' 123.125.71.98 [10/Mar/2012:22:26:13 +0100] 'GET / ... +http://www.baidu.com/search/spider.html)' 220.181.108.175 [10/Mar/2012:22:26:33 +0100] 'GET / ... +http://www.baidu.com/search/spider.html)' 123.125.71.104 [10/Mar/2012:23:34:09 +0100] 'GET / ... +http://www.baidu.com/search/spider.html)' 220.181.108.169 [10/Mar/2012:23:34:48 +0100] 'GET / ... +http://www.baidu.com/search/spider.html)' 220.181.108.171 [10/Mar/2012:23:52:22 +0100] 'GET / ... +http://www.baidu.com/search/spider.html)' 220.181.108.168 [10/Mar/2012:23:52:22 +0100] 'GET / ... +http://www.baidu.com/search/spider.html)' 123.125.71.110 [11/Mar/2012:00:33:52 +0100] 'GET / ... +http://www.baidu.com/search/spider.html)' 220.181.108.184 [11/Mar/2012:00:34:27 +0100] 'GET / ... +http://www.baidu.com/search/spider.html)' 123.125.71.103 [11/Mar/2012:02:37:21 +0100] 'GET / ... +http://www.baidu.com/search/spider.html)' 220.181.108.177 [11/Mar/2012:02:37:58 +0100] 'GET / ... +http://www.baidu.com/search/spider.html)' 123.125.71.97 [11/Mar/2012:03:34:30 +0100] 'GET / ... +http://www.baidu.com/search/spider.html)' 220.181.108.172 [11/Mar/2012:03:35:07 +0100] 'GET / ... +http://www.baidu.com/search/spider.html)' 123.125.71.107 [11/Mar/2012:04:35:33 +0100] 'GET / ... +http://www.baidu.com/search/spider.html)' 220.181.108.178 [11/Mar/2012:04:36:16 +0100] 'GET / ... +http://www.baidu.com/search/spider.html)' 123.125.71.115 [11/Mar/2012:05:34:31 +0100] 'GET / ... +http://www.baidu.com/search/spider.html)' 220.181.108.187 [11/Mar/2012:05:35:12 +0100] 'GET / ... +http://www.baidu.com/search/spider.html)' 123.125.71.97 [11/Mar/2012:06:24:17 +0100] 'GET / ... +http://www.baidu.com/search/spider.html)' 220.181.108.181 [11/Mar/2012:06:24:32 +0100] 'GET / ... +http://www.baidu.com/search/spider.html)' 123.125.71.112 [11/Mar/2012:07:40:27 +0100] 'GET / ... +http://www.baidu.com/search/spider.html)' 220.181.108.187 [11/Mar/2012:07:41:17 +0100] 'GET / ... +http://www.baidu.com/search/spider.html)' 123.125.71.95 [11/Mar/2012:08:29:42 +0100] 'GET / ... +http://www.baidu.com/search/spider.html)' 220.181.108.175 [11/Mar/2012:08:30:07 +0100] 'GET / ... +http://www.baidu.com/search/spider.html)' 123.125.71.105 [11/Mar/2012:09:35:23 +0100] 'GET / ... +http://www.baidu.com/search/spider.html)' 220.181.108.184 [11/Mar/2012:09:36:05 +0100] 'GET / ... +http://www.baidu.com/search/spider.html)' 123.125.71.106 [11/Mar/2012:10:39:32 +0100] 'GET / ... +http://www.baidu.com/search/spider.html)' 220.181.108.165 [11/Mar/2012:10:40:11 +0100] 'GET / ... +http://www.baidu.com/search/spider.html)' 220.181.108.171 [11/Mar/2012:11:23:57 +0100] 'GET / ... +http://www.baidu.com/search/spider.html)' 

  • Kas saate Baidu.com-lt orgaanilist liiklust? Kui ei, siis blokeeriksin ämbliku, kui see sööb teie ribalaiust niimoodi.
  • Pole kindel, mida mõtlete orgaanilise liikluse all, kuid kui mõtlete baidu otsingumootorit kasutavatelt kasutajatelt, siis vastus on eitav. See ei nõua palju ribalaiust ega ressursse. Lihtsalt mul on huvitav, miks baidu seda nii palju indekseerib.
  • 1 Jah, seda ma mõtlen. Kui see ei võta palju ribalaiust, ei oleks mul muret, kui see ei jätku. Saate neile alati meilisõnumeid saata. "Kui leiate Baiduspiderilt ebamõistliku juurdepääsu, teavitage meid sellest aadressil [email protected]"
  • 1 Blokeeriksin otsingumootori ämbliku ainult siis, kui teie mitte kunagi soovite saada neilt mingit otsinguliiklust, mitte ainult teie pärast praegu ei saa ühtegi - eriti kui arvestada, et Baidu on turuosa poolest maailmas suuruselt 3. otsingumootor.
  • 3 Baidu on väga agressiivne, kuni see saab teie saidi indekseerimisest piisavalt. Seal on skreeperid, mis väidavad end olevat Baidu, nende tuvastamiseks ja keelamiseks, kui asjad käest lähevad, kasutan botsvsbrowsers.com. Yandex võib genereerida ka samasugust liiklust.

See ei tundu midagi sellist, mille pärast peaksite liiga palju muretsema, google indekseerib mõningaid minu saite sarnaselt, kuid see võib olla võltsrobot, seega vaadake allolevaid linke ...

Baidu Spideri KKK-des (Chrome'i sisseehitatud tõlkes) on öeldud: -

4. Miks Baiduspider indekseerib minu saiti pidevalt? Uusima teabe esitamise tagamiseks indekseerib Baiduspider uusi või teie saidil sageli uuendatud lehti. Kontrollige logist, kas Baiduspiderist indekseerimine on mõistlik.

Baiduspideriks teesklevate rämpspostitajate või muude probleemide tekitajate liigse indekseerimise vältimiseks võite logi kontrollida. Kui leiate ebatavalist indekseerimist, palun teavitage meid sellest aadressil [email protected] ja edastage Baiduspideri logi.

Baidu pakub oma veebimeistri tööriistade versiooni (tööriistade juurde pääsemiseks on vaja Chrome'i tõlkefunktsiooni). Võib-olla võib nende registreerumine anda vastuseid. Google WMT pakub piiratud võimalusi roomamissageduse haldamiseks, võib-olla pakub nende tööriist mõnda sarnast funktsionaalsust.

none: Charles Robertson | none