вот примеры рефов "пауков"
http://www.koreanfree.com/ 22 3
https://go.trafficshop.com/c322fc4e 21 3
http://www.bbwpornx.net/ 9 1
https://xxlpornvideos.com/zh/chinese/ 7 1
http://www.bdsmneedle.com/?page=5 5 1
http://bbwpornx.net/ 4 1
http://go.trafficshop.com/c322fc4e 4 1
http://matureolderwomen.org/ 3 0
http://boymilfporn.com/zh/virgin/ 3 0
вот так выглядит
http://prntscr.com/o3wzns
Smart записывает траффик от трейдеров в spiders
-
- Posts: 182
- Joined: Fri Nov 16, 2018 2:59 pm
-
- Posts: 182
- Joined: Fri Nov 16, 2018 2:59 pm
Re: Smart записывает траффик от трейдеров в spiders
Еще у всех юзерагент
Mozilla/5.0 (Linux; Android 8.1.0; PBAM00 Build/OPM1.171019.026; wv) AppleWebKit/537.36 (KHTML, like
Mozilla/5.0 (Linux; Android 8.1.0; PBAM00 Build/OPM1.171019.026; wv) AppleWebKit/537.36 (KHTML, like
Re: Smart записывает траффик от трейдеров в spiders
юзерагент это полный ?
и что прописано в юзер агентах спайдеров в сетингах?
и что прописано в юзер агентах спайдеров в сетингах?
Don't forget to run script update
-
- Posts: 182
- Joined: Fri Nov 16, 2018 2:59 pm
Re: Smart записывает траффик от трейдеров в spiders
Вот примеры еще раз
Mozilla/5.0 (Linux; Android 6.0.1; OPPO A57 Build/MMB29M; wv) AppleWebKit/537.36 (KHTML, like Gecko) 145 2
Mozilla/5.0 (Linux; Android 8.1.0; PBAM00 Build/OPM1.171019.026; wv) AppleWebKit/537.36 (KHTML, like 121 2
Mozilla/5.0 (Linux; Android 7.1.1; OPPO A83 Build/N6F26Q; wv) AppleWebKit/537.36 (KHTML, like Gecko) 96 1
Mozilla/5.0 (iPhone; CPU iPhone OS 12_3_1 like Mac OS X) AppleWebKit/605.1.15 (KHTML, like Gecko) Mo 94 1
Mozilla/5.0 (Linux; Android 6.0.1; OPPO R9s Build/MMB29M; wv) AppleWebKit/537.36 (KHTML, like Gecko) 86 1
Mozilla/5.0 (Linux; Android 5.1; OPPO A59s Build/LMY47I; wv) AppleWebKit/537.36 (KHTML, like Gecko) 86 1
Mozilla/5.0 (Linux; Android 5.1; OPPO A37m Build/LMY47I; wv) AppleWebKit/537.36 (KHTML, like Gecko) 85 1
Mozilla/5.0 (Linux; Android 6.0.1; vivo Y66 Build/MMB29M; wv) AppleWebKit/537.36 (KHTML, like Gecko) 74 1
Mozilla/5.0 (Linux; Android 8.1.0; PBEM00 Build/OPM1.171019.026; wv) AppleWebKit/537.36 (KHTML, like 68 1
Mozilla/5.0 (Linux; Android 6.0.1; OPPO A57 Build/MMB29M; wv) AppleWebKit/537.36 (KHTML, like Gecko) 145 2
Mozilla/5.0 (Linux; Android 8.1.0; PBAM00 Build/OPM1.171019.026; wv) AppleWebKit/537.36 (KHTML, like 121 2
Mozilla/5.0 (Linux; Android 7.1.1; OPPO A83 Build/N6F26Q; wv) AppleWebKit/537.36 (KHTML, like Gecko) 96 1
Mozilla/5.0 (iPhone; CPU iPhone OS 12_3_1 like Mac OS X) AppleWebKit/605.1.15 (KHTML, like Gecko) Mo 94 1
Mozilla/5.0 (Linux; Android 6.0.1; OPPO R9s Build/MMB29M; wv) AppleWebKit/537.36 (KHTML, like Gecko) 86 1
Mozilla/5.0 (Linux; Android 5.1; OPPO A59s Build/LMY47I; wv) AppleWebKit/537.36 (KHTML, like Gecko) 86 1
Mozilla/5.0 (Linux; Android 5.1; OPPO A37m Build/LMY47I; wv) AppleWebKit/537.36 (KHTML, like Gecko) 85 1
Mozilla/5.0 (Linux; Android 6.0.1; vivo Y66 Build/MMB29M; wv) AppleWebKit/537.36 (KHTML, like Gecko) 74 1
Mozilla/5.0 (Linux; Android 8.1.0; PBEM00 Build/OPM1.171019.026; wv) AppleWebKit/537.36 (KHTML, like 68 1
-
- Posts: 182
- Joined: Fri Nov 16, 2018 2:59 pm
Re: Smart записывает траффик от трейдеров в spiders
bot
crawl
spider
proxy
yahoo
google
SmartCJ
SCJ
yandex
Baiduspider
FTT2 Ping Bot
YandexBot
Slurp
BingPreview
bingbot
Googlebot
XoviBot
HTMLParser
Aboundex
MegaIndex
Seznam
coccoc
musobot
MJ12bot
majestic
curl
Sogou
Ahrefs
Baiduspider
baiduboxapp
googleweblight
Вот это прописано в сеттингс ( дефолтно, я не менял )
crawl
spider
proxy
yahoo
SmartCJ
SCJ
yandex
Baiduspider
FTT2 Ping Bot
YandexBot
Slurp
BingPreview
bingbot
Googlebot
XoviBot
HTMLParser
Aboundex
MegaIndex
Seznam
coccoc
musobot
MJ12bot
majestic
curl
Sogou
Ahrefs
Baiduspider
baiduboxapp
googleweblight
Вот это прописано в сеттингс ( дефолтно, я не менял )
Re: Smart записывает траффик от трейдеров в spiders
попробовал и так и так - все ок
скидывайте плз админку и фтп, буду смотреть на конкретном примере
скидывайте плз админку и фтп, буду смотреть на конкретном примере
Don't forget to run script update
-
- Posts: 182
- Joined: Fri Nov 16, 2018 2:59 pm
Re: Smart записывает траффик от трейдеров в spiders
скинул в личку