все работает ;) вот пример как боты ходят сетка примерна 15л страниц
[meko@centos ~]$ cat /var/log/nginx/access.log | grep YandexBot |wc -l
230595
[meko@centos ~]$ cat /var/log/nginx/access.log | grep Mail.Ru |wc -l
94736
[meko@centos ~]$ cat /var/log/nginx/access.log | grep Googlebot|wc -l
132516
[meko@centos ~]$ cat /var/log/nginx/access.log | grep google | grep q= |wc -l
7599
[meko@centos ~]$ cat /var/log/nginx/access.log | grep yandsearch | grep text= |wc -l
24341
[meko@centos ~]$ cat /var/log/nginx/access.log | grep mail | grep search |wc -l
3411
del !!!
