Итог 21.09.15
Разобрался с пандорой, поставил генериться доры. Скоро залью и загоню в индекс.
Сделал работу над ошибками по кеям. Посмотрим, что получится.
почему фейл?
запросы то прочитать получилось без проблем, но как гугл генерирует некоторые поля, не понятно, тут нужно js разбирать и если кто-то уже разбирался, то буду благодарен за подсказки.
Нужна помощь программистов!
Есть сервис https://www.google.com/webmasters/tools/submit-url?hl=en
Здесь новая рекаптча 2.0 от гугла.
Как запросами можно получать картинку, на которой нужно выбрать правильные ответы? А потом отправить запрос с правильным ответом (по ходу ответ шифруется).
Мой программист кажется научился отгадывать каптчу, нужно массово проверить, хочет сэкономить время на распутывании алгоритмов гугла )
Кто-нить в теме?
1) Больше скольки запросов в секунду при парсинге снипетов Bing не выдает результат?
2) Есть ли какая то прога для сервака для туннелирования запросов (к Bing'у), которая меняла бы прокси автоматически?
Так,
по-моему я почти ничего не делаю. Что-то я расслабился.
+ Вопрос с кешем почти решен
+ Доры прогнаны
Буду дальше пилить, ничего не остается :)
Итог 18.09.15
Проггер за штуку баксов в час запилил мне паука, чтобы страницы доров закешировались (потому как я ранее говорил, контент распарсивается в момент захода на страницу). Думаю, кол-во индекса значительно увеличится. Сейчас средний индекс на новый дор = 1 стр.
Ну начинается... возьми да попробуй, не будь теоретиком.
Десять раз да
Я аддурил из одной сетки. Ни один дор не побанило.
Итог 15.09.15
Долго разбирался сегодня с партнерками. Поставил прогон софтом X. Как ни крути, доры в индекс заходят, но заходят на малое число паг. Нужно что-то, чтобы забивать их в индекс.