Добрый вечер, господа!
В очередной раз хочу порадовать вас свежим апдейтом системы Robo.Tools.
Сегодня в тестовом режиме была добавлена возможность параллельной проверки доменов на наличие в Веб-Архиве.
Выглядит это примерно так:
Домены проверяются шустрым асинхронным краулером, что не идет ни в какое сравнение со старым скриптом.
После добавления задания оно ставится в очередь и выполняется по мере наличия свободных слотов. Теперь каждый запрос к WebArchive выполняется с разных IP, что должно увеличить вероятность отдачи материала. Скучать вам не даст симпатичный ProgressBar:
После сканирования вам будет предложено отметить нужные даты, или удалить не интересующие вас домены:
Оригинальный пост со скриншотами вы можете увидеть здесь.
P.S. Если вы найдете какие-либо неполадки, просьба сообщать через тикет-систему или в ЛС (за вознаграждение на баланс, разумеется)
Свежие инвайты для регистрации в системе Robo.Tools:
Добавил еще инвайтов.
P.S. Сейчас занимаюсь разработкой массового чекера на наличие доменов в веб-архиве.
Скорее всего будет доступен не только внутри Системы, но и на сайте Web-Parser (бесплатно)
Вышло очередное обновление системы Robo.Tools, предназначенной для восстановления сайтов из WebArchive.
Движок краулера (паука) улучшен, оптимизирована скорость и отказоустойчивость, улучшено качество конечных результатов.
Новая фишка: Внешние ссылки теперь закрываются rel="nofollow" (опционально), и не загружаются (включая те, на которые редиректит веб-архив) (что экономит ваши страницы)
Всем доброго дня!
По многочисленным заявкам появилось автоматическое добавление SAPE-ссылок в подвал страниц.
Панель находится на вкладке "Биржи ссылок" диалога результатов закачки.
Оригинальный пост здесь
Исправил нудный баг с двойным добавлением .html в конце расширения (ранняя правка охватывала не все сайты). Больше этой ошибки быть не должно.
P.S. Если кто-то вдруг фантастическим образом найдет еще один образец этого бага, тому я лично пополню баланс на 50 у.е.
Обновление движка паука завершено. Сервисом можно вновь пользоваться
(Сайты на сервере были очищены из-за внутренних изменений в ядре движка).
Хорошая новость: каждый новый пользователь, подтвердивший E-mail, получает бесплатно 350 страниц для загрузок и тестирования сервиса.
Еще свежие инвайты:
P.S. Что думают пользователи Robo.Tools о сервисе? Проголосовать можно здесь http://ru.agosurveys.net/Survey.aspx?ID=ID1d04613db4224281ad390be39e9ab638
Сегодня (30-11-2011) с 22:00 будет производиться обновление движка/паука. Сохраните к себе нужные архивы, сайты на сервере будут очищены.
Мои персональные извинения за возможные неудобства.
Если вы имеете ввиду вставить ссылки перед </body>, с этим, действительно, проблем нет.
Это уже, кстати, можно сделать автоматически на вкладке "Работа с файлами" (Диалог результатов)
Вписать в последнее поле <div align="center"> {SAPE(5)} </div> и в футере каждой странички появится по 5 ссылок SAPE (при условии подключенного модуля SAPE на вкладке "Биржи Ссылок" диалога "Работа с результатами")
P.S. Инвайты
имеете ввиду абсолютно случайным образом?
я говорил о расстановке SAPE-ссылок
Вышел очередной апдейт, на этот раз изменения коснулись автоподключения бирж ссылок.
На данный момент доступно быстрое подключение биржи SAPE.
После подключения SAPE, вам только останется сгенерировать архив, скачать к себе на сервер и вставить такой код в любые места в любых html-файлах:
Где, 5 - количество ссылок для вывода на экран.
Сейчас я думаю над тем, как можно упростить массовую вставку кодов SAPE в скачанные страницы.
