- Поисковые системы
- Практика оптимизации
- Трафик для сайтов
- Монетизация сайтов
- Сайтостроение
- Социальный Маркетинг
- Общение профессионалов
- Биржа и продажа
- Финансовые объявления
- Работа на постоянной основе
- Сайты - покупка, продажа
- Соцсети: страницы, группы, приложения
- Сайты без доменов
- Трафик, тизерная и баннерная реклама
- Продажа, оценка, регистрация доменов
- Ссылки - обмен, покупка, продажа
- Программы и скрипты
- Размещение статей
- Инфопродукты
- Прочие цифровые товары
- Работа и услуги для вебмастера
- Оптимизация, продвижение и аудит
- Ведение рекламных кампаний
- Услуги в области SMM
- Программирование
- Администрирование серверов и сайтов
- Прокси, ВПН, анонимайзеры, IP
- Платное обучение, вебинары
- Регистрация в каталогах
- Копирайтинг, переводы
- Дизайн
- Usability: консультации и аудит
- Изготовление сайтов
- Наполнение сайтов
- Прочие услуги
- Не про работу
Тренды маркетинга в 2024 году: мобильные продажи, углубленная аналитика и ИИ
Экспертная оценка Адмитад
Оксана Мамчуева
Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий
У сайта в индексе около 12к страниц. В ЯВМ можно посмотреть только 1к.
А есть способ получить полный список страниц в индексе?
У сайта в индексе около 12к страниц.
В ЯВМ можно посмотреть только 1к.
А есть способ получить полный список страниц в индексе?
wget скачать сайт, взять из лога список страниц,
проверить по одной индексацию каждой страницы.
Есть вариант и проще:
И так далее... Если этого мало, то можно усложнить:
И т.д.
Поиск по сайту с пустым запросом
Поиск по сайту с пустым запросом
покажет только 1000 страниц
wget скачать сайт, взять из лога список страниц,
проверить по одной индексацию каждой страницы.
Только для этого способа нужно еще 12 айпишников, т.к. с одного ip к Яндексу можно сделать не больше 1000 запросов.
Только для этого способа нужно еще 12 айпишников, т.к. с одного ip к Яндексу можно сделать не больше 1000 запросов.
Не путайте выдачу с xml
ТС, я как то спрашивал про такой сервис - мне сапу посоветовали.
Кстати, я так и не нашел сервис - позволяющий сверить все имеющиеся на сайте страницы со страницами проиндексированными в ПС. А очень бы интересно было найти такой.
Не путайте выдачу с xml
Т.е. вы хотите сказать, что к выдаче я могу с одного айпи автоматом 12000 раз подряд обратиться в течении суток, и Яндекс на меня не ругнётся, а к XML - нет?
Везёт вам. А мне он капчу выкидывает раз так на 20-й 30й))
Есть вариант и проще:
...
Эту штуку можно оптимизировать, если структура урлов (сайта) позволяет.
site:site.ru ~~ inurl:category1
Только для inurl надо правильно подбирать исключаемые слова.
Т.е. вы хотите сказать, что к выдаче я могу с одного айпи автоматом 12000 раз подряд обратиться в течении суток, и Яндекс на меня не ругнётся, а к XML - нет?
Везёт вам. А мне он капчу выкидывает раз так на 20-й 30й))
Ну если очень повезет - то можно и 12000 раз с 1 ИП))
Нюансы:
1. Правильно настроить юзерагента, имитировать куки и все такое
2. Банит (вернее выдает капчю) - не на весь день, через 1-2 часа можно пробовать опять обращаться
3. Капчю можно разкапчевывать в конце-концов, цены адекватные сейчас.
4. Подряд - понятие растяжимое, смотря какие интервалы обращения