- Поисковые системы
- Практика оптимизации
- Трафик для сайтов
- Монетизация сайтов
- Сайтостроение
- Социальный Маркетинг
- Общение профессионалов
- Биржа и продажа
- Финансовые объявления
- Работа на постоянной основе
- Сайты - покупка, продажа
- Соцсети: страницы, группы, приложения
- Сайты без доменов
- Трафик, тизерная и баннерная реклама
- Продажа, оценка, регистрация доменов
- Ссылки - обмен, покупка, продажа
- Программы и скрипты
- Размещение статей
- Инфопродукты
- Прочие цифровые товары
- Работа и услуги для вебмастера
- Оптимизация, продвижение и аудит
- Ведение рекламных кампаний
- Услуги в области SMM
- Программирование
- Администрирование серверов и сайтов
- Прокси, ВПН, анонимайзеры, IP
- Платное обучение, вебинары
- Регистрация в каталогах
- Копирайтинг, переводы
- Дизайн
- Usability: консультации и аудит
- Изготовление сайтов
- Наполнение сайтов
- Прочие услуги
- Не про работу
VK приобрела 70% в структуре компании-разработчика red_mad_robot
Которая участвовала в создании RuStore
Оксана Мамчуева
Как снизить ДРР до 4,38% и повысить продажи с помощью VK Рекламы
Для интернет-магазина инженерных систем
Мария Лосева
Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий
Нужна помощь. Есть туристический сайт, который сквозит текстами - описаниями туров, которые, конечно, находятся не только на данном сайте.
Нужно просканить все страницы сайта и получить список страниц, которые необходимо закрыть от индексации (то есть список с плагиатом).
Что сможете подсказать?
тут все очень просто, вспоминаем что яндекс не показывает дубликаты в выдаче, поэтому берем и ставим запоминалку переходов с рефер. по поисковому запросу и исключаем страницы которые вообще не ищутся, немного грубо, но имхо если сайт болшой хмл запросов не хватит чтоб проверить.
smallkreker, упс, ошибся. потерто.
тут все очень просто, вспоминаем что яндекс не показывает дубликаты в выдаче, поэтому берем и ставим запоминалку переходов с рефер. по поисковому запросу и исключаем страницы которые вообще не ищутся, немного грубо, но имхо если сайт болшой хмл запросов не хватит чтоб проверить.
Наверное, пока не подойдет, так как молодой сайт. Еще много вне индекса....
Вообще, seolib вроде показывает такую возможность, но не работает...(
то есть тебе нужно выкинуть то что пока не в индексе и уже в индексе?
аллсаб поможет если не много инфы в ручную, если много, проще сначала выдрать с базы все статьи и потом через хмл проверять, даже если по предложению сравнивать (5 совподений - копия) максимум ты проверишь за день 200 статей.
2 выход то что уникально ты знаешь используй директиву Allow а все остальное запрети
http://help.yandex.ru/webmaster/?id=996567
можно еще сделать так
User-agent: Yandex
Allow: /showthread.php?t=432681
Disallow: /showthread.php*
и как сразу сказал то что будет искатся к примеру в гугл добавлять в Allow, получится что движок сам будет для яндекса уникальные статьи добавлять