Генератор карты сайта

123 4
TF-Studio
На сайте с 17.08.2010
Offline
334
1503

Накатал скриптец.

Собственно, как лучше:

- выложить скрипт

- прикрутить как дополнение к сервису, или отдельно сделать, чтобы не возиться людям с установкой

Обсуждать целесообразность самого скрипта не стоит, ибо давно есть сервисы по типу http://www.xml-sitemaps.com/ (тут ограничение в 500 url, у меня как такового нету) и часто бывает нужно сделать карту сайта, а штатных средств нету.

Как поступить

Выложить в паблик
69% (9)
Сделать в виде веб-приложения
38% (5)
Всего проголосовало: 13
Всё ещё лучший способ заработка для белых сайтов: GoGetLinks (https://www.gogetlinks.net/?inv=fahbn8).
DiAksID
На сайте с 02.08.2008
Offline
236
#1

к сожалению сервисы/скрипты создания сайтмэп тупо через парсинг внутренних ссылок, метатегов и роботс ущербны изначально вне зависимости есть там ограничения по объёму или нет...

show must go on !!!...
Mik Foxi
На сайте с 02.03.2011
Offline
1217
#2
DiAksID:
к сожалению сервисы/скрипты создания сайтмэп тупо через парсинг внутренних ссылок, метатегов и роботс ущербны изначально вне зависимости есть там ограничения по объёму или нет...

потому что есть единственно правильный вариант - создавать карту сайта напрямую из базы самим движком.

но криворуких вебмастеров больше чем просто много, и не менее недоделанных движков не меньше.

потому сервисы такие востребованы.

Антибот, антиспам, веб фаервол, защита от накрутки поведенческих: https://antibot.cloud/ (8 лет на защите сайтов). Форум на замену серчу: https://foxi.biz/
Jaf4
На сайте с 03.08.2009
Offline
804
#3
foxi:
потому что есть единственно правильный вариант - создавать карту сайта напрямую из базы самим движком.
но криворуких вебмастеров больше чем просто много, и не менее недоделанных движков не меньше.
потому сервисы такие востребованы.

А еще модное слово "СЕО", кучи бложков про необходимость карты сайта жужжат.

ТС делай сервис платный. Дешевый, но платный.

Можно даже подписку организовать, будет 1 в месяц парсить, строить карту и высылать или заливать по фтп.

New! NVMe VPS от SmartApe.ru (https://goo.gl/eoYYkS)
TF-Studio
На сайте с 17.08.2010
Offline
334
#4

Я уже тут выкладывал как-то скрипт, который проверяет на запрет в robots.txt

Так что не стоит думать, что это сложная задача сделать правильную карту сайт.

foxi, бывают ситуации когда вариантов нету, потому не стоит срач на эту тему разводить, если бы все так просто было, тогда бы указанного сервиса и подобных не существовало бы!

По сабжу - карта сайта вещь весьма полезная, это базовые основы.

SeVlad
На сайте с 03.11.2008
Offline
1609
#5
TF-Studio:
Собственно, как лучше:
- выложить скрипт
- прикрутить как дополнение к сервису, или отдельно сделать, чтобы не возиться людям с установкой

Все три варианта хороши :)

Делаю хорошие сайты хорошим людям. Предпочтение коммерческим направлениям. Связь со мной через http://wp.me/P3YHjQ-3.
O
На сайте с 29.05.2008
Offline
195
#6
Jaf4:
А еще модное слово "СЕО"

В каких кругах? Разве что в СЕО, оно модное. :)

Проголосовал за веб сервис. Вряд ли кто будет возится с установкой очередного парсера, а вот с сервисом все просто - нажал кнопочку и оценил качество. И лучше чтобы без регистрации или с максимально простой (OAuth). Ну и деньги, естественно, смешное за такое просить.

_han_
На сайте с 17.08.2006
Offline
247
#7

TF-Studio, ваш скрипт на 100000 урлов не умрет?

Важно: GoGetLinks - размещение вечных ссылок | Достойный доход для вебмастера (http://gogetlinks.net/?inv=cf45iq) доход от 1К руб. в день. (http://trustlink.ru/registration/117003)
SeVlad
На сайте с 03.11.2008
Offline
1609
#8
ortegas:
Вряд ли кто будет возится с установкой очередного парсера,

А чо там может быть сложного-то - закинуть файло на сервер?

ortegas:
а вот с сервисом все

.. может быть не так однозначно. Вдруг кому-то не захочется палить сайт. А вдруг ресурсов не хватит на всех. А вдруг сайт ещё на локалке\в закрытой сети\етс.

TF-Studio
На сайте с 17.08.2010
Offline
334
#9
TF-Studio, ваш скрипт на 100000 урлов не умрет?

Давайте рассуждать здраво.

10к+ = крупный сайт, портал, форум.

Значит контент там весьма активно (теоретически) генерируется и новые страницы должны активно появляться. Карту надо частенько создавать, чтобы актуальность поддерживать.

Второе:

Сайт большой - значит база большая, бот будет грузить по полной, в данной ситуации гораздо лучше все стандартный функционал задействовать, чтобы минимизировать нагрузку.

Третье:

Не вижу вообще никаких проблем, что 10 страниц, чтобы 100к страниц, БД буде чуть больше просто... потом все равно всё удалиться.

Четвертое:

Данное решение было создано, потому что надо было мелким сайтам быстро сделать карту сайта, стандартные генераторы не подходят, потому что в ограничения не вписались, гуглеж адекватных скриптов не выдал,..

Вот написал, теперь что добру продавать - можно ведь и людЯм раздать )

Ну и деньги, естественно, смешное за такое просить.

Тут я бы поспорил немного...

Предположим пошел спрос на халяву, нагрузка растет весьма неплохо, на обычном хостинге такое не разместишь и всегда есть некая группа лиц, которые захотят на чужом бесплатном заработать, потому по-другому как надо сделать, пока не знаю.

Пользуясь случаем хочу передать привет маме

Тоже, может кому пригодиться, для таких параноиков как я сделал )

O
На сайте с 29.05.2008
Offline
195
#10
SeVlad:
А чо там может быть сложного-то - закинуть файло на сервер?

Для некоторых скриптов еще базу нужно создать, куча модулей PHP установить, даунгрейднуть/обновить PHP, и прочая ерунда.

123 4

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий