Стоит ли закрывать комментарии в robots.txt?

я думаю наоборот комментарии не стоит закрывать... это же дополнительный контент

Я тоже так думаю. Будут еще мнения?

Ну если у вас в них не гадят школьники, не оставляют комментарии состоящие из одних смайлов, нельзя подключить спам бота который вам будет оставлять регулярно спам ссылки, ну и если вообще будут те кто будет писать что то по существу и желательно не в двух словах.

Я закрыл на варез сайте, так как кроме матов, и тро-ло-ло там ничего не писали. А так регулярно приходят школьники, и оставляют в комментариях ссылку в надежде что она когда то проиндексируется. Мне + хосты, им - время. Всё в ажуре)

а мне думается, в некоторых случаях придется выбирать между доп. контентом из комментариев, или страховкой от получения санкций со стороны ПС за "плохие" комментарии, например, ссылки или картинки на взрослые ресурсы, нецензурные выражения, предполагаю, что за подобное запросто могут наказать взрослым фильтром.

Вы же общаетесь с вашими посетителями, значит видите непосредственно все комментарии, значит не составит труда включить премодерацию, например, чтобы избавиться от всяких матов и прочего. А внешние ссылки всегда можно закрыть.

Да, и комментариев пока не очень много. Спасибо.

И еще вопрос, что бы полностью открыть комментарии, нужно убрать /wp-comments и */comments также? Движок WP.

закройте ссылки в комментах, остальное оставьте - это же халявный контент

Вы закрываете только ссылку со #, а такой страницы ведь нет - это просто id комментария. Сами Коментарии будут индексироваться, пока сама статья не будет закрыта.