Можно ли определить кто запрашивает фаил/скрипт: поисковый робот или посетитель!?

Я бы не стал называть это лажей. Просто многие вещи устарели. SE развивается очень быстро. И за год-два очень многое перестает быть актуальным.

Хотя навигация без использования JS была актуальна и раньше и сейчас.