Коротко можно ответить так: чтобы не мешать богослужению. Когда в храме не идет служба, ходить там можно.