Хотел прикинуться неумехой в предыдущем сообщении, но вынудили: верный способ для чего?? Чтобы лишнее в поисковик попало? Это Вы советы давали разработчикам сайта мегафона и всяких говно-магазинов?
В роботсе пропиши то же смое, что у Терехова или у любого другого известного блогера, она по шаблонам составляют и закрывают все файлы системы, так что сделай как у них и будет тебе счастье.