|
Каждый робот расправляется со списком так, как ему это нравится и обычно роботы дальше поиска страниц для индексации в этом файле не уходят . Теоретически все что напишешь в таком файле - правильно, т.к. можно тут же написать робота, который это поймет .
|