Просмотр закрытых страниц
 

На сайтах есть страницы, никак не отображающиеся в браузере. Как пример - dhis.dgu.ru. На начальной странице - ни одной ссылки. Однако, если попасть на dhis.dgu.ru/rel1.htm или rel2.htm увидишь несколько иное. Вопрос - чем просмотреть эти скрытые страницы. Пробовал скачать весь сайт Offline Explorer, просмотреть "Обозревателем сайта" FlashGet - ничего не получается. Вроде и нет ничего, кроме первой страницы. Но оно то есть!
Так вот - какой программой увидеть и скачать все страницы таких сайтов. Только одна просьба - попробуйте на указанном урле, а не просто предлагайте какие-либо качалки...

То есть, насколько я понимаю, Вы желаете увидеть те страницы, которые есть, но на них нет нигде на основной странице ссылок?
Хммм... Насколько я понимаю, правильно настроенный сервер просто не даст этого сделать. Неправильно настроенный может выдать список файлов в директории. Других способов нет, если я прав.
Гуру, читавшие RFC относительно HTTP1.1 - поправьте меня.

Именно.А через поисковик как нибудь найти?

если пользователь не хочет тебе эти страницы показывать, то ты их и не посмотришь, в поисковике они проиндексируются если есть файл robot.txt и эти страницы там указаны.... а так только по ссылкам, если ссылок нет - то посмотреть не можешь...

Гугль форева :)
Вбей в строку поиска следующее:

allinurl:htm site:dhis.dgu.ru

А вообще-то это результат использования расширенного поиска. ;)

Ну а что касается других сайтов, то если на сервере включен листинг директорий, то можно найти скрытые страницы следующим образом:
Пускай мы знаем адрес "сайт.ру/каталог/файл.хтмл" заходим браузером по адресу "сайт.ру/каталог/" и можем обнаружить еще несколько файлов, даже если на них нигде нет ссылки, а сайт закрыт для индексации.

Дело в том, что обычно для того, чтобы "не было видно" что лежит в данной директории, но было доступно просто кидают пустой index.html..поэтому и открывается пустая страница.

Для того чтобы это сработало Гугл должен эти страницы найти и проиндексировать. А для этого в свою очередь нужно, чтобы на них были ссылки или хоть какие-нибудь упоминания.
Не думаешь же ты, что поисковик перебирает все возможные имена директорий и файлов? этакий брутфорс

Имеется ввиду, что саму директорию просмотреть нельзя..т.е. index.htm просто без ссылок..но это же не значит, что в этой директории больше ничего нет?

Обычно для того, чтобы нельзя было просмотреть содержимое просто соответствующим образом настраивают веб-сервер. И вместо пустой страницы Вам будет гордо светить "Access Denied" =)

Это понятно..даже не веб-сервер, а просто права доступа на папку..с другой стороны надо же, чтобы были доступны другие файлы из директории.

Tano
Вы меня не поняли. Есть возможность именно запретить смотреть листинг файлов. А сами файлы смотрите сколько влезет, если знаете как они называются.

А, тогда согласен. Извините, не знал)
Но в данному случае это скорее относится к случаю с пустым индехьом..поэтому в поисковике найти файлы этой директории не должно составлять особого труда.

Не поленись ;)
http://www.google.com/search?hl=en&q...=Google+Search

Аналогично. Советую для начала почитать мой пост
То, что эти ссылки находятся поисковиками говорит только о том, что на эти страницы существуют ссылки. Это подверждается и тем, что по тексту страница находится и другими поисковиками.
А те критерии поиска, которые ты предлагаешь использовать, всего лишь отфильтровывают страницы сайта, на которые нет внутренних (со страниц сайта) ссылок.
В конкретном случае это прокатило :yees: и где-то прокатит еще, но далеко не везде.

Ну так и топикстартер просил:
ИМХО на конкретный вопрос - конкретный ответ :cool:

А вот полная цитата:Итак, скачать с разных сайтов, а этот только для пробы/примера.

Так - этот способ подходит для многих подобных сайтов? Или будем спорить?
Автор получил ответ на свой вопрос или нет?
Ты пишешь:
А оно прикинь - работает, и я рад за топикстартера что Гугль это умеет.
Ешё раз - спрашивающий получил реальный способ, а не объяснения почему это невозможно.
Претензии к моему посту - к модеру или в личку.
Dixi.