Не получается сделать сканирование сайта

@Til_Seier · Регистрация: 21.03.2016

Студворк — интернет-сервис помощи студентам

Всем привет
Есть такая задача не понимаю как ее сделать
Нужно написать скрипт, который может просканировать любой сайт на наличие папок. Например, если я напишу https://www.cyberforum.ru/ мне должно выдать результат примерно такой:

Code
1
2
3
4
5
6
7
8
9
10
https://www.cyberforum.ru/image
https://www.cyberforum.ru/css
https://www.cyberforum.ru/js
и т.д.
или
такой 
image
css
js
и т.д.

То есть скрипт должен сканировать другие сервера.
Например, я ввел site.com мне должно показать какиие у них есть папки и также поддомены.
файлы не нужны.

В интернете нашел функцию scandir () но вряд ли это то, что нужно.
Помогите мне пожалуйста. Как это можно реализовать?

@wq · 04.04.2016, 17:05

Сообщение от Til_Seier

показать какиие у них есть папки и также поддомены.
файлы не нужны.

мало уже кто пишет на статике. разве что на narod.ru да и то не уверен. При парсинге обычно анализируют ссылки на страницах переходят по ним -анализируют ссылки на них.. Вообще интересно кто-то сейчас открывает папки на серверах для просмотра? вообще есть такие?

@tgarl · 04.04.2016, 18:00

Если я правильно понял вас, то чужой сервер нельзя просканировать на папки и файлы, вы можете только получить html-код страницы и вот на основании этого кода вы можете составлять списки, но они не обязательно будут соответствовать реальности потому как уже сказали

мало уже кто пишет на статике

Сообщение от wq

Вообще интересно кто-то сейчас открывает папки на серверах для просмотра? вообще есть такие?

это от CMS зависит - пример bitrix, каталог и новости обычно на виртульных страницах, все остальные - статика

@wq · 04.04.2016, 18:27

Сообщение от tgarl

bitrix, каталог и новости обычно на виртульных страницах, все остальные - статика

да каталог там тоже виртуально. я под статикой имел ввиду некий кеш, который не формируется программой по каждому запросу, а сразу отдается. и совсем не обязательно это файлы.. ТС походу увидел египетские глиняные таблички с мертвым языком, ну и спросил )

@Til_Seier · 04.04.2016, 18:46 **[ТС]**

Какой есть способ выполнить это чтобы точно получить папки которые находятся на каком то сервере? И в общем это возможно?

@tgarl · 04.04.2016, 18:48

я уже сказал

Сообщение от tgarl

чужой сервер нельзя просканировать на папки и файлы, вы можете только получить html-код страницы

@Til_Seier · 04.04.2016, 19:00 **[ТС]**

Может есть уже готовые программы какие получить папки которые находятся на каком то сервере? Вы случайно не знаете о таких?

@wq · 04.04.2016, 19:04

Сообщение от Til_Seier

Может есть уже готовые программы

невозможно

@Пифагор · 04.04.2016, 20:55

Не знаю насколько верно это сканирование, но есть вот такое.

ЗЫ
Структуру моего сайта оно не показало, хотя я сам ничего не делал. Вероятно, админы хостинга позаботились.
Хотя структуру php.ru выдало)))

@tgarl · 04.04.2016, 21:48

чушь парсит страницу и отображает из меню страницы не более

@Til_Seier · 04.04.2016, 22:09 **[ТС]**

Тоже проверил на сайте выдавало папки которых совсем нет на сервере.
В любом случае всем спасибо за то, что помогли мне разобраться с этим)

Новые блоги и статьи Все статьи Все блоги /
Жизнь в неопределённости kumehtar 23.03.2026 Жизнь — это постоянное существование в неопределённости. Например, даже если у тебя есть список дел, невозможно дойти до точки, где всё окончательно завершено и больше ничего не осталось. В принципе,. . .	Модель здравоСохранения: работники работают быстрее после её введения. anaschu 23.03.2026 geJalZw1fLo Корпорация до введения программа здравоохранения имела много невыполненных работниками заданий, после введения программы количество заданий выросло. Но на выплатах по больничным это. . .	1С: Контроль уникальности заводского номера Maks 23.03.2026 Алгоритм контроля уникальности заводского (или серийного) номера на примере документа выдачи шин для спецтехники с табличной частью. Данные берутся из регистра сведений, по которому настроено. . .	Хочу заставить корпорации вкладываться в здоровье сотрудников: делаю мат модель здравосохранения anaschu 22.03.2026 e7EYtONaj8Y Z4Tv2zpXVVo https:/ / github. com/ shumilovas/ med2. git
1С: Программный отбор элементов справочника по группе Maks 22.03.2026 Установка программного отбора элементов справочника "Номенклатура" из модуля формы документа. В качестве фильтра для отбора справочника служит группа номенклатуры. Отбор по наименованию группы. . .	Как я обхитрил таблицу Word Alexander-7 21.03.2026 Когда мигает курсор у внешнего края таблицы, и нам надо перейти на новую строку, а при нажатии Enter создается новый ряд таблицы с ячейками, то мы вместо нервных нажатий Энтеров мы пишем любые буквы. . .	Krabik - рыболовный бот для WoW 3.3.5a AmbA 21.03.2026 без регистрации и смс. Это не торговля, приложение не содержит рекламы. Выполняет свою непосредственную задачу - автоматизацию рыбалки в WoW - и ничего более. Однако если админы будут против -. . .	1С: Программный отбор элементов справочника по значению перечисления Maks 21.03.2026 Установка программного отбора элементов справочника "Сотрудники" из модуля формы документа. В качестве фильтра для отбора служит значение перечислений. / / Событие "НачалоВыбора" реквизита на форме. . .

@Til_Seier 0 / 0 / 1 Регистрация: 21.03.2016 Сообщений: 20
	04.04.2016, 18:46 [ТС]
	Какой есть способ выполнить это чтобы точно получить папки которые находятся на каком то сервере? И в общем это возможно? 0

@Til_Seier 0 / 0 / 1 Регистрация: 21.03.2016 Сообщений: 20
	04.04.2016, 19:00 [ТС]
	Может есть уже готовые программы какие получить папки которые находятся на каком то сервере? Вы случайно не знаете о таких? 0

@Пифагор 2172 / 1655 / 840 Регистрация: 10.01.2015 Сообщений: 5,207
	04.04.2016, 20:55
	Не знаю насколько верно это сканирование, но есть вот такое. ЗЫ Структуру моего сайта оно не показало, хотя я сам ничего не делал. Вероятно, админы хостинга позаботились. Хотя структуру php.ru выдало))) 1

@tgarl 467 / 431 / 117 Регистрация: 15.02.2012 Сообщений: 1,952
	04.04.2016, 21:48
	чушь парсит страницу и отображает из меню страницы не более 1

@Til_Seier 0 / 0 / 1 Регистрация: 21.03.2016 Сообщений: 20
	04.04.2016, 22:09 [ТС]
	Тоже проверил на сайте выдавало папки которых совсем нет на сервере. В любом случае всем спасибо за то, что помогли мне разобраться с этим) 0