Проверка доступности сайта

@Farrewa · Регистрация: 27.12.2013

Студворк — интернет-сервис помощи студентам

Добрый день друзья. Мой код дергает с энных сайтов кое-какие файлики, что лежат в корне. Но не об этом.
Мне перед тем как этот файлик взять, нужно проверить - доступен ли сайт. ( это нужно еще для кое-каких манипуляций )
Проверяю так:

PHP
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
function isDomainAvailible($domain)
{ 
     //Проверка на правильность URL 
     if(!filter_var($domain, FILTER_VALIDATE_URL))
     {
             return false;
     }
 
     //Инициализация curl
     $curlInit = curl_init($domain);
     curl_setopt($curlInit,CURLOPT_CONNECTTIMEOUT,2);
     curl_setopt($curlInit,CURLOPT_HEADER,false);
     curl_setopt($curlInit,CURLOPT_NOBODY,true);
     curl_setopt($curlInit,CURLOPT_RETURNTRANSFER,false);
 
     //Получаем ответ
     $response = curl_exec($curlInit);
 
     curl_close($curlInit);
 
     if ($response) return true;
 
     return false;
}

Многие сайты доступны, но есть те которые либо уже не существуют, либо отдают 504, 500 код.
Вот с такими-то сайтами и проблема. В основном код срабатывает как надо. Через 2 секунды функция возвращает мне false.
Но иногда при проверке некоторых сайтов весь скрипт зависает, вплоть до ошибки об истечении 30 секунд на выполнение. Не понимаю почему. Сначало грешил на функцию которая берет файл с сайта, но потом после нескольких часов понял что код останавливается именно на функции проверки доступности сайта.

Подскажите в чем мой косяк?

Кстати на всякий случай вот код, который берет файл.

PHP
1
2
3
4
5
if (isDomainAvailible($domain)){
        $c = curl_init($domain . 'file.txt');
        curl_setopt($c, CURLOPT_RETURNTRANSFER, 1);
        $obj = curl_exec($c);
}

Добавлено через 1 час 29 минут
Хотя бы подскажите в какой области может быть проблема и с чем примерно это может быть связано.

@Para bellum · 19.04.2016, 16:53

Сообщение от Farrewa

Сначало грешил на функцию которая берет файл с сайта, но потом после нескольких часов понял что код останавливается именно на функции проверки доступности сайта.

Вы в цикле эти файлы запрашиваете, как я понял? Если да -- то то, что время истекает именно на проверке ни о чём не говорит, так как время может съедать как раз обработка тех файлов, а на этапе очередной проверки время кончается.

@Farrewa · 19.04.2016, 19:19 **[ТС]**

Para bellum, Я понял что ты хочешь сказать. Но нет, не в цикле. В том-то и дело. Вызывается функция при загрузке страницы, но не чаще чем раз в 3-4 секунды.

Но почему то иногда намертво все зависает. Пробовал убирать ограничение на выполнение скрипта (30 сек). Но тогда страница бесконечно грузится. Вот как. Можно как-нибудь попробовать точно отследить на какой строке идет зависание?

Добавлено через 26 секунд
Para bellum, Я понял что ты хочешь сказать. Но нет, не в цикле. В том-то и дело. Вызывается функция при загрузке страницы, но не чаще чем раз в 3-4 секунды.

Но почему то иногда намертво все зависает. Пробовал убирать ограничение на выполнение скрипта (30 сек). Но тогда страница бесконечно грузится. Вот как. Можно как-нибудь попробовать точно отследить на какой строке идет зависание?

@WhiteMind · 19.04.2016, 19:46

PHP
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
<?php
function isDomainAvailible($domain) { 
    //Проверка на правильность URL 
    if(!filter_var($domain, FILTER_VALIDATE_URL)) {
        return false;
    }
 
    //Инициализация curl
    $curlInit = curl_init($domain);
    curl_setopt($curlInit,CURLOPT_CONNECTTIMEOUT,5);
    curl_setopt($curlInit,CURLOPT_TIMEOUT       ,5);
    curl_setopt($curlInit,CURLOPT_HEADER,false);
    curl_setopt($curlInit,CURLOPT_NOBODY,true);
    curl_setopt($curlInit,CURLOPT_RETURNTRANSFER,екгу);
 
    //Получаем ответ
    $response = curl_exec($curlInit);
 
    curl_close($curlInit);
 
    return (bool)($response);
}

Добавлено через 27 секунд

Сообщение от Farrewa

Но почему то иногда намертво все зависает.

CURLOPT_CONNECTTIMEOUT не CURLOPT_TIMEOUT

@Farrewa · 19.04.2016, 21:06 **[ТС]**

Сообщение от WhiteMind

CURLOPT_CONNECTTIMEOUT не CURLOPT_TIMEOUT

Понял, спасибо что указал. Попробую добавить тайм аут и протестирую

@WhiteMind · 20.04.2016, 05:05

PHP
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
<?php
function isDomainAvailible($domain) { 
    //Проверка на правильность URL 
    if(!filter_var($domain, FILTER_VALIDATE_URL)) {
        return false;
    }
 
    //Инициализация curl
    $curlInit = curl_init($domain);
    curl_setopt($curlInit,CURLOPT_CONNECTTIMEOUT,5);
    curl_setopt($curlInit,CURLOPT_TIMEOUT       ,5);
    curl_setopt($curlInit,CURLOPT_HEADER,false);
    curl_setopt($curlInit,CURLOPT_RETURNTRANSFER,true);
 
    //Получаем ответ
    $response = curl_exec($curlInit);
 
    curl_close($curlInit);
 
    return (bool)($response);
}

Новые блоги и статьи Все статьи Все блоги /
PhpStorm 2025.3: WSL Terminal всегда стартует в ~ and_y87 14.12.2025 PhpStorm 2025. 3: WSL Terminal всегда стартует в ~ (home), игнорируя директорию проекта Симптом: После обновления до PhpStorm 2025. 3 встроенный терминал WSL открывается в домашней директории. . .	Как объединить две одинаковые БД Access с разными данными VikBal 11.12.2025 Помогите пожалуйста !! Как объединить 2 одинаковые БД Access с разными данными.	Новый ноутбук volvo 07.12.2025 Всем привет. По скидке в "черную пятницу" взял себе новый ноутбук Lenovo ThinkBook 16 G7 на Амазоне: Ryzen 5 7533HS 64 Gb DDR5 1Tb NVMe 16" Full HD Display Win11 Pro	Музыка, написанная Искусственным Интеллектом volvo 04.12.2025 Всем привет. Некоторое время назад меня заинтересовало, что уже умеет ИИ в плане написания музыки для песен, и, собственно, исполнения этих самых песен. Стихов у нас много, уже вышли 4 книги, еще 3. . .	От async/await к виртуальным потокам в Python IndentationError 23.11.2025 Армин Ронахер поставил под сомнение async/ await. Создатель Flask заявляет: цветные функции - провал, виртуальные потоки - решение. Не threading-динозавры, а новое поколение лёгких потоков. Откат?. . .
Поиск "дружественных имён" СОМ портов Argus19 22.11.2025 Поиск "дружественных имён" СОМ портов На странице: https:/ / norseev. ru/ 2018/ 01/ 04/ comportlist_windows/ нашёл схожую тему. Там приведён код на С++, который показывает только имена СОМ портов, типа,. . .	Сколько Государство потратило денег на меня, обеспечивая инсулином. Programma_Boinc 20.11.2025 Сколько Государство потратило денег на меня, обеспечивая инсулином. Вот решила сделать интересный приблизительный подсчет, сколько государство потратило на меня денег на покупку инсулинов. . . .	Ломающие изменения в C#.NStar Alpha Etyuhibosecyu 20.11.2025 Уже можно не только тестировать, но и пользоваться C#. NStar - писать оконные приложения, содержащие надписи, кнопки, текстовые поля и даже изображения, например, моя игра "Три в ряд" написана на этом. . .	Мысли в слух kumehtar 18.11.2025 Кстати, совсем недавно имел разговор на тему медитаций с людьми. И обнаружил, что они вообще не понимают что такое медитация и зачем она нужна. Самые базовые вещи. Для них это - когда просто люди. . .	Создание Single Page Application на фреймах krapotkin 16.11.2025 Статья исключительно для начинающих. Подходы оригинальностью не блещут. В век Веб все очень привыкли к дизайну Single-Page-Application . Быстренько разберем подход "на фреймах". Мы делаем одну. . .

@Farrewa 29 / 29 / 22 Регистрация: 27.12.2013 Сообщений: 368
	19.04.2016, 19:19 [ТС]
	Para bellum, Я понял что ты хочешь сказать. Но нет, не в цикле. В том-то и дело. Вызывается функция при загрузке страницы, но не чаще чем раз в 3-4 секунды. Но почему то иногда намертво все зависает. Пробовал убирать ограничение на выполнение скрипта (30 сек). Но тогда страница бесконечно грузится. Вот как. Можно как-нибудь попробовать точно отследить на какой строке идет зависание? Добавлено через 26 секунд Para bellum, Я понял что ты хочешь сказать. Но нет, не в цикле. В том-то и дело. Вызывается функция при загрузке страницы, но не чаще чем раз в 3-4 секунды. Но почему то иногда намертво все зависает. Пробовал убирать ограничение на выполнение скрипта (30 сек). Но тогда страница бесконечно грузится. Вот как. Можно как-нибудь попробовать точно отследить на какой строке идет зависание? 0