Перейти из форума на сайт.

НовостиФайловые архивы
ПоискАктивные темыТоп лист
ПравилаКто в on-line?
Вход Забыли пароль? Первый раз на этом сайте? Регистрация
Компьютерный форум Ru.Board » Интернет » В помощь вебмастеру » Чем проверить ссылки на 404

Модерирует : Cheery

 Версия для печати • ПодписатьсяДобавить в закладки

Открыть новую тему     Написать ответ в эту тему

obtim



Gold Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
Есть 15000 ссылок(txt файл). Часть из них ведет на 404. Каким инструментом их можно проверить?

----------
Дьявол коварен - он может явиться к нам просто в образе дьявола

Всего записей: 8944 | Зарегистр. 03-03-2002 | Отправлено: 13:38 22-02-2022
Mavrikii

Platinum Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
obtim

Цитата:
Каким инструментом их можно проверить?

да элементарным скриптом на любом языке. хоть на питоне
https://stackoverflow.com/questions/38022010/open-links-from-txt-file-in-python
https://stackoverflow.com/questions/15258728/requests-how-to-tell-if-youre-getting-a-404
 
а можно и онлайн ресурсами, если лень писать
https://bolshakof.ru/tools/instrumenty-proverki-http-koda-otveta-servera/
http://tods-blog.com.ua/services/otvet-servera/
https://collaborator.pro/tools/urlchecker/
 
обычно подобные программы предназначены для проверки своего сайта на битые ссылки, то есть сами собирают их.

Всего записей: 15117 | Зарегистр. 20-09-2014 | Отправлено: 19:09 22-02-2022
obtim



Gold Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
Mavrikii
Спасибо, но

Цитата:
https://bolshakof.ru/tools/instrumenty-proverki-http-koda-otveta-servera/
http://tods-blog.com.ua/services/otvet-servera/
https://collaborator.pro/tools/urlchecker/

тут серьезные ограничения в кол-ве строк(максимум 200) и для анализа 15К это не подходит
 
А тут
Цитата:
https://stackoverflow.com/questions/38022010/open-links-from-txt-file-in-python
https://stackoverflow.com/questions/15258728/requests-how-to-tell-if-youre-getting-a-404

не увидел конечных проектов, только обсуждение.

Всего записей: 8944 | Зарегистр. 03-03-2002 | Отправлено: 11:50 24-02-2022
Mavrikii

Platinum Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
obtim

Цитата:
не увидел конечных проектов, только обсуждение.

объединить два куска кода - просто же.
один для чтения из файла, второй для проверки в цикле. в несколько потоков, конечно, быстрее, но для начала и так подойдет.
вот готовый.. только запись битых в файл можно добавить.
https://stackoverflow.com/questions/14370375/check-if-many-urls-exists-from-a-txt-file-python

Всего записей: 15117 | Зарегистр. 20-09-2014 | Отправлено: 11:57 24-02-2022
Открыть новую тему     Написать ответ в эту тему

Компьютерный форум Ru.Board » Интернет » В помощь вебмастеру » Чем проверить ссылки на 404


Реклама на форуме Ru.Board.

Powered by Ikonboard "v2.1.7b" © 2000 Ikonboard.com
Modified by Ru.B0ard
© Ru.B0ard 2000-2024

BitCoin: 1NGG1chHtUvrtEqjeerQCKDMUi6S6CG4iC

Рейтинг.ru