Frantishek
Advanced Member | Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
Цитата:| И чтоб количество одновременных загрузок было не постоянным, а тоже задавалось диапазоном |
Еще неплохо что-то вроде генератора случайных чисел, на указанные переменные, чтобы выбор значения в диапазоне допустимого производился спонтанно  (туда же и подмену юзерагент).
Как минимум, что нужно здесь, это возможность определить сколько потоков направить на один проект, наверняка несложно реализовать. Просто жалко качать в один поток, обходя баны, когда следом на очереди еще такие же проекты стоят, а вот если каждому назначить по одному потоку, и далее общее кол-во на всех, вот так можно было это дело оптимизировать. Надеюсь, Олег обратит внимание на эту фишку.
Насчет перебора проксей через подключаемые списки - тоже нормальная тема, также предложил бы в туду на будущее (чтобы можно было указать через какое число загруженных страниц производить автозамену прокси).
Цитата:| М-м-м, вот если бы картинки становились в очередь сразу за скачанной страницей и скачивались без задержек, как при реальном открытии страницы... |
Да, тоже, думаю, не сложно, как опцию. Короче, со стороны, все не сложно
|
