Вопрос по закачке сайта

altair

Хочу скачать с сайта http://www.fictionbook.ru все книжки в формате fb2.
Пример ссылки:
http://www.fictionbook.ru/author/plotnikov_maksim/
lord_bez_n_1_lord_bez_nasledstva_pribiytie/plotnikov_lord_bez_n_1_lord_bez_nasledstva_pribiytie.fb2.zip

Пытался в Teleport Pro и Free Download Manager'e задать скачку файлов по маске *.fb2.zip, но книжки не скачиваются даже в htm формате (URL).
Собственно вопрос - как можно скачать этот сайт и возможно ли?

sirius

А если wget-ом попробовать?

altair

Я с этой прогой явно не разберусь.
Попробовал так: wget -l3 -A.fb2.zip http://Danil_K:www.fictionbook.ru/ru/author/
Но вроде ничего не происходит..
Можешь помочь с рабочими параметрами?

mkrec

в wget'е, вроде, еще надо указать, что хочешь рекурсию. Точно не помню, но типа -r. Почему-то если ограничиться указанием level, рекурсивного скачивания не происходит.

sirius

Да, добавь -r

altair

Сделал так: wget --recursive -l3 -N --force-directories -A.fb2.zip http://Danil_K:www.fictionbook.ru/ru/author/
Но непосредственно книги все равно не скачиваются.
Пример:
Last-modified header missing -- time-stamps turned off.
16:27:45 (152.69 KB/s) - `www.fictionbook.ru/ru/author/konnelli_mayikl/garri_bos
h_3_cementnaya_blondinka_pravo_na_viystrel/similar/index.html' saved [156351/156
351]

Removing www.fictionbook.ru/ru/author/konnelli_mayikl/garri_bosh_3_cementnaya_bl
ondinka_pravo_na_viystrel/similar/index.html since it should be rejected.
--16:27:45-- http://Danil_K:www.fictionbook.ru:80/ru/author/leonov_n
ikolayi_ivanovich/gurov_25_koziyrniye_valetiy/
=> `www.fictionbook.ru/ru/author/leonov_nikolayi_ivanovich/gurov_25_k
oziyrniye_valetiy/index.html'
Connecting to www.fictionbook.ru:80... connected!
HTTP request sent, awaiting response... 200 OK
Length: 29,266 [text/html][text/html]

0K -> .......... .......... ........ [100%]

То есть книгу через браузер можно скачать отсюда: http://www.fictionbook.ru/ru/author/leonov_nikolayi_ivanovic...
Однако wget, да и другие проги подобного рода пытаются скачать только файл index.htm в этой директории, а непосредственно нужный документ по адресам:
http://www.fictionbook.ru/author/leonov_nikolayi_ivanovich/g...
http://www.fictionbook.ru/author/leonov_nikolayi_ivanovich/g...
скачать не могут.
Более того, wget уже отписался, что завершил работу. Общий размер скачанного ~150 Кб
Это какая-то защита, что ли? Можно ли ее обойти?

katrin2201

Насколько я знаю, на торрентс.ру выложены слитые архивы с этой и не только библиотек.
К тому же, в виду грядущего закрытия этих библиотек народ заморачивается с обновлением скачанного. Поэтому там же и совет спросить можно будет, если тебя выложенное не устроит.

sirius

Так работает:
wget -r -l3 --no-parent -A.fb2.zip http://www.fictionbook.ru/author/leonov_nikolayi_ivanovich/gurov_25_koziyrniye_valetiy/  

Проблема в том, что в папке
http://www.fictionbook.ru/author/leonov_nikolayi_ivanovich/  

html не содержит прямых ссылок на книжки, и wget не может их подцепить.

altair

Насколько я знаю, на торрентс.ру выложены слитые архивы с этой и не только библиотек.
Спасибо, начал качать. Я протупил, сразу нужно было там поискать.
К тому же, в виду грядущего закрытия этих библиотек народ заморачивается с обновлением скачанного.
Собственно, поэтому и попытался зазеркалить сайт.

altair

html не содержит прямых ссылок на книжки, и wget не может их подцепить.
Может и так, но как то автоматизировать процесс можно же, наверное. Для всех авторов давать отдельные команды геморойно..
Хотя, с учетом того, что зеркало присутствует на torrents.ru все это не так актуально. Но за помошь спасибо.

kruzer25

Не знаю, как работает этот ваш wget. Но можно выкачать вообще всё (на что есть ссылки) каким-нибудь teleport/offline explorer, а потом любимым файловым менеджером удалить всё, кроме *.fb2.zip.

altair

Попробуй
Принципы работы и wget и Teleport Pro одинаковые. Дело в настройках, видимо.

kruzer25

Через жопорез попробовать, что ли?

Dimon89

Эй-эй-эй! Я уже его скачал, зачем два раза работу делать.
А вообще оно качается через ftp://fictionbook.ru - там уже всё лежит.

altair

У тебя в локалке лежит?
Я сейчас с торентов тяну "Библиотека FictionBook.​Ru на 24.04.07" + потертые файлы зеркала от 2004 года. Если есть что-то сопоставимое по свежести, выкладывай.

Dimon89

У меня содержимое ftp://fictionbook.ru
Последний файлик там FictionBook.2007.02.zip - но это не зеркало, а официальный архив.

altair

Ну, так или иначе, торренты lib.aldebaran.15.08.2007 (5,8 Гб) и FictionBook.24.04.2007 (2,6 Гб) у меня скачались.
Лежит здесь:
Оставить комментарий
Имя или ник:
Комментарий: