Jakiego programu mogę użyć do zbiorczego pobrania tej listy linków? [Zamknięte]

23

Potrzebuję programu, do którego mogę podać wiele adresów URL (wkleić lub w pliku) jak poniżej, a następnie musi być w stanie zaindeksować te linki i zapisać pliki określonego typu, na przykład obrazy. Próbowałem kilku pająków, ale nie miałem szczęścia.

Obecnie jedynym sposobem na pobranie wszystkiego jest otwarcie każdego linku, a następnie korzystam z „DownThemAll!” Wtyczka Firefox, która zaznacza wszystkie obrazy (lub dowolny typ pliku) na stronie i pobiera je. Działa to strona po stronie, ale potrzebuję czegoś podobnego, co działa z całą listą adresów URL.

Czy ktoś ma jakieś sugestie? Wielkie dzięki.

PS. Czy mogę dodać, że jest to dość łatwe w użyciu narzędzie, które ma pół przyzwoity interfejs użytkownika i nie działa z wiersza poleceń. Dzięki

   http://www.someUrl.com/fhg/xbox/1/index.php?ccbill=123456    
   http://www.someUrl.com/fhg/allison_gf/1/index.php?ccbill=123456    
   http://www.someUrl.com/fhg/cookin/1/index.php?ccbill=123456    
   http://www.someUrl.com/fhg/blackjacket/1/index.php?ccbill=123456
download download-manager Bezczelny
źródło
7
Widzę, że otrzymuje allison19się someUrl. perwersyjne! = P
DiegoDD
@DiegoDD Jakoś to pytanie zwróciło dziś uwagę i jest przezabawne. Możesz również zobaczyć pozostałe części linków ...
MC10
jeśli korzystasz z systemów linux / unix, jest to jeden liner, zobacz tutaj
mohamnag
Irytujące, że jest to zamknięte jako nie na temat, ale działa to niesamowicie, aby zapisać zbiorczy html do pdf, jeśli możesz napisać prosty program w języku c #: code.msdn.microsoft.com/... Install-Package Select.HtmlToPdf
Micro

Odpowiedzi:

32

Nie było sposobu, aby to zrobić w przeglądarce lub bez pobierania podejrzanego cudownego darmowego oprogramowania, więc napisałem rozszerzenie przeglądarki Chrome, które pasuje do tego rachunku.

To się nazywa TabSave , dostępne w sklepie internetowym tutaj .

Możesz wkleić listę adresów URL, a zostaną one pobrane, bez problemu :-)

Ma również możliwość pobrania każdej karty otwartej w aktywnym oknie, stąd nazwa. Jest to ustawienie domyślne, wystarczy kliknąć przycisk edycji, aby samodzielnie wstawić listę.

Wszystko jest otwarte, repozytorium GitHub jest połączone w opisie sklepu internetowego, jeśli chcesz wysłać żądanie ściągnięcia (lub zasugerować funkcję).

Louis Maddox
źródło
Świetny pomysł! Ale powoduje awarię chromu po dodaniu 400 adresów URL :(
Hercules S.
Twoja maszyna prawdopodobnie nie jest w stanie obsłużyć 400 adresów URL ... możesz rozwidlać i modyfikować dla swoich potrzeb, dzięki
Louis Maddox
Czy rozszerzenie może zsynchronizować zapisane strony z mobilnym Chrome i umieścić te strony w „Czytaj później”? Szukam sposobu na pobranie wielu stron internetowych (linki byłyby pewnym folderem z moich zakładek)
Deepak Kamat
Obecnie to nie działa i widzę ten sam problem zgłoszony w repozytorium rozszerzenia Github. Kiedy wklejam listę adresów URL, pobiera tylko 1 z nich.
Nikolay Tsenkov
dzięki, działa świetnie dla mnie (Vivaldi 1.10 stabilny). Jest to szczególnie przydatne, gdy pracodawca korzysta z serwera proxy, dzięki czemu nie trzeba ręcznie ustawiać innego programu, a jedynie korzystać z przeglądarki internetowej.
Juhele,
9

W zależności od potrzeb, Chrono Download Manager lub TabSave mogą szybko pobrać listę linków. Oba są rozszerzeniami Chrome, więc nie trzeba pobierać oprogramowania komputerowego.

A może to może ci się przydać:

Z własnego doświadczenia wolę Chrono Download Managera, ponieważ musiałem automatycznie zmieniać nazwę pobranego pliku w sposób WIELU (lista FILMÓW z hmm hmm ... kursów online) i indeksując kod HTML wszystkie różne filmy mają tę samą nazwę pliku. Tak więc pobranie go za pomocą TabSave daje po prostu filmy o tej samej nazwie i musisz zgadnąć, jaka jest treść (trochę jak „543543.mp4”, „543543 (1) .mp4”, „543543 (2) .mp4” itd. więc). Wyobraź sobie, ile dodatkowej pracy musisz wykonać, aby osiągnąć tego rodzaju zadanie.

Jeśli potrzebujesz szybkiego pobierania plików w obecnej postaci, przejdź do TabSave. Jeśli potrzebujesz zacząć zmieniać pliki nazw w biegu, wybierz Chrono.

Knomo Seikei
źródło
Zalecając ostrożność, zachowaj ostrożność. Jak napisano, twoja odpowiedź może być postrzegana jako spam. Więcej informacji: Jak polecić oprogramowanie w moich odpowiedziach?
bwDraco
Miałeś rację @DragonLord, naprawiłem moją odpowiedź, więc nie wyglądałem na tak tendencyjnego.
Knomo Seikei
1
Chrono zaoszczędził mi 234 godzin pracy !!!!! DZIĘKUJĘ CI!
Hercules S.
@HerculesS. Zapraszamy. :)
Knomo Seikei
Menedżer pobierania Chrono jest już martwy lub usunięty ze sklepu Chrome?
Kenny LJ
3

Wiem, że grałem tutaj, ale szukałem podobnego programu i znalazłem BitComet, który działa naprawdę dobrze, możesz importować adresy URL z plików tekstowych itp.

ertan
źródło
Prawie świetnie. Obrazy stron partii nie są pobierane i niestety link do źródła online.
user5389726598465,
1

Ok, znalazłem aplikację, która robi to pięknie. Nazywa się Picture Ripper

W każdym razie dzięki za pomoc Dudko!

Bezczelny
źródło