Geupdated am 29.03.2013 :)
Inhaltsverzeichnis
Beschreibung
Screenshots
Features
Systemvoraussetzungen
Kurze Startanleitung
Update
Download
Bekannte Probleme
Changelog
Danksagungen
Kommentar abgeben (Bisher 206)
Beschreibung
Der GalleryGrabber ist ein Programm, das euch von multiplen Seiten (deviantArt, VCL, FChan, Furaffinity) die jeweils neusten Bilder (und deren Beschreibungen) von angegebenen Zielbenutzern runterlädt und präsentiert. Dies stellt eine enorme Zeitersparnis dar, da der GalleryGrabber erstens um einiges schneller ist als man das von Hand wäre und man ihn zweitens im Hintergrund laufen lassen kann, wärend man was anderes tut.
Screenshots
Features
- Download der neusten Bilder und Flashdateien von deviantArt, VCL, FChan und Furaffinity
- Download aller Bilder/Flashdateien seit einem bestimmten Datums
- Sprachen: Deutsch, Englisch, Französisch, Russisch (Danke, Kirshental)
- Proxyunterstützung (TOR per Privoxy möglich)
- Übersichtliche Darstellung der Ausgaben in einem HTML-Dokument
- Alternative Ergebnisansicht durch Ordnerstrukturierung möglich
- Plattformunabhängig (Linux, Windows, Mac, Bsd..)
- Keine Spyware, Werbung, Malware oder sonst was
- Passwörter werden nur Verschlüsselt gespeichert
Systemvoraussetzungen
Ihr müsst Java2 Version 6 oder höher installiert haben. Ob ihr das habt, erfahrt ihr, wenn ihr in der Konsole (Windows: Start->Ausführen->cmd) eingebt:
java -version
Wenn da nichts kommt oder sowas wie
Der Befehl "java" ist entweder falsch geschrieben oder konnte nicht gefunden werden.
habt ihr höchstwahrscheinlich kein Java installiert (oder nur die VM, die euer Betriebssystembauer mitliefert). Wenn etwas kommt, sollte das etwa so aussehen:
java version "1.6.0_16" Java(TM) SE Runtime Environment (build 1.6.0_16-b01)
Wenn die Nummer mindestens 1.6 ist, sollte alles klappen.
Wenn ihr Java noch nicht installiert habt oder ihr eine zu alte Version habt, könnt ihr die neuste Version unten bei "Download" herunterladen.
Kurze Startanleitung
Eigentlich müsste nach dem entpacken ein Doppelklick auf "GalleryGrabber.jar" reichen. Es passiert aber öfters, dass Komprimierprogramme wie WinRar die Dateiendung .jar für sich beanspruchen.
Sollte sich also ein solches Programm starten, öffnet die .jar mit javaw (Bei Windows: Rechtsklick -> Öffnen mit... -> durchsuchen -> javaw.exe im Javainstallationsverzeichnis auswählen (Am Besten "Immer öffnen mit" ankreuzen))
Bei jedem Start wird eine neue Logdatei generiert, in der die auftauchenden Fehler protokolliert sein sollten.
Update
Um GalleryGrabber auf eine neue Version upzudaten, kopiert die Datei accounts.sve von dem Workfiles-Verzeichnis der alten Version in dasselbe Verzeichnis der neuen Version.
Download
GalleryGrabber 1.6 (259 KB, zip)
Sourcecode GalleryGrabber 1.6 (200 KB, zip)
Java Runtime Environment (JRE) 6 (ihr müsst etwas runterscrollen)
Bekannte Probleme
- Verschlüsselung nicht sicher: Wer den Sourcecode kennt, hat kein Problem, die verschlüsselt gespeicherten Passwörter zu entschlüsseln.
Changelog
Version 1.6
- Furaffinity-Bild-Grabbing gefixt<
- DeviantArt login gefixt
Version 1.5
- Furaffinity-Kommentar-Grabbing gefixt
Version 1.4
- Fehler in Benutzername/Passwort-Speichern gefixt
- FurAffinity-Bug seit Spring Update gefixt
Version 1.3
- Kleiner Fix für Sticky-Threads auf Fchan
Version 1.2
- Möglichkeit hinzugefügt, mehrere Benutzer gleichzeitig hinzuzufügen
- Möglichkeit hinzugefügt, die Ergebnisverzeichnisse nach erneutem Download nicht zu löschen
Version 1.1.10
- Fchan gefixt (komplett neu implementiert)
Danksagungen
Ich möchte folgenden Leuten danken:
- Naut: Grundidee
- DreadCat: Vorlage für das Logo
- Tambako: Französisch-Übersetzung
- Rob MacGrogan: Datums-ComboBox
- Java Tech Tips: Cookie- und ListCookieHandler-class (Diese ist, wie ich feststellen wurde, nur so von Fehlern durchsetzt - der Autor hat gehörig geschlampt)
- Santhosh Kumar: Implementation einer Prograssbar in einem modularen Dialog
Kommentare
#196 hidemy schrieb am 28.04.2013 07:27 (CET):
Could you please make it stop creating date folders in the hierarchy? So it would avoid re-downloading? I mean straight from Downloaded_Images to the sitename folder, And ignoring downloads based on existing filenames, not date. Otherwise, it works like a charm.
#197 hidemy schrieb am 28.04.2013 09:58 (CET):
The whole log is made of these sequences:
java.io.IOException: Server returned HTTP response code: 403 for URL: http://www.furaffinity.net/full/1716668/
at sun.net.www.protocol.http.HttpURLConnection.getInputStream(Unknown Source)
at klaue.DownloadHelper.Downloader.downloadPage(Downloader.java:105)
at Sites.FurAffinity.getImage(FurAffinity.java:278)
at Sites.FurAffinity.getImagesFromAccount(FurAffinity.java:216)
at Sites.FurAffinity.getImagesFromAccount(FurAffinity.java:260)
at Sites.FurAffinity.getImages(FurAffinity.java:132)
at GalleryGrabber$Task.getImages(GalleryGrabber.java:1195)
at GalleryGrabber$Task.run(GalleryGrabber.java:1045)
at java.lang.Thread.run(Unknown Source)
Is it normal?
#198 hidemy schrieb am 28.04.2013 10:10 (CET):
It also reports a couple to a dozen errors after downloading.
And is there a way to make it stop generating HTML galleries?
#199 hidemy schrieb am 28.04.2013 10:22 (CET):
The program follows this pattern on runs:
first run: could not connect to the internet
second run: could not log in to FA
third run: nothing happens the preparing bar just vanishes
forth run: works fine but with the problems previously described.
#200 hidemy schrieb am 28.04.2013 10:24 (CET):
#201 Klaue schrieb am 28.04.2013 16:24 (CET):
The whole program is date based, so no, there's not really anything I can do.
Pictures are put in folders with the date because people complained that old pics were deleted on new runs. Tick the "delete old downloads"-checkbox to get rid of them (but it will still do a complete download since the specified date. That's just how the whole prog is built, sorry)
As for your other problems, could it be that your internet connection is shitty? Those problems shouldn't be happening. For example, to test for the internet connection, it tries to access the google homepage, which is pretty much online all the time, so if that fails, something must be wrong with your internet connection.
#202 hidemy schrieb am 29.04.2013 09:13 (CET):
When the programs gets to work the network meter gadget shows an average of 1.1Mpbs down rate which is not that bad i assume. And what those 403 errors have to do with the speed anyway? Which translates: 3/4 of the downloads are skipped._.
#203 Klaue schrieb am 29.04.2013 20:31 (CET):
shitty connection != shitty speed. Maybe you have plenty of packet loss or something.
Whatever it may be, I had no problems with my tests: not a single 403 on FA in my test downloads, so I'm afraid it has to be something on your end.
#204 hidemy schrieb am 01.05.2013 21:45 (CET):
A bit of tampering here and there its close to two megabits now. Finally came up with a solution. Since the 403ed submission are not the same everytime, i just run the grabber four times in a row, then merge the results. Seems like a pain in the posterior but since i'm not like watching five hundred artists with two hundred new submissions everyday, and not planning to update every week, it's rather convenient. Everytime about a fifth of the downloads are skipped but repeated four times, it becomes one in 600. Yay! Statistics. Thanks for the program, dude. Among lazyass furfags you are a king.
#205 Klaue schrieb am 02.05.2013 20:07 (CET):
good you found a solution, but your problem still kinda puzzles me. You could try only donwloading one artist at once - maybe FA intentionally throws in some error pages after a while to reduce load on its servers, so single artists with a short break between each could work.
If that was the case, I could add a delay of a second or five after each artist.
And yes, lazyness was also the reason this furfag originally made it. Had I know at the time how often FA/da/etc update their site code, I would've been too lazy for it :D
#193 Tedexisi schrieb am 26.04.2013 23:18 (CET):
Sorry, I see I left out one important word.
I want to bulk edit the logins; otherwise it i will take a while to change them all.
#194 Klaue schrieb am 27.04.2013 03:32 (CET):
If you update a single account from a site with the new user/password, say a single one of deviantart, all accounts of deviantart will be updated with the new login automatically
#189 pinkerton schrieb am 22.04.2013 22:03 (CET):
at java.lang.Thread.run(Unknown Source)
Did I break something? Using proxy.
#190 pinkerton schrieb am 22.04.2013 22:18 (CET):
btw wtf happened to sergey kirshental and his sdvision.org?
#192 Klaue schrieb am 24.04.2013 19:49 (CET):
I Dunno LOL ¯\\(°_o)/¯
#191 Klaue schrieb am 24.04.2013 19:48 (CET):
Can't help you with only the least usable part of the error message..
#195 pinkerton schrieb am 27.04.2013 08:53 (CET):
oh forget it it's working now. thanks a zillion for such an incredible program ;)
#184 Jack schrieb am 28.03.2013 11:30 (CET):
I hope this program will be updated soon...
#188 Klaue schrieb am 29.03.2013 18:22 (CET):
Is "1 day" soon enough? ;) just updated it, finally.
#183 Grunt schrieb am 09.02.2013 13:41 (CET):
Is it possible to download club lists on dA including the subfolders? I tried "#pwfa" and it would load like 3 pics and thats it...
#179 Tedexisi schrieb am 10.01.2013 01:01 (CET):
Also if someone can confirm is it broken on FurAffinity seem to give the message of no new images.
#180 Duraldon schrieb am 12.01.2013 03:00 (CET):
Kann ich bestätigen. Habe selbst gestern bemerkt das der Gallerygrabber nichts mehr von Furaffinity downloaded.
Habe verschiedenste Möglichkeiten ausprobiert wie: "Mit Darum, Letztem Download, ein einzelnes Konto oder gleich Alle. Bei allen Optionen kam bei Furaffinity folgende Hinweismeldung: "Keine neuen Bilder gefunden."
Testweise mal ein ganz neues Konto hinzugefügt aber selbst hier werden keine Bilder gefunden.
#181 Klaue schrieb am 14.01.2013 19:10 (CET):
Hat wohl FA mal wieder ein update gefahren. Ich guck, wenn ich mal Zeit habe, was sich geändert hat. Dass die aber auch nie die Finger von ihrem Code lassen können...
#182 Duraldon schrieb am 02.02.2013 12:31 (CET):
Würde ich mich sehr freuen. Wie ich bereits schonmal erwähnte gewöhnt man sich doch recht schnell an so ein nützliches Tool. :)
#186 Klaue schrieb am 29.03.2013 18:21 (CET):
Hat zwar etwas gedauert, aber nun klappt's wieder
#187 Klaue schrieb am 29.03.2013 18:21 (CET):
Took my sweet time, but it works again
#178 Tedexisi schrieb am 09.01.2013 22:10 (CET):
Is there any easy way to edit the user name, and passwords of the account to be used for the download ? Old drive died without back up , and it will be quite a lot too redownload and would like to be on an expendable account via proxy . Thanks
#185 Klaue schrieb am 29.03.2013 15:02 (CET):
This answer is probably too late for you (missed your comment), but maybe someone else needs it: just select an account from the site and hit edit, then update user/password. Should update it on all accounts of this site
#176 Yang738 schrieb am 19.08.2012 23:22 (CET):
Es wäre wirklich schön nicht nur nach Artists etwas runter zu laden sondern auch per tag. Ansonsten gutes download-programm
#177 derp schrieb am 07.10.2012 23:01 (CET):
great program!
#175 Kanto schrieb am 10.07.2012 21:14 (CET):
Servus.
Sagmal, wäre es möglich eine Art "lite" Version von dem Programm zu bekommen, welches nur die URL's der Bilder in eine Liste packt und diese dann speichert, am Besten nach Artist/Account sortiert?
So sehr ich dein Programm mag, würde ich gerne einen Downloader verwenden, mit dem ich den Download anhalten und später fortführen kann. Daher meine Idee, mit dem "URL Grabber".
#174 Max schrieb am 10.07.2012 19:11 (CET):
Stop, pause and resume buttons for the downloads would also be very welcome!
