Posts

Posts mit dem Label "crawler" werden angezeigt.

[Java] Einstieg in JSoup - Eine Tutorial Reihe

Bild
Als ich anfing mit der Tutorial Reihe, wollte ich schon immer mal ein Video Tutorial machen. Dies hab ich nun angefangen und euch etwas weiter unten eingebettet. Da es mein erstes Tutorial in Video Form ist, würde ich mir Feedfack sehr wünschen! Der Inhalt dieses Tutorial: Ich beschäftige mich mit dem Einstieg in JSoup und wie man es am besten in Java verwendet.   Webseite: http://r3d-soft.de Web-YouTube Downloader: http://youtube.r3d-soft.de YouTube Downloader als Programm: http://download.r3d-soft.de

[Tutorial] - Instagram Bilder eines Profils abrufen ("Crawler")

Bild
Um den MediaDownloader mächtiger zu machen, darf natürlich ein Instagram-Crawler nicht fehlen. Hierzu, verwende ich erneut die API da per JavaScript auf der Webseite der Content dynamisch nachgeladen wird. Die API arbeitet ebenfalls wieder mit JSON - damit sollten wir mittlerweile vertraut sein. Der Aufbau der API ist relativ simpel uns selbst erklärend aber(!), im Gegensatz zur Facebook API braucht Instagram (wie die YouTube API auch) einen "access token". Einen sogenannten API-Key der es den Entwicklern erlaubt überhaupt auf die API zuzugreifen. Im folgenden werde ich meinen API-Key durch {client-id} ersetzen. Zunächst, brauchen wir die User-ID von einem Benutzer, damit wir fortfahren können. Hierzu benutzen wir schon die API - das einzige Problem ist, wir bekommen alle Nutzer zurück welche, wenn auch nur teilweise, mit unserem gesuchten Nutzername übereinander stimmen. Die Request-URL: https://api.instagram.com/v1/users/search?q= {USERNAME} &client_id= {c...