Daten abrufen aus dem Web

Elquakamole · 2022-01-01T22:12:45+00:00

Guten Abend, und ein gesundes neues Jahr! Ich möchte gern aus folgender Website https://www.dresden.gold/goldbarren-20-gramm-combibar-valcambi.html den Kaufpreis (aktuell 1.106,76 ) in meine Excel kopiert und per Knopfdruck aktualisiert haben. Mithilfe von "Daten abrufen aus dem Web" werden zwar ein paar mögliche Tabellen angezeigt, aber leider ohne den gewünschten Betrag. Hat hier jemand eine Lösung, wie ich den Wert erhalte? VG Elquakamole

Hallo,
hier eine Idee....
Eine ID gibt es nur einmal, da sie eindeutig ist.
Bei Classname oder Tag-Name kann es mehrere Elemente geben, die man in einer Schleife abholen könnte.
In meinem Code habe ich den entsprechenden Index fest eingesetzt, nach dem ich ihn durch einen Blick auf den Web-Code ermittelt hatte.

Code:


[Cc]

Private Sub GetWebWert()
 With CreateObject("InternetExplorer.Application")
 ' .Visible = True
 .Navigate "https://www.dresden.gold/goldbarren-20-gramm-combibar-valcambi.html "
 While Not .readyState = 4: DoEvents: Wend ' Warten bis Seite geladen ist
 On Error Resume Next
 Debug.Print .Document.getElementsByClassname("price")(2).outertext
 Debug.Print Trim$(Split(.Document.getElementByID("product-price-14") _
 .outertext, "")(0) & "")
 .Quit ' IE schließen
 End With
End Sub

_________________________
viele Grüße aus Freigericht 😊
Karl-Heinz

Hallo zusammen
Also der Oberbegriff für die Recherche ist Web Scraping. Ein HTML-Dokument in Reinform ist nach dem DOM organisiert. Das steht für *Document Object Model*. Dazu zählen unter anderem die get()-Methoden, getElementByID(), getElementsByClassName(), getElementsByTagName() und , getElementsByName(). Auf dem DOM arbeitet man immer, wenn man es direkt mit einem HTML-Dokument zu tun hat. Das ist sowohl durch den Zugriff über die COM-Schnittstelle von VBA aus auf den IE der Fall, wie auch, wenn man xhr verwendet, und die Antwort (den responseText) in ein htmlFile Objekt schreibt.
Den IE sollte man nicht mehr verwenden, weil der seit einiger aktiv ausgemustert wird. Der soll also mit aller Macht weg. Da gehe ich jetzt nicht weiter drauf ein, aber vermeide ihn, wo möglich. Wenn der Zugriff nicht über xhr gelingt, kann man über SeleniumBasic, Chrome und dem Chrome WebDriver arbeiten. Da gibt es ähnliche Befehle, wie für das DOM, sie funktionieren nur etwas anders.
Mit xhr können nur statische Dokumente erreicht werden. Da gibt es keine dynamischen Inhalte oder weiterleitungen in irgend einer Form, weil JS nicht ausgeführt wird. Also alles, was der Browser ggf. automatisch übernimmt, um eine Seite richtig anzuzeigen, geht damit nicht. Das führt dann zu Problemen beim annehmen von Cookies, sich einloggen, usw. Trotzdem ist es ein mächtiges Werkzeug und es ist wesentlich schneller als die Arbeit mit dem Umweg über einen Browser.
Mit xhr kann man wie gesagt auf Dokumente auf einem WebServer zugreifen. Da Webseiten aus vielen Dokumenten bestehen und diese oft getrennt mit Grundgerüst und Daten arbeiten (und weiteren wie Bildern, Fonts, usw natürlich), kann man unter Umständen die reinen Daten aus dem Netzwerkverkehr fischen. Diese liegen oft als JSON vor. Auch dafür gibt es möglichkeiten der Verarbeitung, die Excel zwar nicht mitbringt, die aber eingebunden werden können.
Ich habe im Moment keine Zeit das alles weiter auszuführen oder Links zusammenzustellen. Aber dieses JSON dürfte den Wert enthalten, den Du mit Deinem zweiten Beispiel abgreifen möchtest. Das geht über ein JSON viel einfacher, weil es ein reines Datenaustauschformat ist, wie CSV oder XML.
https://component-api.wertpapiere.ing.de/api/v1/components/instrumentheader/LU1781541179
Der Link ruft das JSON auch im Browser auf, da es ein GET-Request ist. Post-Requests funktionieren auch, nur etwas aufwändiger und nicht direkt im Browser.
Ich hoffe das reicht erstmal als Einstieg ins Thema.
Viele Grüße,
Zwenn

Forumthread: Daten abrufen aus dem Web

10
Beiträge zum Forumthread

Beiträge zu diesem Forumthread

Infobox / Tutorial