wie kann ich eine Website mithilfe von Powershell auslesen?

Hallo,

ich will von der Website https://steamcommunity.com/market/listings/730/Operation%20Breakout%20Weapon%20Case

folgende Daten mit Powershell auslesen und nachher in ein Excel File übertragen:

(Gelb markiert)

Bild zum Beitrag

Wenn ich dieses Element untersuche wird mir dieser Code angezeigt. In dem Code kann man genau die Daten 55425 und 0.92 auslesen.

Bild zum Beitrag

Jetzt habe ich in Powershell diesen Code genutzt:

$url = Invoke-WebRequest -Uri "https://steamcommunity.com/market/listings/730/Operation%20Breakout%20Weapon%20Case"

$url | Get-Member
$url.AllElements | where class -EQ "market_commodity_order_summary"

Dabei kam kam das raus:

Bild zum Beitrag

Die Class market_commodity_order_summary hat es gefunden, jedoch benötige ich den ganzen Inhalt dieser Class damit ich die Anzahl dieses Items und den Preis des Items auslesen kann.

Was muss ich machen, damit ich die gelb markierten Informationen auslesen kann?

Bild zum Beitrag

Oder ist es nicht möglich, da sich dieser Wert immer wieder verändert?

Danke für eure Hilfe :D

1 Antwort

Serius

29.07.2020, 14:13

Ich kenne hier spontan drei Möglichkeiten.

Du suchst in dem HTML Code ALS STRING, den du bekommst, nach market_commoduty_orders_header_promote und holst dir das zwischen > und <. Das würde nicht funktionieren, wenn die spans in dem div erst zur Laufzeit generiert werden.
Du suchst nach einer fertigen API Schnittstelle, die dir diese Daten gibt (keine Ahnung, was du da auslesen willst, sonst könnte ich auch danach gucken).
Du guckst, ob du es direkt in Excel rein packen kannst. Siehe: https://docs.microsoft.com/en-us/previous-versions/office/developer/office-2003/aa203721(v=office.11)?redirectedfrom=MSDN

Thrm23

Beitragsersteller

29.07.2020, 14:32

Danke für deine Antwort.

Ich frage mich halt, warum die class market_commoduty_orders_header_promote nicht direkt angezeigt wird. Dann könnte ich doch einfach denn Wert der Class auslesen. Deine Möglichkeiten sind mir eine Nummer zu kompliziert )-:

Serius

29.07.2020, 14:36

@Thrm23

Es wird wahrscheinlich nicht direkt angezeigt, weil es im Webbrowser erst zur Laufzeit da rein gepackt wird. Würde ich zumindest mal tippen.

Thrm23

Beitragsersteller

29.07.2020, 14:49

@Serius

Und da gibt es keine Möglichkeit die Objekte die zur Laufzeit über powershell zu laden?

Serius

29.07.2020, 14:52

@Thrm23

Ich denke nicht. Dafür müsstest du ja die von der Webseite mitgelieferten Skriptdateien ausführen. Da brauchst du schon sowas wie einen emulierten Browser oder so.

Thrm23

Beitragsersteller

29.07.2020, 15:00

@Serius

Gibt es eine Funktion die Website zu laden und anschliessend eine class abzufragen?

Serius

29.07.2020, 15:02

@Thrm23

Ich wüsste keine Möglichkeit dafür aus der Powershell raus, aber ich habe auch nicht viel damit gemacht.

Ähnliche Beiträge

Wie kann ich Steam Trading Cards mit paysafecard bezahlen?

Wie kann man https://steamcommunity.com/market/listings/730/Horizon%20Case# über paysafecard kaufen?

...zum Beitrag

Mit Powershell Javascript variabel ansprechen?

Ich möchte von einer Webseite Daten auslesen und diese anschliessend in einem Excel File speichern.

Mein Powershell Code:

$url = Invoke-WebRequest -Uri "https://steamcommunity.com/market/listings/730/Operation%20Breakout%20Weapon%20Case"
$url.RawContent

Mit diesem Befehl kann ich den ganzen Quellcode der Webseite anzeigen lassen. Jedoch benötige ich nur eine kleine Information, welche sich in einer Javascript Variabel befindet.

Teil des gebrauchten Javascript Codes:

$J(document).ready(function(){			
var line1=[["Jul 02 2014 01: +0",4.314,"70167"],["Jul 03 2014 01: +0",3.364,"44849"],["Jul 04 2014 01: +0",3.961,"25137"],["Jul 05 2014 01: +0",4.012,"1
8923"],["Jul 06 2014 01: +0",4.071,"15788"],["Jul 07 2014 01: +0",4.316,"12800"],["Jul 08 2014 01: +0",4.498,"10284"],["Jul 09 2014 01: +0",3.017,"25336"],
["Jul 10 2014 01: +0",1.994,"35829"],["Jul 11 2014 01: +0",1.672,"35745"],["Jul 12 2014 01: +0",1.814,"26017"],["Jul 13 2014 01: +0",1.894,"20141"],["Jul 1
4 2014 01: +0",1.986,"17805"],["Jul 15 2014 01: +0",2.002,"17473"],["Jul 16 2014 01: +0",1.794,"21039"]];

Mit Powershell will ich die "var line1" Variabel auslesen und dessen Inhalt in einer Excel Datei speichern.

Wäre es möglich mit einem einfachen Command die Javascript Variabel auszulesen, oder ist es ein Problem, da es sich nicht um HTML Klassen handelt?

...zum Beitrag

Powershell invoke webrequest Login daten übernehmen?

Guten Abend zusammen,

Ich möchte mich aus dem Steamstore Preise mit Powershell abfragen.

$w = Invoke-WebRequest "https://steamcommunity.com/market/listings/730/AWP%20%7C%20Mortis%20%28Field-Tested%29"
[array]$price = $w.AllElements | where class -eq "market_listing_price_listings_block" | select outerText

Mit diesem Script bekomme ich die Preise auf der rechten Seite.

Output Powershell:

Das Problem ist jedoch, dass die Preise in unterschiedlichen Währungen angezeigt werden. Wenn ich mich mit einem Steam Account anmelde, währen die Preise einheitlich.

Mit diesem Script kann ich mich anmelden auf Steam:

$R = Invoke-WebRequest https://steamcommunity.com/login -SessionVariable fb
$Form = $R.Forms[0]
$Form.fields


$Form.Fields["input_username"]="XYYYY"
$Form.Fields["input_password"]="XYYYY"
$Uri = "https://steamcommunity.com/login" + $Form.Action
$R = Invoke-WebRequest -Uri $Uri -WebSession $FB -Method POST -Body $Form.Fields

$R.StatusDescription
$FB.UseDefaultCredentials = $true

Jetzt müsste ich mit diesen Anmeldedaten auch die Webrequest vom Beginn meiner Frage durchführen.

Ich frage mich, wie ich das genau machen kann.

Danke für die Hilfe

...zum Beitrag

Sind diese CS:GO Skin Seiten real?

Seiten:

https://steamcommunity.com/linkfilter/?url=https://duoiluknifes.tk

https://steamcommunity.com/linkfilter/?url=https://cbgiveknife.fun

Beiträge: https://steamcommunity.com/app/730/discussions/1/3845448341021153626/

https://steamcommunity.com/app/730/discussions/1/3845448341021451254/

...zum Beitrag

was ist das?

das war einfach auf meinem desktop ich habe es nicht geöffnet weil die url davon " javascript:BuyMarketListing('listing', '4307170122931567649', 730, '2', '27867364816') " war und es sehr offensichtlich danach aussieht das es was kauft wenn ich drauf klicke. weiß jemand woher es kommt ich ahbe nichts runtergeladen und befürchte das ich gehackt wurde

...zum Beitrag

Wie muss ich hier die Variable einfügen? Powershell?

Momentaner Code der nicht funktioniert:

'.name=\"$item\"'

Das Problem ist dass das Ganze aussen mit single quotes ist und um die Variable selber herum noch mit double quotes.

...zum Beitrag

Powershell Fehlercode kann ich nicht beheben?

Hallo zusammen,

Ich habe ein Powershell Script, welches die Informationen in einem Excel File füllen soll.

$objexcel=New-Object -ComObject Excel.Application
$workbook=$objexcel.WorkBooks.Open('C:\Users\Thoma\OneDrive\Desktop\CSGO Market\webauslesen.xlsx')
$workbook.worksheets.item("$item").activate()
$objexcel.Visible=$true
$worksheet.Cells.Item(1,1)=$item
$worksheet.Cells.Item(3,2)=Get-Date -Format f
$worksheet.Cells.Item(3,3)=$kauf_preis1
$worksheet.Cells.Item(3,4)=$kauf_anzahl1
$worksheet.Cells.Item(3,5)=$verkauf_anzahl1
$workbook.Save

Die Variablel $item ist ein String und bekam oben den Text "breakout_case" zugewiesen. $worksheet habe ich oben in den Wert 1 zugewiesen.

In der Vorlage, welche ich verwendet habe, wurde $worksheet der Wert des $workbook zugewiesen. Aber auch das funktioniert nicht.

Ich kann mir nicht vorstellen, was der Fehler sein könnte. Ich Danke euch bereits für eure Mühe.

...zum Beitrag

PowerShell: "Es wurde kein Positionsparameter gefunden, der das Argument "+" akzeptiert." Wie löse ich das?

Es geht um Reports... Programmiert wurde es mit PowerShell ISE

Hier der Fehler:

Rename-Item : Es wurde kein Positionsparameter gefunden, der das    Argument  "+" akzeptiert.
In Zeile:34 Zeichen:1
+ rename-item "c:\Reporting\Report_Telephone_" + $todaydate[0] +'-' + $todaydate[1 ...
+ ~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~
    + CategoryInfo          : InvalidArgument: (:) [Rename-Item], ParameterBindingException
    + FullyQualifiedErrorId : PositionalParameterNotFound,Microsoft.PowerShell.Commands.RenameItemCommand

hier mein Code:

#today's date (year-month-day)
$todaydate = Get-Date -Format yyyy-MM-dd

#arrays  (today => systemtime)
$todaydate = $todaydate.Split('-')
$todaydate[0] #year
$todaydate[1] #month
$todaydate[2] #day

#arrays yesterday (systemtime - one day)
$yesterdaysdate = Get-Date((Get-Date).AddDays(-1)) -Format yyyy-MM-dd
$yesterdaysdate = $yesterdaysdate.Split('-')
$yesterdaysdate[0] #year
$yesterdaysdate[1] #month
$yesterdaysdate[2] #day

#arrays yesterday (systemtime - one day)
$lastmonth = Get-Date((Get-Date).AddMonths(-1)) -Format yyyy-MM-dd
$lastmonth = $lastmonth.Split('-')
$lastmonth[0] #year
$lastmonth[1] #month
$lastmonth[2] #day


#Example 1:  Filename "Report_Telephone_yyyy-mm" => in this case "Report_Telephone_2016-12"
#it renames the file -> minus one month, so the name must be "Report_Telephone_2016-11"
$filename='Report_Telephone_'+ $lastmonth[0]+'-'+ $lastmonth[1] + '.xlsx'
$filemonth = [int][regex]::Match($filename, '\w+_\d+_(\d+)').Groups[1].Value
$filemonth = "{0:D2}" -f ($filemonth - 1)

write-host $filename
rename-item "c:\Reporting\Report_Telephone_" + $todaydate[0] +'-' + $todaydate[1] + ".xlsx" -NewName $filename

$sourcepath='C:\Reporting\'+ $filename
write-host $sourcepath
$destinationpath='C:\Reporting\'+ $lastmonth[0]+'\'+ $lastmonth[1]
write-host $destinationpath
if(test-path $destinationpath)
{

} 
else 
  {
     mkdir $destinationpath
  }
move-item -path $sourcepath -destination $destinationpath

Hat einer ne Idee, wie ich das lösen könnte? Thx im vorraus :3

...zum Beitrag

Steam, warum sind manche Chat Emoticons, Trading Cards(=Abzeichen) etc Nie mehr erhältlich?

Ich sammele ab & zu sehr gern mal Steam Abzeichen, Chat Emoticons etc. wenn sie cool aussehen. Jetzt bin ich bei einigen fündig geworden die auf dem Steam Marktplatz mit der Meldung "This item can no longer be bought or sold on the Community Market." versehen worden.

Hier ein paar Beispiele;

Chat Emoticons → https://steamcommunity.com/market/listings/753/480780-%3Anumerus%3A
Chat Emoticons → https://steamcommunity.com/market/listings/753/380790-%3Aritu%3A
Chat Emoticons → https://steamcommunity.com/market/listings/753/462200-%3Apentatris%3A

Sämliche Trading Cards zu deren Abzeichen (siehe Link) → https://www.steamcardexchange.net/index.php?gamepage-appid-388870

Jetzt zu meiner Frage, warum ist das so? Schon ziemlich unfair dass man in der Vergangenheit die Möglichkeit dazu hatte und jetzt keiner mehr für immer ein solches Abzeichen, emote bekommen kann. Welcher Sinn steckt dahinter?

...zum Beitrag

Warum sind gerade CSGO-Cases so teuer?

https://steamcommunity.com/market/search?q=&category_730_ItemSet%5B%5D=any&category_730_ProPlayer%5B%5D=any&category_730_StickerCapsule%5B%5D=any&category_730_TournamentTeam%5B%5D=any&category_730_Weapon%5B%5D=any&category_730_Type%5B%5D=tag_CSGO_Type_WeaponCase&appid=730#p1_price_asc

Es gibt keine Kiste für unter 6 Cent, und die Cases scheinen seit 2 Wochen deutlich teurer zu werden.

Warum?

...zum Beitrag

CS GO Waffenkiste Jagd wertvoll?

Ist die Waffenkiste Jagd sehr wertvoll oder wird sie in Zukunft vielleicht wieder an Wert steigen oder kann ich sie bedenkenlos gegen Steam-Gegenstände umtauschen, die aktuell wertvoller sind?

https://steamcommunity.com/market/listings/730/Huntsman%20Weapon%20Case?l=german

...zum Beitrag

Webseiten Scraper in Python?

Ich würde gerne einen WebScraper programmieren, jedoch bekomme ich es nicht hin. Ich würde gerne von einer Webseite die Frequenz von unserem Stromnetz auslesen, bekomme aber als Ausgabe nur "None". Hier ist mein Python-Code:

from bs4 import BeautifulSoup

import requests, time

url = f'https://www.apg.at/de/markt/Markttransparenz/Netzregelung/Netzfrequenz'

page = requests.get(url)

soup = BeautifulSoup(page.content, 'html.parser')

table = soup.find('h3', attrs={'class':'mb-0 text-danger ng-tns-c64-1'})

print(table)

Ich habe vor 2 Stunden mit Python angefangen, habe aber bereits gute Kenntnisse in C++ und Java etc. Hat jemand eine Idee, wie ich das Problem lösen kann oder hat jemand bereits was ähnliches programmiert?

LG

...zum Beitrag

Powershell Skript Fsstplattengröße anzeigen?

Ich benötig ein Powershell Skript womit ich die Festplattengröße auslesen kann.

Es sollen aber keine Laufwerke ausgegeben werden die kleiner als 10GB sind.

Weiterhin sollte ein Fehler ausgegeben werden wenn der Frei Speicher unter 10% sinkt.

Aktuell bin ich bis hierhin gekommen

Get-WmiObject -Class Win32_LogicalDisk -Filter "DriveType=3" | Format-Table @{Label="Drive"; Expression={$_.DeviceID}; width=8}, @{Label="Size"; Expression={$_.Size / 1GB}; Format="000.0"; width=8}, @{Label="GB Free" ; Expression={$_.FreeSpace/1GB} ; Format="000.0" ; width=8} , @{Label="% Free" ; Expression={$_.FreeSpace * 100 /$_.Size}; Format="00.0" ; width=10}

...zum Beitrag

IP-Adresse per PowerShell Skript auslesen (Nur aktiven Netzwerkadapter anzeigen)?

IP-Adresse per Batch Datei auslesen (Virtuelle Adapter ausschließen)?

Hallo,

Ich möchte ein PowerShell Skript schreiben, die unter anderem die IP-Adresse ausließt.

So sieht meine Lösung bis jetzt aus:

$Netzwerkadapter = Get-CimInstance -Class Win32_NetworkAdapterConfiguration -Filter IPEnabled=$true
$ipadsresse = $Netzwerkadapter.IPAddress
Add-Content -Path $dateitxt -Value "IP-Adresse: $ipadsresse "

Das Problem ist, das er die IP-Adresse von den virtuellen Adaptern dahinter schreibt.

Gibt es da irgend eine Lösung nur die Daten von dem lokalen Adapter auszulesen?

Es geht um folgende Informationen (Adapternamen, IPv4-Adresse, Standardgateway, DNS- Server, DHCP-Server, Mac-Adresse und DHCP aktiviert [Ja oder Nein])

Danke im voraus ; )

...zum Beitrag

Was möchtest Du wissen?

Deinen Beitrag erstellen