Quellcode komplett von einem URL laden?

Ich habe einen https url und möchte den kompletten code inkl allen div etc downloaden. Wie kann ich sas machen?

2 Antworten

16.03.2016, 18:56

der erste Schritt dazu wäre, dir den Seitenquelltext mal anzuschauen, im Firefox "Extras\Web-Entwickler\Seitenquelltext. Kannst ihn als Textdatei abspeichern.

Wenn er zu verzweigt sein sollte, Schritt 2. die Empfehlung von @carina969

anonym247

Beitragsersteller

16.03.2016, 18:58

Wie speichere ich es als textdatei?

Kann jemand mal probieren ob dieser Link zum dowloaden geht? Bei mir geht es nicht. An was kann das liegen?

https://mail.unibas.ch/owa/?ae=Dialog&t=AddressBook&pspid=_1458150746185_11250512

eleteroj

16.03.2016, 20:06

@anonym247

zum Download der App musst du dich zuvor Anmelden.

Zum Quelltext (bei Firefox):

Extras\Web-Entwickler\Seitenquelltext\

Dann öffnet Firefox einen neuen Tab und zeigt den HTML-Quelltext an.

Gehst auf Datei\Seite speichern als...und da dann als "Webseite komplett"

webschamane

16.03.2016, 10:13

Dazu benötigst du einen sogenannten Crawler, der die gesamte Seite ausliest und speichert.

Kostenlos (Freeware) und verbreitet ist Screaming Frog.

http://www.screamingfrog.co.uk/seo-spider/

Ähnliche Beiträge

Wo AOSP (Android zur Bearbeitung) Downloaden?

Hey, wo kann ich mir den Quellcode von Android 14 herunterladen, der Bearbeitet werden darf?

Das machen ja hersteller wie Samsung oder Xiaomi auch!

Wo bekommt man den Code her?

...zum Beitrag

Instagram Quelltext komplett (!) exportieren?

Hi,

hat jemand eine Idee, wie man den kompletten Quelltext einer Instagram-Seite exportiert?

Den Trick, den ich jetzt angewendet habe, war, die mobile Ansicht zu nehmen und im Scroll-Modus den kompletten Feed zu laden. Leider wird im Quellcode nicht der komplette Text angegeben, außerdem wird bei Strg+A nicht der komplette Text ausgewählt (gerne mit kopieren und einfügen in word testen).

Hat da jemand eine Idee?

...zum Beitrag

Python Selenium xpath ul / li?

Hallo Zusammen,

ich versuche aktuell über Selenium eine Website auszulesen. Zum Auslesen nutze ich Selenium xpath. Es geht um folgende Bespielseite: https://www.westernwelt.com/Cowboyhut-3X-von-Resistol-aus-Filz_1

Der von Chrome kopierte xpath lautet:
//*[@id="product-offer"]/div[2]/div/div[2]/div[2]/div/dl/dd[2]/div/div/div/ul/li[3]/a/span/span/span

Sobald in diesem Pfad ein ...ul/li/... vorkommt bekomme ich keine Ergebnisse mehr. Wo ist hier mein Denkfehler?

from selenium import webdriver
from selenium.webdriver.common.by import By#

url= 'https://www.westernwelt.com/Cowboyhut-3X-von-Resistol-aus-Filz_1'

driver = webdriver.Chrome()
driver.get(url)

xpath = '//*[@id="product-offer"]/div[2]/div/div[2]/div[2]/div/dl/dd[2]/div/div/div/ul/li[3]/a/span/span/span'
elements = driver.find_element(by=By.XPATH, value=xpath)

...zum Beitrag

Bilder bei einem HTML-Code einfügen?

Hallo!

Ich benutze oft die Seite ''ToyHouse'', wo ich meine Charaktere unter Kontrolle habe und ordnen kann. Ich wollte einen der Codes benutzen, den ich gefunden habe (ist free to use - von vomco; für ein Beispiel siehe unten).Ich weiß jedoch nicht, wo Ich das Bild einfügen muss. Hier ist ein bisschen vom Code:

-->
<div class="mx-auto w-100" style="font-size:13px;max-width:768px;">
  <div class="row no-gutters" style="margin:-4px;">
    <!-- ------------------------------
      AVATAR
    ------------------------------- -->
    <div class="col-md-4 p-1">
      <div class="card rounded-0 h-100" style="min-height:200px;border-color:#e09d7e;
        background: url (IMG URL)
      </div>
    </div>center;background-size:cover;">
  </div>
</div>
<div class="col-md-8 p-1 accordion" style="min-height: 460px;" id="accordion">

Wenn ich die Bilder erst ''hochladen'' muss, dann habe ich das auf Sta.sh/DeviantArt gemacht. Ich habe auch schon den Ersteller des Codes angeschrieben, jedoch keine Antwort erhalten und nichts klappt, egal was ich versuche.

...zum Beitrag

Wie kann ich YouTube Videos in FullHD kostenlos runter laden?

Ich meine, welches Addon (Firefox) ist dafür geeignet. Video Download Helper macht leider einen QR Code ins Bild, was sich nicht will.

Voraussetzungen:

Kostenlos
Volle Download Geschwindigkeit
Keine Wasserzeichen etc im Bild

Von mir aus auch externe Software. Einen Download Manager oder so.

...zum Beitrag

Muss man noch www oder m in die URL schreiben?

Mir ist aufgefallen, dass viele Websites kein www oder m mehr nach dem https in der URL haben. Ist das www zwingend notwendig, damit die Website laden kann?

...zum Beitrag

PHP-Datei in einen Div-Container mittels PHP laden?

Ich möchte mit einem Klick auf den Button eine PHP-Datei in den "main"-Tag laden (= <main>...</main>).

Hier könnt ihr den Quellcode sehen: http://damiantoczek.de/gpus.php

Die Datei ".../topics/howmuchvramdoineed.php" soll in <main>...</main> geladen werden.

Und das auch so, dass man einen Verlauf hat und man einen Schritt zurück gehen kann, wo die Datei noch nicht hineingeladen wurde.

...zum Beitrag

Über PHP HTML Quellcode auslesen und in Variable speichern?

Hallo,

Kennt jemand eine Möglichkeit wie ich mit PHP einen bestimmten Teil HTML Quellcode aus der gerade geöffneten Seite/oder generell aus einer Datei auslesen kann und diesen dann als Text in einer ganz normalen PHP Variablen speichern kann.

Mit bestimmten Teil meine ich zum Beispiel alles was in einem Element wie einem div mit einer bestimmten id steht.

Zum Beispiel dieser HTML Code:

<body>
  <div id="Div1">
      <h1> Nicht dieses Div </h1>
  </div>

  <div id="Div2">
      <h1> Dieses Div </h1>
  </div>

  <div id="Div3">
      <h1> Nicht dieses Div </h1>
  </div>
</body>

Wenn ich dann den Inhalt von Div2 in eine PHP Variable schreiben wil soll in der Variable: "<h1> Dieses Div </h1>" stehen.

Ich hoffe meine Frage ist verständlich und jemand kennt eine Lösung.

Vielen Dank im voraus :D

...zum Beitrag

Lua http.request funktioniert nicht?

Simples Problem: Bei Webseiten, die ihre URL verschoben haben, bekomme ich den Code 302 oder 301 zurück.

Ich möchte aber die gültige/neue URL haben, oder redirected werden. Ich habe auch extra "redirect" auf true gesetzt, aber es ändert nichts.

Hier mein Code mit Google Übersetzer Beispiel:

local http = require("socket.http")
local text, code = http.request{
  url = "https://translate.google.com/",
  redirect = true 
}
print(code) --301

...zum Beitrag

Wie kann ich einstellen, dass die div-Boxen auf dem Handy untereinander dargestellt werden?

Guten Tag.

Mein Problem ist Folgendes: Auf dem PC werden die Boxen ganz normal und wie gewollt dargestellt, doch auf dem Handy wird alles in die Reihe gequetscht und man kann nichts erkennen. Wie kann ich nun einstellen, dass die div-Boxen untereinander dargestellt werden?

Quellcode:

<?php
  require('templates/header.php');
?>

<div class="content">
  <div class="row">
    <div class="col-md-12">
      <div class="card">
        <div class="card-header">
          <h3 class="card-title">Kampagnen</h3>
        </div>
        <br><br>
        <div class="row">
          <div class="col-xs-12">
            <div class="box box-container">
              <div class="row">
                <div class="col-xs-12">
                  <div class="box-first box-container">
                    <div class="row">
                      <div class="col-xs-1">
                        <div class="row">
                          <div class="col-xs">
                            <div class="box-nested" text-align="center">
                              <img src="templates/XXX.png"/>
                            </div>
                          </div>
                        </div>
                      </div>
                      <div class="col-xs-3">
                        <div class="box-nested">
                          <strong> XXX </strong>
                        </div>
                      </div>
                      <div class="col-xs-3">
                        <div class="box-nested">
                          <h4>
                            <span class="badge badge-pill badge-success">XXX: 1,10€</span>
                            <span class="badge badge-pill badge-secondary">XXX: 1,00€</span>
                          </h4>
                        </div>
                      </div>
                      <div class="col-xs-4">
                        <div class="box-nested">
                          <span>
                            <h4>
                              <font color="#400040">
                                <input name="text" id="myInput" id="text" width="100%;" ?>">
                                <button class="badge badge-pill badge-danger" onclick="myFunction()">Link Kopieren</button>
                              </h4>
                            </font>
                            <script>

                              function myFunction() {
                                var copyText = document.getElementById("myInput");
                                copyText.select();
                                document.execCommand("copy");
                              }
                            </script>
                          </span>
                        </div>
                      </div>
                    </div>
                  </div>
                </div>
              </div>
            </div>
          </div>
        </div>
        <div class="card-body all-icons">
          <div class="row">
            <div class="wrap-table100">
            </div>
          </div>
        </div>
      </div>
    </div>
  </div>
</div>

<?php
  require('templates/footer.php');
?>

Das CSS, welches zugegebener Weise sehr unübersichtlich ist^^, lautet wie folgt:

https://pastebin.com/hHsGJhFE

...zum Beitrag

PHP router auf subdomain?

Hallo.

Ich habe folgendes Problem, dass mein Router auf meiner Subdomain (All-Inkl) nicht funktioniert. Er funktioniert Localhost und auch auf der Domain. (Fehler Code kommt keiner - außer ich bin auf einer Unterseite zB /skills und der Server sagt: Not Found)

The requested URL was not found on this server.

Danke im voraus.

<?php
//URL abfragen
$url = $_SERVER['REQUEST_URI'];

//Datei zu URL finden
$pages = match ($url) {
    '' => 'home.php',
    '/' => 'home.php',
    'kontakt' => 'kontakt.php',
    'uebermich' => 'uebermich.php',
    'skills' => 'skills.php',
    'projekte' => 'projekte.php',
    'gesendet' => 'gesendet.php',
    default => 'home.php'
};

//Datei einfügen
require 'pages/' . $pages;

...zum Beitrag

Welche Partei bei prozentualer Veränderung im verfügbaren Einkommen nach Bruttoeinkommensklasse?

findet ihr attraktiver?

quelle: Mannheim Reformvorschläge der Parteien zur Bundestagswahl 2025: Finanzielle Auswirkungen

direkt download der Studie:

https://www.google.com/url?sa=t&source=web&rct=j&opi=89978449&url=https://ftp.zew.de/pub/zew-docs/gutachten/Bundestagswahlprogramme_ZEW_2025.pdf&ved=2ahUKEwixyYHUmb6LAxUF3QIHHcmSDg0QFnoECB4QAQ&usg=AOvVaw3mbw2sLhoB0ZBOfjtOnFZY

https://www.zew.de/publikationen/reformvorschlaege-der-parteien-zur-bundestagswahl-2025-finanzielle-auswirkungen

...zum Beitrag

Python neun tab mit urlabfrage öffnen?

Moin.

Vorab Entschuldigung für den Grad nicht umfangreich fragen title.

also er hat Eine liste mit url die soll er abfragen. Und sobald Die url sich ändert soll er neue tab mit der neuen url aus der url list öffnen. habe auch schon einen code dazu aber komme nicht mehr weiter.
from urllib import response

from requests import get

import time

import webbrowser

url_list = ["https://www.google.com/", "https://www.youtube.com/",

"https://www.facebook.com/", "https://www.instagram.com/", "https://www.twitter.com/"]

webbrowser.open(url_list[0])

while True:

response = get(url_list[0])

print(response.status_code)

if response.status_code != 200:

url_list.pop(0)

if len(url_list) == 0:

break

webbrowser.open(url_list[0])

continue

time.sleep(30)

...zum Beitrag

CURL Code in Java umwandeln?

Ich versuche über die DEEP API ein Bild generieren zu lassen.

Der Curl code dazu ist:

curl \
    -F 'text=YOUR_TEXT_URL' \
    -H 'api-key:quickstart-QUdJIGlzIGNvbWluZy4uLi4K' \
    https://api.deepai.org/api/text2img

Mein Java Code ist:

URL url = new URL("https://api.deepai.org/api/text2img");
HttpURLConnection con = (HttpURLConnection)url.openConnection();
con.setRequestMethod("POST");
con.setRequestProperty("Content-Type", "application/json");

JSONObject data = new JSONObject();
data.put("text", "TEXT");
data.put("api-key", "quickstart-QUdJIGlzIGNvbWluZy4uLi4K");

con.setDoOutput(true);
con.getOutputStream().write(data.toString().getBytes());

try(BufferedReader br = new BufferedReader(
        new InputStreamReader(con.getInputStream(), "utf-8"))) {
    StringBuilder response = new StringBuilder();
    String responseLine = null;
    while ((responseLine = br.readLine()) != null) {
        response.append(responseLine.trim());
    }
    return response.toString();
}

Ich bekomme jedoch folgende Fehlermeldung:

Server returned HTTP response code: 401 for URL: https://api.deepai.org/api/text2img

Kann mir jemand weiterhelfen?

...zum Beitrag

Was möchtest Du wissen?

Deine Frage stellen