Wie funktionieren eigentlich Preissuchmaschinen (wie idealo, check24, momondo, etc)?

Vielleicht ist ja einer von euch Programmierer und kennt sich aus: Ich frage mich wie diese Websites funktionieren - sprich was passiert im Hintergrund?

Haben die Betreiber einen Code über den live das entsprechende Objekt der Begierde auf anderen einschlägigen Seiten gesucht und dann die Ergebnisse ausgespuckt werden (also im übertragenen Sinne ein digitaler Praktikant, der jedes mal aufs neue selbst schnell auf den anderen Webseiten nachschaut) oder haben die Anbieter / Shopbetreiber richtige APIs und stellen die Infos eigenständig zur Verfügung?

Würde mich freuen wenn ich ein paar detaillierte Antworten bekomme - der Gedanke lässt mich nicht mehr los!
Danke euch schon mal !

4 Antworten

Vom Fragesteller als hilfreich ausgezeichnet

HoiZusammen

01.02.2023, 20:59

Bei Versicherungen wird auf den Webservice der jeweiligen Versicherung zugegriffen.

Wenn dich dieses Thema näher interessiert, kannst du dir BIPRO anschauen.

Pywald

01.02.2023, 20:52

Hallo,

So genau kann man das nicht sagen, weil man nicht genau weiß was auf der Website passiert, solange es die Websitebetreiber nicht selber sagen. Meistens wird wahrscheinlich die Website automatisiert aufgerufen (auch genannt Web-Scraping) und die Ergebnisse verarbeitet. Genau kann man das aber wie gesagt nicht wissen, weil z.B. check24 ihren Quellcode nicht veröffentlicht.

Ich hoffe das hat deine Frage beantwortet,

Pywald

Woher ich das weiß:Hobby – Ich programmiere seit 3 Jahren mit Python

geheim007b

01.02.2023, 20:49

nicht live, aber automatisiert wird die Seite abgecrawled (oder falls möglich auch per API abgefragt)

Zwnow

01.02.2023, 22:25

Da wird wahrscheinlich irgendeine Automatik laufen die alle paar Minuten eine Datenbank mit Preisen pflegt die durch sowas wie Web-Scraping gesammelt wurden. Kann mir nicht vorstellen das die Preise in echtzeit aktualisiert werden.

Woher ich das weiß:Berufserfahrung – Ich bin Entwickler.

Ähnliche Fragen

Frage zum Programmierteam?

Aus wie vielen/welchen Leute/Fachkräften besteht ein typisches Programmierteam?

Zum Beispiel aus einem Frontend-Entwickler, einem Backend-Entwicker, einem Projektmanager. Und was noch? Wie viele Menschen sind an der Erstellung eines Programmas/Apps/Softwares/Spiels/Website beteiligt?

...zur Frage

SQLite - Where Datum >= NOW?

Hallo,

ich habe folgendes Problem:

Ich möchte aus der Datenbank Werte auslesen, die im Format Datetime gespeichert sind.

Datenbankaussehen:

Spalte: datumveröffentlichung

Inhalt: 2022-09-01 00:00:00

Ich möchte nur Datensätze, die in der Vergangenheit von heute liegen, also wenn datumveröffentlichung <=/kleiner heute ist.

Meine Anfrage:

if (isset($_GET['t'])) {
    $thema = $_GET['t'];
    $jetzt = date("Y-m-d H:i:s");
    $sqlueberlektionen = "SELECT thema,titel,alttextcard,imgcard  FROM '$thema' WHERE $jetzt";
    $abfrageueberlektionen = $verbindung->prepare($sqlueberlektionen);
    $abfrageueberlektionen->execute();
    $lektionen = $abfrageueberlektionen->fetchAll();
}

Ps.: Sonnst funktioniert das Skript.

...zur Frage

Weiterbildung als geprüfter IT-Projektleiter?

Lohnt es sich nach der Ausbildung als Fachinformatiker für Anwendungsentwicklung die Weiterbildung als Geprüfter IT-Projektleiter zu machen, oder lieber Informatik Bachelor Studium machen.

PS: Mit "lohnt es sich" meine ich:

-Die Karrierechancen

-Das man auch im Ausland arbeiten kann(das es im Ausland anerkannt wird)

...zur Frage

Wer kann besser programmieren?

Wer kann besser programmieren, ein Informatiker mit Studium(FH) oder ein Fachinformatiker für Anwendungsentwicklung?

Freut mich sehr eure Meinungen dazu zu hören

...zur Frage

Website wie eBay Kleinanzeigen erstellen?

Hallo zusammen!

Ich wollte mal euch befragen, wie ihr eine Website wie eBay Kleinanzeigen bauen würdet.

Welches Backend, welches Framework etc würdet ihr nehmen? Ich bin da noch recht frisch drin und habe nicht so eine gute Übersicht.

Bin gespannt auf euren Input!

Liebe Grüße

...zur Frage

Wie im Backend implementieren?

Ich möchte einen OpenID Login in Go implementieren. Die Daten sollen per API vom Frontend möglichst direkt sobald sie verfügbar sind abgerufen werden und das mit möglichst wenig anfragen (polling wäre also zB eher schlecht).

Es soll mehr oder weniger eine dauerhafte Verbindung zwischen Back und Frontend geben. Der User tippt also den Login Button, das Frontend startet eine Anfrage an die API und wartet, der User wird auf die Seite des jeweiligen Anbieters redirected, kommt zurück und ist nun direkt eingeloggt, sprich die Daten stehen im Frontend direkt zur Verfügung bzw das Backend hat sie direkt nachdem der User wieder auf der eigenen Seite ist ans Frontend weitergeleitet.

Wie könnte man das in Go bzw generell implementieren bzw welche Technik oder welches Protokoll könnte man wie nutzen? Wäre gegebenfalls doch ein anderer Weg besser (bspw Polling) ?

...zur Frage

Welchen Techstack nutzt ihr als Web Developer im Beruf?

und was Techstack ihr. Front end backend fullstack ?

Angular Typescript node js mongo bootstrap oder sowas.
React js java scss
Vue js less php

Was für wichtige libraries nutzt ihr.

Und wenn es für euch ok ist, wo arbeitet ihr genau/ungefähr / welche branche.

Und wie lange/ welche position

Arbeitet ihr fest bei zb Meta oder Freiberuflich

(Kriegt ihr regelmässig aufträge von unternehmen oder kleinere durch fiverr)

...zur Frage

Welche Programmiersprache für Backend (Web)?

An alle Programmierer,

welche Programmiersprache verwendet ihr im Backend und welche würdet ihr empfehlen?

Ich weis das ist eine sehr diskutierte Frage, aber was würdet ihr empfehlen, um in Deutschland einen Job zu bekommen?

Wenn man mal auf YouTube schaut, sagen die meisten Java - nein, C# (.Net) - veraltet (sind aber auch amerikanische YouTuber, da läuft es gefühlt anders).

Die Empfehlung ist: nimm Python (Django oder Flask), Ruby, GO, etc. (eben die neuen Sprachen).

Vergleicht man das allerdings mit den aktuellen Job Angeboten z.B. Stepstone dann gibt es aktuell 14 Jobangebote in Deutschland für Django, also für mich ein klares nein diese Sprache weiter zu lernen (genau so für alle anderen Sprachen)...

Gefordert werden Java oder C# (oder auch PHP, aber die Firmen setzten dann meistens auf WordPress), das sind allerdings auch die Sprachen, die keiner aktuell empfiehlt, daher bin ich da im Zwiespalt.

Aktuell verwende ich im Backend Django mit AWS, Ubuntu 22.04, NGINX und Gunicorn. Allerdings verwendet keiner in Deutschland Django, daher mal die Frage: Was macht denn eigentlich wirklich Sinn zu lernen, was auch viele Unternehmen verwenden?

Denn laut den Jobangeboten ist Java an erster Stelle und dann kommt C# an zweiter Stelle, für alle weiteren gibt es dann kaum Angebote.

Mit Frontend Frameworks ist das ja ein ähnliches Problem, es gibt gefühlt wöchentlich neuen Frameworks, aber bei Bewerbungen werden Angular (die meisten Job Angebote), dann React.js, dann Vue.js gefordert. Über allen anderen Frameworks brauchen wir nicht reden, da gibt es so gut wie keine Angebote.

...zur Frage

Einstiegsgehalt nach Informatik Bachelor als Softwareentwickler?

...zur Frage

Datenbanken Frage: SQL und NO-SQL - was ist der Unterschied in der Technologie?

...zur Frage

Frage für Informatiker: Thema für Hausarbeit aus dem Bereich Datenbanken vorschlagen? Ideen?

Ich darf mir ein Thema aussuchen worüber ich eine 10-15 seitige Hausarbeit schreibe im Bereich Datenbanken im Studium.
Ich tu es mir extrem schwer da ein Thema zu finden, wir haben die komplette freie Wahl, doch ich weiß einfach nicht worüber ich schreiben soll. Es muss irgendwas im Bereich Datenbanken sein.
Habt ihr da Vorschläge oder Ideen? Ich wäre euch sehr dankbar 🙏🙏

...zur Frage

Welches Backend + Hosting für kleine Webseiten?

Ich möchte eine Webseite für ein kleines Unternehmen erstellen.

Sie wird ziemlich Frontend-lastig sein bis auf ein zwei Besonderheiten:

Ein Kontakt-Formular, bei dem man eine Nachricht eingeben kann, die dem Unternehmer dann automatisch per Email zugesandt wird
Ein Blog, bei dem der Unternehmer selbst Posts (bestehend aus Text & Bildern) erstellen kann, in einer Art Admin-Panel mit WYSIWYG-Editor, und diese direkt oder zu einem bestimmten Zeitpunkt automatisch veröffentlichen kann

Beim Frontend fällt die Technologie-Auswahl noch relativ leicht, TypeScript und ein gängiges Framework wie z.B. React.
Als Datenbank würde ich MySQL oder PostgreSQL verwenden.

Beim Backend weiß ich nun aber nicht weiter.

Welches Framework würde sich für eine Webseite dieser Größe am besten anbieten?
Es sollte beim Hosting billig sein (z.B. durch niedrigen RAM-Verbrauch), der Code sollte einfach und schnell zu schreiben sein, und es sollte die oben genannten Features möglichst einfach ermöglichen.

Express, Next.js, Laravel, Django, Flask, ASP.Net, Spring, ... ?
Was würdet ihr nehmen und warum?

Und zum Hosting, muss ich die Webseite auf einem vServer hosten, oder reicht auch ein Webspace?

...zur Frage

Gehört Hardware zum Backend?

Also Server, Netzwerke ect. Oder ist damit nur die Entwicklung von Software gemeint?

...zur Frage

PHP MySql Login / Passwort überprüfung?

Kann mir da jemand sagen wo der Fehler liegt ? Ich bin da am verzweifeln.

Login, Registrierung, Fehlermeldung, SQL Struktur habe ich alles in die Frage gepackt damit ihr einen besseren überblick habt.

login.php:

<?php
   $server = 'localhost';
   $user = 'root';
   $psw = null;
   $dbName = 'TestApp';
try {
   $conn = new PDO('mysql:host='.$server.';dbname='.$dbName.';charset=utf8', $user, $psw);
   $conn->setAttribute(PDO::ATTR_ERRMODE, PDO::ERRMODE_EXCEPTION);
   $conn->setAttribute(PDO::ATTR_EMULATE_PREPARES, false);

    $username = htmlspecialchars(stripslashes(trim($_POST['username'])));
    $password = htmlspecialchars(stripslashes(trim($_POST['password'])));

    $statement = $pdo->prepare("SELECT * FROM user WHERE username = :username");
    $result = $statement->execute(array('username' => $username
                                    ));
    $user = $statement->fetch();
    //Überprüfung des Passworts
    if ($user !== false && password_verify($username, $password['passwort'])) {
        $_SESSION['userid'] = $user['id'];
        die('Login erfolgreich. Weiter zu <a href="geheim.php">internen Bereich</a>');
    } else {
        $errorMessage = "Nutzername oder Passwort war ungültig<br>";
    }

}catch (PDOException $e) {
    print "Error!: " . $e->getMessage() ;
    exit;
  }

Konsole :

<br />
<b>Warning</b>: Undefined variable $pdo in <b>C:\xampp\htdocs\Test\assets\php\login.php</b> on line <b>14</b><br />
<br />
<b>Fatal error</b>: Uncaught Error: Call to a member function prepare() on null in C:\xampp\htdocs\Test\assets\php\login.php:14
Stack trace:
#0 {main}
 thrown in <b>C:\xampp\htdocs\Test\assets\php\login.php</b> on line <b>14</b><br />

register.php

<?php
   $server = 'localhost';
   $user = 'root';
   $psw = null;
   $dbName = 'TestApp';
try {
   $conn = new PDO('mysql:host='.$server.';dbname='.$dbName.';charset=utf8', $user, $psw);
   $conn->setAttribute(PDO::ATTR_ERRMODE, PDO::ERRMODE_EXCEPTION);
   $conn->setAttribute(PDO::ATTR_EMULATE_PREPARES, false);

// POST wird mit AJAX gesendet
   $username = htmlspecialchars(stripslashes((trim($_POST["username"])))) ;
   $password =  password_hash(htmlspecialchars(stripslashes((trim($_POST["password"])))) ,PASSWORD_DEFAULT) ;
   $cash =     100;

// Schreibt in die Datenbank

   $sql = "INSERT INTO user (username,password,cash) VALUES (:username,:password,:cash) ";
   $sqlvars = array("username"  => $username,
   "password" => $password,
   "cash" => $cash);
   $Abfrage = $conn->prepare($sql);
   $Abfrage->execute($sqlvars);


}catch (PDOException $e) {
  print "Error!: " . $e->getMessage() . "<br/>";
  exit;
}

SQL STRUKTUR :

Datenbankname : Test

Tabelle : user , 5 Spalten/Rows

id | int , (auto increment)
username | varchar , (unique)
password | varchar, (gehasht mit salt sha512)
cash | varchar
time | datetime, (mit current time stamp)

und ich mache alles mit AJAX.

-PDO statt mysqli

...zur Frage

Was möchtest Du wissen?

Deine Frage stellen