php, txt datei oder mysql, was ist schneller?

Hallo zusammen

ich bekomme im 500ms einen Seitenaufruf einer php datei von einem esp8266.

Dieser liefert nur eine einzige zahl.

nun müsste ich folgendes szenario vereinfachen:

sammle 4 Daten, rechne den durchschnitt und sende diesen mittels einens http-request

nun die frage:

ist es schneller,

3 txt datein zu erzeugen und beim 4 aufruf diese auslesen und den durchschnitt zu berechnen

oder

1 txt datei zu erstellen, hier immer eine neue zeile reinschreiben und bei der 4 zeile, die einträge addieren und den durchschnitt berechnen

oder

die 4 daten in eine Datenbank mit mysql zu schreiben und anschließend auszurechnen??

danke euch

4 Antworten

toterbiber

27.12.2023, 22:26

Alles was technischen overhead macht ist in dem Fall natürlich langsamer. Es geht um 3 einzelne Zahlen, also eine wirklich minimale Datenmenge.
Theoretisch sollte da in jedem Szenario die Performance keine rolle spielen weil es blitzschnell geht egal wie du es machst.
Ich kann mir auch überhaupt nicht vorstellen, was da jetzt 500ms dauern soll.
In jedem fall ist natürlich 1 HTTP Request schneller als 3 und 1 HTTP Request ist natürlich schneller als 1 HTTP Request und eine Datenbankverbindung aufzubauen, eine SQL Abfrage zu schicken usw.

vkxni

27.12.2023, 21:15

Eins ist weniger als Vier, eine Kuh zu melken dauert nicht so lange wie Vier zu melken.

Woher ich das weiß:Hobby – C++ & Co. seit '05

regex9

Von gutefrage auf Grund seines Wissens auf einem Fachgebiet ausgezeichneter Nutzer

Datenbank, MySQL, PHP

27.12.2023, 21:24

Bei einer kleinen Anzahl an Datensätzen wäre das Auslesen/Schreiben einer Textdatei mit beispielsweise CSV-Format schneller als eine Datenbank. Vor allem dann, wenn die Daten nach Berechnung des Mittelwerts nicht weiter persistent gespeichert werden sollen, würde es sich eher lohnen, die Daten so lange wie möglich im Arbeitsspeicher zu halten (Stichwort: Caching).

Bei einer persistenten Speicherung wäre es eine gute Idee, Daten blockweise zu speichern (also erst alle z.B. 50 Datensätze, statt direkt nach jedem Datensatz).

iQa1x

27.12.2023, 21:11

Das schnellste wird da wohl die eine Datei sein. Mehrere Dateien bringen nur zusätzlichen Overhead hinsichtlich öffnen, auslesen, etc. Bei 4 Zahlen in einer Datei sollten die in einen Block passen und direkt gelesen werden.

Datenbank ist auch nur zusätzlicher overhead, der das langsamer macht.

Woher ich das weiß:Berufserfahrung – Softwareentwickler & Admin

jumbo125

Beitragsersteller

27.12.2023, 21:30

Die 4 zahlen in form von neuen zeilen oder in einer zeile mit semilion getrennt?

Öffnen, abfragen wie vuele Einträge, schreiben oder rechnen, datei leeren

iQa1x

27.12.2023, 21:50

@jumbo125

Erste 3: Öffnen zum Anhängen, neue Zeile schreiben. Spart da jeweils das Einlesen und neu Schreiben.

4: Einlesen (file), mittels foreach aufsummieren und gleichzeitig zählen, dann Durchschnitt rechnen und file mit truncate leer machen oder löschen.

jumbo125

Beitragsersteller

27.12.2023, 22:01

@iQa1x

Okay. Alles in einem file korrekt?

Da ich ja nicht weiß, das wievielte mal der wert geschrieben wird, muss ich bei jedem auruf abfragen, wie oft bereits ein eintrag gescgrieben wurde....

1. Datei zum anhängen öffnen, wert anhängen.

2. Datei zum lesen öffnen und nachsehen wieviele Einträge vorhanden sind.

3. Falls 4 Einträge vorhanden, den mittelwert berechnen und Datei leeren

Falls noch keine 4 Einträge, Datei einfach schließen. Korrekt? Das sollte am schbellsten gehen

iQa1x

28.12.2023, 00:10

@jumbo125

Wenn das nur 4 ganz normale Zahlen sind kannst du die auch jedes Mal einlesen, zählen, anhängen und wieder rausschreiben.

$data = file("filename");
$count = count($data);
if (count<3) {
  $data[] = $current;
  file_put_contents("filename", implode("\n", $data));
} else {
 $sum = $current;
 foreach(data as $v) $sum = $sum+$v;
 $avg = $sum/4;
file_put_contents("filename", "");
}

oder so ähnlich...

Wenn das auf dem Controller geht, schreibe das File auf eine Ramdisk...

jumbo125

Beitragsersteller

28.12.2023, 00:28

@iQa1x

Okay

Dachte fgetscsv ist schnelle als file put contents... Gibt es eigentliche eine literatur, wielange welche Funktionen brauchen bzw was Ressourcen sparender ist?

Ist eine Abfrage bzw Erstellung alle 500ms sehr "Ressourcen fressend"? Sollte ich es auf 1s verlängern, sodass der esp "nur alle 1s Daten" sendet?Ich habe Angst, das sich der nginx Server aufhängt, wenn das alle 500ms stattfindet

iQa1x

28.12.2023, 17:56

@jumbo125

Geschwindigkeit: Selbst ausprobieren, microtime und ein paar 1000 aufrufe in einer Schleife zum Testen helfen.

Das 2. probiere halt auch einfach aus, da nun parallel zu den Testanfragen ne Konsole mitlaufen zu lassen, um mit top den Load anzuzeigen sollte machbar sein. Ich weiss nicht, wie performant ein esp ist.

Ähnliche Beiträge

Daten aus MySQL auf Website darstellen?

Ich habe Daten in einer MySQL Datenbank, die ich gerne auf einer Website darstellen möchte, jeweils immer beim Klick auf einen Button (pro Button eine etwas andere Abfrage)

Eine entsprechende Abfrage dafür wird in JavaScript bereits erstellt.

Jetzt müssen die Daten nur noch abgerufen und eingefügt werden. - Nach allem, was ich gelesen habe, soll es sehr umständlich sein, MySQL in JavaScript zu verbinden.

Bisher habe ich probiert, die Abfrage per Cookie in PHP zu übertragen, dort die Daten abzufragen und zu echoen - das ganze mit einem getElementById().innervalue = ..., sodass immer die aktuelle Abfrage im DOM-Element ist, das passiert aber nur beim ersten Mal.

Das Abfragen der Daten in PHP und Zurückgeben an JS hat weder über einen Cookie, noch ein echo funktioniert.

...zum Beitrag

Warum kann dieser php code keine Verbindung zur Datenbank herstellen?

Ich sitze hier und verzweifle förmlich daran, warum sich die eingegebenen Daten aus:

<!DOCTYPE html>
<html>
  <head>
    <h1>Der Weg ins Paradies</h1>
    <link rel="stylesheet" href="GL.css">
  </head>
    <p>Die Welt dadraußen ist trist, doch <br> sein kein Schaf, sei ein Wolf</p>
    <form method="post" action="Registrierungsseite.php">
      <p><label>Name:<br><input type="text" name="Name"></label></p>
      <p><label>E-Mail:<br><input type="text" name="Mail"></label></p>
      <p><label>Passwort:<br><input type="password" name="Passwort"></label></p>
      <p><label>IBAN:<br><input type="text" name="IBAN"></label></p>
      <p><input type="submit" value="Registrieren"></p>
    </form>
  </body>
</html>

nicht in der MySQL-Datenbank wiederfinden.

Meine PHP-Datei ist diese hier:

<?php
  // Get the form data
  $name = $_POST['name'];
  $email = $_POST['email'];
  $password = $_POST['password'];
  $iban = $_POST['iban'];

  // Connect to the MySQL database
  $db = mysqli_connect("localhost", "root", "", "paradies");

  // Check if the connection was successful
  if (mysqli_connect_errno()) {
    // If the connection failed, display an error message and exit
    echo "Failed to connect to MySQL: " . mysqli_connect_error();
    exit;
  }

  // Insert the form data into the MySQL database
  $query = "INSERT INTO paradies (name, email, password,iban) VALUES ('$name', '$email', '$password', '$iban')";

  if (mysqli_query($db, $query)) {
    // If the insert was successful, redirect the user to the login page
    header("Location: GL.php");
    exit;
  }
  else {
    // If the insert failed, display an error message
    echo "Error: " . $query . "<br>" . mysqli_error($db);
  }

  // Close the MySQL connection
  mysqli_close($db);
?>

Ich sehe den Fehler einfach nicht, da sobald man die Daten absendet, es zwar zur PHP-Datei weitergeleitet wird, dann jedoch lediglich der Code zu sehen ist. Die Datenbank hat dann natürlich auch keinen Eintrag.

Danke im Voraus.

...zum Beitrag

PHP Inhalt von Textfeld (textarea) in .txt-Datei speichern?

Hi,

wie kann ich den Inhalt einer Textarea als .txt-Datei speichern? Bitte mit Zeilen, also nicht alles hintereinander.

Danke =)

...zum Beitrag

mysql text an select from anfügen?

Hallo zusammen

normalerweise nutzte ich php mit mysql um daten aus der DB abzufragen und füge mittels php die passende Einheit, bspw. Liter, Gramm, Euro o.äh.

nun muss ich nur mit SQL vorlieb nehmen.

wie kann ich das nun ergänzen wenn ich bspw

select SP1, SP2 from mytable where ....

Danke

...zum Beitrag

Wie kann ich die MySQL Daten (IP, Port, Username, Password, Datenbank) professionell sichern?

D. h. ohne, dass man ziemlich leicht die MySQL Daten auslesen kann. Ich weiß nicht ob meine bisherige Methode sicher ist (wäre super, ob mir das einer sagen könnte):

In einem Ordner eine PHP Datei namens dbconfig, in welcher folgender Code steht (MySQL Daten zensiert):

<?php
$con = mysqli_connect("IP/localhost","USERNAME","PASSWORD") or die("Fehler bei Datenbankverbindung.");
mysqli_select_db($con,'DATABASE');
?>

...zum Beitrag

Mit VueJS, Daten von MySQL abfragen und verändern?

Hallo, auf dem Schulserver unserer Schule habe ich eine MySQL Datenbank. Jetzt möchte ich in VueJS, Daten von dieser Datenbank abfragen und bearbeiten. Im Internet konnte ich leider keine guten Videos/Dokumentationen dazu finden. Wie kann ich mein Vorhaben umsetzen?

...zum Beitrag

txt Datei mit php sortieren?

Hallo, ich habe eine Liste mit Namen und Altern und würde diese gerne mit php sortieren lassen aber irgendwie funktioniert nichts, ist das überhaupt möglich?

...zum Beitrag

Daten aus txt-File einlesen und mit Datenbank vergleichen?

Ich bin gerade an einem Programm dran, dass aus einem txt File Produktdaten auslesen soll. Also Produkt ID, Produktanzahl usw.

Die Spalten im Textfile sind mit tabstops getrennt. Das einlesen des txt Files war soweit kein Problem. Ich habe es so gelöst, dass für jede Spalte eine Liste erstellt wird und in diese Listen die jeweiligen Daten importiert werden. Das Programm soll im Hintergrund mit einer MySQL Datenbank verbunden sein. In dieser Datenbank sind alle Produkte und deren Spezifikationen aufgelistet. Nun soll das Programm mithilfe der ProduktID (Primärschlüssel) die Spezifikationen aus der Datenbank nehmen und diese in einer neuen Tabelle speichern.

Da ich mit Datenbanken und MySQL nicht besonders vertraut bin, wollte ich hier um mögliche Lösungsansätze bitten.

Ich hoffe meine Ausgangslage ist verständlich ausgedrückt

Verwendetes Datenbanksystem: MySQL (mit phpmyAdmin)

Programm: Windows Forms App (.NET Framework)

...zum Beitrag

[PHP] Aktuelles datum nehmen und um 30 erhöhen + in die Datenbank eintragen?

kann mir jemand helfen, ich möchte das heutige Datum nehmen und 30 Tage drauf schlagen für ein Abo Modell. Dieses Datum soll dann in die Datenbank eingetragen werden.

Hier mein Versuch:

 $neu = date('d.m.Y',strtotime("+30 days"));
            $stmt = $mysql->prepare("UPDATE accounts SET 'Abo' = '$neu' WHERE ID = :ID");
            $stmt->bindParam(":ID", $_POST["ID"]);
            $stmt->execute;

...zum Beitrag

Rest API - PHP?

Hey, ich habe eine locale MySQL Datenbank, nun möchte ich diese an meine App anbinden. Dazu ist es sinnvoll eine Rest API zu entwickeln. Ich habe es mit folgender Anleitung versucht:

https://code.tutsplus.com/tutorials/how-to-build-a-simple-rest-api-in-php--cms-37000

Jedoch funktioniert es nicht. Also ich kann die API im Browser und mit Postman abrufen. Aber in meiner App kann ich trotz richtiger Anbindung keine Daten ausgeben.

Hat jemand eine Idee woran es liegen kann?

Danke schonmal für die Hilfe!

...zum Beitrag

PHP durch HTML ersetzen?

Hallo auf meiner Webseite sind viele php Dateien aber es sollen/müssen alles html Dateien sein, es sind nur php Dateien wegen einer kleinen Zeile:

<?php include '../web2/menu.html'; ?>

gibt es irgendwie Möglichkeiten das ohne php zu machen?

...zum Beitrag

pm.max_children, php-fpm, wieviel kann man setzten?

Hallo zusammen

ich habe einen raspi 4B mit 4GB.

auf diesem läuft mein localer server. Mehrere ESP senden sekündlich einen Request, bestehend auch max. 40 zeichen an ein php script........ das script wertet dann eineige daten aus und schreibt minimale mysql einträge.

plötzlich funktioniert mein php server nicht mehr. nach ewiger suche, hier die lösung:

server reached pm.max_children setting (5), consider raising it

mein wert war auf 5 gestellt.

kann ich bei einem 4GB raspi den wert auf 20 steigern? was ist hier möglich? danke

...zum Beitrag

Website mit MySQL Datenbank verbinden?

Ich habe mit XAMPP und phpmyadmin eine kleine SQL Datenbank angelegt. Man kommunziert da allerdings nur mit sich selbst. Wie verbinde ich also eine MySQL Datenbank mit einer Website, das ich z.B. mit einem PHP Skript Daten hinzufügen kann. Wichtig: Die Website sollte online sein und nicht nur für mich

...zum Beitrag

PHP-Funktion auslösen bevor man die Seite verlässt?

Ich probiere grade aus, meine eigenen „Google Analystics“ zu machen, da das Originale zu teuer ist. Egal, kommen wir zurück zum Thema. Wie füge ich Daten zu einer MySQL-Datenbank hinzu, genau dann, wenn der User die Seite verlässt. Ich habe es bereits mit diesem JavaScript versucht:

How do i run PHP-Functions before the page unloads bwz. close? I tried `beforunload` but it never really worked. I want to insert a record for analystics into php database. Here is the JavaScript:


```
const beforeUnloadListener = (event) => {
   document.write(' <?php 
		$sql2 = "DELETE FROM `SwiftSpion` WHERE ip = `$ip`";
$result2 = $conn->query($sql2);
	?> ');
}

window.addEventListener("beforeunload", beforeUnloadListener);

	const pageHideListener = (event) => {
    document.write(' <?php 
		$sql2 = "DELETE FROM `SwiftSpion` WHERE ip = `$ip`";
$result2 = $conn->query($sql2);
	?> ');
}
document.onvisibilitychange = function() {
  if (document.visibilityState === 'hidden') {
		document.write(' <?php 
		$sql2 = "DELETE FROM `SwiftSpion` WHERE ip = `$ip`";
$result2 = $conn->query($sql2);
	?> ');
  }
};

window.addEventListener("pagehide", pageHideListener);
```



I expect, that the MySQL-Command works when the user leaves the site.

...zum Beitrag

Was möchtest Du wissen?

Deine Frage stellen