Data Engineering

Statistiken, Statistiken, Statistiken!

Statistiken, Statistiken, Statistiken!

Hung ManhFeb 3, 20223 min read

Wir hatten eine moderat komplexe Query, die ca. 270000 Zeilen umfasste, allerdings über eine Stunde lief. Nachdem Statistiken zu der darunterliegenden Tabelle aktualisiert wurden, lief die Query in nur 4 Sekunden durch.

Kubernetes pod steckt im pending Status fest. Nodes had no available volume.

Kubernetes pod steckt im pending Status fest. Nodes had no available volume.

Hung ManhJan 30, 20222 min read

Ein deployter pod steckt im pending Status fest. Ein kurzer Blick auf den pod gibt eine Warnung aus: 0/3 nodes are available: 3 node(s) had no available volume zone.

Airflow Tasks werden nicht zur spezifizierten Zeit ausgeführt

Airflow Tasks werden nicht zur spezifizierten Zeit ausgeführt

Hung ManhDec 9, 20214 min read

Wir haben ein Problem beobachtet, bei denen unsere Dags nicht zur spezifizierten Zeit, sondern konsistent zu einer scheinbar zufälligen Zeit ausgeführt wurden.

dummy-img

Objekte im OCI bucket verschieben

Hung ManhJul 26, 20212 min read

Gerade bin ich wohl über einer meiner Meisterstreiche in Sachen Dokumentation gestolpert. In der oracle cloud lassen sich Objekte nicht einfach verschieben, stattdessen geschieht dies über einen Umweg von Kopier- und Löschvorgängen.

pgadmin in Kubernetes – mount Permission denied

pgadmin in Kubernetes – mount Permission denied

Hung ManhJul 2, 20212 min read

Wenn ein PVC im k8 Cluster angebunden wurde, um die Daten von pgadmin zu persistieren, wird möglicherweise ein mount permission denied Fehler auftreten

NULL Werte und ihre Tücken

NULL Werte und ihre Tücken

Hung ManhAug 6, 20204 min read

Merke: Am besten keine NULL Werte in kritischen Spalten zulassen, die für Vergleichsoperationen genutzt werden Wenn NULL Werte mit anderen Zeichenketten verglichen werden, so ist das Ergebnis stets falsch. Dies kann zu hoher Frustration und Verwirrung führen, da es nicht…

Komma separierten String in Funktion /stored procedure übergeben

Komma separierten String in Funktion /stored procedure übergeben

Hung ManhApr 28, 20201 min read

In postgres ist die Übergabe einer Komma separierten Variable an eine Funktion nicht das Gleiche, wie diese direkt in der IN Bedingung reinzuschreiben.

Führende Nullen einfügen

Führende Nullen einfügen

Hung ManhApr 24, 20201 min read

Wenn eine Zeitangabe als Integer Wert gespeichert wird, so verliert es die führenden Nullen …

hungsblog | Nguyen Hung Manh | Dresden
Nach oben scrollen