Započnite razgovor

Data platforme i pipeline-ovi

Prikupljanje, skladištenje i transformacija podataka kojima vaši analitičari veruju u devet ujutru, bez pitanja ko je šta pokvario.

  • dbt
  • Airflow
  • Kafka
  • Spark
  • DuckDB
  • Postgres
  • Snowflake
  • BigQuery

Većina problema sa modelima su problemi sa podacima u maski. Gradimo sloj prikupljanja i transformacije ispod: izvori koji pouzdano sleću, šeme koje pucaju glasno umesto tiho, i testovi nad tabelama na osnovu kojih se zaista donose odluke.

Graf porekla koji za nekoliko sekundi odgovori na pitanje „odakle je ovaj broj došao“ menja način na koji se firma svađa o sopstvenim metrikama. Isto važi i za SLA svežine koji ima vlasnika. Oboje je neatraktivno i oboje se isplati u roku od kvartala.

Prema stacku smo pragmatični. Skladište i dbt pokrivaju većinu firmi jako dugo; streaming zaslužuje svoju složenost tek kada odluka stvarno ne može da čeka sledeći batch. Suprotstavićemo se arhitekturi koja je ispred problema.

Šta dobijate

  • Batch i streaming prikupljanje sa backfill-om i ponovnim izvršavanjem
  • Modelovanje skladišta ili lakehouse-a, dbt projekti, inkrementalni buildovi
  • Testovi kvaliteta podataka, SLA svežine i lineage
  • Orkestracija sa stvarnim ponovnim pokušajima, alarmima i uputstvima

Česta pitanja

Da li nam treba skladište, lakehouse ili ništa od toga?
Većini firmi ispod nekoliko terabajta treba skladište i dobro modelovanje, ne arhitektura. Reći ćemo vam kada je Postgres i dalje pravi odgovor, a to je češće nego što ponuda alata sugeriše.
Možete li da popravite pipeline-ove koji tiho otkazuju?
To je dobar prvi zadatak. Glasno otkazivanje, bezbedno ponovno pokretanje i jasan vlasnik pokrivaju najveći deo; ostatak je obično izvorni sistem koji niko ne prati.
Radite li sa našim analitičkim timom ili ga zamenjujete?
Radimo sa njim. Analitičari znaju šta brojevi znače; mi činimo sloj ispod pouzdanim da prestanu da troše pola nedelje na forenziku.

Sledeći korak

Recite nam šta mora da izađe i do kada.

Jedan poziv, bez prezentacije. Ako nismo pravi tim za to, reći ćemo — i obično uputiti na nekoga ko jeste.

Započnite razgovor branislav@thrivee.io

Odgovor obično u roku od jednog radnog dana · CET / CEST (UTC+1 / UTC+2)