Datavision.pl — inżynieria danych

Bezstanowa
infrastruktura danych

S3 as the only source of truth

Budujemy systemy, w których brak zewnętrznej bazy danych nie jest ograniczeniem, tylko warunkiem koniecznym. Deterministyczne kierowanie, niezmienne kontenery, compliance wbudowane od fundamentów.

Dwa produkty open-source dla organizacji, które przechowują miliardy plików i lata logów.

Stateless-first S3-native Compliance-grade Open Source EU jurisdiction
DV DATAVISION
Produkty

Cztery produkty, jedna filozofia

Każdy produkt rozwiązuje konkretny problem inżynierski: konsolidację małych plików, archiwizację logów, długoterminowe archiwum metryk i cross-product audyt dostępu. Łączy je ta sama architektura — bezstanowość i S3 jako jedyne źródło prawdy.

VERA
Versioned Easy Repository Archive

Konsolidacja miliardów małych plików do niezmiennych kontenerów .vera. Deterministyczne kierowanie bez bazy lookup. Range-GET zamiast pełnego odczytu. Wbudowane tombstone GDPR.

  • 60–80% redukcji kosztów storage TCO
  • 1000× mniej obiektów w S3
  • <10 ms lookup bez zewnętrznej bazy
  • SLA 48h dla GDPR Art. 17
SEC 17a-4 HIPAA GDPR SOC 2
Zobacz produkt
ELSA
Easy Log Simple Archive

Archiwum logów z indeksem encji i kryptograficzną integralnością. Brakująca warstwa między hot search a zimnym archiwum. Przeszukiwalne, niezmienne, uśpione do momentu potrzeby.

  • 15× tańsze TCO niż Splunk dla retencji 3-letniej
  • <1.5 s cross-stream lookup po encji
  • <5 min rebuild metastore z S3
  • Hibernowalna warstwa zapytań — koszt za storage
NIS2 DORA KNF GDPR Art. 17
Zobacz produkt
10×
MILA
Metric Indexed Long Archive

Długoterminowe archiwum metryk z indeksem PromQL. Gorilla compression, D+1 compaction, hibernowalna warstwa query. Bez stałego klastra 24/7.

  • 10–15× tańsze niż Splunk Metrics
  • <3 s p95 query latency (cold)
  • 5–10× compression ratio (Gorilla)
  • $0 stałego compute
PromQL MiFID II DORA HIPAA
Zobacz produkt
Wkrótce
AURA
Access, Usage & Retention Audit

Audyt dostępu cross-product nad VERA, ELSA, MILA. Kto czytał dane i kiedy. Jedna konsola GDPR Art. 17, jeden audit trail, raporty regulacyjne jednym klikiem.

  • 9 / 9 regulacji w jednym produkcie
  • 1 konsola GDPR Art. 17 cross-product
  • Cross-product legal hold orchestration
  • Dogfood — używa VERA+ELSA+MILA
GDPR Art. 30 HIPAA Access SOC 2 CC6.1 DORA Art. 9
Zobacz w DCS one-pager
4
Produkty open-source
VERA + ELSA + MILA + AURA
0
Zewnętrznych baz
Stateless-first architecture
100%
S3 as source of truth
Reszta jest odtwarzalna
5+
Regulacji wspartych
SEC · HIPAA · GDPR · MiFID · NIS2 · DORA
Filozofia

Cztery zasady, od których nie odstępujemy

Wspólne DNA naszych produktów. Każdy system, który budujemy, powstaje z tych samych założeń architektonicznych — sprawdzonych w produkcji, nie wymyślonych w specyfikacji.

01

Bezstanowość jako warunek konieczny

Brak zewnętrznej bazy lookup nie jest ograniczeniem — jest celem projektowym. Deterministyczne funkcje typu locate_shard(uid, ts) zastępują tabele mapowania. Każdy worker działa niezależnie, bez koordynatora.

02

S3 jako jedyne źródło prawdy

Wszystko inne — Redis, cache, indeksy, manifesty — to zmaterializowane widoki. Można je zniszczyć i odbudować w minuty. Brak vendor lock-in, kompatybilność z AWS S3, MinIO i Ceph/RGW jest pierwotną cechą, nie dodatkiem.

03

Compliance wbudowane, nie doklejone

S3 Object Lock, audit trail z chain hash, tombstone GDPR, legal hold per encję — pierwotne pojęcia systemu, nie konfiguracja na koniec projektu. SEC 17a-4, HIPAA, GDPR Art. 17, NIS2, DORA, KNF — architektura, nie checkboxy.

04

Niezmienność na poziomie infrastruktury

Append-only kontenery, WORM przez S3 Object Lock, kryptograficzny chain hash w audit logu. Mutacja danych jest udokumentowana, nigdy ukryta. Audytor widzi co się stało, kiedy i dlaczego — nie zerwany łańcuch, ale czytelny ślad.

Kompetencje

Co potrafimy

Oprócz produktów open-source, oferujemy usługi wdrożeniowe, konsultacje architektoniczne i wsparcie dla organizacji budujących własne systemy danych zgodne z wymogami regulacyjnymi.

🏗️

Architektura systemów S3-native

Projekt i wdrożenie systemów składowania obiektowego dla skali miliardowej. Deterministic routing, sharding, lifecycle policies, multi-region disaster recovery.

⚖️

Compliance & data governance

Implementacja wymagań SEC 17a-4, HIPAA, GDPR, NIS2, DORA, KNF na poziomie architektury. WORM, audit trail, legal hold, GDPR tombstone, raporty dla audytorów.

🔬

Migracje & integracje

Bezpieczne migracje miliardów plików z istniejących systemów (PostgreSQL, MySQL, NFS) do nowoczesnego storage. Watermark migration, zero-downtime, walidacja integralności.

📊

Data science & analityka

Analiza danych, modele predykcyjne, dashboardy operacyjne. Wieloletnie doświadczenie w sektorze finansowym, telekomunikacyjnym i administracji publicznej.

☸️

Kubernetes & observability

Deployment produkcyjny: Helm charts, HPA, CronJobs, PodDisruptionBudget. Pełna obserwowalność przez Prometheus + Grafana, structured logging, SLO-driven alerting.

🔐

Bezpieczeństwo & sekrety

OpenBao / Vault, dynamic credentials, MFA dla break-glass, SSH-style PKI (Ed25519/RSA). Rotacja kluczy bez przerwy, audyt dostępu, zero hardcoded secrets.

Kontakt

Porozmawiajmy
o Twoim projekcie

Skontaktuj się z nami, aby omówić wdrożenie któregokolwiek z produktów Datavision Compliance Suite (VERA, ELSA, MILA, AURA), ocenić możliwość integracji z Twoim systemem, albo zapytać o usługi konsultacyjne dotyczące architektury danych zgodnej z regulacjami.