Open source utils

Wij geloven in het delen van kennis. Onze dbt en Snowflake utilities zijn gratis beschikbaar via GitHub, voor iedereen die er iets aan heeft.

Bekijk op GitHub

dbt macros

Macros

dbt run monitoring

Logging

Houd bij wanneer een dbt run start en wanneer hij klaar is. Automatisch gelogd in Snowflake, zodat je altijd kunt terugkijken wat er wanneer is uitgevoerd. Onmisbaar voor productie-omgevingen.

log_dbt_start.sqllog_dbt_end.sql

AVG/GDPR data masking

Masking

Pas dynamische data masking toe op gevoelige kolommen via dbt tags. Eén macro, en je persoonsgegevens zijn automatisch afgeschermd voor rollen die er geen toegang toe mogen hebben.

apply_masking_tag.sqlcreate_masking_setup.sql

Datum & tijd utilities

Timestamps

Een complete set macros voor het omzetten en opschonen van datum- en tijdwaarden in Snowflake. Van ruwe timestamp-strings naar schone, consistente datums, inclusief fixes voor maanden en weekdagen.

to_timestamp.sqlfix_months.sqlfix_weekdays.sql

Snowflake

Stored Procedures

Anonymizer

Anonimiseer data direct in Snowflake via een stored procedure. Ideaal voor het maken van veilige ontwikkel- en testomgevingen zonder dat persoonsgegevens buiten productie komen.

Analyzer

Analyseer de structuur en inhoud van je Snowflake tabellen met één procedure-aanroep. Handig als startpunt bij het onboarden van nieuwe databronnen of het opsporen van datakwaliteitsproblemen.

Notepad++

Plugins

SQL Formatter

Formatteer SQL direct vanuit Notepad++ met Ctrl+Alt+F. Werkt op een selectie of het hele document, zodat je SQL altijd netjes en leesbaar blijft.

Aan de slag

Clone de repository, voer setup.sql eenmalig uit als accountadmin in Snowflake, en de macros en procedures zijn klaar voor gebruik in jouw dbt project.

git clone https://github.com/Steef-Datamodder/datamodder_utils
Naar de repositoryVragen?