Data Lakehouse
Data Lake-in (strukturlaşdırılmamış böyük məlumat anbarı) çevikliyi və ucuz saxlama imkanları ilə Data Warehouse-un (strukturlaşdırılmış məlumat bazası) idarəetmə, struktur və ACID tranzaksiya xüsusiyyətlərini birləşdirən müasir məlumat memarlığıdır.
Ətraflı İzah
Data Lakehouse, böyük verilənlər (Big Data) dünyasında inqilabi bir memarlıq yanaşmasıdır. Əvvəllər şirkətlər xam və strukturlaşdırılmamış məlumatları (şəkillər, videolar, loqlar) saxlamaq üçün 'Data Lake', biznes analitikası (BI) və hesabatlıq üçün isə strukturlaşdırılmış 'Data Warehouse' sistemlərindən ayrı-ayrılıqda istifadə etməli idilər. Bu, məlumatların dublikat olmasına və yüksək infrastruktura xərclərinə səbəb olurdu.
Data Lakehouse bu iki fərqli dünyanı tək bir platformada birləşdirir. O, birbaşa ucuz bulud saxlama sahələrində (məsələn, AWS S3) SQL sorğularını sürətlə işlətməyə, maşın öyrənməsi (ML) modellərini birbaşa verilənlər üzərində qurmağa və eyni zamanda məlumatların idarə olunmasını (data governance) təmin etməyə imkan verir. Databricks və Snowflake kimi platformalar bu texnologiyanın qabaqcıllarıdır.
Böyük bir startup həm istifadəçilərin tətbiqdəki klik loqlarını (xam məlumat), həm də maliyyə tranzaksiyalarını (strukturlaşdırılmış məlumat) eyni platformada saxlamaq istəyir. Onlar Data Lakehouse memarlığını quraraq, həm BI komandasına SQL ilə hesabat hazırlamaq imkanı verir, həm də data scientist-lərə eyni məlumatlar üzərində ML modelləri qurmaq şəraiti yaradır.