Veri Depolama Tarihçesi: Neden OneLake'e İhtiyaç Var?
Geleneksel Veri Depolama Yöntemleri
Kurumlar, tarih boyunca verileri farklı yöntemlerle depolamışlardır. İlk başlarda, veriler yerel sunucularda veya dosya sistemlerinde saklanırdı. Daha sonra, veri ambarları (data warehouse) yaygınlaştı ve yapılandırılmış verilerin analiz edilmesi kolaylaştı. Ancak, yapılandırılmamış veriler (resimler, videolar, metin dosyaları) için bu sistemler uygun değildi.
2010'ların başında, veri gölü (data lake) kavramı ortaya çıktı. Veri gölü, her türlü veriyi (yapılandırılmış, yarı-yapılandırılmış, yapılandırılmamış) ham haliyle depolayabilen, esnek bir sistemdir. Ancak, veri gölleri de kendi sorunlarını beraberinde getirdi: veri kalitesi kontrol edilemedi, veriler organize edilemedi ve "veri bataklığına" dönüşebilirdi.
OneLake, veri gölünün esnekliği ile veri ambarının düzenliliğini birleştiren, yeni nesil bir veri depolama çözümüdür. OneDrive'ın kişisel dosyalar için yaptığını, OneLake kurumsal veri için yapar: merkezi bir depoda, tüm verileri organize bir şekilde saklar ve gerektiğinde hızlıca erişim sağlar.
OneLake'in Tanımı ve Temel Konsepti
OneLake, Microsoft Fabric'in merkezi veri depolama katmanıdır. Tüm kuruluşun verileri, OneLake'de saklanır ve Fabric'in diğer tüm bileşenleri (Data Engineering, Data Science, Real-Time Analytics, Power BI) bu veriye erişir.
OneLake'in temel felsefesi şudur: Veri bir kez depolanır, birden fazla kez kullanılır. Veri mühendisi, veriyi OneLake'e yükledikten sonra, analist bunu kullanabilir, veri bilimci makine öğrenimi modeli eğitebilir ve iş kullanıcısı raporlar oluşturabilir. Herkes aynı veriyle çalışır, bu da veri tutarlılığını garantiler.
OneLake, Microsoft Azure'un bulut altyapısı üzerine inşa edilmiştir. Verileri, Azure Data Lake Storage (ADLS) üzerinde saklar ve Delta Lake formatını kullanır. Delta Lake, veri güvenilirliği ve işlem yönetimi açısından önemli avantajlar sunar.
OneLake'in mimarisinde üç ana katman vardır:
Veri Katmanı (Data Layer): Ham verilerin saklandığı katman. Verilerin fiziksel olarak depolandığı yerdir.
Metadata Katmanı (Metadata Layer): Verilerin hakkında bilgi (veri türü, boyut, oluşturulma tarihi vb.) saklandığı katman. Bu, verileri hızlıca bulma ve organize etmeyi sağlar.
Erişim Katmanı (Access Layer): Kullanıcıların ve uygulamaların verilere eriştiği katman. Güvenlik kontrolleri ve izinler burada yönetilir.
OneLake'in Temel Özellikleri
OneLake, tüm kuruluşun verileri için tek bir merkezi depo görevi görür. Pazarlama, finans, operasyon gibi farklı departmanların verileri, OneLake'de organize bir şekilde saklanır. Bu, veri siloları sorununu ortadan kaldırır.
OneLake, petabyte ölçeğinde veriyi sorunsuz bir şekilde depolayabilir. Kuruluş büyüdükçe, veri hacmi arttıkça, OneLake otomatik olarak ölçeklenebilir. Hiçbir zaman depolama sınırlamalarıyla karşılaşmayız.
Veri Güvenliği ve Yönetişimi
OneLake, kurumsal düzeyde güvenlik standartlarını takip eder. Verilere erişim, rol tabanlı erişim kontrolleri (RBAC) ve duyarlılık etiketleri (sensitivity labels) aracılığıyla yönetilir. Ayrıca, Microsoft Purview entegrasyonu sayesinde, veri yönetişimi ve uyum (compliance) sağlanır.
OneLake, Direct Lake modu sayesinde, Power BI raporlarının doğrudan OneLake'deki veriye erişmesini sağlar. Bu, raporların yükleme hızını önemli ölçüde artırır ve gerçek zamanlı analiz yapılmasını mümkün kılar.
Veri Gölü Kavramının Evrimi
Veri Ambarından Veri Gölüne
Veri ambarı, yapılandırılmış ve önceden tanımlanmış şemaya sahip veriler için idealdir. Ancak, günümüzde kurumlar her türlü veriyle çalışırlar: sosyal medya verileri, IoT sensör verileri, video ve ses dosyaları gibi. Veri ambarı, bu tür verileri depolamak için uygun değildir.
Veri gölü, bu sorunu çözmek için ortaya çıktı. Veri gölü, her türlü veriyi, şema tanımlamadan depolayabilir. Ancak, veri gölleri de kendi sorunlarını beraberinde getirdi: veri kalitesi kontrol edilemedi, veriler organize edilemedi ve "veri bataklığına" dönüşebilirdi.
Lakehouse: İkisinin En İyisi
OneLake tabanlı Lakehouse mimarisi, veri gölünün esnekliği ile veri ambarının düzenliliğini birleştiriyor. Lakehouse, her türlü veriyi depolayabilir (veri gölü gibi) ancak aynı zamanda veri kalitesi ve tutarlılığını sağlar (veri ambarı gibi). OneLake, bu Lakehouse mimarisinin temelini oluşturur.
OneLake'de Veri Organizasyonu
Çalışma Alanları (Workspaces)
OneLake'de, veriler çalışma alanları (workspaces) içinde organize edilir. Her çalışma alanı, ayrı bir departman, proje veya iş birimi temsil edebilir. Örneğin, "Pazarlama Analitikleri" çalışma alanında, pazarlama departmanının tüm verileri saklanabilir.
Çalışma alanını oluşturmak için, Fabric portalında sol menüden "Workspaces" seçeneğine tıklayın. Ardından, "+ New Workspace" düğmesine basın. Çalışma alanı için bir ad girin ve gerekli izinleri ayarlayın.
Klasörler ve Domainler (Folders and Domains)
Çalışma alanı içinde, veriler klasörlere ve domainlere ayrılabilir. Örneğin, "Pazarlama Analitikleri" çalışma alanında, "Müşteri Verileri", "Kampanya Verileri" ve "Satış Verileri" adında ayrı klasörler oluşturabilirsiniz.
Klasör oluşturmak için, çalışma alanında "+ New Folder" seçeneğine tıklayın. Klasör için bir ad girin ve açıklamayı ekleyin. Klasörler, verileri mantıksal olarak organize etmeyi kolaylaştırır.
Momentum Datalabs, kurumların veri organizasyonunda "veri mesh" yaklaşımını benimser. Veri mesh, veri sahipliğini departmanlara dağıtarak, her departmanın kendi verilerinden sorumlu olmasını sağlar. OneLake, bu yaklaşımı uygulamak için ideal bir platformdur.
Veri mesh yaklaşımında, her departman:
•Kendi verilerini OneLake'de organize eder
•Veri kalitesinden sorumludur
•Diğer departmanlarla veri paylaşımı yapar
•Veri yönetişimi ilkelerine uyar
OneLake'de Veri Virtualizasyonu: Shortcuts
OneLake'de, verileri fiziksel olarak kopyalamadan, diğer konumlardaki verilere erişebilirsiniz. Bunu sağlayan mekanizma "shortcuts" (kısayollar) adı verilen bir özelliktir.
Shortcuts, sembolik bağlantılar gibi çalışır. Örneğin, Pazarlama departmanının müşteri verileri, kendi çalışma alanında saklanır. Finans departmanı, bu verilere ihtiyaç duyduğunda, fiziksel olarak kopyalamak yerine, bir shortcut oluşturabilir. Böylece, finans departmanı müşteri verilerine erişebilir, ancak veri yalnızca bir yerde saklanır.
Veri Tekrarını Ortadan Kaldırır: Aynı veri birden fazla yerde saklanmaz. Bu, depolama maliyetini azaltır ve veri tutarlılığını sağlar.
Veri Sahipliğini Netleştirir: Veri, sahibi departman tarafından yönetilir. Diğer departmanlar, bu veriye shortcut aracılığıyla erişir.
Esneklik Sağlar: Veri yapısı değiştirildiğinde, tüm kopyaları güncellemeye gerek yoktur. Shortcut otomatik olarak yeni veriyi gösterir.
Shortcuts Oluşturma: Adım Adım Rehber
OneLake'de shortcut oluşturmak için aşağıdaki adımları izleyin:
Öncelikle, shortcut oluşturmak istediğiniz lakehouse'u açın. Fabric portalında çalışma alanınıza gidin ve lakehouse'u seçin.
Adım 2: Sağ Tıklayarak Menüyü Açın
Explorer panelinde, shortcut oluşturmak istediğiniz klasöre sağ tıklayın. Örneğin, "Files" klasörü altında veya "Tables" klasörü altında.
Adım 3: "New Shortcut" Seçeneğini Seçin
Açılan menüden, lakehouse türüne bağlı olarak "New shortcut", "New table shortcut" veya "New schema shortcut" seçeneğini seçin.
Adım 4: Veri Kaynağını Seçin
Açılan diyalogda, "Internal sources" altında "Microsoft OneLake" seçeneğini seçin. Ardından, bağlanmak istediğiniz veri kaynağını (lakehouse, warehouse, vb.) seçin ve "Next" düğmesine basın.
Veri kaynağında "Files" veya "Tables" klasörlerini genişletin. Delta veya Iceberg formatındaki tablolar, tablo simgesi ile gösterilir. Diğer klasörler ise klasör simgesi ile gösterilir.
Bağlanmak istediğiniz bir veya daha fazla klasörü seçin (en fazla 50 klasör seçebilirsiniz) ve "Next" düğmesine basın.
Adım 6: Shortcut'ı Oluşturun
Seçtiğiniz konumları gözden geçirin. Shortcut adını düzenlemek istiyorsanız, "Edit" seçeneğine tıklayın. İstemediğiniz seçimleri kaldırmak için "Delete" seçeneğine tıklayın. Tüm ayarlamalar tamamlandıktan sonra, "Create" düğmesine basın.
Shortcut başarıyla oluşturulduktan sonra, Explorer panelinde seçtiğiniz klasör altında görünecektir. Shortcut'ı normal bir klasör gibi kullanabilirsiniz.
Oluşturduğunuz shortcut'ı düzenlemek veya silmek için:
1.Shortcut'a sağ tıklayın
2."Manage shortcut" seçeneğini seçin
3.Shortcut adı, hedef konumu veya diğer özellikleri düzenleyin
4.Değişiklikleri kaydedin
Shortcut'ı silmek için, sağ tıklayıp "Delete" seçeneğini seçin. Shortcut silinse bile, orijinal veri etkilenmez.
OneLake'de Veri Güvenliği ve Erişim Kontrolleri
Rol Tabanlı Erişim Kontrolleri (RBAC)
OneLake'de, verilere erişim, kullanıcının rolüne göre kontrol edilir. Örneğin, veri mühendisinin verileri yazma izni varken, analistin yalnızca okuma izni olabilir.
OneLake'de temel roller şunlardır:
Admin: Çalışma alanını ve tüm verilerini yönetebilir. Kullanıcı izinlerini ayarlayabilir.
Member: Çalışma alanında veri oluşturabilir, düzenleyebilir ve silebilir.
Contributor: Çalışma alanında veri oluşturabilir ve düzenleyebilir, ancak silemez.
Viewer: Çalışma alanında verileri yalnızca görüntüleyebilir.
Rolleri ayarlamak için, çalışma alanının ayarlarına gidin ve "Access" seçeneğine tıklayın. Kullanıcıları ekleyin ve uygun rolü atayın.
Duyarlılık Etiketleri (Sensitivity Labels)
OneLake'de, verilere duyarlılık etiketleri ekleyebilirsiniz. Örneğin, müşteri kişisel verileri "Highly Confidential" etiketi alabilir. Bu etiket, verilerin nasıl işleneceğini ve kime erişim verileceğini belirler.
Duyarlılık etiketi eklemek için:
1.Veri öğesine sağ tıklayın
2."Sensitivity" seçeneğine tıklayın
3.Uygun etiketi seçin (Public, Internal, Confidential, Highly Confidential)
4.Değişiklikleri kaydedin
OneLake'de Veri Yönetişimi
Microsoft Purview Entegrasyonu
Microsoft Purview, kurumsal veri yönetişimi ve uyum (compliance) sağlamak için kullanılan bir araçtır. OneLake, Purview ile entegre çalışır ve veri kataloglaması, veri kökeninin (data lineage) izlenmesi ve veri kalitesi kontrolleri yapılabilir.
Purview hub aracılığıyla:
•Tüm verilerin bir kataloğunu oluşturabilirsiniz
•Verilerin nereden geldiğini ve nasıl dönüştürüldüğünü takip edebilirsiniz
•Veri kalitesi kuralları tanımlayabilirsiniz
•Uyum (compliance) raporları oluşturabilirsiniz
Veri Etiketleme ve Kataloglaması
OneLake'de, veriler otomatik olarak kataloglanır ve etiketlenir. Örneğin, müşteri verileri, "Customer Data" etiketi alır. Bu, verileri hızlıca bulma ve organize etmeyi kolaylaştırır.
Veri kataloguna erişmek için, Fabric portalında "Data Hub" seçeneğine tıklayın. Burada, tüm OneLake verilerinin bir listesini görebilirsiniz.
Momentum Datalabs'ın OneLake Stratejisi
Ölçeklenebilir Veri Platformu Tasarımı
Momentum Datalabs, kurumların ihtiyaçlarına uygun, OneLake tabanlı ölçeklenebilir veri platformları tasarlar. Veri mimarisi, kuruluşun büyümesine uyum sağlayacak şekilde planlanır.
Momentum Datalabs, veri mesh yaklaşımını uygulayarak, departmanlar arasında veri sahipliğini dağıtır. Her departman, kendi verilerinden sorumlu olur ve diğer departmanlarla veri paylaşımı yapar.
Veri Yönetişimi ve Güvenlik
Momentum Datalabs, OneLake'de veri güvenliği ve yönetişimi konusunda en iyi pratikleri uygular. Duyarlılık etiketleri, erişim kontrolleri ve Microsoft Purview entegrasyonu sayesinde, kurumsal veri korunur ve uyum sağlanır.
OneLake'in Gerçek Dünya Örneği
Senaryo: Çok Departmanlı Bir Kuruluş
Bir e-ticaret şirketini düşünün. Bu şirketin, Pazarlama, Satış, Operasyon ve Finans departmanları vardır. Geleneksel sistemde, her departman kendi veri sistemini kullanır:
•Pazarlama: Müşteri segmentasyonu ve kampanya verilerini kendi sisteminde saklar
•Satış: Satış işlemleri ve müşteri etkileşimlerini ayrı bir sistemde saklar
•Operasyon: Envanter ve lojistik verilerini başka bir sistemde saklar
•Finans: Muhasebe ve bütçe verilerini ayrı bir sistemde saklar
Bu durum, veri siloları oluşturur ve karar alma süreçlerini yavaşlatır.
OneLake'de, tüm bu veriler tek bir merkezi depoda organize edilir:
1.Pazarlama Çalışma Alanı: Müşteri segmentasyonu ve kampanya verileri
2.Satış Çalışma Alanı: Satış işlemleri ve müşteri etkileşimleri
3.Operasyon Çalışma Alanı: Envanter ve lojistik verileri
4.Finans Çalışma Alanı: Muhasebe ve bütçe verileri
Her departman, kendi verilerini yönetir. Ancak, diğer departmanlar, shortcuts aracılığıyla bu verilere erişebilir. Örneğin, Finans departmanı, Satış departmanının satış verilerine shortcut aracılığıyla erişebilir ve finansal raporlar oluşturabilir.
Tüm veriler OneLake'de olduğu için, Power BI raporları, tüm departmanların verilerini birleştirerek, bütünsel bir görünüm sunabilir.
Sonuç: Tek Bir Doğru Kaynağa Ulaşmak
OneLake, kurumların veri yönetiminde devrim yaratır. Merkezi bir veri deposu, veri siloları sorununu ortadan kaldırır ve "tek bir doğru kaynağı" sağlar. Momentum Datalabs, OneLake'in gücünü kullanarak, kurumları ölçeklenebilir, güvenli ve yönetişimi sağlanan veri platformlarına geçişte rehber eder.
Verilerin gücünü tam olarak açığa çıkarmak için, öncelikle verileri organize etmek ve merkezi bir depoda toplamak gerekir. OneLake, bu yolculuğun ilk adımıdır.
Momentum Datalabs ile, kurumunuzun tüm verilerini OneLake'de organize edin ve "tek bir doğru kaynağı" sağlayın.
Microsoft Fabric
18.04.2026
