Veri Ambarı Oluşturmak için Örnek Bir Yol Haritası
Yayınlanan: 2018-03-30Daha kolay erişim ve daha iyi analitik için tüm kurumsal verilerinizi tek bir yerde birleştirme tekniği olan veri ambarı, her iş paydaşının hayalidir. Ancak bir veri ambarı kurmak oldukça karmaşık bir iştir ve daha ilk adımlarınızı atmadan önce şu iki sorunun cevabından tamamen emin olmalısınız:
- Kuruluşunuzun hedefleri
- Bir veri ambarı oluşturmaya yönelik ayrıntılı yol haritanız
Bu sorulardan herhangi biri yanıtsız bırakılırsa, uzun vadede kuruluşunuza çok pahalıya mal olabilir. Nispeten daha yeni bir teknolojidir ve kuruluşunuzun özel ihtiyaçlarının ve gereksinimlerinin farkında değilseniz, birçok hata alanı yaratacaksınız. Bu hatalar, deponuzu oldukça hatalı hale getirebilir. Daha da kötüsü, hatalı bir veri ambarı, hiç veriye sahip olmamaktan daha kötüdür ve planlanmamış bir strateji sizi iyiden çok kötü yapabilir.
Veri ambarları geliştirmeye yönelik farklı yaklaşımlar olduğundan ve bunların her biri kuruluşların büyüklüğüne ve ihtiyaçlarına bağlı olduğundan, herkese uyan tek bir plan oluşturmak mümkün değildir.
Bunu söyledikten sonra, kuruluşunuz için sağlam ve verimli bir veri ambarı geliştirmenize yardımcı olacak örnek bir yol haritası oluşturmaya çalışalım:
İçindekiler
Veri Ambarı Kurma
Veri Ambarı, verimli bir şekilde almak ve analiz etmek için büyük miktarda veri düzenlerken son derece yararlıdır. Aynı nedenle, verilerin hızlı bir şekilde erişilebilir olmasını sağlamak için son derece dikkatli olunmalıdır. Sistemi tasarlamaya yönelik bir yaklaşım, büyük hacimli verilerin verimli ve hızlı bir şekilde sorgulanıp incelenmesine izin veren bir yöntem olan boyutlu modelleme kullanmaktır. Veri ambarlarında bulunan verilerin çoğu tarihsel ve istikrarlı olduğundan – bir bakıma sık sık değişmez, tekrarlayan yedekleme yöntemleri kullanmaya neredeyse hiç gerek yoktur. Bunun yerine, herhangi bir veri eklendiğinde, rutin olarak yedeklemek yerine tüm ambar bir kerede yedeklenebilir.
Veri ambarı araçları genel olarak dört kategoride sınıflandırılabilir:
- çıkarma araçları,
- Tablo yönetim araçları,
- Sorgu yönetimi araçları ve
- Veri bütünlüğü araçları.
Bu araçların her biri, Veri Ambarı geliştirmenin farklı aşamalarında son derece kullanışlıdır. Sizin tarafınızdan yapılan araştırma, bu araçlar hakkında daha fazla bilgi edinmenize yardımcı olacak ve ihtiyaçlarınıza uygun olanları seçmenize olanak sağlayacaktır.
Veri Ambarı ile İlgili Temel Kavramlar: Genel Bir Bakış
Şimdi, kuruluşunuz için daha sağlam ve anlayışlı bir depo oluşturmanıza yardımcı olacak örnek bir yol haritasına bakalım:
Hedeflerinizi değerlendirin
Kuruluşunuzun veri ambarını kurmanın ilk adımı, hedeflerinizi değerlendirmektir. Bundan daha önce bahsetmiştik, ancak bunu yeterince vurgulayamayız. Kuruluşların çoğu, sırf şirketlerinin amaçlarının, gereksinimlerinin ve hedeflerinin net bir resminden yoksun oldukları için değerli içgörüleri kaybederler. Örneğin, ilk önemli atılımınızı arayan bir şirketseniz, müşterilerinizi ilişki kurmaya dahil etmek isteyebilirsiniz - bu nedenle, iyi kurulmuş ve şimdi kullanmak isteyen bir kuruluştan farklı bir yaklaşım izlemeniz gerekir. operasyonlarını geliştirmek için veri ambarı. Bir veri ambarını şirket içine getirmek, herhangi bir kuruluş için büyük bir adımdır ve yalnızca sizin tarafınızdan biraz durum tespiti yapıldıktan sonra gerçekleştirilmelidir.
Mevcut teknolojik sistemleri analiz edin
Müşterilerinize ve iş paydaşlarınıza sivri uçlu sorular sorarak, mevcut teknik sisteminizin nasıl performans gösterdiği, karşılaştığı zorluklar ve olası iyileştirmeler hakkında bilgi toplayabilirsiniz. Ayrıca, mevcut teknoloji yığınlarının ne kadar uygun olduğunu bile öğrenebilirler ve bu sayede, saklanıp saklanmayacağına veya değiştirilip değiştirilmeyeceğine verimli bir şekilde karar verebilirler. Kuruluşunuzun çeşitli departmanları, raporlar ve geri bildirimler sağlayarak buna katkıda bulunabilir.
Veri Madenciliğinin En Yaygın Örnekleri
bilgi modelleme
Bilgi modeli, kuruluşunuzun verilerinin bir temsilidir. Kavramsaldır ve hangi iş süreçlerinin birbiriyle ilişkili olması gerektiğine ve bunların nasıl birbirine bağlanacağına dair fikirler oluşturmanıza olanak tanır. Veri ambarı nihayetinde birbiriyle ilişkili yapıların bir koleksiyonu olacaktır, bu nedenle, birbirine bağlanması gereken göstergeleri kavramsallaştırmak ve en iyi performans yöntemlerini oluşturmak önemlidir - bu, bilgi modelleme olarak bilinir. Etkili bir bilgi modeli tasarlamanın en basit yolu, temel performans göstergelerini olgu tablolarında toplamak ve bunları müşteriler, çalışanlar, ürünler vb. gibi çeşitli boyutlarla ilişkilendirmektir.

Dünyanın en iyi Üniversitelerinden veri bilimi derslerini öğrenin . Kariyerinizi hızlandırmak için Yönetici PG Programları, Gelişmiş Sertifika Programları veya Yüksek Lisans Programları kazanın.
Depo tasarımı ve verilerin takibi
Kuruluşunuzla ilgili içgörüler topladıktan ve verimli bir bilgi modeli hazırladıktan sonra, şimdi verilerinizi ambara taşıma ve bunların performansını izleme zamanı geliyor. Tasarım aşamasında, farklı veritabanlarından gelen tüm verilerin nasıl bağlanacağını planlamak çok önemlidir, böylece bilgi, veri ambarı tablolarımıza yüklenirken birbirine bağlanabilir. ETL araçları oldukça zaman ve para tüketebilir ve uzmanların başarılı bir şekilde uygulamasını gerektirebilir. Bu nedenle, doğru zamanda doğru araçları bilmek ve size sunulan en uygun maliyetli seçeneği seçmek önemlidir. Bir veri ambarı önemli miktarda depolama alanı tüketir, bu nedenle zaman geçtikçe verilerin nasıl arşivleneceğini planlamanız gerekir. Bunu yapmanın bir yolu, üç katmanlı bir veri depolama sistemi tutmaktır (birazdan bunun hakkında daha fazla konuşacağız). Bununla birlikte, ayrıntı düzeyiyle ilgili sorun, veri tanesinin bir süre sonra ertelenmesidir. Bu nedenle, sisteminizi, farklı ayrıntı düzeyi belirli bir veri yapısıyla tutarlı olacak şekilde tasarlamalısınız.
planı uygula
Artık planınızı geliştirdiğinize ve veri parçalarını birbirine bağladığınıza göre, şimdi stratejinizi uygulama zamanı. Veri Ambarı'nın uygulanması büyük bir adımdır ve projeyi planlamak için uygun bir temel vardır. Proje parçalara ayrılmalı ve her seferinde bir parça ele alınmalıdır. Görevin her bir parçası için bir tamamlama aşaması tanımlamanız ve son olarak, tamamlandıktan sonra tüm bitleri harmanlamanız önerilir. Böyle sistematik ve düşünülmüş bir uygulama ile Veri Ambarı çok daha verimli bir şekilde çalışacak ve veri analitiği aşamasında çok ihtiyaç duyulan bilgileri sağlayacaktır.
Veri Ambarı ve Veri Madenciliği Nedir?
güncellemeler
Veri ambarınız, zaman ve ayrıntı düzeyi testlerine dayanacak şekilde ayarlanmıştır. Uzun süreler boyunca ve birçok ayrıntı düzeyinde tutarlı kalması gerekir. Kurulumun tasarım aşamasında, tekrarlanmayan güncellemeye bağlanan çeşitli depolama planlarını seçebilirsiniz. Örneğin, bir BT yöneticisi günlük, haftalık veya aylık tahıl depolama sistemleri kurabilir. Günlük tahılda, veriler toplandığı orijinal formatta 2-3 yıl saklanabilir, daha sonra özetlenmeli ve haftalık tahıla taşınmalıdır. Artık veriler önümüzdeki 3-5 yıl boyunca haftalık tane yapısında kalabilir, ardından aylık tane yapısına taşınacaktır.
Yukarıda belirtilen yol haritasını takip etmek, önümüzdeki uzun yarış için doğru yolda olmanızı sağlayacaktır. Herhangi bir sorunuz varsa, bunları aşağıdaki yorumlara bırakmaktan çekinmeyin.
Veri Ambarı Nedir?
Veri ambarı, iş zekası ve analitik faaliyetlerini kolaylaştırmak ve yardımcı olmak için tasarlanmış bir tür veri yönetim sistemidir.
Veri ambarları, mantıksal sorgular yürütmenize, güvenilir tahmin modelleri oluşturmanıza ve şirketiniz genelinde önemli eğilimleri belirlemenize olanak tanır. v
Bir Veri Ambarı oluşturmak ne kadar sürer?
Zaman, piyasada veri ambarı ve iş zekası ile ilgili yaygın bir yakınmadır. Rakamlar tartışmalı olsa da, Veri Ambarı'nın sonuçları görmek için genellikle uzun bir zamana ihtiyaç duyduğuna dair geleneksel anlayışa bağlı kalalım.
Analitiği kurmak için gereken zaman yatırımı çok fazla. Bir Veri ambarı oluşturmak için geçen süre 12 ila 24 ay arasında değişebilir. Ancak başarılı veri ambarı projeleri bir organizasyonun süreçlerini ve vizyonunu tamamen dönüştürebileceğinden, buna kesinlikle değer. Sorunlara ışık tutma, yeni beklentilere yol açma ve her seviyedeki çalışanların günlük iş yaşamlarını daha iyi hale getirmelerine yardımcı olma becerisine sahiptirler.
Bir Veri ambarının en önemli özelliklerinden bazıları nelerdir?
Tipik bir Veri Ambarı'nın temel bileşenlerinden bazıları şunlardır:
1. Merkezi Veritabanı : Veri ambarınızın temel taşı bir veritabanıdır. Bunlar, şirket içinde veya bulutta kullanılabilecek geleneksel ilişkisel veritabanlarıydı. Bununla birlikte, bellek içi veritabanları, Büyük Veri, gerçek, gerçek zamanlı hız gerekliliği ve RAM maliyetinde önemli bir düşüş sonucunda hızla popülerlik kazanmaktadır.
2. Veri Entegrasyonu : Kaynak sistemlerden veri toplamak ve değiştirmek için ETL(Extract, Transform, Load), gerçek zamanlı veri replikasyonu, toplu yük işleme, veri dönüşümü, veri kalitesi vb. gibi çeşitli veri entegrasyon teknolojileri kullanılır. hızlı analitik tüketime hazır olmasıdır.
3. Metadata : Veri ambarınızın kaynağı, kullanımı, değerleri ve diğer özelliklerindeki veri kümelerini detaylandırır. Verilerinize anlam katan iş meta verileri ve nerede depolandığı ve nasıl düzenlendiği gibi verilere nasıl erişileceğini açıklayan teknik meta veriler vardır.
4. Veri Ambarı erişim araçları : Kullanıcılar, Sorgu ve Raporlama araçları, Uygulama Geliştirme araçları, Veri Madenciliği araçları, OLAP araçları vb. gibi erişim araçlarını kullanarak veri ambarınızdaki verilerle etkileşim kurabilir.