5. Week
Büyük veri ve veri analitiği
Topics of this week
- Büyük verinin bileşenleri: hacim, hız, çeşitlilik
- Veri toplama, saklama ve veri kalitesi
- Betimsel, tanısal, kestirimci ve yönlendirici analitik
Lecture content
Büyük veri, hacim, hız ve çeşitlilik bakımından geleneksel araçlarla işlenemeyen veridir. Üretimde bu üç boyut da mevcuttur: yüzlerce sensör, saniyelik okuma sıklığı, sayısal-metin-görüntü karışımı.
Veri değer zinciri toplama, saklama, temizleme, analiz ve görselleştirme adımlarını içerir. Uygulamada emeğin çoğu temizlemeye gider: eksik okuma, bozuk sensör, zaman damgası kayması ve birim tutarsızlığı düzeltilmeden analiz güvenilmezdir. Veri yönetişimi — verinin sahibi kim, nerede saklanır, ne kadar süreyle tutulur — genellikle atlanan ama kritik bir konudur.
Saklama mimarisinde veri ambarı yapılandırılmış ve şeması belli veriyi, veri gölü ise ham ve çeşitli veriyi tutar. Zaman serisi veri tabanları, sensör verisi için özelleşmiştir.
Analitik dört kademede ele alınır: betimsel (ne oldu), tanısal (neden oldu), kestirimci (ne olacak) ve yönlendirici (ne yapmalı). İşletmelerin çoğu ilk kademede kalır; asıl değer üçüncü ve dördüncü kademede ortaya çıkar.
Görselleştirme, analizin karara dönüşmesini sağlar: doğru tasarlanmış bir gösterge paneli, on sayfalık rapordan daha etkilidir.