Büyük verilerin işlenmesi ve analizi - Açık Öğretim'den ücretsiz kurs, 2 haftalık eğitim, haftada yaklaşık 36 saat, Tarih 29 Kasım 2023.
Miscellanea / / November 30, 2023
Doktora Pozisyon: Doçent, Kontrol Sistemleri ve Robotik Fakültesi, Doçent, Dijital Kültür Yüksek Okulu, ITMO Üniversitesi
Fiziksel ve Matematik Bilimleri Adayı Pozisyonu: Doçent, Dijital Kültür Yüksek Okulu, ITMO Üniversitesi
Doktora Pozisyon: Doçent, Dijital Kültür Yüksek Okulu, ITMO Üniversitesi
Modül 1 Konu 1.1 Veri bilimine giriş Veri türlerini, kaynaklarını ve ilkelerini tartışır verileri ayırma ve birleştirme, ölçek türleri, veri temizleme yöntemleri ve boşlukları doldurma, kontrol aralıklar. Konu 1.2 Veri işleme araçları E-tablolar (Google e-tabloları ve Excel), verileri sıralama ve filtreleme konularını, tablo halindeki verilerin (pivot tablolar) toplanması ve analizi konularını kapsar. Konu 1.3 Görselleştirme veri Çeşitli araçlarda (Google e-tabloları ve Excel) veri görselleştirme görevleri ve yöntemleri, niceliksel ve niteliksel veriler. Bilişsel veri görselleştirmesi dikkate alınır. Konu 1.4 Verilerin analizi ve dönüştürülmesi Verileri yumuşatma ve normalleştirme yöntemleri, veri dönüştürme sorunları dikkate alınır. Tanımlayıcı istatistik türleri ve bunların hesaplanmasına yönelik yöntemler ayrıntılı olarak açıklanmaktadır. Konu 1.5 Zaman serileriyle çalışma Zaman serileriyle çalışmanın ilkeleri ve analiz yöntemleri ele alınmaktadır. Zaman serilerinin yumuşatılmasına, trendlerin ve zaman serilerinin mevsimsel bileşenlerinin belirlenmesine yönelik tekniklere özellikle dikkat edilmektedir.
Modül 2 Büyük Veri Depolama Konusu 2.1. Veritabanı Yönetim Sistemleri Bilgi sistemlerinin mimarisi ve veritabanı yönetim sistemlerinin temel fonksiyonları ele alınmaktadır. Konu 2.2. Yapılandırılmış veri tasarlama İlişkisel (tablo) modelin temel kavramları dikkate alınır veri, ilişkisel bir modelde veri tasarlama, tablo oluşturma kuralları ve bütünlük kısıtlamalarını tanımlama. Konu 2.3. SQL - verilere ve veritabanı nesnelerine yönelik sorgular SQL dilinde verilere yönelik sorgular oluşturma ilkeleri dikkate alınır, yansıtma, sıralama, seçim koşullarını ayarlama, birden fazla tabloyu birleştirme, küme-teorik işlemler, iç içe yerleştirme dahil istekler. Derste ayrıca veritabanı nesneleri (görünümler, prosedürler/işlevler, tetikleyiciler) tartışılmaktadır. Bir dizi sorguyu yürütme verimliliğini artırabilecek indeks kavramı verilmiştir. Konu 2.4. NoSQL depolama NoSQL sistemlerinin temel kavramları ve özellikleri, NoSQL sistemlerinin çeşitli türleri ve derecelendirmeleri dikkate alınır: anahtar-değer, belge, sütun ve grafik. NoSQL depolarındaki verilere yönelik sorgular oluşturma ilkeleri. Konu 2.5. MongoDB - belge depolamayla çalışma MongoDB'de veri düzenlemeyi ve sorgu oluşturmayı tartışıyor. MongoDB demo veritabanındaki sorgu oluşturma örnekleri sağlanmaktadır.