Insinyur Data - kursus 89.000 gosok. dari Otus, pelatihan 4 bulan, tanggal 30 November 2023.
Miscellanea / / December 03, 2023
Apa yang akan diberikan kursus ini kepada Anda?
- Memahami cara utama untuk mengintegrasikan, memproses, dan menyimpan data besar
- Kemampuan untuk bekerja dengan komponen ekosistem Hadoop, penyimpanan terdistribusi, dan solusi cloud
- Keterampilan praktis dalam mengembangkan layanan data, etalase, dan aplikasi
- Pengetahuan tentang prinsip-prinsip pengorganisasian pemantauan, orkestrasi, pengujian
Kursus ini ditangani pengembang, administrator DBMS, dan siapa saja yang ingin meningkatkan tingkat profesional mereka, menguasai alat-alat baru, dan terlibat dalam tugas-tugas menarik di bidang pekerjaan dengan data.
Setelah mempelajari Teknik Data, Anda akan menjadi spesialis yang dicari yang:
- menyebarkan, menyesuaikan dan mengoptimalkan alat pemrosesan data
- mengadaptasi kumpulan data untuk pekerjaan dan analisis lebih lanjut
- menciptakan layanan yang menggunakan hasil pengolahan data dalam jumlah besar
- bertanggung jawab atas arsitektur data di perusahaan
Studi Kasus Nyata: contoh implementasi, penggunaan alat, optimalisasi kinerja, masalah, kesalahan dan hasil yang diterapkan
Orientasi yang sangat praktis:
Selama kursus kami secara bertahap akan menciptakan produk yang berfungsi, memecahkan masalah terapan
Gambaran holistik tentang tantangan dan tugas bisnis modern, serta peran Data Engineer dalam menyelesaikannya
Permintaan di kalangan pengusaha
40 pemberi kerja sudah siap memanggil lulusan kursus untuk wawancara
6
kursusInsinyur data di Wildberries, pembicara kursus DE Junior. Lebih dari 7 tahun di bidang TI
Lulusan Universitas Negeri Voronezh dengan pujian. Saat ini menjadi mahasiswa program master HSE "Rekayasa Sistem dan Perangkat Lunak". Pengalaman profesional - 2 tahun bekerja sebagai Analis Data dan Insinyur Data. Sekarang dia bekerja dengan 5 database populer, berkembang dengan Python dan dengan cepat mengembangkan keterampilannya. Siap berbagi pengalaman saya.
1
SehatDia telah mengembangkan analitik di perusahaannya selama lebih dari 10 tahun. Di antara pencapaiannya: - Pembangunan sistem analisis web end-to-end kami sendiri; - Pembangunan gudang analitik berdasarkan MPP Vertica; - Organisasi pemrosesan data berdasarkan Spark, Kafka, HDFS; -...
Dia telah mengembangkan analitik di perusahaannya selama lebih dari 10 tahun. Di antara pencapaiannya: - Pembangunan sistem analisis web end-to-end kami sendiri; - Pembangunan gudang analitik berdasarkan MPP Vertica; - Organisasi pemrosesan data berdasarkan Spark, Kafka, HDFS;- Membangun proses untuk bekerja dengan data, termasuk kualitas data;- Pembuatan beberapa alat internal untuk bekerja dan menyusun metadata (Katalog Data);- Pembangunan sistem pelaporan perusahaan, termasuk realtime; - Selama lebih dari 5 tahun, beliau telah meningkatkan Literasi Data di lingkungan perusahaan, mengadakan berbagai pelatihan tentang bekerja dengan data, alat, SQL; Ia juga mengembangkan beberapa pemimpin analitik yang kini bekerja di perusahaan besar. Fokus utamanya adalah memahami masalah bisnis saat bekerja dengan data dan menyelesaikannya.
1
SehatKepala Departemen, Sberbank memiliki pengalaman 8 tahun dalam pengembangan industri, termasuk pembuatan dan pemeliharaan aplikasi web baik di perusahaan besar maupun di startup. 3 tahun pengembangan sistem terdistribusi untuk pemerintahan besar...
Kepala Departemen, Sberbank memiliki pengalaman 8 tahun dalam pengembangan industri, termasuk pembuatan dan pemeliharaan aplikasi web baik di perusahaan besar maupun di startup. 3 tahun pengembangan sistem terdistribusi untuk pelanggan besar pemerintah. Mengimplementasikan tiga proyek dari awal, dari prototipe hingga siap digunakan industri. Saat ini terlibat dalam pengembangan full-stack untuk pelanggan internal di bank, menyelesaikan masalah terkait analisis dan rekayasa data. Pengalaman dalam pemrograman di Java, Scala, Python, Javascript. Berbagai kepentingan profesional, mulai dari membangun sistem terdistribusi hingga analisis prediktif dan analisis niat. Pendidikan: Gelar sarjana dari UrFU dinamai. B.N. Yeltsin “Teknologi Informasi”.
Arsitektur Data
-Topik 1.Insinyur Data. Tugas, keterampilan, alat, kebutuhan pasar
-Topik 2.Arsitektur aplikasi analitis: komponen dan prinsip dasar
-Topik 3.Solusi lokal / Cloud
-Topik 4. Otomatisasi dan orkestrasi saluran pipa – 1
-Topik 5. Otomatisasi dan orkestrasi saluran pipa – 2
Danau Data
-Topik 6. Sistem file terdistribusi. HDFS/S3
-Topik 7.SQL akses ke Hadoop. Apache Sarang/Presto
-Topik 8. Format penyimpanan data dan fitur-fiturnya
-Topik 9. Analisis remote control untuk 1 kasus
-Topik 10. Antrian pesan. Ikhtisar Kafka.
-Topik 11.Mengunduh data dari sistem eksternal
-Topik 12.Apache Spark – 1
-Topik 13.Apache Spark – 2
DWH
-Topik 14.DBMS Analitik. database MPP
-Topik 15.Pemodelan DWH – 1. dasar-dasar dbt
-Topik 16.Pemodelan DWH – 2. Gudang Data 2.0
-Topik 17.Praktik DevOps dalam aplikasi Analitik. CI+CD
-Topik 18. Analisis remote control untuk kasus 2
-Topik 19.Kualitas Data. Manajemen Kualitas Data
-Topik 20. Penerapan solusi BI
-Topik 21.Pemantauan / Metadata
NoSQL/SQL Baru
-Topik 22.Penyimpanan NoSQL. Kolom lebar dan nilai kunci
-Topik 23.Penyimpanan NoSQL. Berorientasi pada dokumen
-Tema 24.ELK
-Tema 25.ClickHouse
-Topik 26. Analisis remote control untuk kasus 3
MLOps
-Topik 27.Organisasi dan Pengemasan kode
-Topik 28. Arsitektur Docker dan REST
-Tema 29.MLFlow + DVC
-Topik 30. Penerapan model
-Topik 31. Analisis remote control untuk kasus 4
-Topik 32. Analisis remote control untuk kasus 5
Proyek kelulusan
-Topik 33. Pemilihan topik dan organisasi pekerjaan proyek
-Topik 34.Konsultasi
-Topik 35.Perlindungan