Дані краще, ніж нафта, або шостий набір на програму big data

Хабр, привіт!

Складно повірити, але 16 березня ми запустимо вже 6 набір нашій програми «Фахівець з великим даними».

image

На поточний момент у нас вже близько 160 випускників, які з різним ступенем залученості застосовують знання та навички, отримані на програмі. Напевно, можна задатися, питанням, чи потрібно таку кількість кадрів. Відповіді на це резонне сумнів є два. По-перше, ми тримаємо руку на пульсі і періодично проводимо аналіз ринку. По-друге, ринок не є статичною сутністю і зростає, причому кількість відкритих вакансій не є достатнім показником для вимірювання цього попиту.

Два роки тому, коли ми запускали програму перший раз, необхідності в такій кількості фахівців не було. Але, як виявилося згодом, велика частина наших слухачів не міняють місце роботи, а використовують отримані навички та знання в своїх компаніях. І в більшості своїй ці вакансії не публікуються у відкритому доступі, тому що таких позицій навіть поки немає.

Компаній, які впроваджують технології великих даних, стає все більше і більше. Саме тому ми запустили окрему програму для керівників, які придивляються зараз до цієї теми і збираються проводити грамотне впровадження цих технологій в майбутньому.

Якщо згадати криву поширення інновацій і технологій на ринку, то стане зрозуміло, що це зростання може тривати й далі.

image

На поточний момент інструменти для роботи з великими даними впровадили швидше за все перші два класу: новатори і ранні послідовники, і тільки починають підключатися і представники раннього більшості.

Як резюме: підстав вважати, що потреба у фахівцях з великим даними зменшиться, немає. Швидше, навпаки, зростатиме. Популярна нині фраза, що дані — це нова нафту, не зовсім вірна. Дані краще, ніж нафта. До даних може мати доступ кожен, якщо навчиться їх правильно збирати і обробляти, чого не можна сказати про нафту. Так що приходьте до нас вчитися.

Незважаючи на те, що це вже 6 запуск, ми продовжуємо працювати над продуктом і вирішили додати в нього дещо нового.

1) Раніше у нас було 12 лаб: по одній на кожну тиждень програми. В цей раз ми вирішили зробити 10 лаб і 2 «випускних» проекту, до яких слухачі будуть готуватися протягом всього модуля. Один проект буде називатися «Прогнозування статі і вікової категорії користувача з веб-логів», а другий — «Побудова рекомендаційної системи для онлайн-ритейлу». У вас буде достатньо часу попрацювати над ними і зробити з них щось таке, чим можна пишатися і що можна буде додати собі у портфоліо робіт.

2) Періодично нас просили зробити в програмі групові завдання. Цього разу частина лабораторних робіт припускають групову роботу. Так що буде привід ще сильніше подружитися один з одним.

3) зараз ми оптимізуємо роботу наших автоматичних чекеров лабораторних робіт, щоб перевірка займала мінімальний час і не дратувала". Плюс додамо індикатор прогресу на програмі. У будь-який момент можна буде подивитися, чи достатньо там балів для того чи іншого сертифіката чи ні.

4) Традиційно на нашому кластері будуть стояти всі найбільш сучасні і актуальні бібліотеки і, звичайно ж, остання версія Apache Spark. Відсотків 80-90 роботи в цьому інструменті буде проходити на датафреймах. Під час минулого запуску ми провели міграцію наших навчальних матеріалів з RDD на цю структуру даних.

Чекаємо вас на . Нудно не буде!
Джерело: Хабрахабр

0 коментарів

Тільки зареєстровані та авторизовані користувачі можуть залишати коментарі.