Hive vs Pig. На що мені стільки ETL?

    image
 

Краще день втратити, але потім за п'ять хвилин долетіти (з )

 
Привіт колеги.
Хочу поділитися з вами міркуваннями про те, чим відрізняються фреймворки Hive і Pig, що входять в екосистему Hadoop. По суті, це два дуже схожих продукту, мета у яких одна — взяти на себе всю технічну реалізацію MapReduce, надавши натомість можливість описувати процес обробки даних на більш абстрактному рівні. У цій статті ми побачимо як виглядають вибірки в цих двох системах, і спробуємо зрозуміти, в яких випадках треба використовувати те чи інше рішення.
 
Читати далі →

Штучний інтелект і чому мій комп'ютер мене не розуміє?



Гектор Левек wiki стверджує, що його комп'ютер тупий. І ваш теж. Siri і голосовий пошук Google вміють розуміти приготовані пропозиції. Наприклад «Які фільми будуть показувати неподалік в 7 годин?» Але що щодо питання «Чи може алігатор пробігти стометрівку з бар'єрами?» Таке питання ніхто раніше не ставив. Але будь-який дорослий може знайти відповідь на нього (Ні. Алігатори не можуть брати участь у бігу з бар'єрами). Але якщо ви спробуєте ввести це питання в Google, то отримаєте тонни інформації про спортивній команді з легкої атлетики Florida Gators. Інші пошукові системи, такі як Wolfram Alpha, теж не здатні знайти відповідь на поставлене запитання. Watson, комп'ютерна система виграла вікторину «Jeopardy!», Навряд чи покаже себе краще.

Читати далі →