250 мільйонів міжнародних подій в одному місці

    
Дослідник Кавелье ЛІТАР, з Джордтаунского університету, зібрав каталог із 250 мільйонів подій, що відбулися у світі з 1979, який щодня оновлюється і доступний кожному охочому хто хоче його вивчити.
 
Кожен запис набору має 58 атрибутів. А сам набір ділиться на 300 різних категорій. На даний момент каталог має об'єм 100 Гб, а хостером є Goolge.
 
 
 
Щоб провести аналіз користувач може завантажити весь набір або його цікавить категорію, або ж використовувати Google BigQuery прямо на сайті.
 
База автоматично поповнюється з багатьох джерел новстей з усього світу. Всі вони обробляються за допомогою різних алгоритмів text maning'a і геокодування, створеними ЛІТАР, а потім заносяться в базу. Крім того автор зазначає, що у зв'язку з останніми успіхами в обробці природних мов, незабаром збільшиться частка НЕ ​​англомовних джерел.
 
VIA GIGAOM
    
Джерело: Хабрахабр

0 коментарів

Тільки зареєстровані та авторизовані користувачі можуть залишати коментарі.