Исходное сообщение
"Увидела свет платформа для распределённой обработки данных A..." Отправлено VoDA, 17-Окт-13 09:23
> Конечно количество > запросов к Википедии немаленькое, но иногда она сильно тормозит. Map/Reduce мне > кажется помогла бы убыстрить Википедию Простите, а как MR поможет ускорить Wikipedia? MR позволяет довольно быстро анализировать/агрегировать данные, но у Wikipedia мало именно агрегаций. Основная их нагрузка это чтение и запись wiki-страничек. В данном случае им нужна распределенность и отказоустойчивость. По сути любая распределенная система хранения вида multi-master подойдет. PS скорее всего HBase, что поверх Hadoop тоже подойдет для Wikipedia. Только будут ли они переделывать движок системы...