Исходное сообщение
"Компания Yahoo выпустила свободный дистрибутив платформы Apa..." Отправлено uZver, 13-Июн-09 01:23
>>SQoop - утопия. Не получится заменить SQL-БД на распределенные. максимум это применение >>для некритичных данных - типа обработка веба и постороение поискового индекса. >> > >Получится :) В общем тут ты прав :) >"типа обработка веба" - "некритичные" данные??? :) Зависит от задач. Google поисковик не критичен к потере (не учете) одной страницы в индексе. А бух. учет и управление складом - критичны. Наверное правильнее сказать, что есть задачи которые можно решить без транзакций. И те которые нет. OLAP - можно сделать на Hadoop, а городить поверх MapReduce OLTP - это сразу диагноз. >А вебморда к петабайтному OLAPу - тоже "некритична" в таком случае? Вместе >с базой? OLAP не критичен к транзакциям. Чаще всего OLAP вообще через ETL делают - какие нафиг транзакции. А вот OLTP смогут нормально работать поверх SQL. Утопия в том, что Hadoop нужен только пока hardware не позволяет реализовать эту обработку на РСУБД. Раньше 1Gb было много для СУБД. А сейчас легко до 10-20Gb одной оперативы + огромные винты - можно намного бОльшие задачи решить на СУБД. В итоге по мере технического прогресса РСУБД будут вытеснять другие подходы ввиду простоты и универсальности. PS будут оставаться микро-области где применяются специальные системы хранения и обработки, но РСУБД как были на уровне охвата 90% задач так и останутся. Может даже отъедят еще 5% от Массово-параллельных систем (топа Hadoop)