Описание тега cdh4
CDH4 - это Cloudera Distribution of Hadoop, выпуск 4. Он включает Hadoop и девять других проектов с открытым исходным кодом из экосистемы Hadoop. Это сравнимо с HDP (платформа данных Horton).
1
ответ
Flume- журнал ошибок при использовании FileChannel
Я использую Flume flume-ng-1.5.0 (с CDH 5.4) для сбора журналов со многих серверов и загрузки в HDFS. Вот моя конфигурация: #Define Source , Sinks, Channel collector.sources = avro collector.sinks = HadoopOut collector.channels = fileChannel # Defin…
08 май '15 в 11:39
1
ответ
Настройка разрешений в Cloudera Hadoop 4 (CDH4)
Я хотел бы настроить разрешения HDFS в CDH4 со следующими требованиями: Каждый может прочитать все из всех каталогов HDFS Каждый пользователь может писать только в свой каталог пользователя на HDFS За исключением специального пользователя, который м…
28 июл '13 в 07:55
1
ответ
Последствия нескольких узлов JobTracker в кластере Hadoop?
У меня складывается впечатление, что потенциально можно настроить несколько узлов JobTracker на один и тот же набор узлов MR (TaskTracker). Я знаю, что условно все узлы в кластере Hadoop должны иметь одинаковый набор файлов конфигурации (условно /et…
28 авг '12 в 18:33
1
ответ
CDH3 ребалансировщик без Cloudera Manager
Недавно мы добавили новые узлы в кластер, и я хочу запустить перебалансировщик для распределения данных между этими узлами. Мы используем CDH3, и вся система перегружена - я даже не уверен, установлен ли менеджер cloudera на любом из этих блоков. См…
11 янв '14 в 09:02
0
ответов
Переменные среды Hadoop HBase
Я попытался настроить 4-х узловый кластер Hadoop, используя CDH4.7. Кластер работает и работает нормально, и когда я отправляю задание MR с подсчетом слов, оно успешно завершается, но когда я отправляю задание MR для вставки данных в HBase, он выбра…
26 июн '14 в 07:39
1
ответ
Оценка Hadoop CDH4: какая Ubuntu предпочтительнее? Ясный или Точный
Я настраиваю CDH4 в AWS для оценки (у нас уже есть CHD3, работающий на Ubuntu Lucid), и я хотел бы получить совет относительно любых известных проблем, с которыми я мог бы столкнуться, если бы он работал на Lucid vs. Precise. Безопаснее ли настраива…
25 июл '12 в 08:41