cloudera
Чтобы установить MySQL connector в Sqoop, мне нужно поместить файл jar в каталог Sqoop, но я не могу найти его (его нет в /usr/lib/sqoop). Я установил Sqoop с Cloudera на нескольких машинах. Где я могу найти каталог Sqoop на одной из машин?...
Я пытаюсь следовать этой инструкции, чтобы включить журналы истории с действием Spark Oozie. https://archive.cloudera.com/cdh5/cdh/5/oozie/DG_SparkActionExtension.html Чтобы ваше задание Spark отображалось на сервере истории Spark, не забудьте указать эти три свойства конфигурации Spark либо в spark-opts с...
Я пытаюсь выполнить сценарий оболочки через oozie, но у меня возникли некоторые проблемы. У меня есть такой файл свойств (import.свойства): startIndex=2000 chunkSize=2000 Идея заключается в том, что в каждом отдельном выполнении значение startIndex будет обновляться размером блока. Поэтому, если я выполн...
У меня есть среда, основанная на Hadoop. Я использую Flume, Hue и Cassandra в этой системе. В настоящее время вокруг Docker существует большая шумиха, поэтому хотелось бы рассмотреть, каковы плюсы и минусы докеризации в этом случае. Я думаю, что он должен быть гораздо более портативным, но его можно установит...
У меня есть рабочий процесс oozie, работающий на кластере CDH4 из 4 машин (один мастер для всего, три "тупых" рабочих). Hive metastore работает на ведущем сервере с использованием mysql (драйвер присутствует), сервер oozie также работает на ведущем сервере с использованием mysql. Используя веб-интерфейс, я мо...
Я могу заставить Phoenix работать на автономном Apache Hbase (Обратите внимание, все это для Hbase 1.0.0 на RHEL6. 5) Для аромата Cloudera Hbase, однако я никогда не получаю его работу без исключения из него. (даже попробовал RHEL7 minimal как en OS) То же самое происходит с Phoenix 4.4 для Hbase 1.0. ...
Мы включаем высокую доступность Namenode через Cloudera Manager, используя Cloudera Manager > > HDFS > > Action > Enable High Availability > > Selected Stand By Namenode & Journal Nodes Тогда nameservice1 Как только весь процесс завершен, то развернута конфигурация клиента. Тест...
Я пытаюсь преодолеть внезапную проблему. Для этой проблемы я использовал старую виртуальную машину. Я загрузил новую виртуальную машину и все еще не могу запустить свою работу. Я получаю Java heap space error . Я уже читал этот пост: из-за ошибки памяти в Hadoop Вот мои конфигурации из /etc/hadoop / conf: ...
Я пытаюсь настроить кластер Hadoop (CDH4) на экземплярах EC2. Namenode продолжает падать, когда я пытаюсь его отформатировать. Это ошибка, которую я получаю. 2013-04-12 05:37:16,995 FATAL org.apache.hadoop.hdfs.server.namenode.NameNode: Exception in namenode join java.net.BindException: Problem binding t...
Я пытаюсь импортировать Cloudera в орг.апаш.hadoop: hadoop-клиент: 2.0.0-cdh4.0. 0из РЕПО cdh4 maven в проекте maven в Eclipse 3.81, плагин m2e, с JDK 1.7.0_05 oracle на win7 с помощью <dependency> <groupId>org.apache.hadoop</groupId> <artifactId>hadoop-client</artifactId&...