hadoop

Impossible de compiler MaxTemperatureMapper.java pour Hadoop exemples: package org.Apache.hadoop.mapreduce n'existe pas

J'essaie depuis un certain temps de compiler le premier exemple du livre sur l'ordinateur de laboratoire de mon école, en jou ... e méthode à partir d'un supertype @Remplacer ^ [total 170 ms] 4 erreurs Toute aide serait grandement appréciée.

obtenir une erreur lors de l'exécution de Cassandra WordCount sur Hadoop: java.lang.NoSuchMethodError: org.Apache.aubaines.méta-données.FieldValueMetaData. BZ) V

Essayer d'exécuter l'exemple WordCount à partir de cassandra et obtenir une erreur: Exception dans le thread "main" java.la ... Méthode.invoke(la Méthode.java: 597) chez org.Apache.hadoop.util.RunJar.principal (RunJar.java:186) Merci d'avance!

Télécharger le fichier sur HDFS à l'aide de DFSClient sur Java

J'essaie de télécharger/écrire un fichier sur mon HDFS en utilisant le DFSClient fourni avec Hadoop mais j'échoue, le code su ... client.close(); } if (in != null) { in.close(); } if (out != null) { out.close(); } }

Comment puis-je transférer un fichier zip directement d'une URL vers HDFS en utilisant Java?

Comment puis-je transférer un fichier zip d'une URL vers HDFS en utilisant Java? Je ne suis pas censé le télécharger. Je ne peux transférer le fichier directement de l'URL vers HDFS. Quelqu'un a une idée va marcher?

ClassNotFoundException: org.Apache.ruche.jdbc.HiveDriver Avec connexion java hive jdbc

J'essaie d'utiliser le pilote Hive dans ma classe java pour interroger mon hdfs, mais j'ai frappé un mur. J'ai dragué de nom ... t; </dependencies> </project> Erreur: Java.lang.ClassNotFoundException: org.Apache.ruche.jdbc.HiveDriver

Carte en deux étapes-Réduire la multiplication dans Spark (Java)

J'ai lu dans un fichier texte de doubles et l'ai stocké dans un JavaRDD, mais j'ai du mal à implémenter une multiplication ma ... es mathématiques sous-jacentes mais je ne peux pas configurer les paires de clés matricielles et les multiplier correctement.

Impossible d'accéder au système de fichiers Hadoop hdfs via le programme map reduce java

Ma version Hadoop est - 2.6.0-cdh5.10. 0 J'utilise une machine virtuelle Cloudera. J'essaie d'accéder au système de fichiers ... dPoolExecutor$Worker.run(ThreadPoolExecutor.java:615) at java.lang.Thread.run(Thread.java:745) Toute aide sera utile!

Java.lang.NoClassDefFoundError: exécution d'un exemple Mahout sur un cluster hadoop

Je suis le tutoriel Mahout In Action pour kmeans clustring, j'utilise le même code trouvé ici: avec le même pom.xml aussi. Su ... mahout-math-0.9.0.2.3.4.0-3485.jar mahout-mrlegacy-0.9.0.2.3.4.0-3485.jar mahout-mrlegacy-0.9.0.2.3.4.0-3485-job.jar Merci.

Compiler Hadoop wordcount tutorial-hadoop 2.6.3

Ce qui suit est ma configuration système: windows8.1, vmware v12, 2 machines virtuelles CentOS. J'ai installé hadoop sur mes ... HADOOP_HOME/share/common/lib/common-cli-1.2.jar Une idée pourquoi j'obtiens cette erreur?? Je ne vois pas de problème... :(

Big Data Traitement En Java

Je travaille sur un projet où je reçois environ 10 fichiers contenant chacun une taille de 200 Go. Mon exigence de projet est ... n traitement parallèle. Résultat: cela me donne une exception de mémoire à group by feature. Je lis ces données de hadoop.

Hadoop: java. io.IOException: Aucun répertoire local valide dans la propriété: mapred.local.dir

Lorsque j'exécute le travail hadoop il échoue avec le suivant stacktrace: 11/10/06 13:12:49 INFO mapred.FileInputFormat: To ... acker.submitJob(JobTracker.java:3921) ... 11 more Streaming Job Failed! Comment puis-je résoudre ce problème? Merci

Erreur YARN hadoop espace de tas java

J'utilise YARN sur hadoop 2.6.0. Lorsque j'ai exécuté un travail mapreduce, j'ai eu une erreur comme celle-ci: 15/03/12 22: ... lien entre les paramètres de mémoire sur yarn-site et mapred-site? Je très confus, j'ai besoin de votre suggérer tous Merci

Hive-Problèmes de connexion JDBC Java

Je fais un programme en Java et j'ai besoin de me connecter avec une base de données dans hive. J'utilise mysql comme metasto ... (Launcher.java:349) at java.lang.ClassLoader.loadClass(ClassLoader.java:357) ... 9 more Comment puis-je faire la connexion?

Smettere di Java tazza di caffè icona di apparire nel Dock su Mac OSX

Dopo l'aggiornamento a OSX 10.8.4, i processi Java in background hanno iniziato a posizionare un'icona Java Cup nel Dock. Fa ... .senza testa=vero" in .profilo ma questo non sembra aiutare. Qualcuno ha incontrato questo e sa come risolverlo? Grazie.

Come iniziare ad imparare hadoop [chiuso]

Sono uno sviluppatore Web. Ho esperienza in tecnologie Web come JavaScript, Jquery, Php, HTML . Conosco i concetti di base di ... oop la guida definitiva 2nd.Edizione . Vorrei che voi ragazzi mi suggeriste modi in cui potrei imparare mapreduce e hadoop.

Connessione da Java a Hive utilizzando JDBC

Sto cercando di connettermi da Java al server Hive 1. Ho trovato un tempo delle interrogazioni fa in questo forum, ma non fun ... .lang.Class.forName(Class.java:190) at HiveJdbcClient.main(HiveJdbcClient.java:14) Qualcuno sa cosa sta succedendo qui?

Imposta l'utente di sistema hadoop per il client incorporato in Java webapp

Vorrei inviare i lavori MapReduce da un'applicazione Web java a un cluster Hadoop remoto, ma non sono in grado di specificare ... enticazione durante la connessione al cluster e che Kerberos non viene utilizzato nella comunicazione con le macchine remote.

Configurazione del cluster Hadoop-java. net. ConnectException: connessione rifiutata

Voglio impostare un cluster hadoop in modalità pseudo-distribuita. Sono riuscito a eseguire tutti i passaggi di installazione ... ser@marta-komputer:~$ telnet localhost 9000 Trying 127.0.0.1... telnet: Unable to connect to remote host: Connection refused

Quale lingua usare per i programmi Hadoop Map/Reduce? Java o PHP?

Recentemente ho scritto un paio di programmi map/reduce in java. Ma so anche che si può usare anche un linguaggio di scriptin ... santi. Quindi qualcuno può dirmi in punti generali quale scegliere come arma di scelta per l'implementazione di map/reduce?

Java 8 MapReduce per il calcolo distribuito

Mi ha reso felice quando ho sentito parlare di parallelStream() in Java 8, che elabora su più core e alla fine restituisce il ... ses che lo risolvono. Sto parlando di puro Java 8. Posso ottenere docummentation ed esempi per parallelStream() per più host?