Oracle Cloud Infrastructure - Dokumentation

Apache Tez verwenden

Verwenden Sie Apache Tez als Framework für die Big Data-Verarbeitung auf Basis der MapReduce-Technologie in Big Data Service-Clustern.

Hinweis

Für Big Data Service 3.1.1 oder höher ist erforderlich, dass die Quelle tez-env.sh Hadoop-JARs im Classpath enthält.
# Login as tez user
sudo -u {user}
 
# Source the tez-env.sh inorder to set the classpath
source /etc/tez/conf/tez-env.sh
 
# Run tez application
hadoop jar /usr/odh/current/tez-client/tez-tests-*.jar testorderedwordcount -DUSE_TEZ_SESSION=true /tmp/tezcmdtests/input1/ /tmp/tezcmdtests-output/output1/ /tmp/tezcmdtests/input2/ /tmp/tezcmdtests-output/output2/ /tmp/tezcmdtests/input3/ /tmp/tezcmdtests-output/output3/\"".format(user=self.user)

Tez-Konfigurationseigenschaften

Tez-Konfigurationseigenschaften in Big Data Service 3.1.1 oder höher.

Konfiguration Eigenschaft Beschreibung
tez-env tez_classpath_ext Pfade mit Hadoop-Bibliotheken für Tez