Créer un projet Java basé sur Maven

mvn archetype:generate -DgroupId=org.apache.hadoop.examples -DartifactId=wordcountjava -DarchetypeArtifactId=maven-archetype-quickstart -DinteractiveMode=false

Cette commande crée un répertoire avec le nom indiqué par le paramètre artifactID (wordcountjava dans cet exemple). Ce répertoire contient les éléments suivants :

• pom.xml : modèle d'objet de projet qui contient les informations et les détails de configuration utilisés pour créer le projet.
• src\main\java\org\apache\hadoop\examples : contient le code de l'application.
• src\test\java\org\apache\hadoop\examples : contient le code de test.

1. Pour ajouter des dépendances, ajoutez le texte suivant dans la section <dependencies> de pom.xml :

   <dependency>
   
   
       <groupId>org.apache.hadoop</groupId>
       <artifactId>hadoop-mapreduce-client-common</artifactId>
       <version>3.3.3</version>
       <scope>provided</scope>
   </dependency>
   <dependency>
       <groupId>org.apache.hadoop</groupId>
       <artifactId>hadoop-common</artifactId>
       <version>3.3.3</version>
       <scope>provided</scope>
   
   
   </dependency>

   Remarque
   
   La valeur <version> utilisée doit correspondre à la version de Hadoop dans le cluster Big Data Service.

Dans l'exemple suivant, le module d'extension ombré est ajouté pour regrouper tous les fichiers JAR référencés dans des dépendances (à l'exception de la portée fournie) avec le module d'extension de construction maven.

<build>

    <plugins>
    <plugin>
        <groupId>org.apache.maven.plugins</groupId>
        <artifactId>maven-shade-plugin</artifactId>
        <version>2.3</version>
        <configuration>
        <transformers>
            <transformer implementation="org.apache.maven.plugins.shade.resource.ApacheLicenseResourceTransformer">
            </transformer>
        </transformers>
        </configuration>
        <executions>
        <execution>
            <phase>package</phase>
                <goals>
                <goal>shade</goal>
                </goals>
        </execution>
        </executions>
        </plugin>
    <plugin>
        <groupId>org.apache.maven.plugins</groupId>
        <artifactId>maven-compiler-plugin</artifactId>
        <version>3.6.1</version>
        <configuration>
        <source>1.8</source>
        <target>1.8</target>
        </configuration>
    </plugin>
    </plugins>
</build>