Remplacement des fichiers d'entrée et de sortie à l'aide d'un fichier de propriétés de job
Dans le fichier de propriétés d'exécution d'un job, vous pouvez remplacer le fichier d'entrée indiqué dans le stage source du flux de données (tel que Read from File), ainsi que le fichier de sortie spécifié dans le stage récepteur du flux de données (tel que Write to File). Pour ce faire, indiquez les éléments suivants dans le fichier de propriétés :
StageName\:file=Protocol:FileName
Où :
- StageName
-
L'intitulé du stage affiché sous l'icône du stage dans le flux de données dans Enterprise Designer. Utilisez une barre oblique inverse avant des espaces, deux points ou des signes égal dans le nom du stage. Par exemple, si le stage est intitulé « Read from File », vous devez indiquer
Read\ from\ File
comme nom de stage.Embedded\ Dataflow\ 1.Embedded\ Dataflow\ 2.Write\ to\ File
Pour indiquer un stage au sein d'un sous-flux ou flux de données intégré, préfacez le nom de stage par le nom du sous-flux ou flux de données intégré, suivi d'un point, puis du nom de stage :
NomDeSous-FluxOuFluxDeDonnéesIntégré.NomDeStage
Par exemple, pour indiquer un stage nommé Write to File dans un sous-flux nommé Subflow1, vous devez procéder comme suit :
Subflow1.Write\ to\ File
Pour indiquer un stage dans un flux de données intégré se trouvant dans un autre flux de données intégré, ajoutez le flux de données parent, en séparant chacun par un point. Par exemple, si Embedded Dataflow 2 se trouve à l'intérieur d'Embedded Dataflow 1 et que vous souhaitez indiquer le stage Write to File dans Embedded Dataflow 2, vous devez procéder comme suit :
Embedded\ Dataflow\ 1.Embedded\ Dataflow\ 2.Write\ to\ File
Remarque : Vous devez inclure :file après le nom du stage. Par exemple, Read\ from\ File:file. Ceci est différent de la syntaxe utilisée pour remplacer les fichiers sur la ligne de commande où :file n'est pas spécifié après le nom du stage. - Protocol
- Protocole de communication. L'un des éléments suivants :
- file
- Utilisez le protocole file si le fichier figure sur le même ordinateur que le serveur Spectrum™ Technology Platform. Par exemple, sur Windows, spécifiez :
"file:C:/myfile.txt"
Sur Unix ou Linux, spécifiez :"file:/testfiles/myfile.txt"
- esclient
- Utilisez le protocole esclient si le fichier se trouve sur l’ordinateur sur lequel vous exécutez le job s’il s’agit d’un autre ordinateur que celui qui exécute le serveur Spectrum™ Technology Platform. Utilisez le format suivant :
esclient:ComputerName/path to file
Par exemple,esclient:mycomputer/testfiles/myfile.txt
Remarque : Si vous exécutez le job sur le serveur lui-même, vous pouvez utiliser le protocole file ou esclient, mais vous obtiendrez probablement de meilleures performances si vous utilisez le protocole file.Si le nom d'hôte du serveur Spectrum™ Technology Platform ne peut pas être résolu, il se peut que vous receviez un message d'erreur « Une erreur s'est produite lors de l'accès au fichier ». Pour résoudre ce problème, ouvrez ce fichier sur le serveur : SpectrumLocation/server/app/conf/spectrum-container.properties. Définissez la propriété spectrum.runtime.hostname sur l'adresse IP du serveur. - esfile
- Utilisez le protocole esfile si le fichier se trouve sur un serveur de fichiers. Le serveur de fichiers doit être défini dans Management Console comme une ressource. Utilisez le format suivant :
esfile://serveur de fichiers/chemin d'accès au fichier
Par exemple,esfile://myserver/testfiles/myfile.txt
Où myserver est une ressource de serveur de fichiers FTP définie dans Management Console. - webhdfs
- Utilisez le protocole webhdfs si le fichier se trouve sur un serveur de fichiers distribué Hadoop. Le serveur HDFS doit être défini dans Management Console comme une ressource. Utilisez le format suivant :
webhdfs://serveur de fichiers/chemin d'accès au fichier
Par exemple,webhdfs://myserver/testfiles/myfile.txt
Où myserver est une ressource de serveur de fichiers HDFS définie dans Management Console.
Exemple
Les deux dernières lignes du fichier de propriétés suivant indiquent les fichiers des stage Read from File et Write to File.
j=testJob
h=myspectrumserver.example.com
s=8080
u=david1234
p=mypassword1234
Read\ from\ File\:file=file:C:/myfile_input.txt
Write\ to\ File\:file=file:C:/myfile_output.txt