编写gpfdist配置

这个gpfdist配置的例子包含下列项：

定义TRANSFORMATIONS的config.yaml文件
config.yaml文件中引用的input_transform.sh包装器脚本
input_transform.sh中调用的joost转换input_transform.stx

除普通的YAML规则（如文档用三个破折号开始（-—））之外，gpfdist配置必须符合下列限制：

VERSION设置必须出现并且值为1.0.0.1。
TRANSFORMATIONS设置必须出现并且包含一个或者更多个映射。
TRANSFORMATION中的每一个映射必须包含：
- 一个值为’input’或者’output’的TYPE
- 一个表明转换如何运行的COMMAND。

COMMAND设置使用了一个名为input_transform.sh的包装器脚本，它带有一个%filename%占位符。当gpfdist运行该prices_input转换时，它用/bin/bash调用input_transform.sh，并且将%filename%占位符替换为要转换的输入文件的路径。名为input_transform.sh的包装器脚本包含调用STX转换并返回其输出的逻辑。

如果使用了Joost，则必须安装Joost STX引擎。


# input_transform.sh - sample input transformation, 
# demonstrating use of Java and Joost STX to convert XML into
# text to load into Greenplum Database.
# java arguments:
#   -nodecl                  don't generate a <?xml?> declaration
#   $1                        filename to process
#
java \
    -jar joost.jar \
    -nodecl \
    $1 \
 | awk 'NF>0

上级主题： 转换XML数据