如何使用gradle mlExportToFile和REST转换创建NDJSON文件

Question

我目前正在使用gradle mlExportToFile将json文档导出到文件中。但是，我需要最终文件采用换行符分隔的JSON格式，每个文档在文件中都有自己的行。我看到mlExportToFile REST转换方法可用于创建CSV，所以我假设这种方法也适用于NDJSON。我已经尝试了我能想到的所有方法，但该文件仍然没有将记录放在自己的行上。非常感谢任何建议！！

Answer 1

我认为这里的限制是，当底层的ExportToWriterListener（来自MLJavaClient/DMSDK库）将文档以从ML检索的格式写入文件时，默认情况下会包含换行符。ml-gradle任务只是一行代码-runQueryBatcherJobs（new ExportToFileJobs（））-因此您可以轻松自定义自己的任务。

我相信您可以重用ExportToFileJob（在marklogic数据移动组件项目中）-它有一个方法，返回ExportToWriterListener（在marklogic客户端api项目中）。这有一个onGenerateOutput（OutputListener）方法，可以编写一个将JSON涂抹到一行中的OutputListener。

这当然也可能成为ml gradle中的一个新特性；i、 e.属性，例如PnewlineDelimitedJson=true。

请随意在ml-gradle项目中提出这一点（尽管增强实际上将在mark logic-data-move-组件项目中进行）。