java - Redshift 的分隔符转义边缘情况

Question

在我的应用程序中，我获取一些事件，将它们写入日志文件，然后将它们写入 redshift。下面的文件显示了三种情况。在一种情况下，一切正常，没有使用管道。第二个用例有一个管道，但它逃逸得很好。然而，第三种情况有点棘手。 Event.x=Hi\| ，这意味着转义它会产生 Hi\\| ，我不知道Redshift会如何解释这一点。它会 a) 将其解释为转义反斜杠，并将管道解释为常规分隔符(不好)吗？或者 b) 只查看管道之前的反斜杠，并且仍然逃逸管道(好)？

In my Java code   ;Logfile Text  ;Redshift columns     ;Works
--------------------------------------------------------------
Event.x ;Event.y  ;Logfile Text  ;Column X  ;Column Y  ;Works
--------------------------------------------------------------
Hi      ;10       ;Hi|10         ;Hi        ;10        ;Yes
--------------------------------------------------------------
Hi|     ;10       ;Hi\||10       ;Hi|       ;10        ;Yes
--------------------------------------------------------------
Hi\|    ;10       ;Hi\\||10      ;???       ;???       ;???

这是我当前用于转义和加入属性的代码。假设attributes是 List<String> .

String log = attributes.stream()
    .map(s -> s.replace("|", "\\|"))    // Escape existing delimiters
    .collect(Collectors.joining("|"));  // Join on pipes

Answer 1

需要转义转义，转义管道:"\|"->“\\\|”

例如

.map(s -> s.replace("\\", "\\\\"))  // Escape escapes
.map(s -> s.replace("|", "\\|"))    // Escape existing delimiters

来自redshift docs :

COPY loads \n as a newline character and loads \t as a tab character. To load a backslash, escape it with a backslash ( \ ).