gpt4 book ai didi

haskell - 使用 pandoc 作为库时,什么可能导致 "commitAndReleaseBuffer: invalid argument (invalid character)"?

转载 作者:行者123 更新时间:2023-12-04 08:57:18 29 4
gpt4 key购买 nike

我正在使用 pandoc 作为一个库,相关的代码片段是:

module Lib
( latexDirToTex, latexToTxt
) where

import qualified Data.ByteString as BS
import Data.List (isSuffixOf)
import qualified Data.Text as T
import qualified Data.Text.IO as TIO
import ForeignLib (chdir)
import Path
import System.Directory (getDirectoryContents )
import Text.Pandoc
import Text.Pandoc.UTF8 (toText)

latexToTxt :: Path b File -> IO T.Text
latexToTxt fPath = do
fileBS <- BS.readFile $ toFilePath fPath
result <- runIO $ do
doc <- readLaTeX def $ toText fileBS
writePlain def doc
handleError result

由此,您可以看到我基本上只是调用 readLaTeX 来读取 LaTeX 文档。

然而,当我尝试运行这段代码时,我在实践中遇到了很多麻烦,出现了如标题中的错误:

[WARNING] Could not convert TeX math '\begin{array}{ccccccccccc}
& & 1 & 2 & 4 & 7 & 11 & 15 & 15 & & \\
\hline
0 & \vline & 1 & 0 & 0 & 0 & 0 & 0 & 0 & \vline & 1 \\
1 & \vline & 1 & 1 & 0 & 0 & 0 & 0 & 0 & \vline & 3 \\
2 & \vline & 1 & 2 & 1 & 0 & 0 & 0 & 0 & \vline & 9 \\
3 & \vline & 1 & 3 & 3 & 1 & 0 & 0 & 0 & \vline & 26 \\
4 & \vline & 1 & 4 & 6 & 4 & 1 & 0 & 0 & \vline & 72 \\
5 & \vline & 1 & 5 & 10 & 10 & 5 & 1 & 0 & \vline & 191 \\
6 & \vline & 0 & 6 & 15 & 20 & 15 & 6 & 1 & \vline & 482 \\
7 & \vline & 0 & 0 & 21 & 35 & 35 & 21 & 7 & \vline & 1134 \\
8 & \vline & 0 & 0 & 0 & 56 & 70 & 56 & 28 & \vline & 2422 \\
9 & \vline & 0 & 0 & 0 & 0 & 126 & 126 & 34 & \vline & 4536 \\
10 & \vline & 0 & 0 & 0 & 0 & 0 & 252 & 210 & \vline & 6930 \\
11 & \vline & 0 & 0 & 0 & 0 & 0 & 0 & 462 & \vline & 6930
\end{array}', rendering as TeX:
0 & \vline & 1 & 0 & 0 & 0 & 0 & 0 &
^
unexpected "\\"
expecting "&", "\\\\", white space or "\\end"
arxiv-pandoc-static: <stdout>: commitAndReleaseBuffer: invalid argument (invalid character)

将此与直接使用 pandoc 可执行文件进行对比,没有发生此类错误,并且我收到了非常好的输出。我想将 pandoc 阅读器配置为尽可能灵活,并且不要因错误而放弃(或者更好的是,首先避免错误)。我如何通过 pandoc API 实现这一点?

最佳答案

我相信这不是一个 pandoc 问题,而是一个 GHC 或 text 包。答案可以在一个完全不相关的 Haskell 项目中找到,hledger docs :

Getting errors like "Illegal byte sequence" or "Invalid orincomplete multibyte or wide character" or "commitAndReleaseBuffer:invalid argument (invalid character)"

Programs compiled with GHC (hledger, haskell build tools, etc.) need tohave a UTF-8-aware locale configured in the environment, otherwise theywill fail with these kinds of errors when they encounter non-asciicharacters.

To fix it, set the LANG environment variable to some locale whichsupports UTF-8. The locale you choose must be installed on your system.

因此,在您的 shell 中运行类似 export LANG=C.UTF-8 的命令应该可以解决此问题。

关于haskell - 使用 pandoc 作为库时,什么可能导致 "commitAndReleaseBuffer: invalid argument (invalid character)"?,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/63746826/

29 4 0
Copyright 2021 - 2024 cfsdn All Rights Reserved 蜀ICP备2022000587号
广告合作:1813099741@qq.com 6ren.com