ruby-on-rails - 畸形字符串的 YAML 编码、模型序列化问题

Question

我发现了 Ruby on Rails 的一个问题，即具有序列化列的模型无法正确加载已保存到其中的数据。

进去的是Hash，出来的是YAML字符串，由于格式问题无法解析。我希望序列化程序可以正确存储和检索您提供的任何内容，所以似乎出了点问题。

有问题的字符串格式如下:

message_text = <<END

  X
X
END

yaml = message_text.to_yaml

puts yaml
# =>
# --- |
#
#   X
# X

puts YAML.load(yaml)
# => ArgumentError: syntax error on line 3, col 0: ‘X’

换行符、缩进的第二行和非缩进的第三行的组合导致解析器失败。省略空行或缩进似乎可以解决问题，但这似乎是序列化过程中的错误。由于它需要一组相当独特的情况，我敢打赌这是一些未正确处理的奇怪边缘情况。

Ruby 附带并被 Rails 使用的 YAML 模块看起来将大部分处理委托(delegate)给 Syck，但确实为 Syck 提供了一些关于如何编码它发送的数据的提示。

在 yaml/rubytypes.rb 中有 String#to_yaml 定义:

class String
  def to_yaml( opts = {} )
    YAML::quick_emit( is_complex_yaml? ? self : nil, opts ) do |out|
      if is_binary_data?
        out.scalar( "tag:yaml.org,2002:binary", [self].pack("m"), :literal )
      elsif to_yaml_properties.empty?
        out.scalar( taguri, self, self =~ /^:/ ? :quote2 : to_yaml_style )
      else
        out.map( taguri, to_yaml_style ) do |map|
          map.add( 'str', "#{self}" )
          to_yaml_properties.each do |m|
            map.add( m, instance_variable_get( m ) )
          end
        end
      end
    end
  end
end

那里似乎检查以“:”开头的字符串，并且在反序列化时可能会被混淆为 Symbol，并且 :quote2 选项应该是在编码过程中引用它的指示。调整此正则表达式以捕获上述条件似乎对输出没有任何影响，因此我希望更熟悉 YAML 实现的人可以提供建议。

Answer 1

是的，这看起来像是 C syck 库中的错误。我使用 PHP syck 绑定(bind) (v 0.9.3) 检查了它:http://pecl.php.net/package/syck并且存在相同的错误，表明它是库中的错误，而不是 ruby​​ yaml 库或 ruby​​-syck 绑定(bind):

// phptestsyck.php
<?php
$message_text = "

  X
X
";

syck_load(syck_dump($message_text));
?>

在 cli 上运行它会给出相同的 SyckException:

$ php phptestsyck.php 
PHP Fatal error:  Uncaught exception 'SyckException' with message 'syntax error on line 5, col 0: 'X'' in /.../phptestsyck.php:8
Stack trace:
#0 /.../phptestsyck.php(8): syck_load('--- %YAML:1.0 >...')
#1 {main}
  thrown in /.../phptestsyck.php on line 8

所以，我想你可以尝试修复 Syck 本身。不过，该库似乎自 2005 年 5 月 v0.55 (http://rubyforge.org/projects/syck/) 以来就没有更新过。

或者，有一个名为 RbYAML ( http://rbyaml.rubyforge.org/ ) 的纯 ruby​​ yaml 解析器，它起源于 JRuby，似乎没有这个错误:

>> require 'rbyaml'
=> true
>> message_text = <<END

  X
X
END
=> "\n  X\nX\n"
>> yaml = RbYAML.dump(message_text)
=> "--- "\\n  X\\nX\\n"\n"
>> RbYAML.load(yaml)
=> "\n  X\nX\n"
>> 

最后，您是否考虑过另一种序列化格式？ Ruby 的 Marshal 库也没有这个错误并且比 Yaml 更快(参见 http://significantbits.wordpress.com/2008/01/29/yaml-vs-marshal-performance/ ):

>> message_text = <<END

  X
X
END
=> "\n  X\nX\n"
>> marshal = Marshal.dump(message_text)
=> "\004\b"\f\n  X\nX\n"
>> Marshal.load(marshal)
=> "\n  X\nX\n"