linux - 哪些是特定于 Linux 的 Hadoop 内部结构？

Question

我正在尝试了解为什么 hadoop 除了运行 shell 脚本之外还需要在 Windows 中使用 cygwin。我知道 hadoop 的各个部分都有 POSIX 特定的实现，我只是想知道 hadoop 的哪些部分是特定于 Linux 的？

谢谢

Answer 1

某些 Hadoop 内部构件需要有关系统的详细信息或操作，而 Java 未提供这些信息或操作。

因为 IIRC 无法在 Java 6 中更改文件的所有者。

但是，Hadoop 需要这种类型的操作。在这些情况下，Hadoop 在单独的进程中执行 Unix 命令。实用类 Shell包含很多这样的子流程调用。

列表包括

• 限制
• 修改
• whoami
• ls
• 及其他

出于类似的原因，类 ProcessTree使用 setsid 和 kill。

由于 Hadoop 使用应用程序，因此它们必须在父系统上可用。 Cygwin 提供了这个。

[编辑:]实际上，lib/native 中的 native 代码是可选的。仅当存在匹配的库版本时才使用(出于性能原因)。