个人中心
文章发布
退出
作者热门文章
- html - 出于某种原因，IE8 对我的 Sass 文件中继承的 html5 CSS 不友好？
- JMeter 在响应断言中使用 span 标签的问题
- html - 在 :hover and :active? 上具有不同效果的 CSS 动画
- html - 相对于居中的 html 内容固定的 CSS 重复背景？
27
4
我正在尝试在 Amazon S3 存储桶上使用 Presto，但在 Internet 上没有找到太多相关信息。
我已经在一个微型实例上安装了 Presto，但我不知道如何连接到 S3。有一个桶，里面有文件。我有一个正在运行的 hive Metastore 服务器，并且已经在 presto hive.properties 中对其进行了配置。但是当我尝试在 hive 中运行 LOCATION 命令时，它不起作用。
IT 抛出错误，说找不到文件方案类型 s3。
而且我也不知道为什么我们需要运行 hadoop 但没有 hadoop，hive 就无法运行。对此有什么解释。
This和 this是我在设置时遵循的文档。
最佳答案
Presto 使用 Hive 元存储将数据库表映射到其底层文件。这些文件可以存在于 S3 上，并且可以以多种格式存储 - CSV、ORC、Parquet、Seq 等。
Hive 元存储通常通过 HQL(Hive 查询语言)通过发出类似 CREATE EXTERNAL TABLE ... 的 DDL 语句来填充。与 LOCATION ...子句引用保存数据的基础文件。
为了让 Presto 连接到 Hive Metastore，您需要编辑 hive.properties 文件(EMR 将其放在 /etc/presto/conf.dist/catalog/ 中)并设置 hive.metastore.uri合适的 Hive Metastore 服务的 thrift 服务的参数。
如果您选择 Hive 和 Presto，Amazon EMR 集群实例将自动为您配置，因此这是一个很好的起点。
如果您想在独立的 ec2 实例上对此进行测试，那么我建议您首先专注于获得与 Hadoop 基础架构一起工作的功能配置单元服务。您应该能够定义驻留在本地 hdfs 文件系统上的表。 Presto 补充了 hive，但确实需要一个功能正常的 hive 设置，presto 的 native ddl 语句不像 hive 那样功能完整，因此您将直接从 hive 创建大多数表。
或者，您可以为 mysql 或 postgresql 数据库定义 Presto 连接器，但这只是一个 jdbc 传递，我认为您不会获得太多好处。
关于amazon-web-services - Amazon S3 上的 Presto，我们在Stack Overflow上找到一个类似的问题： https://stackoverflow.com/questions/37108793/
27
4
0
这个问题在这里已经有了答案: Why don't Java's +=, -=, *=, /= compound assignment operators require casting? (11 个
我搜索了很多，但没有一个链接能帮助我解决这个问题。我得到了 ORA-21500: internal error code, arguments: [%s], [%s], [%s], [%s], [%s
我正在做 RegexOne 正则表达式教程，它有一个 question关于编写正则表达式以删除不必要的空格。 教程中提供的解决方案是 We can just skip all the starting
([\s\S]+|\s?) 中 |\s? 的目的或作用是什么？如果没有它，表达式会不会与 ([\s\S]+) 相同？ 最佳答案 这不是完全相同的。 ([\s\S]+|\s?) 会匹配空字符串，而 ([
这个正则表达式有一组还是两组？ 我正在尝试使用第二组访问 bookTitle 但出现错误: Pattern pattern = Pattern.compile("^\\s*(.*?)\\s+-\\s+
在 C 中给定一个字符串指针 s，下面的迭代会做什么？即它以什么方式遍历字符串？ for (++s ; *s; ++s); 最佳答案 for (++s ; *s;++s) 表示 将指针 s 递增到字符
我正在用一个 node.js 应用程序解析一个大列表并有这段代码 sizeCode = dbfr.CN_DESC.split('\s+-\s*|\s*-\s+') 这似乎不起作用，因为它返回了 [ '
我正在编写一个简单的字符串连接程序。 该程序按照我发布的方式运行。但是，我首先使用以下代码编写它来查找字符串的结尾: while (*s++) ; 但是，这个方法并没有奏效。我传递给它的字符串
这个问题已经有答案了: What does (?和aramchand来自Mohandas Karamchand G 因此，在使用这些匹配来分割字符串后，您最终会得到 {"M", "K", "G"} 注
我正在尝试转换 Map到 List使用 lambda。 本质上，我想将键和值与 '=' 连接起来之间。这看起来微不足道，但我找不到如何去做。 例如 Map map = new HashMap<>();
我正在经历 K & R，并且在递增指针时遇到困难。练习 5.3(第 107 页)要求您使用指针编写一个 strcat 函数。 在伪代码中，该函数执行以下操作: 将 2 个字符串作为输入。 找到字符串
在下面的代码中，pS 和 s.pS 在最后一行是否保证相等？也就是说，在语句S s = S();中，是否可以确定不会构造一个临时的S？ #include using namespace std; s
演示示例代码: public void ReverseString(char[] s) { for(int i = 0, j = s.Length-1; i < j; i++, j--){
我一直在寻找类似于 .NET examples 中的示例的 PowerShell 脚本.取一个 New-TimeSpan 并显示为 1 天 2 小时 3 分钟 4 秒。排除其零的地方，在需要的地方添加
def func(s): s = s + " is corrected" return s string_list = ["She", "He"] for s in string_li
我是 python 的新手。当我在互联网上搜索 lambda 时。我在 lambda_functions 中找到了这个声明. processFunc = collapse and (lambda s:
我最近开始学习正则表达式，并试图为上面的问题写一个正则表达式。如果限制只放在一个字母上(例如不超过 2 个“b”)，这并不困难。 那么答案就是:a* c*(b|ε)a* c*(b|ε)a* c* 但是
当我运行 npm install 时出现以下错误，但我无法修复它。 我试过:npm install -g windows-build-tools 也没有修复这个错误 ERR! configure
有很多有趣的haskell网上可以找到片段。 This post可以在 this (awesome) Stack Overflow question 下找到. The author写道: discou
我知道以下三行代码旨在将字符串提取到$ value中并将其存储在$ header中。但是我不知道$value =~ s/^\s+//;和$value =~ s/\s+$//;之间有什么区别。 $val
我是一名优秀的程序员,十分优秀！