个人中心
文章发布
退出
作者热门文章
- 使用 Spring Initializr 创建 Spring Boot 应用程序
- 在Spring Boot中配置Cassandra
- 在 Spring Boot 上配置 Tomcat 连接池
- 将Camel消息路由到嵌入WildFly的Artemis上
30
4
请确保以下工作已经完成：
开通阿里云账号。
购买MaxCompute。
创建要使用的项目空间，详情请参见创建空间。如果要使用的项目空间已存在，请确保已被添加至此项目空间并被赋予建表等权限。
完成客户端安装配置。
Tunnel命令导入数据
1.准备数据 。将测试数据下载至本地备用
2.创建MaxCompute表。
3.执行Tunnel命令。
4.结果验证。
实际上整个过程有点像hive的数据导入，但是maxcomputer主要用通道来完成，而hive可以基于hdfs完成
其他导入方式：
除了通过客户端导入数据，您也可以使用MaxCompute Studio、Tunnel SDK、数据集成、开源的Sqoop、Fluentd、Flume、LogStash 等工具将数据导入到MaxCompute
后续步骤
当数据导入到MaxCompute后，可以在MaxCompute上运行SQL来处理数据。
MaxCompute支持以下方式运行SQL语句：
客户端
DataWorks、Dataphin
背景信息：
MaxCompute目前支持的SQL语法如下：
各类运算符。
通过DDL语句对表、分区以及视图进行管理。
通过SELECT语句查询表中的记录，通过WHERE语句过滤表中的记录。
通过INSERT语句插入数据、更新数据。
通过等值连接JOIN操作，支持两张表的关联，并支持多张小表的MapJOIN。（maxcomputer的建表好像没有mysql那样的依赖操作，建表时主要考虑优化问题）
通过内置函数和自定义函数来进行计算。
正则表达式。
MaxCompute SQL不支持事务、索引、UPDATE以及DELETE等操作，同时MaxCompute的SQL语法与Oracle、MySQL有一定差别，您无法将其他数据库中的SQL语句无缝迁移到MaxCompute上来。
MaxCompute上作业提交后会有几十秒到数分钟不等的排队调度，所以MaxCompute适合一次批量处理海量数据的跑批作业，不适合直接对接需要每秒处理几千至数万笔事务的前台业务系统。
提取和分析数据
INSERT OVERWRITE TABLE result_table
SELECT education,COUNT(marital) AS num
FROM bank_data
WHERE housing = ‘yes’ AND marital = ‘single’
GROUP BY education;
上述过程仅仅是一个最简单的数据加工举例，您在实际应用的过程中，可能需要使用多个SQL对多个表进行加工操作。推荐您使用DataWorks完成复杂的数据加工业务流程。
导出数据
tunnel download result_table D:\result.txt;
操作步骤
1.安装并配置好客户端后，运行bin目录下的MaxCompute客户端（Linux系统下运行./bin/odpscmd，Windows下运行./bin/odpscmd.bat），进入相应项目空间中。
2.使用Tunnel命令上传数据。
3.在表中插入数据。
4.开发MapReduce程序并上传MaxCompute。
5.在MaxCompute客户端，添加Jar包到project资源（例如，此处的Jar包名为word-count-1.0.jar）。
6.在MaxCompute客户端运行Jar命令。
7.在MaxCompute客户端查看结果。
1.准备工具环境并创建Java Module。
您需要完成准备工作，包括安装Studio并在Studio上创建MaxCompute项目链接以及创建MaxCompute Java Module。
2.编写代码（maven注入依赖）
3.注册MaxCompute UDF。
4.试用UDF。
略
进入DataWorks控制台工作空间列表页面，单击相应工作空间后的进入数据开发。
创建ODPS SQL节点。
填写新建节点对话框中的节点名称，单击提交完成节点的创建。
在创建的临时查询节点中输入SQL语句，单击按钮。
您可以查看本次运行的费用预估，决定是否继续进行本次操作。单击运行，继续SQL语句运行。
在下方的日志窗口，查看运行情况和最终结果。如果本次运行成功，结果为OK。
30
4
0
如何更改循环中变量的名称？比如 number1 、 number2 、 number3 、 number4 ？ var array = [2,4,6,8] func ap ( number1: Int
我想设置 View 的背景颜色并在一定延迟后将其更改为另一种颜色。这是我的尝试方式: print("setting color 1") self.view.backgroundColor = UICo
我在使用 express-session 时遇到问题。 session 数据不会在请求之间持续存在。 正如您在下面的代码中看到的那样，/join 路由设置了一些 session 属性，但是当 /sur
我试图从叶渲染器获得一个非常简单的结果，用于快速 Steam 的 for 循环。 我正在上传叶文件 HTML，因为它不接受此处格式正确的代码 - 下面的pizza.swift代码- import
你们中有人有什么好的链接可以与我分享吗？我正在寻找一个 FAST 程序员编辑器，它可以非常快速地打开包含超过 100, 000 行代码的文件？我目前正在使用记事本自动取款机，打开一个 29000 行长
我现在正在处理眼动追踪数据，因此拥有一个巨大的数据集(想想数百万行)，因此希望有一种快速的方法来完成此任务。这是它的简化版本。 数据告诉您眼睛在每个时间点正在查看的位置以及我们正在查看的每个文件。 X
我是新手，想为计时器或其他设备选择提示音。 如何打开此列表，以选择其中一种声音？ Alert sound list 最佳答案 您将无法在应用中使用系统声音。 但是，您可以包括自己的声音文件，并将其显示
我编写了以下代码来构建具有顺序字符串的数组。 它的工作方式与我预期的一样，但我希望它能更快地运行。有没有更有效的方法在PowerShell中产生我想要的结果？ 我是PowerShell的新手，非常感谢
我有一个包含一些非唯一行的矩阵，例如: x 尝试 y <- rle(apply(x, 1, paste, collapse = " ")) # y$lengths is the vector con
我的函数“keyboardWillShown”有问题。所以我想要的是菜单打开时，菜单正好出现在键盘上方。它可以在Iphone 8 plus，8、7、6上完美运行。但是，当我在模拟器上运行Iphone
我正在尝试通过Swift 5中的HTTP get方法从API提取数据。它在启动时成功加载了数据，但是当我刷新页面时，它说“索引超出范围”，这是因为数据是不再会在我的日志中读取，因此索引中没有任何内容。
我想做什么: 从我的数据库中获取时间戳并将其转换为用户的时区。 我的代码: let tryItNow = "\(model.timestampName)" let format = D
给定字体名称和字体大小，如何查找字符串的宽度(CGFloat)？ (目标是将UIView的宽度设置为足以容纳字符串的宽度。) 我有两个字符串:一个重复“1”，重复36次，另一个重复“M”，重复36次。
我正在尝试解析此JSON ["Items": ( { AccountBalance = 0; AlphabetType = 3; Description = "\U0631\U
我在UINavigationBar内放置了一个UILabel。 我想根据navigationBar的高度增加该标签的字体大小。当navigationBar很大时，我希望字体大小更大；当滚动并缩小nav
我想将用户输入限制为仅有效数字并使用以下内容: func textView(_ textView: UITextView, shouldChangeTextIn range: NSRange, rep
目前我有一个包含超过 100.000 张图像的数据库，它们大小不一或类似，但我想为我的公司制作以下内容: 我插入/上传一张图片，系统返回最有可能相同的图片。我不知道使用什么算法，但它需要快速。我可以预
在我的 swift 项目中，我有一个按钮，我想在标签上打印按下该按钮的时间。 如何解决这个问题？ 最佳答案 添加到DHEERAJ的答案中，您只需在func press(sender: UIButton
我必须发表评论，尝试在解析中导入数组。然而，有一个问题。 当我尝试从 Parse 加载数组时，我的输出是 ("Blah","Blah","Blah")这是一个元组...而不是一个数组 TT... 如何
我的应用程序有一个名为 MyDevice 的类，我用它来与硬件通信。该硬件是可选的，实例变量也是可选的: var theDevice:MyDevice = nil 然后，在应用程序中，我必须初始化设备
我是一名优秀的程序员,十分优秀！