- 使用 Spring Initializr 创建 Spring Boot 应用程序
- 在Spring Boot中配置Cassandra
- 在 Spring Boot 上配置 Tomcat 连接池
- 将Camel消息路由到嵌入WildFly的Artemis上
Apache Druid是一个实时分析型数据库,旨在对大型数据集进行快速的查询分析("OLAP"查询)。Druid最常被当做数据库来用以支持实时摄取、高性能查询和高稳定运行的应用场景,同时,Druid也通常被用来助力分析型应用的图形化界面,或者当做需要快速聚合的高并发后端API,Druid最适合应用于面向事件类型的数据。
Druid应用场景:
总的来说,apache druid适合于那些对实时性要求高,待分析的源数据量大的应用业务
环境准备,基于centos7的系统,虚拟机或者阿里云服务,本篇以阿里云服务器为例进行说明
1、官网下载安装包
下载地址:https://downloads.apache.org/druid/ ,根据自己的要求下载特定的版本
2、上传至服务器指定目录并解压文件
解压之后我们进入到bin目录下,在bin目录下,存放的是各自启动脚本,在开发调试阶段,我们可以选择其中的一种类型的脚本进行启动
需要说明的是,不同的启动脚本,对于服务器的CPU配置要求是不一样的,下面列举出其中的部分启动脚本对应的CPU参数,提供参考,
单服务器参考配置
Nano-Quickstart:1个CPU,4GB RAM
启动命令: bin/start-nano-quickstart
配置目录: conf/druid/single-server/nano-quickstart
微型快速入门:4个CPU,16GB RAM
启动命令:bin/start-micro-quickstart
配置目录: conf/druid/single-server/micro-quickstart
小型:8 CPU,64GB RAM(〜i3.2xlarge)
启动命令: bin/start-medium
配置目录:conf/druid/single-server/medium
大型:32 CPU,256GB RAM(〜i3.8xlarge)
启动命令:bin/start-large
配置目录: conf/druid/single-server/large
大型X:64 CPU,512GB RAM(〜i3.16xlarge)
启动命令:bin/start-xlarge
配置目录:conf/druid/single-server/xlarge
我们这里做测试使用选择最低配置即可nano-quickstart
3、启动脚本
4、启动之后,页面访问web-ui
http://106.15.37.246:8888 ,没有其他问题的话,将会出现如下界面
5、数据摄入
apache druid作为数据分析的强大之处的其中一个点就是能比较灵活的支持从外部各种数据源导入外部数据,导入到系统之后进行分析,这里先演示使用安装包中提供的模拟数据进行导入
方式1:命令行加载
bin/post-index-task --file quickstart/tutorial/wikipedia-index.json --url http://localhost:8081
如果显示导入成功,在界面上的query一栏左侧,可以展示出导入成功后的库名称
方式2:界面导入
点击load data
选择第一个
选择local disk 并连接(表示从本地导入,这里也提供了很多其他来源,比如hdfs)
填写导入的文件位置
点击apply,并点击next
继续next
一路next来到下面这个界面时,注意那个 Query granularity 的选项,这里表示摄入的数据支持查询时候按照时间单位查询的最小单位,如天,小时,分钟还是秒
再走一步,来到下面这一步,这里的意思是,druid存储数据时会按照时间单位将数据分块进行存储,即数据块,对大数据中hdfs有一些了解的同学应该容易理解这个点,比如这里我选择按照小时存储
来到下面这里,可以将这个名称修改一下,理解为库的名称
最后点击submit
之后,界面上会出现一条任务,开始将外部的数据进行导入,这里可能需要耐心等待一会儿
看到左侧出现了最后一步我们的库名之后,说明数据导入成功
apache druid能够作为实时数据分析工具的一个强大之处在于,能够对摄入数据进行类似sql的分析,统计,像查询mysql的表一样对数据进行可视化分析,比如我们统计下刚刚摄入进来的数据个数
本篇注意演示了如何快速安装apache druid 以及快速导入本地数据到apache druid的过程,希望对看到的同学有用,本篇到此结束,最后感谢观看!
在流处理方面,Apache Beam和Apache Kafka之间有什么区别? 我也试图掌握技术和程序上的差异。 请通过您的经验报告来帮助我理解。 最佳答案 Beam是一种API,它以一种统一的方式使
有点n00b的问题。 如果我使用 Apache Ignite 进行消息传递和事件处理,是否还需要使用 Kafka? 与 Ignite 相比,Kafka 基本上会给我哪些(如果有的话)额外功能? 提前致
Apache MetaModel 是一个数据访问框架,它为发现、探索和查询不同类型的数据源提供了一个通用接口(interface)。 Apache Drill 是一种无架构的 SQL 查询引擎,它通过
Tomcat是一个广泛使用的java web服务器,而Apache也是一个web服务器,它们在实际项目使用中有什么不同? 经过一些研究,我有了一个简单的想法,比如, Apache Tomcat Ja
既然简单地使用 Apache 就足以运行许多 Web 应用程序,那么人们何时以及为什么除了 Apache 之外还使用 Tomcat? 最佳答案 Apache Tomcat是一个网络服务器和 Java
我在某个 VPS( friend 的带 cPanel 的 apache 服务器)上有一个帐户,我在那里有一个 public_html 目录。我们有大约 5-6 个网站: /home/myusernam
我目前正在尝试将模块加载到 Apache,使用 cmake 构建。该模块称为 mod_mapcache。它已成功构建并正确安装在/usr/lib/apache2/modules directroy 中
我对 url 中的问号有疑问。 例如:我有 url test.com/controller/action/part_1%3Fpart_2 (其中 %3F 是 url 编码的问号),并使用此重写规则:R
在同一台机器上,Apache 在端口 80 上运行,Tomcat 在端口 8080 上运行。 Apache 包括 html;css;js;文件并调用 tomcat 服务。 基本上 exampledom
Apache 1 和 Apache 2 的分支有什么区别? 使用一种或另一种的优点和缺点? 似乎 Apache 2 的缺点之一是使用大量内存,但也许它处理请求的速度更快? 最有趣的是 Apache 作
实际上,我们正在使用 Apache 网络服务器来托管我们的 REST-API。 脚本是用 Lua 编写的,并使用 mod-lua 映射。 例如来自 httpd.conf 的实际片段: [...] Lu
我在 apache 上的 ubuntu 中有一个虚拟主机,这不是我的主要配置,我有另一个网页作为我的主要网页,所以我想使用虚拟主机在同一个 IP 上设置这个。 urologyexpert.mx 是我的
我使用 Apache camel 已经很长时间了,发现它是满足各种系统集成相关业务需求的绝佳解决方案。但是几年前我遇到了 Apache Nifi 解决方案。经过一番谷歌搜索后,我发现虽然 Nifi 可
由于两者都是一次处理事件的流框架,这两种技术/流框架之间的核心架构差异是什么? 此外,在哪些特定用例中,一个比另一个更合适? 最佳答案 正如您所提到的,两者都是实时内存计算的流式平台。但是当您仔细观察
apache 文件(如 httpd.conf 和虚拟主机)中使用的语言名称是什么,例如 # Ensure that Apache listens on port 80 Listen 80 D
作为我学习过程的一部分,我认为如果我扩展更多关于 apache 的知识会很好。我有几个问题,虽然我知道有些内容可能需要相当冗长的解释,但我希望您能提供一个概述,以便我知道去哪里寻找。 (最好引用 mo
关闭。这个问题是opinion-based .它目前不接受答案。 想改善这个问题吗?更新问题,以便可以通过 editing this post 用事实和引文回答问题. 4 个月前关闭。 Improve
就目前而言,这个问题不适合我们的问答形式。我们希望答案得到事实、引用或专业知识的支持,但这个问题可能会引起辩论、争论、投票或扩展讨论。如果您觉得这个问题可以改进并可能重新打开,visit the he
这个问题在这里已经有了答案: Difference Between Apache Kafka and Camel (Broker vs Integration) (4 个回答) 3年前关闭。 据我所知
我有 2 个使用相同规则的子域,如下所示: RewriteEngine On RewriteCond %{REQUEST_FILENAME} !-f RewriteCond
我是一名优秀的程序员,十分优秀!