hadoop - Bigdata Hadoop/Hbase/Bigtable项目创意

Question

Closed. This question is opinion-based。它当前不接受答案。












想改善这个问题吗？更新问题，以便 editing this post用事实和引用来回答。

4年前关闭。



Improve this question




我刚刚开始学习Bigdata-hadoop技术。为了以实际的方式应用我的学习，有人可以建议我参加研究生类(class)的大数据hadoop / Hbase或Bigtable相关项目。因此，我将实现该项目，并且还将涉及这些技术。我不是在寻找大型项目，至少需要两个星期的好项目，在此我会学到一些东西。

请帮助我并分享您的想法，我们将不胜感激。

谢谢

最佳答案

时间序列收集和分析中会发生很多有趣的事情。我建议实现设计的时间序列数据库。对于最初的想法，您可以查看以下准则https://cloud.google.com/bigtable/pdf/CloudBigtableTimeSeries.pdf。

查找具有时间序列的有意义的数据集。优选地，每天实时或至少每分钟更新数百万个样本。远离股票标记和金融-这些都是无聊/过度研究的主题。如有必要，构建一个收集工具(不是说搜寻器:))以按计划获取非结构化数据并将其转换为时间序列。

将数据插入您选择的键值数据存储中。试用模式，压缩和吞吐量。

与开源时间序列数据库比较并基准化您自己的实现。

分析并向SO社区介绍您的发现。

祝好运!

关于hadoop - Bigdata Hadoop/Hbase/Bigtable项目创意，我们在Stack Overflow上找到一个类似的问题： https://stackoverflow.com/questions/30487071/

上一篇：csv - Pig 如何使用过滤器格式化半结构化 CSV

下一篇：hadoop - HDFS 可以复制到其他集群吗？

相关文章：

python - AI鼠标移动使用什么神经网络

hadoop - Hbase master 构建失败

java - 使用Java远程访问HBase Table List

java - hbase Regionserver 启动，zookeeper 启动但 hmaster 未启动(regionserver.HRegionServer : Failed construction RegionServer)

hadoop - Hadoop Yarn可以运行网格吗？

mysql - 无法使用 Sqoop 将数据从 Hive 导出到 MySQL

java - 无法使用 Hbase 连接到远程服务器

tensorflow - 在 gpflow 2 中保存模型

python - 预测下一个数字

ubuntu - 在 Ubuntu 上安装 Hive 时遇到问题

Answer 1

时间序列收集和分析中会发生很多有趣的事情。我建议实现设计的时间序列数据库。对于最初的想法，您可以查看以下准则https://cloud.google.com/bigtable/pdf/CloudBigtableTimeSeries.pdf。

查找具有时间序列的有意义的数据集。优选地，每天实时或至少每分钟更新数百万个样本。远离股票标记和金融-这些都是无聊/过度研究的主题。如有必要，构建一个收集工具(不是说搜寻器:))以按计划获取非结构化数据并将其转换为时间序列。

将数据插入您选择的键值数据存储中。试用模式，压缩和吞吐量。

与开源时间序列数据库比较并基准化您自己的实现。

分析并向SO社区介绍您的发现。

祝好运!