gpt4 book ai didi

hadoop - 如何将图像和视频等非结构化数据加载到 Hadoop 分布式文件系统中

转载 作者:可可西里 更新时间:2023-11-01 15:38:19 25 4
gpt4 key购买 nike

我想使用 hadoop 组件将非结构化数据(图像、视频)加载到 HDFS。任何人都可以在这个查询中帮助我。

我需要使用哪个hadoop组件来加载非结构化数据。

以及使用该组件,如何导入它。

最佳答案

非结构化数据如常规文件?如果数据存储在某个地方的普通文件系统中,那么您不需要任何花哨的组件。您可以使用内置的 HDFS 工具(hadoop fs 等)上传它。您可以编写一些 shell 脚本来自动执行此操作...

如果出于某种原因您的数据在数据库中存储为 blob,您可以使用 Sqoop。

关于hadoop - 如何将图像和视频等非结构化数据加载到 Hadoop 分布式文件系统中,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/21893121/

25 4 0
Copyright 2021 - 2024 cfsdn All Rights Reserved 蜀ICP备2022000587号
广告合作:1813099741@qq.com 6ren.com