个人中心
文章发布
退出
作者热门文章
- android - RelativeLayout 背景可绘制重叠内容
- android - 如何链接 cpufeatures lib 以获取 native android 库？
- java - OnItemClickListener 不起作用，但 OnLongItemClickListener 在自定义 ListView 中起作用
- java - Android 文件转字符串
27
4
我们有 600TB 的 EMC SAN 存储。目前，Oracle RAC 正在使用此存储。出于可扩展性的原因，我们正在用 Hadoop 存储(Yarn、Spark - Hive、Shark)替换 Oracle RAC - 尽管我们在性能上有所妥协。
对于 Hadoop，建议使用本地存储而不是 SAN 存储。但是我们的管理层不愿意浪费SAN存储。他们希望保护对 SAN 存储的投资。
我们怎样才能最好地将 SAN 用于 Hadoop？以太网升级会有帮助吗？最大限度地利用 SAN 存储(如 Hadoop 存储)的选项有哪些。
最佳答案
假设我们使用相同的术语——特别是 SAN 是通过光纤 channel 网络访问的 block 设备——那么“本地存储”和“san 存储”之间没有太大区别。
您从中获得的性能受到相同因素的限制 - Controller 数量、主轴数量、争用率等。您首先购买存储阵列/SAN 的原因是因为这样您就可以整合您的工作负载并以相同(或更低)的平均值获得更高的突发性能。
然而，还有一个额外的因素 - SAN 通常会包含一个结构，这是一个用于承载磁盘存储流量的网络。您为其使用的交换机通常具有高性能/低延迟 - 但它们也可能成为瓶颈和争论点。
Hadoop...通过使用 HDFS 有效地做同样的事情——使用它的多个本地磁盘来获得大的“突发”。这本质上会导致您的 SAN 争用，因此您不会再获得太多整合优势 - 您最终可能会变得更糟，因为争用意味着瓶颈和延迟。
如果您的存储阵列具有良好的峰值吞吐量、良好的重复数据删除机制和大型缓存，您可能会发现情况会更好。只要确保您有足够的端到端峰值吞吐量和 IOP 容量即可。可能您会发现您的情况比实际情况更糟 - 但是您是否应该以更低的成本重用某些东西，而不是支付额外费用来正确地做这件事更像是一种 IT 政策的决定，而不是一个技术的。
关于Hadoop SAN 存储重用，我们在Stack Overflow上找到一个类似的问题： https://stackoverflow.com/questions/24177360/
27
4
0
将已完成的 MPI_Request 重新用于另一个请求是否安全？我一直在使用 MPI_Request 池来提高性能并且没有错误。但肯定知道会很好。 最佳答案 MPI_Request 类型的变量不是请求
我注意到 Qt 文档在翻译的某些方面不是很冗长。我一直在玩弄它，试图通过反复试验来弄清楚他们的行为。最终目标是在运行时更改翻译，但我很困惑 QTranslator 对象在多大程度上可以重用。 考虑一下
我有一个 UIImageView 对象，它只是一个纯黑色矩形。这是我用来选择 View 中的按钮的方法。 问题是，我的 View 中有 49 个这样的按钮，并且所有这些按钮都可以同时选择。 我用来向按
在 R 中构建模型时，如何保存模型规范以便可以在新数据上重用它？假设我根据历史数据建立逻辑回归，但直到下个月才会有新的观察结果。最好的方法是什么？ 我考虑过的事情: 保存模型对象并在新 session
我是 React/Redux 的初学者。 我已经完成了一个基本组件在我的应用程序中，其操作/ reducer /商店运行良好。 我将渲染另一个 具有不同的设置( Prop )。 我想做的是分离这两个组
我正在开发 GUI 纸牌游戏，我想知道是否有办法改进我的代码。这是我的情况。 我有三张牌:A、B 和 C。玩家可以通过分别单击三个按钮之一来更换牌:分别是按钮 1、按钮 2 或按钮 3。 class
每个文本框旁边有 2 个文本框和 2 个按钮 [...]。是否可以使用一个 OpenFileDialog 并将 FilePath 传递到相应的文本框，基于单击哪个按钮？即...如果我单击第一个按钮并打
我有两个场景:第一个场景，渲染纹理平面，第二个场景，应该渲染为纹理。该纹理应用作主场景中平面的贴图。 出于某种原因，所有 THREE.WebGLRenderTarget 示例每帧都会重新绘制两个场景，
我知道 concat、StringBuffer 和 StringBuilder 之间的区别。我知道 StringBuffer.toString 支持数组的内存问题可能会导致内存爆炸。我什至知道 JDK
我有 2 个 Activity 。 A 和 B。A 有一个包含 4 个项目的操作栏。每个项目显示不同的电影列表。 B extends A 因为我希望能够使用操作栏来更改电影列表。 所以我的问题是，当我
我有一个查询，用于检查从搜索文本框中输入的每个关键字，并且必须返回最匹配的关键字。 问题是，我想排除返回行中所有值为 0 的 KW_MATCHED。 SELECT A1.*, (
当方法重用时，是否有像这样的代码可以与 UICollectionViewCell 一起使用？ - (UITableViewCell *)tableView:(UITableView *)tableVi
在我的项目中，我想在可 ScrollView 中以zig-zag 模式显示图像。所以我使用 uiscrollview 子查看其中的图像。它工作正常，但它占用了太多内存，因为我将所有图像加载到 Scro
如果我有 UIViewController1 并且我让它以模态方式显示 UIViewController2，但我希望 UIViewController2 显示 UIViewController1 模式
我想在所有 CCMenuItem 中使用完全相同的标签。如果我创建相同的 CCLabelTTF 一次，那么我无法将其添加到多个 CCMenuItem 中，因为它会给出有关已添加标签的运行时错误。但是，
我正在做一个项目，我们需要显示列表与用户位置的距离。为了显示距离，当在输入中给出纬度/经度时，我们使用名为“distance”的脚本字段计算距离 "script_fields" : {
我正在尝试重用我的 UITableViewCells。目前我的应用程序运行良好，在 tableView 中显示内容。然而，当我尝试实现 - 重用 UITableViewCells 时，我的应用程序崩溃
假设我在外部样式表中定义了几个类 .b {font-weight:bold;} .c {text-align:center;} 现在我想要另一个类，它是 b 和 c 的组合 .bc 是否可以使用类 b
我目前经常分配新的协程实例(请参阅我的回答中的代码 here)。 这样做的开销并不小。 我猜想是否有某种方法可以通过重用之前分配的协程来降低成本？ 虽然不确定如何实现这一点？ 我可以为协程 Alloc
在我的应用程序中，我使用如下代码下载多张图片。这样做是高性能还是我可以以某种方式重用连接？ for(int i = 0; i < 100; i++){ URL url = new UR
我是一名优秀的程序员,十分优秀！