- html - 出于某种原因,IE8 对我的 Sass 文件中继承的 html5 CSS 不友好?
- JMeter 在响应断言中使用 span 标签的问题
- html - 在 :hover and :active? 上具有不同效果的 CSS 动画
- html - 相对于居中的 html 内容固定的 CSS 重复背景?
我们正在使用 SQL Server 2014 进行新的数据仓库部署。我的数据源之一是 Oracle,不幸的是,推荐的用于快速数据访问的 Attunity 组件目前还不适用于 SSIS 2014。
我曾尝试避免使用 OLEDB,因为这需要安装特定的 Oracle 客户端工具,这之前曾让我感到非常沮丧,而且据说 Attunity 的东西正在开发中(MS promised they'd arrive in August already),我不愿意通过再次磨难。
因此,我使用 ADO.NET。考虑到所有因素,除了 1 个特定表外,性能暂时是可以接受的。
Oracle 中的这个特定表有一堆 varchar 列,我得出的结论是,由于所选行的宽度,该表的执行速度特别慢。为了证明这一点,我没有选择 Oracle 中存在的所有列(这是我创建的原始包),而是将所有宽度截断为实际存储的值的最大长度 ( CAST(column AS varchar(46)
)。这将运行相同包的时间减少到 17 分钟(仍远低于我所说的可接受的时间,而且我不会投入生产,因为它会打开一个 future 痛苦的世界,但它证明了宽度的列绝对是一个因素)。
我增加了 SQL Server 中的网络数据包大小,但这似乎没有多大帮助。我还没有找到一种改变 Oracle ADO.NET 连接器上数据包大小的好方法(SQL Server 确实有这个选项)。我试图看看是否添加 Packet size=32000;
到 Oracle 连接器的连接字符串,但这只是抛出了一个错误,表明它根本不会被接受。这同样适用于 FetchSize。
最终,我想出了一个折衷方案,将负载分成三个不同的部分,在这些部分之间划分 varchar 列,并使用两个 MERGE JOIN
对象,将数据合并回单个组合数据集。运行它并进行一些外推,让我认为该方法大约需要 30 分钟才能完成(但使用上面的 CAST
解决方案不会丢失数据)。然而,这仍然不能被接受。
我目前正在尝试其他一些选项(不使用 MERGE JOIN
,而是转储到三个不同的表中,然后在 SQL Server 本身上合并这些表,并将包拆分为更多不同的负载以尝试进一步加快负载的各个部分),但肯定有更简单的事情。
有没有人有过如何通过 ADO.NET 从 Oracle 加载数据的经验,宽行会导致延迟?如果是这样,是否有任何我应该注意的特定指南,或者您可能遇到的任何其他技巧可以帮助我在 Attunity 组件不可用时减少加载时间?
谢谢!
最佳答案
Microsoft 刚刚发布了更新的 Attunity 驱动程序:
Hi all, I am pleased to inform you that the Oracle and TeraData connector V3.0 for SQL14 SSIS is now available for download!!!!!
Microsoft SSIS Connectors by Attunity Version 3.0 is a minor release. It supports SQL Server 2014 Integration Services and includes bug fixes and support for updated Oracle and Teradata product releases.
For details, please look at the download page. http://www.microsoft.com/en-us/download/details.aspx?id=44582
关于sql-server - SSIS 2014 ADO.NET 与 Oracle 的连接对于 1 个表来说很慢(其余的都很好),我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/26526583/
SQL、PL-SQL 和 T-SQL 之间有什么区别? 谁能解释一下这三者之间的区别,并提供每一个的相关使用场景? 最佳答案 SQL 是一种对集合进行操作的查询语言。 它或多或少是标准化的,几乎所有关
这个问题已经有答案了: What is the difference between SQL, PL-SQL and T-SQL? (6 个回答) 已关闭 9 年前。 我对 SQL 的了解足以完成我的
我在数据库中有一个 USER 表。该表有一个 RegistrationDate 列,该列有一个默认约束为 GETDATE()。 使用 LINQ 时,我没有为 RegistrationDate 列提供任
我有一个可能属于以下类型的字符串 string expected result 15-th-rp 15 15/12-rp 12 15-12-th
很难说出这里问的是什么。这个问题模棱两可、含糊不清、不完整、过于宽泛或言辞激烈,无法以目前的形式合理回答。如需帮助澄清此问题以便可以重新打开,visit the help center . 9年前关闭
我有一个存储过程(称为 sprocGetArticles),它从文章表中返回文章列表。这个存储过程没有任何参数。 用户可以对每篇文章发表评论,我将这些评论存储在由文章 ID 链接的评论表中。 有什么方
我目前正在做一个 *cough*Oracle*cough* 数据库主题。讲师介绍embedded SQL作为让其他语言(例如 C、C++)与(Oracle)数据库交互的方式。 我自己做了一些数据库工作
SQL Server 中 SQL 语句的最大长度是多少?这个长度是否取决于 SQL Server 的版本? 例如,在 DECLARE @SQLStatement NVARCHAR(MAX) = N'S
这个问题已经有答案了: Simple way to transpose columns and rows in SQL? (9 个回答) 已关闭 8 年前。 CallType
预先感谢您对此提供的任何帮助。 假设我有一个查询,可以比较跨年的数据,从某个任意年份开始,永无止境(进入 future ),每年同一时期直到最后一个完整的月份(其特点是一月数据永远不会显示至 2 月
我在数据库中有一个 USER 表。该表有一个 RegistrationDate 列,该列的默认约束为 GETDATE()。 使用 LINQ 时,我没有为 RegistrationDate 列提供任何数
下面是我试图用来检查存储过程是否不存在然后创建过程的 sql。它会抛出一个错误:Incorrect syntax near the keyword 'PROCEDURE' IF NOT EXISTS
我有一个同事声称动态 SQL 在许多情况下比静态 SQL 执行得更快,所以我经常看到 DSQL 到处都是。除了明显的缺点,比如在运行之前无法检测到错误并且更难阅读,这是否准确?当我问他为什么一直使用
来自 lobodava 的动态 SQL 查询是: declare @sql nvarchar(4000) = N';with cteColumnts (ORDINAL_POSITION, CO
使用 SQL Server 中的存储过程执行动态 SQL 命令的现实优点和缺点是什么 EXEC (@SQL) 对比 EXEC SP_EXECUTESQL @SQL ? 最佳答案 sp_executes
我有这个有效的 SQL 查询: select sum(dbos.Points) as Points, dboseasons.Year from dbo.StatLines dbos i
我正在调试一些构建成功运行的 SQL 命令的代码。 然而,在查询结束时,查询结果似乎被写入了一个文本文件。 完整的查询如下 echo SELECT DATE,DATETABLE,DATE,APPDAT
我有一些创建表的 .sql 文件(MS SQL 数据库): 表_1.sql: IF OBJECT_ID (N'my_schema.table1', N'U') IS NOT NULL DROP TAB
我写了下面的 SQL 存储过程,它一直给我错误@pid = SELECT MAX(... 整个过程是: Alter PROCEDURE insert_partyco @pname varchar(20
我在 SQL Server 2005 中有包含两列 Fruit 和 Color 的表,如下所示 Fruit Colour Apple Red Orange
我是一名优秀的程序员,十分优秀!