- android - 多次调用 OnPrimaryClipChangedListener
- android - 无法更新 RecyclerView 中的 TextView 字段
- android.database.CursorIndexOutOfBoundsException : Index 0 requested, 光标大小为 0
- android - 使用 AppCompat 时,我们是否需要明确指定其 UI 组件(Spinner、EditText)颜色
我有一些代码在 Parallel.ForEach
循环中运行。循环中的代码是线程安全的,但我使用的迭代器(带有 yield return
的自定义方法)不是。看起来迭代器正在多个线程上运行,这可能会导致问题。
问题背景
迭代器包含对 NHibernate 的调用(虽然这完全是偶然的,正如您稍后会看到的那样),并且由于我在并行化代码时遇到问题,所以我在 NHibernate Profiler 中查看是否可以对这种情况有所了解。中途它开始报告“在多个线程中使用单个 session 可能是一个错误”。
现在,根据 NHibernate Profiler 的说法,有问题的代码在迭代器内部(因此它并没有试图在 Parallel.ForEach
操作的其他地方实现某些东西)。所以我添加了一些我自己的代码,以便我可以检测 NHibernate Profiler 是什么,我看到了同样的东西。
从多个线程调用迭代器方法 - 我认为这是不可能的,因为其他人似乎也这么认为,例如这另一个 SO 答案:https://stackoverflow.com/a/26553810/8152
问题的简化演示
为了演示这个问题(不需要我所有无关的 gubbins 处理 NHibernate 等)我写了一个简单的控制台应用程序来显示同样的问题:
public class Program
{
public static void Main(string[] args)
{
Parallel.ForEach(YieldedNumbers(), (n) => { Thread.Sleep(n); });
Console.WriteLine("Done!");
Console.ReadLine();
}
public static IEnumerable<int> YieldedNumbers()
{
Random rnd = new Random();
int lastKnownThread = Thread.CurrentThread.ManagedThreadId;
int detectedSwitches = 0;
for (int i = 0; i < 1000; i++)
{
int currentThread = Thread.CurrentThread.ManagedThreadId;
if (lastKnownThread != currentThread)
{
detectedSwitches++;
Console.WriteLine(
$"{detectedSwitches}: Last known thread ({lastKnownThread}) is not the same as the current thread ({currentThread}).");
lastKnownThread = currentThread;
}
yield return rnd.Next(100,250);
}
}
}
在我的测试运行中,线程在 1000 次迭代中切换了 157 到 174 次。 Sleep
模拟我的操作所花费的时间。
总结
如果 .NET 中实现的迭代器模式本质上不是线程安全的,为什么 Parallel.ForEach
会这样做?和;什么是能够以安全的方式(在一个线程上)获取迭代器当前公开的数据,然后在多个线程上处理它的好解决方案? (例如,有没有办法强制迭代器回到一个线程?或者迭代器也必须是线程安全的以及为每次迭代调用的操作?或者完全是其他一些解决方案?)
版本历史
最佳答案
Is there any way to force the iterator back onto one thread?
不,您必须显式处理多个线程调用迭代器的情况。在幕后,如果多个线程正在调用 IEnumerator.MoveNext()
,迭代器将按照它被告知的程度继续前进。这里没有发生隐式同步。
@JonSkeet blogged a while back关于锁定迭代。尽管我必须说这对我来说看起来像是 XY 问题,但您是否应该从多个线程并行调用 NHibernate
?它是上下文线程安全的吗?这些是您在使用线程安全迭代器之前应该考虑的问题。
关于c# - Parallel.ForEach 中的迭代器在多个线程上运行,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/39253715/
在 Oracle 中,PARALLEL 被广泛使用。提示 PARALLEL、PARALLEL(8) 和 PARALLEL(a,8) 有什么区别。如何选择最佳的查询提示? SELECT /*+ PARA
好的,我希望以前没有问过这个问题,因为在搜索中很难找到。 我查看了 F95 手册,但仍然觉得这很模糊: For the simple case of: DO i=0,99 END DO 我正
我有一个 C-shell 脚本,其中有一个名为 $hosts_string 的变量,格式为: host1,host2,...,hostN 我还有一个名为 $chrs_string 的变量,其形式为:
是否可以从由gnu parallel产生的脚本的多次运行中调用gnu parallel? 我有一个python脚本,可以运行100个顺序顺序迭代,并且在每次迭代中的某处,并行计算4个值(使用gnu p
我想在几个输入上运行几个长时间运行的进程。例如。: solver_a problem_1 solver_b problem_1 ... solver_b problem_18 solver_c pro
TParallel.&For 和 TParallel.For 之间有区别吗? 两者都可以在 Delphi 10 Seattle 中编译。那么我应该坚持哪一个呢? 最佳答案 TParallel.&For
我第一次使用 julia 进行并行计算.我有点头疼。所以假设我开始 julia如下:julia -p 4 .然后我为所有处理器声明 a 函数,然后将它与 pmap 一起使用还有@parallel fo
关闭。这个问题是off-topic .它目前不接受答案。 想改善这个问题吗? Update the question所以它是 on-topic对于堆栈溢出。 10年前关闭。 Improve this
我有一堆相互排斥的方法,因此可以并行运行。有这样做的好方法吗?到目前为止,我有以下两种实现方式,但我不确定是否应该选择其中一种。 使用 Parallel.For : Parallel.For(0, 2
我对并行运行脚本很感兴趣,并且我已经开始查看 GNU 并行工具,但是我遇到了一些麻烦。我的脚本 doSomething 有 3 个参数,我想在参数的不同值上并行运行脚本。我该怎么做? 我试过:para
我需要在多核(和多线程)机器上运行多个作业。我正在使用 GNU Parallel utility跨核心分配作业以加速任务。要执行的命令在名为“命令”的文件中可用。我使用以下命令运行 GNU Paral
我正在尝试使用如下两个输入运行 Python 脚本。我得到了大约 300 个这两个输入,所以我想知道是否有人可以建议如何并行运行它们。 单次运行看起来像: python stable.py KOG_1
每天我都必须更新一堆存储库,并在其中一些中执行另一个命令(来自 CARTON,Perl 模块依赖管理器)。我总是使用循环来执行此操作,但我想与 并行执行GNU 并行 如果可能,但我不太了解它的tuto
正如标题所说:@parallel 之间究竟有什么区别?和 pmap ?我的意思不是明显的一个是循环的宏,另一个适用于函数,我的意思是它们的实现究竟有什么不同,我应该如何使用这些知识在它们之间进行选择?
我有一些矩阵乘法运算。我想通过多个处理器并行执行这些操作。这可以使用 MPI(消息传递接口(interface))在高性能计算集群上完成。 同样,我可以使用多个辅助角色在云中进行一些并行化吗?有什么办
joblib模块提供了一个简单的帮助程序类,以使用多处理并行编写循环的循环。 这段代码使用列表推导来完成这项工作: import time from math import sqrt from job
我的问题是这样的one .但我想做一些不同的事情... 例如,在我的并行区域内,我想在 4 个线程上运行我的代码。当每个线程进入 for 循环时,我想在 8 个线程上运行我的代码。像 #pramga
我正在尝试使用 ipython 并行库中的并行计算。但是我对此知之甚少,而且我发现很难从对并行计算一无所知的人那里阅读该文档。 有趣的是,我发现的所有教程都只是重复使用文档中的示例,并使用相同的解释,
我的项目结构看起来像 Root + subproj1 + subproj2 在每个子项目中定义了自己的任务 run(){}。 我想要做的是从 Root 项目的运行任务并行运行 :subpro
我有一个 Foo ID 的列表。我需要为每个 ID 调用一个存储过程。 例如 Guid[] siteIds = ...; // typically contains 100 to 300 elemen
我是一名优秀的程序员,十分优秀!