gpt4 book ai didi

scala - Monix 并行任务的错误处理(使用 parMap)

转载 作者:行者123 更新时间:2023-12-04 07:20:26 24 4
gpt4 key购买 nike

我正在尝试使用 monix 来并行化某些操作,然后执行错误处理
假设我正在尝试解析和验证这样的几个对象

def parseAndValidateX(x: X) Task[X]
def parseAndValidateY(y: Y): Task[Y]
这里 X 和 Y 是我定义的一些类型。
现在这些方法中的每一个都会评估一些标准并返回一个任务。如果评估失败,我有一些形式的代码
Task.raiseError(new CustomException("X is invalid because certain reasons a,b,c"))
我对 Y 有类似的任务加薪。
Task.raiseError(new CustomException("Y is invalid because certain reasons a',b',c'"))
现在我有这种类型
case class Combined(x: X, y: Y)
我定义了这个
private def parseAndValidateCombined(x: X, y: Y): Task[Combined] = {
val xTask = parseAndValidateX(x)
val yTask = parseAndValidateY(y)

Task.parMap2(xTask, yTask) {
(xEval, yEval) => SecretData(xEval, yTask)
}
}
这应该允许我并行运行验证,并且我确实得到了响应。
但是我也想要这种行为
如果两个任务都失败,我想返回这样的错误
Task.raiseError(new CustomException("X is invalid because certain reasons a,b,c and "Y is invalid because certain reasons a',b',c'"))
我似乎无法做到这一点。根据两个任务中的哪一个失败,我只能在 parMap2 输出的 onRecover 方法上获得两个失败之一。
如果两者都失败,我只会收到任务 X 的错误。
我是否有可能以完全异步的方式完成我在 Monix 上所做的事情(例如,也许其他一些方法可以将任务组合在一起)?或者我是否必须阻止 exec,单独获取错误并重新组合值?

最佳答案

parMap2只是,不可能完成你想做的事情。
documentation说:

In case one of the tasks fails, then all other tasks getcancelled and the final result will be a failure.


但是,可以实现希望您希望公开错误,而不是隐藏在 monadic 处理之后。这可以通过 materialize 实现方法。
因此,例如,您可以将您的方法实现为:
private def parseAndValidateCombined[X, Y](x: X, y: Y): Task[Combined] = {
val xTask = parseAndValidate(x).materialize // turn on Task[Try[X]]
val yTask = parseAndValidate(y).materialize // turn on Task[Try[Y]]

Task.parMap2(xTask, yTask) {
case (Success(xEval), Success(yEval)) => Success(SecretData(xEval, yEval))
case (Failure(_), Failure(_)) => Failure[Combined](new CustomException(....))
case (Failure(left), _) => Failure[Combined](left)
case (_, Failure(right)) => Failure[Combined](right)
}.dematerialize // turn to Task[Combined]
}
我希望我能帮助你:)

关于scala - Monix 并行任务的错误处理(使用 parMap),我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/68538818/

24 4 0
Copyright 2021 - 2024 cfsdn All Rights Reserved 蜀ICP备2022000587号
广告合作:1813099741@qq.com 6ren.com