程序问答   发布时间:2022-06-01  发布网站:大佬教程  code.js-code.com
大佬教程收集整理的这篇文章主要介绍了ADF Delta Copy Activity 失败,从数据湖中删除部分复制的文件大佬教程大佬觉得挺不错的,现在分享给大家,也给大家做个参考。

如何解决ADF Delta Copy Activity 失败,从数据湖中删除部分复制的文件?

开发过程中遇到ADF Delta Copy Activity 失败,从数据湖中删除部分复制的文件的问题如何解决?下面主要结合日常开发的经验,给出你关于ADF Delta Copy Activity 失败,从数据湖中删除部分复制的文件的解决方法建议,希望对你解决ADF Delta Copy Activity 失败,从数据湖中删除部分复制的文件有所启发或帮助;

我有一个每小时增量加载管道,因为我有一个复制活动将数据从 sql server 复制到 datalake parquet 格式,在 For each activity:

复制活动后,我有成功/失败过程来更新控制表中的记录

ADF Delta Copy Activity 失败,从数据湖中删除部分复制的文件

我需要确保中间是否有任何复制活动失败,我需要从数据湖中删除部分复制的文件。如何在我的管道中设置该条件以选择和删除该动态文件。

提前致谢

p.s 我对这个工具很陌生,每天都在学习。

解决方法

请参以下步骤:

您可以在 Copy_DimCustomer_AC 活动后面添加一个 If condition:

ADF Delta Copy Activity 失败,从数据湖中删除部分复制的文件

If 条件表达式中,构建表达式判断 Copy_DimCustomer_AC.executionDetails.status 是否等于“Succeeded”,如果为 ture,则复制 active 成功:

@equals(activity('Copy_Dimcustomer_AC').output.executionDetails.status,'Succeeded')

ADF Delta Copy Activity 失败,从数据湖中删除部分复制的文件

真正的活动:

ADF Delta Copy Activity 失败,从数据湖中删除部分复制的文件

false active:添加一个delete active来删除文件并运行Log_failure_status_AC

ADF Delta Copy Activity 失败,从数据湖中删除部分复制的文件

HTH。

大佬总结

以上是大佬教程为你收集整理的ADF Delta Copy Activity 失败,从数据湖中删除部分复制的文件全部内容,希望文章能够帮你解决ADF Delta Copy Activity 失败,从数据湖中删除部分复制的文件所遇到的程序开发问题。

如果觉得大佬教程网站内容还不错,欢迎将大佬教程推荐给程序员好友。

本图文内容来源于网友网络收集整理提供,作为学习参考使用,版权属于原作者。
如您有任何意见或建议可联系处理。小编QQ:384754419,请注明来意。
标签:失败