2024-10-16 20:50:49 发布
网友
如何使用python为增量加载创建azure datafactory? 我应该在哪里提到文件加载选项(增量加载:LastModifiedOn)在创建活动或管道时??在
我们可以通过选择“文件加载”选项来使用UI来实现这一点。但是如何使用python实现同样的实用性呢?在
PythonAPI for datafactory是否支持此功能?在
根据这个blog,您只能通过设置modifiedDatetimeStart和modifiedDatetimeEnd属性从adfsdk获得增量加载特性。在
modifiedDatetimeStart
modifiedDatetimeEnd
您可以在azure\u blob\u数据集类的additional_properties中设置上述属性。在
additional_properties
我的调查表明pythonsdk还没有实现这个特性。我使用SDK连接到现有实例并获取了两个示例数据集。我没有找到任何看起来像“上次修改日期”的东西。我试了dataset.serialize(),dataset.__dict__,dataset.properties.__dict__。我也试过了。在
dataset.serialize()
dataset.__dict__
dataset.properties.__dict__
尝试serialize()非常重要,因为在GUI中生成的JSON和Python生成的JSON之间,应该是对等的。缺少奇偶性表明SDK版本落后于GUI版本。在
serialize()
更新:SDK正在更新。在
根据这个blog,您只能通过设置
modifiedDatetimeStart
和modifiedDatetimeEnd
属性从adfsdk获得增量加载特性。在您可以在azure\u blob\u数据集类的
additional_properties
中设置上述属性。在我的调查表明pythonsdk还没有实现这个特性。我使用SDK连接到现有实例并获取了两个示例数据集。我没有找到任何看起来像“上次修改日期”的东西。我试了
dataset.serialize()
,dataset.__dict__
,dataset.properties.__dict__
。我也试过了。在尝试
serialize()
非常重要,因为在GUI中生成的JSON和Python生成的JSON之间,应该是对等的。缺少奇偶性表明SDK版本落后于GUI版本。在更新:SDK正在更新。在
相关问题 更多 >
编程相关推荐