天青數據工廠數據集清理

Question

有沒有人告訴我Azure數據工廠數據集是如何清理（刪除，刪除等）的。是否有任何政策或設置來控制它？

從我可以說，所有時間序列的數據集完整保留。我想開發一個活動，每天在Azure Blob或Data Lake存儲的目標文件夾中覆蓋數據（例如，映射到Azure Datawarehouse中的外部表，它是完整的數據提取）。我怎樣才能實現這一點只是複製活動？我是否應該添加自定義的.Net活動來自己執行清理不再需要的數據集？

Answer 1

是的，您需要一個自定義活動來刪除pipepline輸出。 您可能有管道活動覆蓋相同的輸出，但您必須小心瞭解ADF切片模型和活動依賴性的工作方式，以便使用輸出的任何內容都可以獲得清晰且可重複的設置。