Oto potencjalne rozwiązanie z dwoma założeniami:
- Wszystkie pliki w folderze docelowym zostały przeniesione przez ten pakiet.
- Nazwy plików są unikalne.
Możesz dodać krok rejestrowania nazwy pliku do ETL.
Utwórz nową tabelę dziennika w bazie danych z kolumną na nazwę pliku. W każdej pętli pakietu wpisz nazwę pliku do tej tabeli. Następnie możesz użyć tego jako prostej tabeli przeglądowej, która jest używana przez pewną logikę warunkową w ETL w celu sprawdzenia, czy nazwa przetwarzanego pliku pasuje do istniejącego pliku.
Dokładny sposób zaimplementowania kroku rejestrowania i sprawdzenia warunkowego (może być warunkowy w przepływie danych, wykonany w zadaniu skryptu itp.) będzie zależeć od projektu twojego pakietu, ale powinien osiągnąć to, czego szukasz.