Попытка удалить повторяющиеся строки в SQL Server, где разница заключается в дате или номере пакета

Question 1

У меня есть такой запрос:

SELECT 
    T1.ID_NUMBER,                                                                    
    T1.INCEPTION_DATE,
    T1.OCCURRENCE,
    T1.TRANSACTION_DATE,
    T1.FILE_LOAD_DATE,
    T1.BATCH_NUM
FROM 
    mastertable T1
INNER JOIN 
    (SELECT 
         ID_NUMBER, INCEPTION_DATE, OCCURRENCE, 
         COUNT(*) AS DUPL_COUNT
     FROM 
         mastertable
     WHERE 
         SOURCE_SYSTEM ='LEGACY'
     GROUP BY 
         ID_NUMBER, INCEPTION_DATE, OCCURRENCE
     HAVING 
         COUNT(*) > 1) t2 ON T2.ID_NUMBER = T1.ID_NUMBER 
                          AND T2.INCEPTION_DATE = T1.INCEPTION_DATE 
                          AND T2.OCCURRENCE= T1.OCCURRENCE
ORDER BY 
    1, 2, 3, 4, 5

Что возвращает следующие результаты

ID_NUMBER	INCEPTION_DATE	происшествие	ТРАНЗАКЦИЯ_ДАТА	FILE_LOAD_DATE	BATCH_NUM
112897732	2008-09-15	4	2008-07-03	2008-07-07 17:57:19	06341
112897732	2008-09-15	4	2008-07-13	2008-07-18 03:35:55	06753
828194721	2008-11-11	1	2008-09-06	2008-09-17 02:50:44	97334
828194721	2008-11-11	1	2008-09-23	2008-09-24 02:55:27	98331
456457422	2008-09-28	1	2008-12-03	2008-07-13 08:08:39	00734
456457422	2008-09-28	1	2008-12-03	2008-07-18 13:35:55	00991
999272910	2008-05-07	3	2008-05-03	2008-10-13 08:08:38	11432
999272910	2008-05-07	3	2008-05-28	2008-10-18 03:35:55	13342
875328642	2008-03-01	3	2008-04-28	2008-01-23 08:08:38	74542
875328642	2008-03-01	3	2008-04-30	2008-01-25 12:55:11	77536
011028734	2008-07-12	2	2008-12-03	2008-08-07 11:57:03	23422
011028734	2008-07-12	2	2008-12-03	2008-08-11 17:23:29	25748
018264981	2008-07-09	0	2008-12-03	2008-12-07 02:18:12	00432
018264981	2008-07-09	0	2008-12-03	2008-12-11 17:44:19	00773

Чем раньше FILE_LOAD_DATE из каждого ID_NUMBER или меньше BATCH_NUM это запись, которую я хочу сохранить.

Есть ли способ написать запрос, который удалит другие записи, возможно, с помощью CTE с ROW_NUMBER()?

Я надеюсь на что-то СУХОЕ в случае, если эта проблема повторится снова. Спасибо!

(Также, если это не слишком сложно, пожалуйста, объясните, как работает решение)

Question 2

Вы могли бы использовать удаляемый CTE здесь:

WITH cte AS (
    SELECT *, ROW_NUMBER() OVER (PARTITION BY ID_NUMBER, INCEPTION_DATE, OCCURRENCE
                                 ORDER BY FILE_LOAD_DATE, BATCH_NUM) rn
    FROM mastertable
    WHERE SOURCE_SYSTEM = 'LEGACY'
)

DELETE
FROM cte
WHERE rn > 1;

Логика состоит в том, чтобы присвоить номер строки каждой группе записей, имеющих одинаковые значения для ID_NUMBER, INCEPTION_DATE, и OCCURRENCE. Значение номера первой строки, равное 1, будет присвоено записи, имеющей самое раннее FILE_LOAD_DATE. В случаях, когда две или более записей привязаны к самой ранней FILE_LOAD_DATE, выключатель связи будет определен самым ранним BATCH_NUM.

Инструкция delete удаляет все записи, кроме этой самой ранней записи.

Nicholas Gregory · Answer 1 · 2021-11-14T00:02:08

Вы могли бы использовать удаляемый CTE здесь:

WITH cte AS (
    SELECT *, ROW_NUMBER() OVER (PARTITION BY ID_NUMBER, INCEPTION_DATE, OCCURRENCE
                                 ORDER BY FILE_LOAD_DATE, BATCH_NUM) rn
    FROM mastertable
    WHERE SOURCE_SYSTEM = 'LEGACY'
)

DELETE
FROM cte
WHERE rn > 1;

Логика состоит в том, чтобы присвоить номер строки каждой группе записей, имеющих одинаковые значения для ID_NUMBER, INCEPTION_DATE, и OCCURRENCE. Значение номера первой строки, равное 1, будет присвоено записи, имеющей самое раннее FILE_LOAD_DATE. В случаях, когда две или более записей привязаны к самой ранней FILE_LOAD_DATE, выключатель связи будет определен самым ранним BATCH_NUM.

Инструкция delete удаляет все записи, кроме этой самой ранней записи.

Попытка удалить повторяющиеся строки в SQL Server, где разница заключается в дате или номере пакета

Вопрос

Лучший ответ

На других языках

Эта страница на других языках

Популярное в этой категории

Популярные вопросы в этой категории