Tìm dữ liệu bị trùng lặp trong câu lệnh SQL

Ví dụ: tạo bảng users gồm name và location.

Sử dụng câu lệnh truy vẫn MySql

1 2 3 4

SELECT * , COUNT(*) AS number_record FROM users GROUP BY name HAVING number_record > 1

Thật ra câu lệnh tìm dữ liệu trùng lặp cũng không có gì phức tạp lắm, nếu bạn thường sử dụng các lệnh MySQL để truy vấn dữ liệu thì chắc hẳn đã biết đến lệnh HAVING và GROUP BY  vốn được sử dụng trong các trường hợp liên quan đến tập hợp dữ liệu. Trong trường hợp này chúng ta sẽ dùng lệnh GROUP BY để nhóm các record lại, sau đó dùng lệnh HAVING để lọc ra những record trùng lặp có số lượng lớn hơn 1.

Sau khi truy vấn sẽ biết được số lượng những record trùng lặp.

1, Hiển thị các dữ liệu trùng nhau

Hiện thị đầy đủ các bản ghi trùng lặp

1 2 3 4 5 6 7 8 9

SELECT * FROM users WHERE name IN ( SELECT name FROM users GROUP BY name HAVING COUNT(name) > 1 ) ORDER BY name

2, Xóa các dữ liệu trùng nhau (giữ lại 1 record)

Câu lệnh dưới đây sẽ xóa những record trùng nhau nhưng giữ lại 1 record trong số đó. Giả sử trong Database có 3 record trùng nhau thì câu lệnh sẽ xóa 2 record và giữ lại 1 record. 

1 2 3

DELETE n1 FROM users n1, users n2 WHERE n1.name = n2.name AND n1.id > n2.id

3, Xóa hoàn toàn các dữ liệu trùng nhau ra khỏi Database

Xoá tất cả những bản ghi trùng nhau

1 2 3

DELETE FROM users USING users, users AS virtual_users WHERE (NOT users.id = virtual_users.id) AND (users.name = virtual_users.name)

Khi thao tác với những cơ sở dữ liệu lớn thì những lệnh kiểu như này là rất cần thiết.