導入

SQLデータベースは、多くの場合、レコードの重複に悩まされ、データ分析と運用効率を妨げます。このガイドは、顧客データ、トランザクションログ、またはその他のデータセットを使用しているかどうかにかかわらず、これらの冗長エントリを削除するための実用的な手法を提供します。 SQLの構(gòu)文、現(xiàn)実世界の例、およびベストプラクティスをカバーして、重複排除プロセス全體でデータの整合性を確保します。

カバーされている重要な領(lǐng)域

このガイドは、SQLの重複レコードの根本原因に対処し、さまざまな検出および削除方法、関連するSQL構(gòu)文の詳細を調(diào)査し、データ品質(zhì)を維持するためのベストプラクティスを強調(diào)します。

目次

• SQLで重複する行を削除します
  • 重複したエントリの識別
  • ROW_NUMBER()重複した削除の場合
  • 重複する排除のための自己結(jié)合方法
  • 一意のレコードを使用して新しいテーブルを作成します
• よくある質(zhì)問

SQLで重複する行を削除する方法は？

SQLの重複行を排除するためのいくつかの方法が存在し、それぞれに獨自の強みがあります。最適なアプローチは、データベースシステムと特定の要件に依存します。

複製データの一般的な原因

しばしば次のことがあります。

• データ入力エラー：手動入力中のヒューマンエラー。
• データセット合併：適切な重複排除なしでデータセットを組み合わせます。
• インポートプロセスの故障：データインポート手順中のエラー。

重複したレコードの識別

削除の前に、最初に重複する行を識別する必要があります。これらは通常、1つ以上の列で同一の値を共有します。

SQL構(gòu)文：

 column1、column2、count（*）を選択します
Table_nameから
列ごとのグループ、列2
カウント（*）> 1;

例：

employeesテーブルを検討してください：

重複したメールを見つけるには：

電子メールを選択し、count（*）
従業(yè)員から
メールでグループ
カウント（*）> 1;

出力：

これにより、メールが複數(shù)回表示されていることがわかります。

ROW_NUMBER()を使用して重複を削除する

ROW_NUMBER()ウィンドウ関數(shù)は、パーティション內(nèi)の各行に一意のシーケンシャル番號を割り當て、効率的な重複除去を可能にします。

SQL構(gòu)文：

 as（
    column1、column2を選択します。 
           row_number（）over（column1、column2 order by（select null）by（select null））over（）rn
    Table_nameから
））
CTEから削除します
ここで、rn> 1;

例：

電子メールに基づいて複製のemployeesを削除するには：

 as（
    id、name、email、 
           row_number（）over（idによる電子メール注文によるパーティション）as rnとして
    従業(yè)員から
））
CTEから削除します
ここで、rn> 1;

出力：

テーブルには一意のエントリのみが含まれます。

セルフ結(jié)合を使用して複製を削除します

自己結(jié)合は、複製を識別および削除するための別の効果的な方法を提供します。

SQL構(gòu)文：

 T1を削除します
table_name t1から
Table_name T2に參加します
on t1.column1 = t2.column1
およびt1.column2 = t2.column2
およびt1.id> t2.id;

例：

employeesから複製を削除するには：

 E1を削除します
従業(yè)員E1から
従業(yè)員E2に參加してください
one1.email = e2.email
およびe1.id> e2.id;

出力：

テーブルには一意のエントリのみが含まれます。

一意のレコードを使用して新しいテーブルを作成します

一意のレコードのみを含む新しいテーブルを作成し、元のテーブルを交換することは、堅牢で安全なアプローチです。

SQL構(gòu)文：

テーブルNew_Table ASを作成します
個別に選択します *
old_tableから;

ドロップテーブルold_table;

Table new_tableの変更をold_tableに変更します。

例：

employeesの複製のクリーンアップ：

テーブルemployees_unique asを作成します
個別に選択します *
従業(yè)員から;

テーブルの従業(yè)員をドロップします。

Table Employees_uniqueの変更を従業(yè)員に変更します。

出力：

employeesテーブルには、一意の行のみが含まれています。

重複を防ぐためのベストプラクティス

• データ検証：データ挿入前に検証ルールを?qū)g裝します。
• 一意の制約：関連する列に一意の制約を使用します。
• 定期的な監(jiān)査：定期的なデータチェックを?qū)g施して、精度を維持します。

結(jié)論

データベースのメンテナンスには、効果的な重複管理が不可欠です。説明されている方法ROW_NUMBER() 、セルフジョイン、および新しいテーブルの作成 - これを達成するためのさまざまな方法を提供します。削除操作を?qū)g行する前に、データをバックアップすることを忘れないでください。

よくある質(zhì)問

Q1。 SQLデータベースで行の重複の原因は何ですか？ A.データ入力エラー、インポートの問題、および不適切なデータセットの合併。

Q2。重複排除中の偶発的なデータ損失を避ける方法は？ A.データをバックアップし、SQLクエリを注意深く確認します。

Q3。元のテーブルを変更せずに複製を削除できますか？ A.はい、ユニークなレコードを含む新しいテーブルを作成することによって。

Q4。 ROW_NUMBER() vs。除去が重複しDISTINCT ？ A. ROW_NUMBER()どの行が保持されるかについて、より詳細な制御を提供します。 DISTINCT単純に複製を削除します。

以上がSQLで重複する行を削除する方法は？の詳細內(nèi)容です。詳細については、PHP 中國語 Web サイトの他の関連記事を參照してください。