重複の除去

Datioは行全体の完全重複を除去します:CSVクリーナーで重複数を確認→重複除去を有効化→実行→元行数と整形後を比較→重複除去CSVを出力。

1. ツール→CSVクリーナーを開きファイルを読み込み。
2. 整形前の重複行数を確認。
3. 重複除去(行全体の完全一致)を有効化して実行。
4. 結果サマリで元と整形後の行数を比較。
5. 重複除去CSVを出力。

• 判定は行全体の完全一致 — 空白違いの類似重複は先にトリムが必要。
• 後にデータプロファイラで重複ゼロを確認。

重複行の定義は?

全セルが完全一致する2行です。1文字でも — 空白1つでも — 異なればトリムまで別行扱いです。

空白違いの類似重複を除くには?

空白トリムと重複除去を同時実行してください。先に正規化すれば詰め物違いだけの行も検出できます。

• CSV & Excelクリーナー →