重複行削除
テキストの重複行を検出・削除する無料オンラインツール。リストの整理やCSVデータのクリーンアップに便利。
最終更新:
使い方
使い方を開く使い方を閉じる
- 1
テキストを入力
重複を削除したいテキストを入力または貼り付けます
- 2
オプションを設定
必要に応じて大文字小文字の区別を設定します
- 3
結果をコピー
重複が削除されたテキストをコピーして使用します
重複行削除とは
重複行削除ツールは、テキスト内の重複した行を一括で削除するオンラインツールです。最初に出現した行を保持し、2回目以降の重複行を削除します。リストの整理、データのクリーンアップ、ログファイルの重複除去などに便利です。複数の資料やスプレッドシートからデータをコピー＆ペーストで集めると、同じ行が混入しやすくなりますが、このツールに貼り付けるだけで重複を一瞬で取り除けます。大文字小文字の区別を無視するオプションを使えば、「Tokyo」と「tokyo」のような表記揺れによる疑似重複にも対応できます。削除された行数が統計として表示されるため、データの品質状況を確認しながら作業できます。
主な機能
- 重複行の一括削除
- 最初の出現を保持し、以降を削除
- 大文字小文字を無視するオプション
- 削除行数の統計表示
- リアルタイムで結果をプレビュー
こんな場面で役立ちます
- メーリングリストの重複アドレス削除
- CSVファイルの重複行除去
- ログファイルの重複エントリ削除
- 単語リストや用語集の重複除去
- URLリストやブックマークの整理
- 複数ソースからコピーしたコードスニペットやキーワードリストの名寄せ
よくある質問
重複行はどのように判定されますか？
行全体が完全に一致する場合に重複と判定します。空白の数や位置も含めて比較されます。「大文字小文字を無視」オプションを有効にすると、大文字と小文字の違いは無視されます。
どの行が残りますか？
最初に出現した行が残り、2回目以降に出現した同じ行が削除されます。元のテキストの順序は維持されます。
空行も重複として扱われますか？
はい、空行も他の行と同様に扱われます。複数の空行がある場合、最初の空行のみが残り、残りは削除されます。
行末の空白は考慮されますか？
はい、行末の空白も含めて比較されます。同じ内容でも行末に空白があるかないかで別の行として扱われます。
入力したテキストはサーバーに送信されますか？
いいえ、重複行の検出と削除はすべてブラウザ内のJavaScriptで行います。行の比較処理に外部APIは使用せず、ネットワーク通信は発生しません。
前後のスペースが異なる行（例: "apple" と " apple"）は重複扱いになりますか？
デフォルト設定では行末・行頭の空白も含めて比較するため、スペースが異なると別の行として扱われます。前後の空白を無視して比較したい場合は、事前にテキストエディタで一括トリムするか、行をソートして目視確認するとよいでしょう。