同じキーを持つレコードを重複レコードまたは重複データと呼びますが、CSVファイルを読み込んで、重複データを除去したり、重複データ「だけ」を抽出するような処理は、簡単なように見えて、かなり手こずる場合があります。

ここでは、重複データから重複部分を除去して、各レコードごとに単一のキーをもつようにしたり、重複データだけを抽出したり、重複データに特定のマークを付ける処理について説明します。

1. [3-2-1.キーの重複したデータを１つにする]

「キー」項目が重複しているデータについて、重複レコードを取り除くスクリプトについて解説します。

2. [3-2-2.キーの重複したデータだけを出力する]

「キー」項目が重複しているデータについて、重複レコードだけを出力するスクリプトについて解説します。

3. [3-2-3.キーの重複したデータにマークをつけて、出力する]

「キー」項目が重複しているデータについて、重複レコードを示すマークをつけて出力するスクリプトについて解説します。

4. [3-2-4.ハッシュを使って、キーの重複したデータを１つにする]

「キー」項目が重複しているデータについて、ハッシュを使って、重複レコードを取り除くスクリプトについて解説します。

5. [3-2-5.ハッシュを使って、キーの重複したデータだけを出力する]

「キー」項目が重複しているデータについて、ハッシュを使って、重複レコードだけを出力するスクリプトについて解説します。

6. [3-2-6.ハッシュを使って、キーの重複したデータにマークをつけて、出力する]

「キー」項目が重複しているデータについて、ハッシュを使って、重複レコードを示すマークをつけて出力するスクリプトについて解説します。