あとこれ、検査院は本当にわかって指摘してるのかな?

重複してないデータが400万件あるなら、それはもう情報としては別物だろ?
もちろん使い方によっては、やっぱり不要な情報だったてこともあるから、
一概には言えないけどさ。