Записывать строки в файл без повторов

[Sunday]

Подскажите, как лучше организовать запись в файл, чтобы не было повторов строк?
Скрипт добавляет новые строки и получается много повторов. Их как-то можно исключить во время записи или обрабатывать отдельно уже после записи?

 

[Keegan]

Пара идей:

1. Если файл изначально без повторов - перед добавлением строки проверять, нет ли уже такой строки в файле
2. Перечитывать файл и удалять дубликаты после записи в него

Если нужны конкретные примеры - покажите код, который сейчас пишет в файл.