Как удалить повторяющиеся строки

[magiklove1 7]

Приветствую! Если txt файл, в нем 80 000 строк. Не все строки уникальные, и это нормально. Допускается не более 4х повторений одной строки. Но проблема в том, что некоторые строки повторяются 20 раз. Задача: удалить все повторения, которых больше 4х. Как это сделать?

[serzh82 78]

15 минут назад, magiklove1 сказал:

Приветствую! Если txt файл, в нем 80 000 строк. Не все строки уникальные, и это нормально. Допускается не более 4х повторений одной строки. Но проблема в том, что некоторые строки повторяются 20 раз. Задача: удалить все повторения, которых больше 4х. Как это сделать?

Если, можно, чтобы все строки были уникальные, то можно в exel убрать все дубликаты (Данные-Удалить дубликаты)

[magiklove1 7]

2 минуты назад, serzh82 сказал:

Если, можно, чтобы все строки были уникальные, то можно в exel убрать все дубликаты (Данные-Удалить дубликаты)

Строки должны повторяться, но не более 4х раз

[c00x 33]

$in = fopen( 'input.txt', 'r' );
if ( $in ) {
    $arr = array();
    while ( ($line = fgets( $in )) !== false ) {
	$arr[$line][] = trim($line);
    }
    fclose( $in );
    $out = fopen( 'output.txt', 'a' );
    foreach ( $arr as &$value ) {
	if ( count( $value ) > 4 ) {
	    $value = array_slice( $value, 0, 4 );
	}
	foreach ( $value as $data ) {
	    $data .= PHP_EOL;
	    fwrite( $out, $data );
	}
    }
    fclose( $out );
}

PHP-говнокод на скорую руку.

Только вывод будет сгруппирован по строкам.

P.S. код не тестировал.