Cum să citești rând cu rând și să potriviți textul cu rândul următor?

citiți datele fișierelor linie cu linie și potriviți linia cu următoarea linie, dacă se potrivește, salvați acea linie în fișierul uniqe.txt.

Puteți realiza acest lucru cu un simplu pentru buclă

#!/bin/bash

mapfile -t < text.txt
pentru ((a=0,b=1; $b<${#MAPFILE[@]}; a++,b++)); do
     [[ ${MAPFILE[$a]} = ${MAPFILE[$b]} ]] && echo ${MAPFILE[$a]}
terminat > unic.txt

Nu sunt sigur dacă „linii duplicate succesive” este o problemă cheie pentru dvs. Dacă nu, atunci aveți nevoie pur și simplu de comanda Linux uniq pentru a elimina liniile duplicate din fișier cu:

uniq -u inputfile.txt > uniqe.txt

Dacă, totuși, sunteți interesat doar să eliminați duplicatele succesive, puteți utiliza awk:

awk 'NR == 1 {a=$0; imprimare} a!=$0 {a=$0; print}' fișier de intrare > uniqe.txt