Làm cách nào để đọc từng dòng và khớp văn bản với dòng tiếp theo?

đọc từng dòng dữ liệu của tệp và khớp dòng với dòng tiếp theo, nếu khớp thì lưu dòng đó vào tệp uniqe.txt.

Bạn có thể thực hiện điều này với một đơn giản vòng lặp for

#!/bin/bash

mapfile -t < text.txt
for ((a=0,b=1; $b<${#MAPFILE[@]}; a++,b++)); làm
     [[ ${MAPFILE[$a]} = ${MAPFILE[$b]} ]] && echo ${MAPFILE[$a]}
xong > unique.txt

Không chắc liệu "các dòng trùng lặp liên tiếp" có phải là vấn đề chính đối với bạn hay không. Nếu không thì bạn chỉ cần lệnh uniq của Linux để loại bỏ các dòng trùng lặp trong tệp bằng:

uniq -u inputfile.txt > uniqe.txt

Tuy nhiên, nếu bạn chỉ quan tâm đến việc loại bỏ các bản sao liên tiếp, bạn có thể sử dụng awk:

awk 'NR == 1 {a=$0; in} a!=$0 {a=$0; print}' tệp đầu vào > uniqe.txt