Question

如何使用shell提取多个文本中相同的内容

有一批txt文本文件，内容全是多组数字，如何比对这批文本文件，通过shell或者其他手段从中提取出同时出现在文本文件中的数字？请提供具体的解决方案！有加送分

Answer 1

问题太笼统，只能有个大致思路，按如下步骤：

1. 使用类似下面的语句将所有文件整合为一个，排序去重后统计出一个最全数字合集。

   cat file1 file2 file3 ... | sort | uniq >dataset

2. 分别统计合集中的所有数字在各文件中出现的次数

   for file in file1 file2 file3 ...
   do
       # 分别统计dataset中每个数字在各个文件中出现的次数
       # 结果以“数字 次数1 次数2 次数3 ...”的形式存入一个文件statistic
   done

3. 使用awk分析statistic文件，提取所有次数均>0的数字。

   awk 'BEGIN{flag=1}{for(i=2;i<=NF;i++){if($i==0) flag=0} if(flag==1) print $1}' statistic >result

4. 最后删除中间文件dataset和statistic，只保留最终结果文件result.
   

 

要具体咨询建议加我百度hi交流或直接追问。

Answer 2

到网上下个jeffy-vim安装好，然后使用split或vsplit 文件.txt 命令来打开多个文本，进行比对

Answer 3

你如果问得详细点，比如把文件内容贴一部分出来，我肯定可以帮你。

但是象你这样问问题，没人能回答。