linux-合并两个没有伪重复的文件

内容导读

互联网集市收集整理的这篇技术教程文章主要介绍了linux-合并两个没有伪重复的文件，小编现在分享给大家，供广大互联网技能从业者学习和参考。文章包含907字，纯文字阅读大概需要2分钟。

内容图文

我有两个文本文件file1.txt和file2.txt,它们都包含这样的单词行：

票价
字
文字编辑
世界末日
担心

和

票价
文本
不道德的
乱七八糟
担心
措辞

或类似的东西.一句话,我指的是字母a-z的后继字母,可能带有重音符号以及符号-.我的问题是,我该如何从满足以下三个条件的这两个文件中,从linux命令行(使用awk,sed等)创建第三个文件output.txt：

>如果两个文件中出现相同的单词,则第三个文件output.txt仅包含一次.
>如果另一个文件中出现单词的连字版本(例如,file2.txt中的fa-re),则在output.txt中仅保留连字符的版本(例如,在我们的示例中,仅保留fa-re ).

因此,output.txt应包含以下单词：

票价
字
文字编辑
世界末日
担心
文本
不道德的

===============编辑========================

我已经修改了文件并给出了输出文件.
我将尝试手动确保没有不同的连字词(例如wod-ed和wo-ded).

解决方法:

另一个awk：

!($1 in a) || $1 ~ "-" { 
    key = value = $1; gsub("-","",key); a[key] = value 
}
END { for (i in a) print a[i] }

$awk -f npr.awk file1.txt file2.txt
text
word-ed
uncial
wor
wo-ded
word
fa-re

内容总结

以上是互联网集市为您收集整理的linux-合并两个没有伪重复的文件全部内容，希望文章能够帮你解决linux-合并两个没有伪重复的文件所遇到的程序开发问题。 如果觉得互联网集市技术教程内容还不错，欢迎将互联网集市网站推荐给程序员好友。

内容备注

版权声明：本文内容由互联网用户自发贡献，该文观点与技术仅代表作者本人。本站仅提供信息存储空间服务，不拥有所有权，不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容， 请发送邮件至 gblab@vip.qq.com 举报，一经查实，本站将立刻删除。

内容手机端

---