Python過濾txt文件內重復內容的方法
更新時間：2018年10月21日 15:42:41 作者：Joseph_ChiRunningAnt
今天小編就為大家分享一篇Python過濾txt文件內重復內容的方法，具有很好的參考價值，希望對大家有所幫助。一起跟隨小編過來看看吧
Python過濾txt文件內重復內容，并將過濾后的內容保存到新的txt中
示例如下
原文件
處理之后的文件
直接上代碼
# -*-coding:utf-8 -*-
f = open("1.txt", "rb")
n = f.read()
f.close()
m = n.split("\r\n")
print "m=",m
print m[1]
m1 = []
for i in xrange(len(m)):
if not m[i] in m1:
m1.append(m[i])
print "m1=", m1
filename = open("1.0.txt", "wb")
for i in xrange(len(m1)):
filename.write(m1[i]+"\n")
可看到結果
以上這篇Python過濾txt文件內重復內容的方法就是小編分享給大家的全部內容了，希望能給大家一個參考，也希望大家多多支持腳本之家。
相關文章
Python+threading模塊對單個接口進行并發(fā)測試
這篇文章主要為大家詳細介紹了Python+threading模塊對單個接口進行并發(fā)測試，具有一定的參考價值，感興趣的小伙伴們可以參考一下2019-06-06
這篇文章主要介紹了詳解Python3中的Sequence type的使用,是Python入門學習中的基礎知識,需要的朋友可以參考下2015-08-08
淺談cv2.imread()和keras.preprocessing中的image.load_img()區(qū)別
這篇文章主要介紹了淺談cv2.imread()和keras.preprocessing中的image.load_img()區(qū)別說明，具有很好的參考價值，希望對大家有所幫助。一起跟隨小編過來看看吧2020-06-06
DBSCAN,即Density-Based Spatial Clustering of Applications with Noise,基于密度的噪聲應用空間聚類,本文將詳細介紹DBSCAN算法的原理及其Python實現(xiàn),需要的可以參考下2023-12-12
今天給大家?guī)淼氖顷P于Python的相關知識,文章圍繞著Python文件自動化處理展開,文中有非常詳細的介紹及代碼示例,需要的朋友可以參考下2021-06-06
這篇文章主要介紹了Python中有哪些關鍵字及關鍵字的用法,分享python中常用的關鍵字，本文結合示例代碼給大家介紹的非常詳細，對大家的學習或工作具有一定的參考借鑒價值，需要的朋友可以參考下2023-02-02
python 如何利用argparse解析命令行參數(shù)
這篇文章主要介紹了python 利用argparse解析命令行參數(shù)的步驟，幫助大家更好的理解和學習python，感興趣的朋友可以了解下2020-09-09
關于pytest結合csv模塊實現(xiàn)csv格式的數(shù)據(jù)驅動問題
這篇文章主要介紹了pytest結合csv模塊實現(xiàn)csv格式的數(shù)據(jù)驅動,使用python中的csv模塊來處理csv文件，結合pygtest的參數(shù)化處理方式來實現(xiàn)ddt，本文通過示例代碼給大家介紹的非常詳細，需要的朋友參考下吧2022-05-05
這篇文章主要介紹了Python‘==‘ 及 ‘is‘相關原理解析,文中通過示例代碼介紹的非常詳細，對大家的學習或者工作具有一定的參考學習價值,需要的朋友可以參考下2020-09-09
今天教大家Python圖形界面開發(fā)的相關知識,文章圍繞著如何實現(xiàn)一個小米手機上的秒表計時器功能展開,文中有非常詳細的代碼示例,需要的朋友可以參考下2021-06-06