Python對(duì)list列表結(jié)構(gòu)中的值進(jìn)行去重的方法總結(jié)
今天遇到一個(gè)問(wèn)題，在同事隨意的提示下，用了 itertools.groupby 這個(gè)函數(shù)。不過(guò)這個(gè)東西最終還是沒(méi)用上。
問(wèn)題就是對(duì)一個(gè)list中的新聞id進(jìn)行去重，去重之后要保證順序不變。
直觀方法
最簡(jiǎn)單的思路就是：
ids = [1,2,3,3,4,2,3,4,5,6,1]
news_ids = []
for id in ids:
if id not in news_ids:
news_ids.append(id)
print news_ids
這樣也可行，但是看起來(lái)不夠爽。
用set
另外一個(gè)解決方案就是用set：
ids = [1,4,3,3,4,2,3,4,5,6,1] ids = list(set(ids))
這樣的結(jié)果是沒(méi)有保持原來(lái)的順序。
按照索引再次排序
最后通過(guò)這種方式解決：
ids = [1,4,3,3,4,2,3,4,5,6,1] news_ids = list(set(ids)) news_ids.sort(ids.index)
使用itertools.grouby
文章一開(kāi)始就提到itertools.grouby, 如果不考慮列表順序的話可用這個(gè)：
ids = [1,4,3,3,4,2,3,4,5,6,1] ids.sort() it = itertools.groupby(ids) for k, g in it: print k
關(guān)于itertools.groupby的原理可以看這里：http://docs.python.org/2/library/itertools.html#itertools.groupby
用reduce
網(wǎng)友reatlk留言給了另外的解決方案。我補(bǔ)充并解釋到這里：
In [5]: ids = [1,4,3,3,4,2,3,4,5,6,1] In [6]: func = lambda x,y:x if y in x else x + [y] In [7]: reduce(func, [[], ] + ids) Out[7]: [1, 4, 3, 2, 5, 6]
上面是我在ipython中運(yùn)行的代碼，其中的 lambda x,y:x if y in x else x + [y] 等價(jià)于 lambda x,y: y in x and x or x+[y] 。
思路其實(shí)就是先把ids變?yōu)閇[], 1,4,3,......] ,然后在利用reduce的特性。reduce解釋參看這里：http://docs.python.org/2/library/functions.html#reduce
相關(guān)文章
VLAN(Virtual Local Area Network)，是基于以太網(wǎng)交互技術(shù)構(gòu)建的虛擬網(wǎng)絡(luò)，既可以將同一物理網(wǎng)絡(luò)劃分成多個(gè)VALN，也可以跨越物理網(wǎng)絡(luò)障礙，將不同子網(wǎng)中的用戶(hù)劃到同一個(gè)VLAN中。這篇文章主要介紹了Python黑帽編程 3.4 跨越VLAN 的相關(guān)資料，需要的朋友參考下2016-09-09
使用Django和Postgres進(jìn)行全文搜索的實(shí)例代碼
這篇文章主要介紹了使用Django和Postgres進(jìn)行全文搜索，本文通過(guò)實(shí)例代碼給大家介紹的非常詳細(xì)，具有一定的參考借鑒價(jià)值,需要的朋友可以參考下2020-02-02
Python編程二分法實(shí)現(xiàn)冒泡算法+快速排序代碼示例
這篇文章主要介紹了Python編程二分法實(shí)現(xiàn)冒泡算法+快速排序代碼示例，具有一定借鑒價(jià)值,需要的朋友可以參考下2018-01-01
python實(shí)現(xiàn)百度OCR圖片識(shí)別過(guò)程解析
這篇文章主要介紹了python實(shí)現(xiàn)百度OCR圖片識(shí)別過(guò)程解析,文中通過(guò)示例代碼介紹的非常詳細(xì)，對(duì)大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價(jià)值,需要的朋友可以參考下2020-01-01
舉例講解Python的Tornado框架實(shí)現(xiàn)數(shù)據(jù)可視化的教程
這篇文章主要介紹了舉例講解Python的Tornado框架實(shí)現(xiàn)數(shù)據(jù)可視化的教程,Tornado是一個(gè)異步的高人氣開(kāi)發(fā)框架,需要的朋友可以參考下2015-05-05
配置python的編程環(huán)境之Anaconda + VSCode的教程
這篇文章主要介紹了配置python的編程環(huán)境之Anaconda + VSCode的教程,本文給大家介紹的非常詳細(xì)，對(duì)大家的學(xué)習(xí)或工作具有一定的參考借鑒價(jià)值，需要的朋友可以參考下2020-03-03
Python繪圖操作之turtle庫(kù)烏龜繪圖全面整理
Turtle庫(kù)是Python語(yǔ)言中一個(gè)很流行的繪制圖像的函數(shù)庫(kù)，想象一個(gè)小烏龜，在一個(gè)橫軸為x、縱軸為y的坐標(biāo)系原點(diǎn)，(0,0)位置開(kāi)始，它根據(jù)一組函數(shù)指令的控制，在這個(gè)平面坐標(biāo)系中移動(dòng)，從而在它爬行的路徑上繪制了圖形2021-10-10
在本文里小編給大家總結(jié)的是關(guān)于django創(chuàng)建css文件夾的具體方法，對(duì)此有需要的朋友們參考下吧。2020-07-07
Python 管理依賴(lài)包工具pip, virtualenv詳解
管理依賴(lài)包是Python開(kāi)發(fā)中不可或缺的一部分,通過(guò)pip、virtualenv和pipenv等工具,我們可以有效地管理包和虛擬環(huán)境,確保項(xiàng)目的可移植性和一致性,這篇文章主要介紹了Python 管理依賴(lài)包（pip, virtualenv）,需要的朋友可以參考下2024-07-07
單例模式（Singleton Pattern）是一種常用的軟件設(shè)計(jì)模式，該模式的主要目的是確保 某一個(gè)類(lèi)只有一個(gè)實(shí)例存在.這篇文章主要介紹了單利模式及python實(shí)現(xiàn)方式及Python單例模式的4種實(shí)現(xiàn)方法,需要的朋友可以參考下2018-03-03