pythonmap去重

1. python 中的map（轉載）

1 map()函數的簡介以及語法：

map是python內置函數，會根據提供的函數對指定的序列做映射。

map()函數的格式是：

map(function,iterable,...)

第一個參數接受一個函數名，後面的參數接受一個或多個可迭代的序列，返回的是一個集合。

把函數依次作用在list中的每一個元素上，得到一個新的list並返回。注意，map不改變原list，而是返回一個新list。

2 map()函數實例：

del square(x):

    return x ** 2

map(square,[1,2,3,4,5])   ---- -要列印結果需要 print(*map(square,[1,2,3,4,5])),這塊列印了再列印就會為空

# 結果如下:

[1,4,9,16,25]

通過使用lambda匿名函數的方法使用map()函數：

map(lambda x, y: x+y,[1,3,5,7,9],[2,4,6,8,10])

# 結果如下：

[3,7,11,15,19]

通過lambda函數使返回值是一個元組：

map(lambdax, y : (x**y,x+y),[2,4,6],[3,2,1])

# 結果如下

[(8,5),(16,6),(6,7)]

當不傳入function時，map()就等同於zip()，將多個列表相同位置的元素歸並到一個元組：

map(None,[2,4,6],[3,2,1])

# 結果如下

[(2,3),(4,2),(6,1)]

通過map還可以實現類型轉換

將元組轉換為list：

map(int,(1,2,3))

# 結果如下：

[1,2,3]

將字元串轉換為list：

map(int,'1234')

# 結果如下：

[1,2,3,4]

提取字典中的key，並將結果放在一個list中：

map(int,{1:2,2:3,3:4})

# 結果如下

[1,2,3]

原文鏈接：https://blog.csdn.net/quanlingtu1272/article/details/95482253

2. python123上一道習題刪除列表中重復元素求代碼，或者幫我看看我的代碼怎麼改，初學，我感覺好像要大改

代碼如下，：

import random

m = int(input("m:"))
n = int(input("n:"))
random.seed(m)
randoms = [str(random.randint(0, 9)) for i in range(10)]
sort_randoms = list(set(randoms))
sort_randoms = sorted(sort_randoms, key=int)
print(randoms)
print(sort_randoms)

輸出：

['9', '0', '6', '7', '9', '0', '3', '7', '7', '4']

['0', '3', '4', '6', '7', '9']

3. map函數的用法python

在Python中，map()函數是一種非常有用的函數。它可以接受一個函數參數和一個可迭代升消對象參數，並將該函數應用於可迭代對象中的每個元素。這個函數的返回值是一個新的可迭代對象，其中包含了將該函數應用於原始可迭代對象中每個元素後的結果。
使用map()函數，我們可以輕松地對列表、元組、集合等可迭代對象中的所有元素進行轉換和操作，而無需編寫循環來處理每個元素。這可以大大簡化我們的代碼，提高效率和可讀性。
例如，我們可以使用map()函數來將一個列表中的所有元素轉換為字元串類型：
```
numbers = [1, 2, 3, 4, 5]
numbers_as_strings = list(map(str, numbers))
```
在這個例子中，我們將str函數作為參數傳遞給map()函數，以將列表中的每個元素轉換為字元串。我們還使用了list()函數來將結果轉換回列表類型。
另一個常見的用例是使用map()函數將一個列表中的所有元素進行平方運算：
```
numbers = [1, 2, 3, 4, 5]
squares = list(map(lambda x: x**2, numbers))
```
在這個例子中，我們傳遞了一個lambda函數作為參數給map()函數，以將列表中的每個好笑歲元素進行平方運算。我們還使用了友睜list()函數將結果轉換回列表類型。
總之，map()函數是一個非常有用的函數，可以大大簡化我們的代碼。使用它，我們可以輕松地對可迭代對象中的所有元素進行轉換和操作，而無需編寫循環來處理每個元素。無論是初學者還是經驗豐富的開發人員，都應該掌握這個函數的用法。

4. python 8個常用內置函數解說

8個超好用內置函數set（），eval（），sorted（），reversed（），map（），rece（），filter（），enumerate（）

python中有許多內置函數，不像print那麼廣為人知，但它們卻異常的強大，用好了可以大大提高代碼效率。

這次來梳理下8個好用的python內置函數

1、set()

當需要對一個列表進行去重操作的時候，set()函數就派上用場了。

用於創建一個集合，集合里的元素是無序且不重復的。集合對象創建後，還能使用並集、交集、差集功能。

2、eval()之前有人問如何用python寫一個四則運算器，輸入字元串公式，直接產生結果。用eval()來做就很簡單：eval(str_expression)作用是將字元串轉換成表達式，並且執行。

3、sorted()在處理數據過程中，我們經常會用到排序操作，比如將列表、字典、元組裡面的元素正/倒排序。這時候就需要用到sorted() ，它可以對任何可迭代對象進行排序，並返回列表。對列表升序操作：

對元組倒序操作：

使用參數：key，根據自定義規則，按字元串長度來排序：

根據自定義規則，對元組構成的列表進行排序：

4、reversed()如果需要對序列的元素進行反轉操作，reversed()函數能幫到你。reversed()接受一個序列，將序列里的元素反轉，並最終返回迭代器。

5、map()做文本處理的時候，假如要對序列里的每個單詞進行大寫轉化操作。這個時候就可以使用map()函數。

map()會根據提供的函數，對指定的序列做映射，最終返回迭代器。也就是說map()函數會把序列里的每一個元素用指定的方法加工一遍，最終返回給你加工好的序列。舉個例子，對列表裡的每個數字作平方處理：

6、rece()前面說到對列表裡的每個數字作平方處理，用map()函數。那我想將列表裡的每個元素相乘，該怎麼做呢？這時候用到rece()函數。

rece()會對參數序列中元素進行累積。第一、第二個元素先進行函數操作，生成的結果再和第三個元素進行函數操作，以此類推，最終生成所有元素累積運算的結果。再舉個例子，將字母連接成字元串。

你可能已經注意到，rece()函數在python3里已經不再是內置函數，而是遷移到了functools模塊中。這里把rece()函數拎出來講，是因為它太重要了。

7、filter()一些數字組成的列表，要把其中偶數去掉，該怎麼做呢？

filter()函數輕松完成了任務，它用於過濾序列，過濾掉不符合條件的元素，返回一個迭代器對象。filter()函數和map()、rece()函數類似，都是將序列里的每個元素映射到函數，最終返回結果。我們再試試，如何從許多單詞里挑出包含字母w的單詞。

8、enumerate()這樣一個場景，同時列印出序列里每一個元素和它對應的順序號，我們用enumerate()函數做做看。

enumerate翻譯過來是枚舉、列舉的意思，所以說enumerate()函數用於對序列里的元素進行順序標注，返回(元素、索引)組成的迭代器。再舉個例子說明，對字元串進行標注，返回每個字母和其索引。

5. python爬取的數據如何去重說一下具體的演算法依據

要具體問題具體分析的。看你要抓取什麼數據。
最好能找到一個能夠作為重復性區分的欄位值。比如網路知道的所有提問，每個問題都有一個對應的id，樓主這個問題對應的id就是181730605611341844。那在爬取的過程中，可以將所有已經爬取的問題id保存在一個set()中，如果即將爬取的問題id已經存在了，那就跳過，反之則繼續。
不知道樓主用的是什麼資料庫，在資料庫設計中，也可以添加一些約束條件作為約束，保證數據的唯一性。