python文本刪除特定行

㈠ python 刪除多個文本里的指定行

代碼基於python 2.6。功能已寫成函數，用的簡單語法，很好懂。
新文件文件名自動附加"_back"。不懂再問。

import os, time

def readKeys(fileName):
keys = []
f = open(fileName, "r")
while True:
line = f.readline()
if not line:
break
key = line.strip()
if key: keys.append(key)
f.close()
return keys

def processKeys(editFileName, backFileName, keys):
f = open(editFileName, "r")
lines = f.readlines()
f.close()

editLines = []
backLines = []

for line in lines:
found = False
for key in keys:
if line.startswith(key):
backLines.append(line)
found = True
break
if not found:
editLines.append(line)

if backLines:
f = open(editFileName, "w")
f.writelines(editLines)
f.close()
f = open(backFileName, "w")
f.writelines(backLines)
print 'modify',editFileName,'save',backFileName

if __name__ == '__main__':
keys = readKeys("0.txt")
fileList = ["1.txt", "2.txt", "3.txt", "4.txt", "5.txt"]
while True:
for fileName in fileList:
base, ext = os.path.splitext(fileName)
processKeys(fileName, base + "_back" + ext, keys)
print 'sleep 30 seconds'
time.sleep(30)

㈡ pandas python 怎麼刪除表格中的某一行

某列中所有的數據都是1，加起來不就是總行數嗎？引言本文的目的，是向您展示如何使用pandas來執行一些常見的Excel任務。有些例子比較瑣碎，但我覺得展示這些簡單的東西與那些你可以在其他地方找到的復雜功能同等重要。作為額外的福利，我將會進行一些模糊字元串匹配，以此來展示一些小花樣，以及展示pandas是如何利用完整的Python模塊系統去做一些在Python中是簡單，但在Excel中卻很復雜的事情的。有道理吧？讓我們開始吧。為某行添加求和項我要介紹的第一項任務是把某幾列相加然後添加一個總和欄。首先我們將excel數據導入到pandas數據框架中。=pd.read_excel("excel-comp-data.xlsx")df.head()我們想要添加一個總和欄來顯示Jan、Feb和Mar三個月的銷售總額。在Excel和pandas中這都是簡單直接的。對於Excel，我在J列中添加了公式sum(G2:I2)。在Excel中看上去是這樣的：下面，我們是這樣在pandas中操作的：df["total"]=df["Jan"]+df["Feb"]+df["Mar"]df.head()接下來，讓我們對各列計算一些匯總信息以及其他值。如下Excel表所示，我們要做這些工作：如你所見，我們在表示月份的列的第17行添加了SUM(G2:G16)，來取得每月的總和。進行在pandas中進行列級別的分析很簡單。下面是一些例子：df["Jan"].sum(),df["Jan"].mean(),df["Jan"].min(),df["Jan"].max()(1462000,97466.666666666672,10000,162000)現在我們要把每月的總和相加得到它們的和。這里pandas和Excel有點不同。在Excel的單元格里把每個月的總和相加很簡單。由於pandas需要維護整個DataFrame的完整性，所以需要一些額外的步驟。首先，建立所有列的總和欄sum_row=df[["Jan","Feb","Mar","total"]].sum()sum_:int64這很符合直覺，不過如果你希望將總和值顯示為表格中的單獨一行，你還需要做一些微調。我們需要把數據進行變換，把這一系列數字轉換為DataFrame，這樣才能更加容易的把它合並進已經存在的數據中。T函數可以讓我們把按行排列的數據變換為按列排列。df_sum=pd.DataFrame(data=sum_row).Tdf_sum在計算總和之前我們要做的最後一件事情是添加丟失的列。我們使用reindex來幫助我們完成。技巧是添加全部的列然後讓pandas去添加所有缺失的數據。df_sum=df_sum.reindex(columns=df.columns)df_sum現在我們已經有了一個格式良好的DataFrame，我們可以使用append來把它加入到已有的內容中。df_final=df.append(df_sum,ignore_index=True)df_final.tail()額外的數據變換另外一個例子，讓我們嘗試給數據集添加狀態的縮寫。對於Excel，最簡單的方式是添加一個新的列，對州名使用vlookup函數並填充縮寫欄。我進行了這樣的操作，下面是其結果的截圖：你可以注意到，在進行了vlookup後，有一些數值並沒有被正確的取得。這是因為我們拼錯了一些州的名字。在Excel中處理這一問題是一個巨大的挑戰（對於大型數據集而言）幸運的是，使用pandas我們可以利用強大的python生態系統。考慮如何解決這類麻煩的數據問題，我考慮進行一些模糊文本匹配來決定正確的值。幸運的是其他人已經做了很多這方面的工作。fuzzywuzzy庫包含一些非常有用的函數來解決這類問題。首先要確保你安裝了他。我們需要的另外一段代碼是州名與其縮寫的映射表。而不是親自去輸入它們，谷歌一下你就能找到這段代碼code。首先導入合適的fuzzywuzzy函數並且定義我們的州名映射表。_to_code={"VERMONT":"VT","GEORGIA":"GA","IOWA":"IA","ArmedForcesPacific":"AP","GUAM":"GU","KANSAS":"KS","FLORIDA":"FL","AMERICANSAMOA":"AS","NORTHCAROLINA":"NC","HAWAII":"HI","NEWYORK":"NY","CALIFORNIA":"CA","ALABAMA":"AL","IDAHO":"ID","FEDERATEDSTATESOFMICRONESIA":"FM","ArmedForcesAmericas":"AA","DELAWARE":"DE","ALASKA":"AK","ILLINOIS":"IL","ArmedForcesAfrica":"AE","SOUTHDAKOTA":"SD","CONNECTICUT":"CT","MONTANA":"MT","MASSACHUSETTS":"MA","PUERTORICO":"PR","ArmedForcesCanada":"AE","NEWHAMPSHIRE":"NH","MARYLAND":"MD","NEWMEXICO":"NM","MISSISSIPPI":"MS","TENNESSEE":"TN","PALAU":"PW","COLORADO":"CO","ArmedForcesMiddleEast":"AE","NEWJERSEY":"NJ","UTAH":"UT","MICHIGAN":"MI","WESTVIRGINIA":"WV","WASHINGTON":"WA","MINNESOTA":"MN","OREGON":"OR","VIRGINIA":"VA","VIRGINISLANDS":"VI","MARSHALLISLANDS":"MH","WYOMING":"WY","OHIO":"OH","SOUTHCAROLINA":"SC","INDIANA":"IN","NEVADA":"NV","LOUISIANA":"LA","NORTHERNMARIANAISLANDS":"MP","NEBRASKA":"NE","ARIZONA":"AZ","WISCONSIN":"WI","NORTHDAKOTA":"ND","ArmedForcesEurope":"AE","PENNSYLVANIA":"PA","OKLAHOMA":"OK","KENTUCKY":"KY","RHODEISLAND":"RI","DISTRICTOFCOLUMBIA":"DC","ARKANSAS":"AR","MISSOURI":"MO","TEXAS":"TX","MAINE":"ME"}這里有些介紹模糊文本匹配函數如何工作的例子。process.extractOne("Minnesotta",choices=state_to_code.keys())('MINNESOTA',95)process.extractOne("AlaBAMMazzz",choices=state_to_code.keys(),score_cutoff=80)現在我知道它是如何工作的了，我們創建自己的函數來接受州名這一列的數據然後把他轉換為一個有效的縮寫。這里我們使用score_cutoff的值為80。你可以做一些調整，看看哪個值對你的數據來說比較好。你會注意到，返回值要麼是一個有效的縮寫，要麼是一個np.nan所以域中會有一些有效的值。defconvert_state(row):abbrev=process.extractOne(row["state"],choices=state_to_code.keys(),score_cutoff=80)ifabbrev:returnstate_to_code[abbrev[0]]returnnp.nan把這列添加到我們想要填充的單元格，然後用NaN填充它df_final.insert(6,"abbrev",np.nan)df_final.head()我們使用apply來把縮寫添加到合適的列中。df_final['abbrev']=df_final.apply(convert_state,axis=1)df_final.tail()我覺的這很酷。我們已經開發出了一個非常簡單的流程來智能的清理數據。顯然，當你只有15行左右數據的時候這沒什麼了不起的。但是如果是15000行呢？在Excel中你就必須進行一些人工清理了。分類匯總在本文的最後一節中，讓我們按州來做一些分類匯總（subtotal）。在Excel中，我們會用subtotal工具來完成。輸出如下：在pandas中創建分類匯總，是使用groupby來完成的。df_sub=df_final[["abbrev","Jan","Feb","Mar","total"]].groupby('abbrev').sum()df_sub然後，我們想要通過對dataframe中所有的值使用applymap來把數據單位格式化為貨幣。defmoney(x):return"${:,.0f}".format(x)formatted_df=df_sub.applymap(money)formatted_df格式化看上去進行的很順利，現在我們可以像之前那樣獲取總和了。sum_row=df_sub[["Jan","Feb","Mar","total"]].sum()sum_:int64把值變換為列然後進行格式化。df_sub_sum=pd.DataFrame(data=sum_row).Tdf_sub_sum=df_sub_sum.applymap(money)df_sub_sum最後，把總和添加到DataFrame中。final_table=formatted_df.append(df_sub_sum)final_table你可以注意到總和行的索引號是『0'。我們想要使用rename來重命名它。final_table=final_table.rename(index={0:"Total"})final_table結論到目前為止，大部分人都已經知道使用pandas可以對數據做很多復雜的操作——就如同Excel一樣。因為我一直在學習pandas，但我發現我還是會嘗試記憶我是如何在Excel中完成這些操作的而不是在pandas中。我意識到把它倆作對比似乎不是很公平——它們是完全不同的工具。但是，我希望能接觸到哪些了解Excel並且想要學習一些可以滿足分析他們數據需求的其他替代工具的那些人。我希望這些例子可以幫助到其他人，讓他們有信心認為他們可以使用pandas來替換他們零碎復雜的Excel，進行數據操作。

㈢ python如何刪除含有某個字元的行

#!/usr/bin/python
# -*- coding:utf-8 -*-
import re
import os
file1 = open('test.txt','r+')
new_file = 'new_test.txt'

if not os.path.exists(new_file):
os.system(r"touch {}".format(new_file))
file2 = open('new_test.txt','r+')
istxt = re.compile(r'.*if.*',re.I)
for line in file1.readlines():
line = line.strip()
ifstr = re.findall(istxt,line)
if ifstr:
line = []
else:
file2.write(line + '\n')

file1.close()
file2.close()
#重命名文件
os.rename("new_test.txt","test.txt")

㈣ python中怎麼刪除文件中指定的行

刪除文件的某一行，可以跳過你要刪除的行進行讀寫，如：

1
2
3
4

data = open(filename, 'rt').readlines()
with open(filename, 'wt') as handle:
handle.writelines(data[:tobedeleted])
handle.writelines(data[tobedeleted+1:])

其中data是逐行讀取文件,

handle.writelines進行讀寫，跳過tobedeleted行

㈤ python怎麼刪除txt文本裡面的第一行

1、打開JUPYTER NOTEBOOK，新建一個PYTHON文檔。

㈥ python遍歷文本並刪除特定內容

按 指定行數 分頁讀取好處理：

defiterpage(istream,pagesize):
buffer=[]
fordatainistream:
buffer.append(data)
iflen(buffer)>=pagesize:
yieldbuffer
buffer=[]
ifbuffer:
yieldbuffer

withopen("source.txt",'rt')ashandle:
forpageiniterpage(handle,1000):
printpage#oryourbusinesslogical
print"-"*32#pagebreak

刪除文本文件的前N行：

defremovehead(filename,headlines):
buffer=[]
withopen(filename,'rt')ashandle:
fori,lninenumerate(handle):
ifln<headlines:
continue
buffer.append(ln)

withopen(filename,'wt')ashandle:
handle.writelines(buffer)

或者：

defgetandremovehead(filename,headlines):
withopen(filename,'rt')ashandle:
buffer=handle.readlines()
withopen(filename,'wt')ashandle:
handle.writelines(buffer[headlines:])
returnbuffer[:headlines]

但遇到大文本文件時，刪除其中N行不是很理想的業務方案