2 yuanzhen licheng yuanzhen_licheng 于 2018.03.13 23:44 提问

python命令删除文本文档中含有特定字符的行

现有TXT文本数据,每个200M左右,近1000个,txt文本内数据格式如下:

Ai15-2 9.531, 9.531

Ai15-3 9.531, 9.531

Ai15-4 9.531, 9.531

Ai15-5 9.531, 9.531

Ai15-6 9.531, 9.531

Ai15-7 6.415, 6.415

Ai15-8 7.556, 7.556

Ai15-9 7.556, 7.556

Ai15-10 7.556, 7.556

Ai15-11 9.706, 9.706

Ai15-12 10.804, 10.804

Ai15-13 10.248, 10.248

Ai15-14 10.248, 10.248

Ai15-15 10.248, 10.248

Ai15-16 9.297, 9.297

Ai15-17 9.297, 9.297

Ai15-18 10.452, 10.452

Ai15-19 10.452, 10.452

Ai15-20 11.535, 11.535

Ai15-21 11.535, 11.535

Ai15-22 11.535, 11.535

Ai15-23 11.535, 11.535

Ai15-24 11.535, 11.535

Ai15-25 11.681, 11.681

Ai15-26 11.681, 11.681

Ai15-27 11.535, 11.535

Ai15-28 12.515, 12.515

Ai15-29 11.535, 11.535

Ai15-30 11.535, 11.535

Ai15-31 11.535, 11.535

Ai15-32 11.535, 11.535

Ai15-33 10.452, 10.452

Ai15-34 10.452, 10.452

Ai15-35 9.297, 9.297

Ai15-36 9.297, 9.297

Ai15-37 9.297, 9.297

Ai15-38 8.521, 8.521

Ai15-39 8.521, 8.521

Ai15-40 5.83, 5.83

Ai15-41 5.83, 5.83

Ai15-42 5.83, 5.83

Ai15-43 5.83, 5.83

Ai15-44 5.753, 5.753

Ai15-45 5.753, 5.753

Ai15-46 3.745, 3.745

Ai15-52 5.995, 5.995

Ai15-53 4.19, 4.19

Ai15-63 6.237, 6.237

Ai15-64 3.846, 3.846

Ai15-73 5.919, 5.919

Ai15-74 7.351, 7.351

Ai15-84 9.18, 9.18

Ai15-91 9.355, 9.355

Ai15-92 10.555, 10.555

Ai15-100 6.097, 6.097

Ai15-101 10.555, 10.555

Ai15-112 9.355, 9.355

Ai15-122 6.097, 6.097

Ai15-127 8.521, 8.521

......
数据中每行含有的数据结构为:
">"+"序号名"+"空格"+"数字"+","+"空格"+"数字"

想用一段python程序,
将数据内数字大小在9.500到12.500之间的行保留,
将数据内数字小于9.500和大于12.500的行删除,
比如,上面的数据,
删除行内"数字"小于"9.500"的行,和行内"数字"大于"12.500"的行后,
剩下的数据为:

Ai15-2 9.531, 9.531

Ai15-3 9.531, 9.531

Ai15-4 9.531, 9.531

Ai15-5 9.531, 9.531

Ai15-6 9.531, 9.531

Ai15-11 9.706, 9.706

Ai15-12 10.804, 10.804

Ai15-13 10.248, 10.248

Ai15-14 10.248, 10.248

Ai15-15 10.248, 10.248

Ai15-18 10.452, 10.452

Ai15-19 10.452, 10.452

Ai15-20 11.535, 11.535

Ai15-21 11.535, 11.535

Ai15-22 11.535, 11.535

Ai15-23 11.535, 11.535

Ai15-24 11.535, 11.535

Ai15-25 11.681, 11.681

Ai15-26 11.681, 11.681

Ai15-27 11.535, 11.535

Ai15-29 11.535, 11.535

Ai15-30 11.535, 11.535

Ai15-31 11.535, 11.535

Ai15-32 11.535, 11.535

Ai15-33 10.452, 10.452

Ai15-34 10.452, 10.452

Ai15-92 10.555, 10.555

Ai15-101 10.555, 10.555

......
最好可以在原来的TXT文件内直接操作;
也可以将删除之后留下的数据存放在新的文件中。

4个回答

weixin_39701039
weixin_39701039   2018.03.14 09:36
已采纳

#coding:utf-8
#python3.5.1

import re

file_path0 = r'G:\任务20180312\test/handle1.txt'

f = open(file_path0)
#读取全部内容
lines = f.readlines() #lines在这里是一个list
#获取行数
nums = len(lines)
#建立一个空列表
rows_get = []
#循环行数
for i in range(nums):
line = lines[i] #line类型为str
#开始用正则得到数字部分,并判断
#给定正则规则
p = r',(.+)' #发现每行取逗号后面部分就行
#编译正则
pattern = re.compile(p)
try:
#查找,用try判断是因为还存在空行
number = re.findall(pattern,line)[0] #这里number类型 str
#去除空格
number = number.strip()
#转换int,便于比较
number = float(number)
#判断数字小于9.500和大于12.500的行删除
if number 12.500:
pass
else:
rows_get.append(i)

except:
    continue

#rows_get使我们所需要的数据
print(rows_get)

#建立空字符串
text = ''
for x in rows_get:
#得到想要的每行数据
row = lines[x]
#叠加
text = text + row

with open(r'G:\任务20180312\test/handle1_get.txt','w') as f:
f.write(text)
下图是出来的结果
图片说明

li_ximin
li_ximin   2018.03.14 10:23
 def func(line):
    if not line.rstrip() : return False                              
    num1=float(line.split(',')[-1])
    num2=float(line.split(',')[0].split(" ")[-1])
    print(num1,"  ",num2,'in the line')
    if  12.500 > num1 > 9.500 and  9.500<num2 <12.500 :return True
    return False
with open("result.txt",'w') as f: 
     f.writelines(list(filter(func,open("txt1.txt"))))
$cat result.txt:
Ai15-2 9.531, 9.531
Ai15-3 9.531, 9.531
Ai15-4 9.531, 9.531
Ai15-5 9.531, 9.531
Ai15-6 9.531, 9.531
Ai15-11 9.706, 9.706
Ai15-12 10.804, 10.804
Ai15-13 10.248, 10.248
Ai15-14 10.248, 10.248
Ai15-15 10.248, 10.248
Ai15-18 10.452, 10.452
Ai15-19 10.452, 10.452
Ai15-20 11.535, 11.535
Ai15-21 11.535, 11.535
Ai15-22 11.535, 11.535
Ai15-23 11.535, 11.535
Ai15-24 11.535, 11.535
Ai15-25 11.681, 11.681
Ai15-26 11.681, 11.681
Ai15-27 11.535, 11.535
Ai15-29 11.535, 11.535
Ai15-30 11.535, 11.535
Ai15-31 11.535, 11.535
Ai15-32 11.535, 11.535
Ai15-33 10.452, 10.452
Ai15-34 10.452, 10.452
Ai15-92 10.555, 10.555
Ai15-101 10.555, 10.555
caozhy
caozhy   2018.03.13 23:49
 f = open("test.txt",'r+')
lines = [line for line in f.readlines() if 你对line的判断 is None]
f.seek(0)
f.truncate(0)
f.writelines(lines)
f.close()
yuanzhen_licheng
yuanzhen_licheng 非常感谢您!
7 个月之前 回复
u011514451
u011514451   2018.03.14 09:34

望采纳

 def chuli(infile,outfile):
    fp = open(infile,'r')
    fout = open(outfile,'w')
    for line in fp.readlines():
        line = line.strip()
        if not line:
            continue
        num1 = float(line.split(' ')[1].split(',')[0])
        num2 = float(line.split(' ')[2])
        if (num1>=9.5 and num1<=12.5) and (num2>=9.5 and num2 <=12.5):
            fout.write('%s\n' % line)
    fp.close()
    fout.close()
if __name__ == '__main__':
    infile = './111.txt'
    outfile = './222.txt'
    chuli(infile,outfile)
yuanzhen_licheng
yuanzhen_licheng 非常感谢您!
7 个月之前 回复
Csdn user default icon
上传中...
上传图片
插入图片
准确详细的回答,更有利于被提问者采纳,从而获得C币。复制、灌水、广告等回答会被删除,是时候展现真正的技术了!
其他相关推荐
Python删除文档中含关键字的行
背景:今天一同事让我帮忙处理一下文件里含有----+符号的行。如图所示:    里面文档好几百行,一行一行去删除,肯定是又浪费时间,又没效率的事情。这时候可以使用Python脚本去处理! 一 设计思路      其实这个很有规律的,它的开头是以“—”开头,先使用readlines方法读取每一行,然后每一行进行正则匹配,匹配成功的行就直接删除! 二 程序代码 #co
Shell 删除指定文件中含有指定字符的行
Shell 删除指定文件中含有指定字符的行,2个参数,脚本中有注释
删除Word中含有指定内容的整行
操作方法: 1、快捷键 Ctrl+H,打开Word的查找替换窗口,单击【更多】按钮,勾选“使用通配符”。 2、在查找内容处,输入“答案*^13”,替换为处什么都不填。 3、单击【全部替换】。 知识扩展: ^13是什么意思? ^13合起来就是回车,因为13这个数在ASCII码是回车符,所以在WORD通过^这个转义符号把变成了回车符。 ...
如何删除文本或excel表格内包含某一字符的所有行
工作和学习中,我们往往需要删除一大段文本或者excel表格内包含某一字符的所有行。ps:如果只要删除所有的特定字符(注意不是删除所有行),那直接替换为空白就行了,不赘述。工具/原料 excel表格方法/步骤1.将需要处理的文本文件内容全部复制到excel表格,如果要处理的是excel文件则忽略这一步骤。 如图所示,把示例文件全部拷贝到excel的A列。2.选中文件所在的列,按Ctrl+F查找,将
python小脚本 删除含有特定字符的txt,并重命名
#-*- coding: UTF-8 -*- import os #删除txt中含有0的项目,并且删除与之对应的image def delete_no_car_picture(): for txtname in labeltxt: #print txtname f = open(labelpath+"/"+txtname) res = f.
Pandas删除某列包含特殊字符的行
1、测试文件(test_data.xlsx)数据如下:  2、删除type列中包含&quot;未知&quot;的所有行 # -*- coding: utf-8 -*- import pandas as pd read_data=pd.read_excel('test_data.xlsx') #读取excel表格数据 print(read_data) read_data=read_data[ ~ rea...
【shell】删除文件中包含指定字符串的行(sed)
删除文件中含特定字符串的行[bash]:sed -e '/abc/d'  a.txt   // 删除a.txt中含&quot;abc&quot;的行,但不改变a.txt文件本身,操作之后的结果在终端显示sed -e '/abc/d'  a.txt  &amp;gt; a.log   // 删除a.txt中含&quot;abc&quot;的行,将操作之后的结果保存到a.logsed '/abc/d;/efg/d' a.txt &amp;gt; a.log...
Python 查找含有特定单个或多个字符的行
1. Match Complete Lines That contain a Word (eg. error) (?im)^.*\berror\b.*$ 2. Match any lines That contain one of multiple words (eg, one, two , three) (?im)^.*\b(one|two|three)\b.*$ 3. Match line
python删除文件中含"指定内容"的行
#!/bin/env python import shutil, sys, os darray = [ "Entering directory", "In function ", "Leaving directory", "__NR_SYSCALL_BASE", "arm-hisiv100-linux-ar ", "arm-hisiv100-linux-gcc ", "but a
pandas.DataFrame中删除包涵特定字符串所在的行
你在使用pandas处理DataFrame中是否遇到过如下这类问题?我们需要删除某一列所有元素中含有固定字符元素所在的行,比如下面的例子:如果要删除的元素固定有更简单的方法,可参考另一篇博文:http://blog.csdn.net/htbeker/article/details/79427628...