Python处理文本文件中控制字符的方法

控制字符

控制字符（Control Character），或者说非打印字符，出现于特定的信息文本中，表示某一控制功能的字符，如控制符：LF（换行）、CR（回车）、FF（换页）、DEL（删除）、BS（退格)、BEL（振铃）等；通讯专用字符：SOH（文头）、EOT（文尾）、ACK（确认）等。

具体控制字符一共有下面两个集合：

七位ASCII定义了33个代码作为控制字符，它们是0到31、以及127，（位于0x00-0x1F及0x7F）。

兼容的八位ISO/IEC 8859-1加上了从ISO/IEC 6429定义的从128到159的32个代码，位于0x80-0x9F。

控制字符列表：http://ascii-table.com/control-chars.php

Python解决控制字符的方案：（未一一验证）

方案一：

strip_control_characters = lambda s:"".join(i for i in s if 31<ord(i)<127)

方案二：

def strip_control_characters(str_input): 
 if str_input: 
 import re 
 # unicode invalid characters 
 RE_XML_ILLEGAL = u'([\u0000-\u0008\u000b-\u000c\u000e-\u001f\ufffe-\uffff])' + \
   u'|' + \
   u'([%s-%s][^%s-%s])|([^%s-%s][%s-%s])|([%s-%s]$)|(^[%s-%s])' % \
   (unichr(0xd800),unichr(0xdbff),unichr(0xdc00),unichr(0xdfff), 
    unichr(0xd800),unichr(0xdbff),unichr(0xdc00),unichr(0xdfff), 
    unichr(0xd800),unichr(0xdbff),unichr(0xdc00),unichr(0xdfff), 
    ) 
 str_input = re.sub(RE_XML_ILLEGAL, "", input) 
 # ascii control characters 
 str_input = re.sub(r"[\x01-\x1F\x7F]", "", input) 
 return str_input

方案三：

import re
 
def remove_control_chars(s):
 control_chars = ''.join(map(unichr, range(0,32) + range(127,160)))
 control_char_re = re.compile('[%s]' % re.escape(control_chars))
 
 return control_char_re.sub('', s)
 
cleaned_json = remove_control_chars(original_json)
obj = simplejson.loads(cleaned_json)

总结

以上就是这篇文章的全部内容了，希望本文的内容对大家学习或者使用python能带来一定的帮助，如果有疑问大家可以留言交流。

# python  # 文本文件  # 读取文本字符  # 控制字符  # Python使用email模块对邮件进行编码和解码的实例教程  # Python简单实现Base64编码和解码的方法  # Python中json格式数据的编码与解码方法详解  # Python base64编码解码实例  # 对python中url参数编码与解码的实例详解  # 详解Python中的文本处理  # Python文本处理之按行处理大文件的方法  # Python实现简单文本字符串处理的方法  # python处理文本文件并生成指定格式的文件  # Python编解码问题及文本文件处理方法详解  # 上了  # 这篇文章  # 或者说  # 七位  # 换行  # 换页  # 有疑问  # x7F  # IEC  # ISO  # php  # chars 

相关文章： 如何在Golang中处理模块冲突_解决依赖版本不兼容问题  c# Task.Yield 的作用是什么 它和Task.Delay(1)有区别吗  制作网站怎么制作,*游戏网站怎么搭建？  音响网站制作视频教程,隆霸音响官方网站？  网站海报制作教学视频教程,有什么免费的高清可商用图片网站，用于海报设计？  建站之星安装需要哪些步骤及注意事项？  如何访问已购建站主机并解决登录问题？  如何做静态网页,sublimetext3.0制作静态网页？  如何用免费手机建站系统零基础打造专业网站？  网站制作哪家好,cc、.co、.cm哪个域名更适合做网站？  如何选择高效稳定的ISP建站解决方案？  利用JavaScript实现拖拽改变元素大小  如何通过NAT技术实现内网高效建站？  武汉网站设计制作公司,武汉有哪些比较大的同城网站或论坛，就是里面都是武汉人的？  建站之星如何优化SEO以实现高效排名？  如何用wdcp快速搭建高效网站？  沈阳制作网站公司排名,沈阳装饰协会官方网站？  香港服务器租用费用高吗？如何避免常见误区？  建站主机选哪种环境更利于SEO优化？  建站主机无法访问？如何排查域名与服务器问题  官网建站费用明细查询_企业建站套餐价格及收费标准指南  网站制作怎么样才能赚钱,用自己的电脑做服务器架设网站有什么利弊，能赚钱吗？  ,柠檬视频怎样兑换vip？  寿县云建站：智能SEO优化与多行业模板快速上线指南  在线ppt制作网站有哪些,请推荐几个好的课件下载的网站？  建站之星ASP如何实现CMS高效搭建与安全管理？  在线教育网站制作平台,山西立德教育官网？  网站规划与制作是什么,电子商务网站系统规划的内容及步骤是什么？  怎么制作网站设计模板图片,有电商商品详情页面的免费模板素材网站推荐吗？  已有域名如何快速搭建专属网站？  如何实现建站之星域名转发设置？  建站之星IIS配置教程：代码生成技巧与站点搭建指南  如何通过西部数码建站助手快速创建专业网站？  非常酷的网站设计制作软件,酷培ai教育官方网站？  ,交易猫的商品怎么发布到网站上去？  北京专业网站制作设计师招聘,北京白云观官方网站？  全景视频制作网站有哪些,全景图怎么做成网页？  宁波免费建站如何选择可靠模板与平台？  建站之星如何助力企业快速打造五合一网站？  如何确认建站备案号应放置的具体位置？  深圳企业网站制作设计,在深圳如何网上全流程注册公司？  兔展官网 在线制作,怎样制作微信请帖？  如何用PHP快速搭建CMS系统？  建站之星如何助力网站排名飙升？揭秘高效技巧  学校为何禁止电信移动建设网站？  建站之星备案流程有哪些注意事项？  建站之星导航菜单设置与功能模块配置全攻略  网站网页制作专业公司,怎样制作自己的网页？  专业企业网站设计制作公司,如何理解商贸企业的统一配送和分销网络建设？  太原网站制作公司有哪些,网约车营运证查询官网？