Python实现字典去除重复的方法示例

本文实例讲述了Python实现字典去除重复的方法。分享给大家供大家参考，具体如下：

#!/usr/bin/env python
# encoding: utf-8
#字典去重小代码
import sys
import os
import platform
try:
  pass 
except:
  print '''you have something wrong this is a simple jiaoben '''
  sys.exit()
why = 'why.txt'
for i in xrange(len(sys.argv)):
  if(i>=1):
    other = sys.argv[i]
    if os.path.exists(other):
      pass
    else:
      print other + ' file not find'
      sys.exit()
    if 'Windows' in platform.system():
      os.system("type "+other+" >> "+why)
    else:
      os.system("cat "+other+" >> "+why)
yuan = open('why.txt','r')
dirc = open('whynot.txt','w')
for line in set(yuan.readlines()):
  if line == '' or line == '\r\n':
    pass
  else:
    dirc.writelines(line)

很简单的思路 把文件放入到why.txt中 然后再去重得到whynot.txt
Usage: quchong.py 1.txt 2.txt 3.txt 等等

PS：本站还有两款比较简单实用的在线文本去重复工具，推荐给大家使用：

在线去除重复项工具：
http://tools./code/quchong

在线文本去重复工具：
http://tools./aideddesign/txt_quchong

更多关于Python相关内容可查看本站专题：《Python字典操作技巧汇总》、《Python字符串操作技巧汇总》、《Python常用遍历技巧总结》、《Python数据结构与算法教程》、《Python函数使用技巧总结》及《Python入门与进阶经典教程》

希望本文所述对大家Python程序设计有所帮助。

# Python  # 字典  # 去除重复  # Python合并字典键值并去除重复元素的实例  # Python 字符串去除空格的五种方法  # Python去除、替换字符串空格的处理方法  # Python去除字符串两端空格的方法  # python去除文件中空格、Tab及回车的方法  # Python去除字符串前后空格的几种方法  # Python切片操作去除字符串首尾的空格  # Python 5种常见字符串去除空格操作的方法  # Python去除字典键中空格的多种方法  # 进阶  # 操作技巧  # 相关内容  # 遍历  # 数据结构  # 给大家  # 很简单  # 推荐给  # 再去  # 两款  # 更多关于  # 所述  # 程序设计  # 使用技巧  # 讲述了  # print  # wrong  # simple  # pass  # sys 

相关文章： 南平网站制作公司,2025年南平市事业单位报名时间？  javascript基本数据类型及类型检测常用方法小结  Bpmn 2.0的XML文件怎么画流程图  常州企业网站制作公司,全国继续教育网怎么登录？  品牌网站制作公司有哪些,买正品品牌一般去哪个网站买？  常州自助建站：操作简便模板丰富，企业个人快速搭建网站  桂林网站制作公司有哪些,桂林马拉松怎么报名？  微课制作网站有哪些,微课网怎么进？  详解一款开源免费的.NET文档操作组件DocX（.NET组件介绍之一）  如何实现建站之星域名转发设置？  西安大型网站制作公司,西安招聘网站最好的是哪个？  如何高效配置IIS服务器搭建网站？  北京制作网站的公司排名,北京三快科技有限公司是做什么？北京三快科技？  如何通过智能用户系统一键生成高效建站方案？  油猴 教程,油猴搜脚本为什么会网页无法显示？  如何在阿里云通过域名搭建网站？  如何在腾讯云免费申请建站？  清除minerd进程的简单方法  可靠的网站设计制作软件,做网站设计需要什么样的电脑配置？  建站主机空间推荐 高性价比配置与快速部署方案解析  建站之星3.0如何解决常见操作问题？  制作农业网站的软件,比较好的农业网站推荐一下？  SAX解析器是什么，它与DOM在处理大型XML文件时有何不同？  已有域名如何免费搭建网站？  深圳网站制作平台,深圳市做网站好的公司有哪些？  如何基于云服务器快速搭建网站及云盘系统？  建站主机系统SEO优化与智能配置核心关键词操作指南  已有域名建站全流程解析：网站搭建步骤与建站工具选择  国美网站制作流程,国美电器蒸汽鍋怎么用官方网站？  如何生成腾讯云建站专用兑换码？  如何快速搭建高效可靠的建站解决方案？  建站主机选哪种环境更利于SEO优化？  如何通过FTP服务器快速搭建网站？  建站之星价格显示格式升级，你的预算足够吗？  如何快速登录WAP自助建站平台？  建站之星如何一键生成手机站？  如何在Ubuntu系统下快速搭建WordPress个人网站？  小捣蛋自助建站系统：数据分析与安全设置双核驱动网站优化  logo在线制作免费网站在线制作好吗,DW网页制作时，如何在网页标题前加上logo？  网站制作公司广州有几家,广州尚艺美发学校网站是多少？  学校免费自助建站系统：智能生成+拖拽设计+多端适配  图片制作网站免费软件,有没有免费的网站或软件可以将图片批量转为A4大小的pdf？  如何规划企业建站流程的关键步骤？  如何用已有域名快速搭建网站？  如何破解联通资金短缺导致的基站建设难题？  东莞市网站制作公司有哪些,东莞找工作用什么网站好？  建站之星安装后如何配置SEO及设计样式？  北京专业网站制作设计师招聘,北京白云观官方网站？  如何通过服务器快速搭建网站？完整步骤解析  如何在阿里云虚拟主机上快速搭建个人网站？