Excel数据去重与合并工具：多文件批量加载、智能识别重复行、高亮标记、一键合并导出

🖥️ 运行效果

🚀 实例简介

一款基于 Python + Tkinter 开发的 Excel 数据去重与合并桌面工具。支持批量导入多个 Excel/CSV 文件，智能识别重复行，可按全行匹配或指定列去重，一键导出清洗后的数据。 核心功能： - 多文件批量加载（支持 .xlsx / .xls / .csv） - 智能去重（全行匹配 / 指定列匹配） - 数据预览（Treeview 表格实时展示） - 一键导出为 Excel 文件 - 去重统计（显示原始行数、去重后行数、移除行数）

💻 核心代码

#!/usr/bin/env python3
"""
Excel数据去重与合并工具
功能：多文件批量加载、智能识别重复行、高亮标记、一键合并导出
"""
import tkinter as tk
from tkinter import ttk, filedialog, messagebox
import pandas as pd
import os

CHINESE_FONT = "WenQuanYi Zen Hei"

class ExcelDedupApp:
    def __init__(self, root):
        self.root = root
        self.root.title("Excel数据去重与合并工具")
        self.root.geometry("900x650")
        self.files = []
        self.df_merged = None
        
        # 标题
        tk.Label(root, text="📊 Excel数据去重与合并工具", 
                 font=(CHINESE_FONT, 18, "bold")).pack(pady=10)
        
        # 文件操作区
        frame_file = ttk.LabelFrame(root, text="文件选择", padding=10)
        frame_file.pack(fill="x", padx=10, pady=5)
        
        btn_add = tk.Button(frame_file, text="添加Excel文件", 
                           font=(CHINESE_FONT, 11), command=self.add_files)
        btn_add.pack(side="left", padx=5)
        
        btn_clear = tk.Button(frame_file, text="清空列表", 
                             font=(CHINESE_FONT, 11), command=self.clear_files)
        btn_clear.pack(side="left", padx=5)
        
        self.lbl_count = tk.Label(frame_file, text="已选择 0 个文件", 
                                 font=(CHINESE_FONT, 11))
        self.lbl_count.pack(side="left", padx=20)
        
        # 选项区
        frame_opt = ttk.LabelFrame(root, text="去重选项", padding=10)
        frame_opt.pack(fill="x", padx=10, pady=5)
        
        self.var_subset = tk.BooleanVar(value=False)
        tk.Checkbutton(frame_opt, text="仅按指定列去重（留空则全行匹配）", 
                      font=(CHINESE_FONT, 11), variable=self.var_subset).pack(anchor="w")
        
        tk.Label(frame_opt, text="指定列名（逗号分隔）：", 
                font=(CHINESE_FONT, 11)).pack(side="left", padx=5)
        self.ent_cols = tk.Entry(frame_opt, width=30, font=(CHINESE_FONT, 11))
        self.ent_cols.pack(side="left", padx=5)
        
        # 操作按钮
        frame_btn = tk.Frame(root)
        frame_btn.pack(fill="x", padx=10, pady=10)
        
        tk.Button(frame_btn, text="🔍 加载并分析", font=(CHINESE_FONT, 12, "bold"),
                 bg="#4CAF50", fg="white", command=self.analyze).pack(side="left", padx=5)
        
        tk.Button(frame_btn, text="🗑️ 去重并导出", font=(CHINESE_FONT, 12, "bold"),
                 bg="#2196F3", fg="white", command=self.export).pack(side="left", padx=5)
        
        # 结果显示
        self.tree = ttk.Treeview(root, show="headings", height=15)
        self.tree.pack(fill="both", expand=True, padx=10, pady=5)
        
        self.lbl_status = tk.Label(root, text="就绪", font=(CHINESE_FONT, 10), 
                                  fg="gray", anchor="w")
        self.lbl_status.pack(fill="x", padx=10, pady=5)
    
    def add_files(self):
        paths = filedialog.askopenfilenames(
            title="选择Excel文件",
            filetypes=[("Excel文件", "*.xlsx *.xls *.csv")]
        )
        for p in paths:
            if p not in self.files:
                self.files.append(p)
        self.lbl_count.config(text=f"已选择 {len(self.files)} 个文件")

💡 适用场景

办公自动化、数据分析、快速原型开发