在好例子网,分享、交流、成长!
您当前所在位置:首页 → Python 开发实例 → 常用Python方法 → 数据质量检查与报告工具:CSV/Excel空值/重复/异常值一键检测、质量评分、导出检查报告

数据质量检查与报告工具:CSV/Excel空值/重复/异常值一键检测、质量评分、导出检查报告

常用Python方法

下载此实例

实例介绍

🖥️ 运行效果

运行效果

🚀 实例简介

一款实用的数据质量检查桌面工具,支持导入CSV/Excel文件,自动检测空值、重复行、异常值(IQR方法),按列分析缺失情况,综合评分(满分100),一键导出TXT格式检查报告。适合数据分析师、Python开发者在数据预处理阶段快速评估数据质量。

💻 核心代码

#!/usr/bin/env python3
# -*- coding: utf-8 -*-
"""数据质量检查与报告工具 - 扫描CSV/Excel,检测空值/重复/异常值,生成评分报告"""
import tkinter as tk
from tkinter import ttk, filedialog, messagebox
import pandas as pd
import numpy as np
from datetime import datetime
import platform, os

FONT = "WenQuanYi Zen Hei" if platform.system() == "Linux" else "Microsoft YaHei"

class App(tk.Tk):
    def __init__(self):
        super().__init__()
        self.title("数据质量检查与报告工具")
        self.geometry("860x640")
        self.configure(bg="#f5f5f5")
        self.df = None
        self.file_path = None
        self.issues = []
        self._build_ui()

    def _build_ui(self):
        F = FONT
        # 标题栏
        tk.Label(self, text="📊 数据质量检查与报告工具", font=(F, 16, "bold"),
                 bg="#1976D2", fg="white", pady=10).pack(fill=tk.X)
        # 文件选择
        ff = tk.LabelFrame(self, text=" 数据文件 ", font=(F, 11), padx=10, pady=8)
        ff.pack(fill=tk.X, padx=12, pady=(8, 4))
        tk.Button(ff, text="📂 选择CSV/Excel文件", font=(F, 11), bg="#4CAF50",
                 fg="white", command=self.load_file).pack(side=tk.LEFT)
        self.file_lbl = tk.Label(ff, text="未选择文件", font=(F, 10), fg="#666")
        self.file_lbl.pack(side=tk.LEFT, padx=12)
        # 结果表格
        rf = tk.LabelFrame(self, text=" 检查结果 ", font=(F, 11), padx=8, pady=8)
        rf.pack(fill=tk.BOTH, expand=True, padx=12, pady=4)
        cols = ("检查项", "问题数量", "占比", "状态")
        self.tree = ttk.Treeview(rf, columns=cols, show="headings", height=10)
        for c in cols:
            self.tree.heading(c, text=c)
            self.tree.column(c, width=160, anchor=tk.CENTER)
        sb = ttk.Scrollbar(rf, orient=tk.VERTICAL, command=self.tree.yview)
        self.tree.configure(yscrollcommand=sb.set)
        self.tree.pack(side=tk.LEFT, fill=tk.BOTH, expand=True)
        sb.pack(side=tk.RIGHT, fill=tk.Y)
        # 评分
        sf = tk.Frame(self, bg="#f5f5f5")
        sf.pack(fill=tk.X, padx=12, pady=4)
        tk.Label(sf, text="数据质量评分:", font=(F, 13, "bold"), bg="#f5f5f5").pack(side=tk.LEFT)
        self.score_lbl = tk.Label(sf, text="-- 未检测", font=(F, 20, "bold"), fg="#999", bg="#f5f5f5")
        self.score_lbl.pack(side=tk.LEFT, padx=10)
        # 按钮
        bf = tk.Frame(self, bg="#f5f5f5")
        bf.pack(fill=tk.X, padx=12, pady=6)
        tk.Button(bf, text="🔍 开始检查", font=(F, 12, "bold"), bg="#2196F3",
                 fg="white", width=14, command=self.check).pack(side=tk.LEFT, padx=6)
        tk.Button(bf, text="📄 导出报告", font=(F, 12, "bold"), bg="#FF9800",
                 fg="white", width=14, command=self.export).pack(side=tk.LEFT, padx=6)
        self.status = tk.Label(self, text="就绪 - 请选择数据文件开始检查", font=(F, 9),
                              bg="#e0e0e0", anchor=tk.W, padx=8)
        self.status.pack(fill=tk.X, side=tk.BOTTOM)

    def load_file(self):
        fp = filedialog.askopenfilename(filetypes=[("数据文件", "*.csv *.xlsx *.xls"), ("所有", "*.*")])
        if not fp: return
        try:
            self.df = pd.read_csv(fp) if fp.endswith('.csv') else pd.read_excel(fp)
            self.file_path = fp
            self.file_lbl.config(text=f"{os.path.basename(fp)}  ({len(self.df)}行×{len(self.df.columns)}列)")
            self.status.config(text=f"✅ 已加载数据:{len(self.df)} 行 × {len(self.df.columns)} 列")
        except Exception as e:
            messagebox.showerror("错误", f"读取失败:{e}")

    def check(self):
        if self.df is None:
            messagebox.showwarning("提示", "请先选择数据文件")
            return
        for i in self.tree.get_children(): self.tree.delete(i)

💡 适用场景

  • 数据分析师在建模前评估数据质量
  • Python开发者做数据预处理
  • 学生练习pandas数据分析
  • 企业数据治理初步筛查

标签:

实例下载地址

数据质量检查与报告工具:CSV/Excel空值/重复/异常值一键检测、质量评分、导出检查报告

不能下载?内容有错? 点击这里报错 + 投诉 + 提问

好例子网口号:伸出你的我的手 — 分享!

网友评论

发表评论

(您的评论需要经过审核才能显示)

查看所有0条评论>>

小贴士

感谢您为本站写下的评论,您的评论对其它用户来说具有重要的参考价值,所以请认真填写。

  • 类似“顶”、“沙发”之类没有营养的文字,对勤劳贡献的楼主来说是令人沮丧的反馈信息。
  • 相信您也不想看到一排文字/表情墙,所以请不要反馈意义不大的重复字符,也请尽量不要纯表情的回复。
  • 提问之前请再仔细看一遍楼主的说明,或许是您遗漏了。
  • 请勿到处挖坑绊人、招贴广告。既占空间让人厌烦,又没人会搭理,于人于己都无利。

关于好例子网

本站旨在为广大IT学习爱好者提供一个非营利性互相学习交流分享平台。本站所有资源都可以被免费获取学习研究。本站资源来自网友分享,对搜索内容的合法性不具有预见性、识别性、控制性,仅供学习研究,请务必在下载后24小时内给予删除,不得用于其他任何用途,否则后果自负。基于互联网的特殊性,平台无法对用户传输的作品、信息、内容的权属或合法性、安全性、合规性、真实性、科学性、完整权、有效性等进行实质审查;无论平台是否已进行审查,用户均应自行承担因其传输的作品、信息、内容而可能或已经产生的侵权或权属纠纷等法律责任。本站所有资源不代表本站的观点或立场,基于网友分享,根据中国法律《信息网络传播权保护条例》第二十二与二十三条之规定,若资源存在侵权或相关问题请联系本站客服人员,点此联系我们。关于更多版权及免责申明参见 版权及免责申明

;
报警