ChatGPT处理Excel表格：从数据清洗到自动化报告的技术实现

1次阅读

没有评论

共计 2377 个字符，预计需要花费 6 分钟才能阅读完成。

在日常数据处理工作中，Excel 表格是最常用的工具之一。然而，随着数据量的增加和业务需求的复杂化，手动处理 Excel 表格变得越来越低效且容易出错。开发者经常会遇到以下痛点：

数据清洗耗时：手动删除重复项、填充缺失值、标准化格式等操作消耗大量时间
复杂公式易错：嵌套公式容易出错且难以调试，特别是涉及多表关联时
报告生成繁琐：定期生成相同格式的报告需要重复劳动
数据分析局限：Excel 内置函数难以处理自然语言分析等高级需求

针对这些问题，我们有几种解决方案可以选择：

传统 Excel 公式 /VBA
优点：无需外部依赖，适合简单任务
缺点：学习曲线陡峭（特别是 VBA），难以维护，性能有限
纯 Python+pandas
优点：处理能力强，适合批量化操作
缺点：需要编写大量代码处理复杂逻辑
ChatGPT API+Python
优点：可以处理自然语言查询，适合模糊匹配和语义分析
缺点：有 API 调用成本，需要合理设计 prompt

最优方案是 结合 Python+pandas 进行数据预处理，再使用 OpenAI API 处理复杂逻辑，这样既能发挥各自优势，又能保证处理效率。

首先安装必要的 Python 包：

pip install openai pandas openpyxl

import pandas as pd

# 读取 Excel 文件
df = pd.read_excel('data.xlsx', engine='openpyxl')

# 查看前 5 行数据
print(df.head())

import openai

openai.api_key = 'your-api-key'

def ask_chatgpt(prompt, model="gpt-3.5-turbo"):
    response = openai.ChatCompletion.create(
        model=model,
        messages=[{"role": "user", "content": prompt}]
    )
    return response.choices[0].message.content

# 示例：对客户评论进行情感分析
comments = df['客户反馈'].tolist()

for comment in comments[:5]:  # 先处理前 5 条测试
    prompt = f"""请分析以下客户反馈的情感倾向，只返回' 正面 '、' 中性 '或' 负面 ':
    {comment}
    """
    sentiment = ask_chatgpt(prompt)
    print(f"评论: {comment}\n 情感: {sentiment}\n")

results = []

for index, row in df.iterrows():
    prompt = f"""
    根据以下产品信息生成一段营销文案(50 字以内):
    产品名称: {row['产品名称']}
    价格: {row['价格']}
    特点: {row['产品特点']}
    """

    description = ask_chatgpt(prompt)
    results.append(description)

    # 添加延迟避免触发速率限制
    time.sleep(1)

# 添加结果到 DataFrame 并保存
df['AI 生成文案'] = results
df.to_excel('processed_data.xlsx', index=False)

当处理大型 Excel 文件时，可以采用分块处理策略：

chunk_size = 100  # 每块处理 100 条记录

for i in range(0, len(df), chunk_size):
    chunk = df.iloc[i:i+chunk_size]
    # 处理当前块...
    # 保存中间结果

API 调用可能因网络问题失败，实现自动重试：

import time
from tenacity import retry, stop_after_attempt, wait_exponential

@retry(stop=stop_after_attempt(3), wait=wait_exponential(multiplier=1, min=4, max=10))
def safe_ask_chatgpt(prompt):
    try:
        return ask_chatgpt(prompt)
    except Exception as e:
        print(f"Error: {e}, retrying...")
        raise