Python在数据分析中的应用——Pandas库的基础统计分析（结合数据堆叠与清洗）

Pandas统计分析基础数据堆叠+数据清洗

• 一.整合数据：完成全面的数据集。

  • • 1.加载数据
    • 2.依据mete.csv中的日期时间字段对齐两个工作表
    • 3.垂直拼接两个工作表data1和data2
    • 4.通过调用drop_duplicates()方法去除重复记录

• 第二部分讲述如何去除data3中GPP中的异常数据

• 采用3σ原则来识别并剔除这些异常观测值

  • 三.3 对GPP进行神经网络建模

  • • 1.划分数据集

    • • 手动划分
      • 随机划分

    • 数据标准化处理

  • 增加新的一列来存储数据

数据：
链接：https://pan.baidu.com/s/1-E2ShVTdI0X5lwDtMLFFsQ
提取码：0929

一.合并数据：获取完整的数据集。

1.读取数据

    #数据所在的文件
    metepath='./part/mete10-14.csv'
    vipath='./part/vi10-14.csv'
    # 读取数据
    data_mete=pd.read_csv(metepath)
    data_vi=pd.read_csv(vipath)

2.将两个csv文件按照mete.