CentOS Python数据分析如何操作

发布时间:2025-09-20 09:14:03

阅读量:41

CentOS环境下开展Python数据分析的操作流程

1. 系统准备与基础工具安装

在开始前，需确保CentOS系统为最新状态，避免因系统版本过旧导致兼容性问题：

sudo yum update -y  # 更新所有系统包

安装Python 3（CentOS 7及以上默认包含Python 3，若未安装可通过以下命令安装）：

sudo yum install python3 -y

安装pip（Python包管理工具，用于后续安装数据分析库）：

sudo yum install python3-pip -y

2. 安装数据分析核心库

数据分析需依赖以下常用库，可通过pip批量安装：

pip3 install numpy pandas matplotlib seaborn scikit-learn

NumPy：提供高效的多维数组运算，是数值计算的基础；
Pandas：用于数据清洗、整理与探索性分析（EDA）；
Matplotlib/Seaborn：数据可视化工具（Matplotlib为基础，Seaborn提供更美观的统计图表）；
Scikit-learn：机器学习算法库，支持分类、回归、聚类等任务。

3. 配置虚拟环境（可选但推荐）

为避免不同项目间的依赖冲突，建议使用虚拟环境隔离项目环境：

# 创建虚拟环境（以“data_analysis”为例）
python3 -m venv data_analysis  
# 激活虚拟环境
source data_analysis/bin/activate

激活后，后续安装的库将仅在该环境中生效，不影响系统全局Python环境。

4. 安装Jupyter Notebook（可选但推荐）

Jupyter Notebook是交互式数据分析的利器，支持代码、文本与可视化结果混合展示：

pip3 install notebook

启动Jupyter Notebook：

jupyter notebook

终端会显示访问链接（如http://localhost:8888），在浏览器中打开即可开始交互式数据分析。

5. 数据处理与分析示例

以下是一个完整的数据分析流程示例，涵盖数据导入、清洗、分析与可视化：

5.1 数据导入

使用Pandas读取CSV文件（假设存在data.csv文件）：

import pandas as pd
data = pd.read_csv('data.csv')  # 读取数据
print(data.head())  # 查看前5行数据

5.2 数据清洗

处理缺失值与异常值（如用0填充缺失值）：

print(data.isnull().sum())  # 检查各列缺失值数量
data.fillna(0, inplace=True)  # 填充缺失值为0
print(data.dtypes)  # 确认数据类型（如数值型、字符串型）

5.3 数据分析

使用Pandas进行描述性统计（如均值、标准差、分位数）与分组聚合：

print(data.describe())  # 数值列的描述性统计
avg_salary = data.groupby('Department')['Salary'].mean()  # 按部门分组计算平均薪资
print(avg_salary)

5.4 数据可视化

使用Matplotlib与Seaborn绘制图表（如柱状图、箱线图）：

import matplotlib.pyplot as plt
import seaborn as sns

# 柱状图：各部门平均薪资
plt.figure(figsize=(10, 6))
avg_salary.plot(kind='bar')
plt.title('Average Salary by Department')
plt.xlabel('Department')
plt.ylabel('Average Salary')
plt.show()

# 箱线图：薪资分布
plt.figure(figsize=(10, 6))
sns.boxplot(x='Department', y='Salary', data=data)
plt.title('Salary Distribution by Department')
plt.show()

6. 可选扩展：数据库与Web部署

数据库配置：若需处理数据库中的数据，可安装MySQL/PostgreSQL驱动（如pymysql、psycopg2），使用SQLAlchemy建立连接：

pip3 install pymysql sqlalchemy

示例代码（连接MySQL并查询数据）：

from sqlalchemy import create_engine
import pandas as pd

engine = create_engine('mysql+pymysql://user:password@localhost/dbname')
query = "SELECT * FROM employees"
data = pd.read_sql(query, engine)

Web部署：若需将分析结果封装为Web应用，可使用Flask框架创建API或网页：

pip3 install flask

示例代码（Flask应用）：

from flask import Flask, jsonify
import pandas as pd

app = Flask(__name__)

@app.route('/data')
def get_data():
    data = pd.read_csv('data.csv')
    return jsonify(data.to_dict(orient='records'))

if __name__ == '__main__':
    app.run(debug=True)