Python机器学习模型解释库Shap可视化详解:从安装到六种核心图表

Luna
Luna
发布时间:2026-10-15| 7人浏览过
原创

本文详细介绍Python中Shap库的安装与使用,通过XGBoost模型和糖尿病数据集演示如何生成SHAP值。内容涵盖Bar Plot、队列图、热图、瀑布图、力图及决策图六种核心可视化方法,帮助开发者深入理解黑盒模型的输出逻辑与特征贡献。

解释机器学习模型往往是一项极具挑战的任务,因为模型内部的运作机制如同黑盒般难以捉摸。进行模型解释至关重要,这不仅有助于我们筛选出性能最佳的模型,还能确保模型的稳健性与可靠性。

接下来我们将进入实际操作环节。

安装所需的库

首先通过pip命令安装Shap库,具体执行命令如下。


pip install shap

导入所需库

在此步骤中,我们需要导入用于加载数据、构建模型以及生成模型可视化结果的必要Python库。


df = pd.read_csv('/content/Diabetes.csv')
features = ['Pregnancies', 'Glucose','BloodPressure','SkinThickness','Insulin','BMI','DiabetesPedigreeFunction','Age']
Y = df['Outcome']
X =  df[features]
X_train, X_test, Y_train, Y_test = train_test_split(X, Y, test_size = 0.2, random_state = 1234)
xgb_model = xgb.XGBRegressor(random_state=42)
xgb_model.fit(X_train, Y_train)

创建模型

本步骤旨在构建机器学习模型。文中以XGBoost模型为例,但读者可根据需求选择其他模型类型。所使用的数据集为来自Kaggle的著名糖尿病数据集。


df = pd.read_csv('/content/Diabetes.csv')
features = ['Pregnancies', 'Glucose','BloodPressure','SkinThickness','Insulin','BMI','DiabetesPedigreeFunction','Age']
Y = df['Outcome']
X =  df[features]
X_train, X_test, Y_train, Y_test = train_test_split(X, Y, test_size = 0.2, random_state = 1234)
xgb_model = xgb.XGBRegressor(random_state=42)
xgb_model.fit(X_train, Y_train)

创建可视化

随后,我们将为Shap创建解释器,计算模型的SHAP值,并利用这些值生成相应的可视化图表。


explainer = shap.Explainer(xgb_model)
shap_values = explainer(X_test)

1、Bar Plot


shap.plots.bar(shap_values, max_display=10)

2、队列图


shap.plots.bar(shap_values.cohorts(2).abs.mean(0))

3、热图


shap.plots.heatmap(shap_values[1:100])

4、瀑布图


shap.plots.waterfall(shap_values[0]) # For the first observation

5、力图


shap.initjs()
explainer = shap.TreeExplainer(xgb_model)
shap_values = explainer.shap_values(X_test)
def p(j):
    return(shap.force_plot(explainer.expected_value, shap_values[j,:], X_test.iloc[j,:]))
p(0)

6、决策图


shap_values = explainer.shap_values(X_test)[1]
print("The expected value is ", expected_value)
print("The final prediction is ", xgb_model.predict(X_test)[1])
shap.decision_plot(expected_value, shap_values, X_test)

以上就是利用Shap库创建机器学习模型相关可视化并进行分析的全过程。

以上是关于Python解释模型库Shap实现机器学习模型输出可视化的详细内容,更多关于Python解释模型库Shap模型输出可视化的资料,请持续关注本站其他相关文章!

免责声明:本文内容仅供参考,不代表本站观点。转载或引用请注明出处。

Python 相关产品和应用

全部下载
Selenium

Selenium

4.51.0 · Windows

用于浏览器自动化和 Web 测试的 Python 工具。

scikit-learn

scikit-learn

1.9.1 · Windows

常用 Python 机器学习算法与模型评估工具库。

Black

Black

26.10.1 · Windows

强调一致性的 Python 自动代码格式化工具。

Ruff

Ruff

0.17.1 · macOS

由 Rust 编写的高速 Python 代码检查和格式化工具。

pytest

pytest

9.1.1 · Windows

简洁而强大的 Python 自动化测试框架。

FastAPI

FastAPI

0.146.0 · Windows

高性能 Python API 框架,支持类型提示和自动接口文档。

Flask

Flask

3.1.3 · Windows

轻量灵活的 Python Web 应用框架。

Django

Django

6.1.2 · Windows

成熟的 Python Web 框架,适合构建内容站点和业务系统。

Spyder

Spyder

6.1.7 · Windows

面向科学计算与数据分析的 Python 集成开发环境。

SciPy

SciPy

1.18.1 · Windows

面向科学、工程和技术计算的 Python 算法库。