news 2026/9/19 19:02:05

基于主成分分析与概率神经网络的预测模型研究

作者头像

张小明

前端开发工程师

1.2k 24
文章封面图
基于主成分分析与概率神经网络的预测模型研究

预测:基于主成分分析(PCA)和概率神经网络(PNN)预测。

数据预测这事儿吧,有时候就像在菜市场挑西瓜——数据维度一多,敲瓜都得敲半天。这时候就需要主成分分析(PCA)来帮我们把西瓜拍个X光,只留下关键特征。不过光降维还不够,预测这事儿还得靠神经网络,而概率神经网络(PNN)这种能直接输出概率的模型,倒是挺适合实战场景。

先上代码热个身。咱们用sklearn自带的葡萄酒数据集,13个特征直接开干:

from sklearn.datasets import load_wine from sklearn.preprocessing import StandardScaler data = load_wine() X, y = data.data, data.target scaler = StandardScaler() X_scaled = scaler.fit_transform(X) print("原始特征维度:", X_scaled.shape[1])

跑完这段能看到原始数据有13个特征。接下来咱们请出PCA这个降维狂魔:

from sklearn.decomposition import PCA pca = PCA(n_components=0.85) # 保留85%的信息量 X_pca = pca.fit_transform(X_scaled) print("降维后特征数:", X_pca.shape[1])

这里有个骚操作——n_components可以填小数,表示保留多少比例的信息量。跑完发现维度从13降到8,相当于把西瓜的纹路、颜色、声音这些特征压缩成"甜度指数"、"脆度系数"几个核心指标。

接下来才是重头戏。PNN这玩意儿在sklearn里没现成的,不过咱们可以用TensorFlow魔改一个简易版。重点在于输出层用softmax激活,把预测变成概率游戏:

import tensorflow as tf model = tf.keras.Sequential([ tf.keras.layers.Dense(32, activation='relu', input_shape=(X_pca.shape[1],)), tf.keras.layers.Dropout(0.3), # 防止网络学得太high tf.keras.layers.Dense(len(set(y)), activation='softmax') ]) model.compile(optimizer='adam', loss='sparse_categorical_crossentropy', metrics=['accuracy'])

这段代码里有几个小心机:Dropout层像给网络戴了个眼罩,防止它死记硬背训练数据;softmax层把输出变成概率分布,比如预测结果可能是[0.2, 0.7, 0.1],直接看出第二类的概率最高。

训练时咱们得盯着验证集的曲线,防止过拟合:

history = model.fit(X_pca, y, epochs=100, validation_split=0.2, verbose=0) # 画个训练过程瞅瞅 import matplotlib.pyplot as plt plt.plot(history.history['accuracy'], label='训练集') plt.plot(history.history['val_accuracy'], label='验证集') plt.legend() plt.show()

如果看到验证集曲线开始跳水,赶紧按Ctrl+C止损。实际跑下来发现,用PCA处理后的数据训练,收敛速度比原始数据快了一倍不止,验证集准确率还能保持在95%左右。

不过要注意的是,PCA不是万能药。某次我把信息保留率调到60%,结果模型准确率直接血崩——就像把西瓜拍成二维码,连瓜瓤颜色都看不清了。建议新手先用pca.explainedvarianceratio_看看各个主成分的含金量,别上来就无脑降维。

最后来个预测示例收尾:

sample = X_pca[0:1] # 拿第一个样本试试 prob = model.predict(sample)[0] print(f"各类别概率: {prob}") print(f"实际类别: {y[0]}")

输出可能是[0.01, 0.02, 0.97],直接看出模型有97%的把握认为是第三类。这种看得见概率的预测,可比硬邦邦的分类结果让人安心多了——就像老中医把完脉告诉你"八成是上火,两成是着凉",总比直接开三斤黄连让人踏实。

说到底,PCA+PNN这个组合就像咖啡配奶泡,一个负责提炼精华,一个负责柔化输出。虽然比不上那些花里胡哨的集成模型,但在需要快速出活儿的场景里,绝对是个能打的组合拳。

版权声明: 本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若内容造成侵权/违法违规/事实不符,请联系邮箱:809451989@qq.com进行投诉反馈,一经查实,立即删除!
网站建设 2026/9/19 5:49:44

PCB线路成型背后的科学:电镀与蚀刻过程全解析

PCB线路成型背后的科学:电镀与蚀刻过程全解析在电子制造业的幕后,有一场看不见的“微雕艺术”正在悄然上演——从指甲盖大小的智能穿戴芯片到数据中心里高速运转的AI服务器主板,每一块印刷电路板(PCB)都承载着精密布线…

作者头像 李华
网站建设 2026/9/12 18:24:59

导师推荐2026 AI论文平台TOP10:本科生毕业论文写作全解析

导师推荐2026 AI论文平台TOP10:本科生毕业论文写作全解析 2026年AI论文平台测评:为何需要这份权威榜单? 随着人工智能技术在学术领域的深入应用,越来越多的本科生开始借助AI工具辅助毕业论文写作。然而,面对市场上五花…

作者头像 李华
网站建设 2026/9/3 3:06:23

pytorch深度学习笔记12

目录 摘要 输出层的反向传播和实现 摘要 本篇文章继续学习尚硅谷深度学习教程,学习内容是输出层的反向传播和代码实现 输出层的反向传播和实现 在输出层,我们一般使用Softmax作为激活函数。 对于Softmax函数: 其偏导数为: 而对…

作者头像 李华
网站建设 2026/9/14 12:18:05

全面讲解汽车电子中UDS 27服务的安全等级

深入理解汽车电子中的UDS 27服务:安全访问机制的实战解析在现代智能网联汽车中,ECU(电子控制单元)的数量和复杂度不断攀升。从发动机管理到自动驾驶系统,这些控制器通过诊断接口暴露了大量可操作入口——而这也正是攻击…

作者头像 李华