Scikit-learn包介绍

1. Scikit-learn 是什么？

• 定位：一个简单高效的数据挖掘和机器学习工具包，基于 NumPy、SciPy 和 Matplotlib 构建。
• 特点：
  • 统一的 API 设计（fit、predict、transform等）。
  • 丰富的文档和社区支持。
  • 适用于中小规模数据集（大数据集需结合其他工具如 Spark MLlib）。

---

2. 包含的主要算法 每个epoch结束后评估模型

Scikit-learn 提供了以下核心机器学习算法的实现：

监督学习

• 分类：

  • 线性模型（LogisticRegression、SGDClassifier）
  • 支持向量机（SVC、NuSVC）
  • 决策树（DecisionTreeClassifier）
  • 随机森林（RandomForestClassifier）
  • 梯度提升树（GradientBoostingClassifier、XGBoost/需单独安装）
  • K近邻（KNeighborsClassifier）
  • 朴素贝叶斯（GaussianNB）

• 回归：

  • 线性回归（LinearRegression、Ridge、Lasso）
  • 支持向量回归（SVR）
  • 决策树回归（DecisionTreeRegressor）
  • 随机森林回归（RandomForestRegressor）

无监督学习

• 聚类：

  • K均值（KMeans）
  • 层次聚类（AgglomerativeClustering）
  • DBSCAN（DBSCAN）
  • 高斯混合模型（GaussianMixture）

• 降维：

  • PCA（PCA）
  • t-SNE（TSNE）
  • LDA（LatentDirichletAllocation）

其他工具

• 模型选择：交叉验证（cross_val_score）、超参数优化（GridSearchCV）。
• 预处理：标准化（StandardScaler）、归一化（MinMaxScaler）、编码（OneHotEncoder）。
• 特征工程：特征选择（SelectKBest）、特征提取（CountVectorizer、TF-IDF）。

---

3. 简单示例

fromsklearn.ensembleimportRandomForestClassifierfromsklearn.datasetsimportload_irisfromsklearn.model_selectionimporttrain_test_split# 加载数据data=load_iris()X_train,X_test,y_train,y_test=train_test_split(data.data,data.target)# 训练模型clf=RandomForestClassifier()clf.fit(X_train,y_train)# 评估print("Accuracy:",clf.score(X_test,y_test))

---

4. 适用场景

• 结构化数据（表格、数值/类别特征）。
• 快速实现经典算法（如分类、回归、聚类）。
• 需要可解释性（如决策树、线性模型）。

---

5. 不适用场景

• 深度学习（需用 TensorFlow/PyTorch）。
• 大规模数据（需分布式框架如 Spark）。
• 自然语言处理/计算机视觉（需结合 NLP/CV 专用库）。

如果需要更具体的算法或功能，可以进一步提问！

总结

组件	核心功能	关键算法/网络示例
前向传播	计算预测输出	CNN卷积、RNN循环、Transformer自注意力
损失函数	量化预测误差	交叉熵、MSE、Huber Loss
反向传播	计算参数梯度	链式法则、自动微分（Autograd）
优化器	更新模型参数	SGD、Adam、RMSprop