目录概念反向传播算法CNNLeNetAlexNetVGGRNNLSTM 概念 感知机, perceptron, 多层感知机（multilayer perceptron，MLP） Sigmoid函数，即 f(x)=1/(1+e−x)f(x)=1/(1+e^{-x})f(x)=1/(1+e−x) Softplus函数，f(x)=log(1+ex)f(x) = log(1 + e^x)f(x)=log(1+ex) 修正线性单元（Rectified linear unit，ReLU） 前馈神经网络（feedforward neural networks） 递归神经网络（recurrent neura...

奇偶函数 奇函数，f(-x) = -f(x), 关于原点对称 偶函数, f(-x) = f(x), 关于y轴对称 反函数，y = f(x), x = g(y), 这样f和g就是反函数，例如y = 2^x 与 y = log2(x)就是反函数，2个反函数关于y = x AOB 数学符号 非负整数集（或自然数集）,记作N； 正整数集,记作N*或N+（“+”标在右下角）； 整数集,记作Z； 有理数集,记作Q； 实数集,记作R, 全体实数和虚数组成的复数的集合称为复数集,记作C....

目录基本概念朴素贝叶斯分类决策树基尼不纯度ID3C4.5CARTlogistic回归梯度下降导数偏导数方向导数梯度支持向量机Apriori图示特征处理NMFPCA协同过滤机器学习的模型的种类判别模型与生成模型参数模型与非参数模型分类问题/回归问题/标注问题经验风险最小化与结构风险最小化准确率/精确率/召回率各种范数L0范数L1范数L2范数EM算法线性回归L1(Lasso回归)L2(岭回归)Elastic Net(弹性网络)广义线性模型(GLM, General linear model)集成学习Baggingboostingstacking凸优化改进的迭代尺度法牛顿法和拟牛顿法梯度下降法聚类D...