机器学习白板推导系列 机器学习白板推导系列
课程地址:跳转 系列十——EM算法给出EM公式,解释E步,M步以及收敛性证明 EM算法的推导(公式是怎么来的) ELBO + KL divergence(kL >= 0) 先固定$\theta$,然后求期望(E),再滑动$\th
2023-04-04
菜菜的sklearn机器学习 菜菜的sklearn机器学习
课程名称:菜菜的sklearn机器学习 课程地址:跳转 sklearn中的数据预处理和特征工程2 数据预处理 Preprocessing & Impute2.1 数据无量纲化在机器学习算法实践中,我们往往有着将不同规格的数据转换
2023-02-08
特征工程 特征工程
Instruction 课程名称:特征工程实战方法精讲|Kaggle上分必备特征工程技巧|数据清洗|特征衍生|特征筛选 课程链接:跳转 pandas怎么处理特征中异常值 在处理异常值时,我们需要先了解数据的分布情况,以及异常值的
2023-02-07
动手学深度学习 动手学深度学习
写在之前 自动求导 计算图可以显示的去构造 也可以隐式构造 自动求导的两种方式:正向or反向 数据集训练数据集 验证数据集 测试数据集 NOTE: 不要把验证数据集合测试数据集弄混 模型的选择以及过拟合和欠拟合
Tensorflow2学习笔记 Tensorflow2学习笔记
环境tensorflow2.1 课程连接 课程介绍 本视频是新冠疫情期间,为北京大学软件与微电子学院选修《软硬件协同设计方法》的33位同学推送的录播课。6小时掌握Tensorflow2搭建优化神经网络的方法,以通俗精炼的语言,授人以渔。
2023-01-07
What is Mutual Information? What is Mutual Information?
In the field of machine learning, when it comes to extracting relationships between variables, we often use Pearson cor
机器学习笔记 机器学习笔记
逻辑回归交叉熵损失函数梯度推导过程见Cjjkstra 主成分分析(PCA) 如何找基
2022-10-11
分类问题可以使用MSE作为损失函数吗 分类问题可以使用MSE作为损失函数吗
本文转自,文章地址 一、从损失函数公式本身来说1. 从损失函数公式的物理含义来说MSE衡量的是预测值和目标值的欧式距离。而交叉熵是一个信息论的概念,交叉熵能够衡量同一个随机变量中的两个不同概率分布的差异程度,在机器学习中就表示为真实概率分布
2022-10-08
深度学习笔记 深度学习笔记
卷积1x1卷积核的作用1,灵活的控制特征图的深度2,减少参数3,现了跨通道的信息组合,并增加了非线性特征 一次卷积后特征图大小 early stopping在 PyTorch 中,实现 early stopping 可以使用 Call
机器学习题目 机器学习题目
机器学习简单线性回归题目1 代码: import pandas import numpy as np import matplotlib.pyplot as plt # load dataset df = pandas.read_csv(
2022-10-01
《统计学习方法》学习笔记 《统计学习方法》学习笔记
第一章 统计学习方法概论 赫尔伯特-西蒙对学习的定义:如果一个系统能够通过执行某个进程改进它的性能,这就是学习。按照这一观点,统计学习就是计算机系统通过运用数据及统计方法提高系统性能的机器学习。 统计学习的对象 data :计算机及互
2022-09-13
训练小tricks 训练小tricks
工具pytorch内存相关原地操作运行一些操作可能会导致为新结果分配内存。 例如,如果我们用Y=X+Y,我们将取消引用Y指向的张量,而是指向新分配的内存处的张量。 before = id(Y) Y = Y + X id(Y) == befo
2022-09-11
1 / 2