首页/新闻资讯/正文详情

个人笔记:实用机器学习(b站李沐)2.3

发布时间:2026/11/20 1:04:13 来源:云帆数科 栏目:资讯中心
个人笔记:实用机器学习(b站李沐)2.3
2.3数据变换变形原始数据往往不符合模型输入要求数据转换是连接清洗后的数据和可训练的特征之间的桥梁针对不同数据类型有特定方法。*对数据整体进行操作变形特征值归一化处理1梯度下降更高效不同特征量级一致避免某些特征因数值大主导损失函数2避免数值溢出或下溢防止计算中出现极大或极小数3正则化效果某些归一化方法如 Batch Norm本身具有正则化作用4加速收敛优化器能在更圆的损失曲面上更快找到最优解四种常见归一化方法1将数据线性映射到指定区间 [a,b] 通常是 [0,1] 或 [−1,1] 2将数据转换为均值为 0标准差为 1 的分布最常见3小数缩放4对数缩放图像的变换*图像的存储开销很大核心是在大规模机器学习项目中如何降低图像存储和训练成本同时尽量保持模型性能。三种方法1裁剪Cropping去除无关区域如水印、黑边、无关背景聚焦 ROIRegion of Interest减少像素数量来降低存储和计算2下采样Downsampling降低图像分辨率3压缩Compression使用有损压缩格式如 JPEG进一步减小文件体积*中等质量80%-90%JPEG压缩可能导致 ImageNet准确率下降约 1%这意味着压缩率越高-文件越小、加载越快、存储越省但信息损失越大-模型性能可能下降需要根据需求自行权衡视频的变换核心挑战在于视频数据的高度可变性以及如何在预处理阶段做好存储、质量、加载速度的权衡。对于ML短视频片段更易处理理想情况每个片段是一个连贯的语义事件*但是长视频语义分割极难视频变换的核心是化长为短、化编码为帧在保持语义完整性的前提下把高可变性的原始视频转化为固定长度、易于加载、模型友好的输入格式同时接受存储空间的代价。*需要权衡存储质量和加载速度文本的变换核心是将原始文本转化为机器学习模型能处理的结构化形式包括两大步骤1词形还原与词干提取目标将词语的不同形态归约为统一的基干形式词干提取基于规则的截断准确率低速度快E2词干还原基于词典的词性标注准确率高速度慢E12分词Tokenization目标将文本字符串切分为模型能处理的最小单元tokensgp 是词根##u 表示它是前一个 token 的延续因为词典没”gpu”这个词需要分割能处理没在词典中的词

相关推荐

MGF矩生成函数实战指南:从分布编码到工业级建模
MGF矩生成函数实战指南:从分布编码到工业级建模

1. 这不是数学考试,而是你手头真实问题的“信号解码器”你有没有遇到过这样的场景:在做A/B测试时,发现两组用户留存率的分布形态很怪——不是对称的钟形,而是明显右偏,尾部拖得很长;或者在建模用户生命周期… · 2026/11/1 4:44:59

Android模拟定位技术解析与应用实践
Android模拟定位技术解析与应用实践

1. Android模拟定位的技术背景与需求场景在移动互联网时代,GPS定位功能已成为智能手机的核心能力之一。从导航软件到社交应用,再到各类基于位置的服务(LBS),位置数据的准确性直接影响着用户体验。然而在某些特定场景下… · 2026/11/8 6:36:44

寒假笔记5
寒假笔记5

set接口:实现共同的特征,不能存储重复元素 HashSet:哈希(散列),本质就是一个数组,算出哈希值,数据最多存在哈希表对应的位置,存储的元素是无序TreeSet:树&… · 2026/10/28 3:01:44

工地太忙根本没时间复习考试?舟山低压电工证培训千万别踩坑
工地太忙根本没时间复习考试?舟山低压电工证培训千万别踩坑

工地太忙根本没时间复习考试?舟山低压电工证培训千万别踩坑 工地太忙根本没时间复习考试,你是不是也在为这个发愁?尤其是在浙江舟山,低压电工证是很多工程类新人上岗的“敲门砖”,但很多人在报考和培训过程中走错了路,结果花了不少冤枉钱,还耽误了时间… · 2026/11/20 1:03:38

电工证怎么找靠谱的?真实经历告诉你哪能作假的电工证
电工证怎么找靠谱的?真实经历告诉你哪能作假的电工证

电工证怎么找靠谱的?真实经历告诉你哪能作假的电工证 你是不是也这样,拿着手机刷了好久的网页,还是不知道哪能作假的电工证?报名怕被坑,考试怕不过,证书怕无效,心里七上八下,特别着急。其实很多人第一次报考特种作业证,尤其是像电工作业这种热门工种… · 2026/11/20 1:03:38

工地太忙根本没时间复习考试?考电工证为什么要培训值不值得考
工地太忙根本没时间复习考试?考电工证为什么要培训值不值得考

工地太忙根本没时间复习考试?考电工证为什么要培训值不值得考 你是不是也经常听到工地上的工友抱怨,工作太忙根本没时间复习考试?特别是那些打算 考电工证 的小伙伴,一边要扛着钢筋水泥,一边还要应对理论考试和实操训练,真让人头大。但问题是,… · 2026/11/20 1:03:38

电工证过期需要注销吗?2026河南最新政策你必须知道
电工证过期需要注销吗?2026河南最新政策你必须知道

电工证过期需要注销吗?2026河南最新政策你必须知道 实操考试心里没底怕挂科,这事儿我懂,干了七八年劳务班组负责人,每年都有人问,电工证过期是不是得注销?其实不然,关键是搞清楚 2026河南最新政策… · 2026/11/20 1:03:38

村电工证怎么考官方回应学历不高也能报
村电工证怎么考官方回应学历不高也能报

村电工证怎么考官方回应学历不高也能报 你是不是也觉得, 学历不高怕报不上名 ?别担心, 官方回应 明确说明, 村电工证 的报考条件并不严格要求学历,只要你符合年龄、健康等基本要求,就能顺利报考。在河南省应急管理厅的政策中,明确提到:… · 2026/11/20 1:03:38

中级电工证申报总结多少钱才算合理?实操考试心里没底怕挂科
中级电工证申报总结多少钱才算合理?实操考试心里没底怕挂科

中级电工证申报总结多少钱才算合理?实操考试心里没底怕挂科 实操考试心里没底怕挂科,这是大多数初次报考中级电工证的人共同的担忧。尤其是对于信阳浉河区的学员来说,考试内容与流程都不熟悉,更害怕因为一点小失误就错过机会。而当你真正了解了… · 2026/11/20 1:02:37

长春初级电工证怎么考?通过率揭秘全在这里
长春初级电工证怎么考?通过率揭秘全在这里

长春初级电工证怎么考?通过率揭秘全在这里 之前考的证在外省能不能转过来?这几乎是每个想从事电工工作的人都会问的问题。特别是那些在外地打拼多年、手里握着一张“外地电工证”的人,到了长春想继续干这一行,第一反应就是“我的证能用吗?”。今天我们就… · 2026/11/19 16:06:02

国内电工证报考条件与考试时间
国内电工证报考条件与考试时间

低压电工证怎么考?学历不高也能报名,官方报名入口全在这 你是不是经常听说“电工证是入行门槛”,但又担心自己学历不够、经验不足,根本报不了名?别急,今天就带你从零了解【国内电工证】的报考流程、考试内容,还有怎么在 官方报名入口… · 2026/11/19 17:40:37

电工作业时如何断电?电子证书到底能不能全国通用?
电工作业时如何断电?电子证书到底能不能全国通用?

电工作业时如何断电?电子证书到底能不能全国通用? 实操考试心里没底怕挂科,特别是电工作业时如何断电这一操作,不仅关系到你能不能拿到证书,更关系到以后能不能顺利上岗。很多人觉得这不过就是“断个电”,但其实这里面的门道可不少,稍有不慎就可能出错… · 2026/11/19 17:50:07

建设厅特种工周三报名怎么弄?上岗必备别被中介坑
建设厅特种工周三报名怎么弄?上岗必备别被中介坑

建设厅特种工周三报名怎么弄?上岗必备别被中介坑 不知道去哪报名怕被中介坑?作为商丘某高校工程类应届毕业生,小李最近就遇到了这样的困扰。他刚毕业,正在找实习岗位,发现很多工地都要求持有特种作业操作证,尤其是【建设厅特种工周三报名】这个时间点,… · 2026/11/20 0:00:54

中专考的中级电工证内部消息全攻略
中专考的中级电工证内部消息全攻略

中专考的中级电工证内部消息全攻略 你中专毕业,手头有中级电工证,但不知道从哪开始报名,怕被中介坑?别急,这篇文章就是为你量身定制的“内部消息”,帮你避开报名陷阱,稳稳拿到证书。… · 2026/11/20 0:00:54

外省电工证能转过来吗?电子证书怎么查电工作业教学效果评价
外省电工证能转过来吗?电子证书怎么查电工作业教学效果评价

外省电工证能转过来吗?电子证书怎么查电工作业教学效果评价 之前考的证在外省能不能转过来?这几乎是所有在外地打拼的电工从业者最关心的问题。特别是像洛阳这样的工业城市,很多电工证是在外地考的,现在想在当地用,流程是不是很复杂?其实,只要搞清楚… · 2026/11/20 0:00:54

双极步进电机控制实战:DRV8818PWPR与PIC18F86K22驱动调试
双极步进电机控制实战:DRV8818PWPR与PIC18F86K22驱动调试

/* MD / 富文本中的 .toc(含博客园搬家等嵌套结构);.toc-box 在侧栏,不受影响 */#content_views .toc,/* 编辑器常在目录前后插入空 p(:empty 仍占 20px),一并去掉避免顶空隙 */#content_views.markdown_views > p:empty:has(+ .toc),#content_views.markdown_views … · 2026/11/19 6:33:25

STM32F207ZG + DRV8818PWPR 步进电机驱动实战解析
STM32F207ZG + DRV8818PWPR 步进电机驱动实战解析

/* MD / 富文本中的 .toc(含博客园搬家等嵌套结构);.toc-box 在侧栏,不受影响 */#content_views .toc,/* 编辑器常在目录前后插入空 p(:empty 仍占 20px),一并去掉避免顶空隙 */#content_views.markdown_views > p:empty:has(+ .toc),#content_views.markdown_views … · 2026/11/19 6:33:32

DRV8818PWPR+dsPIC30F4013工业级双极步进电机控制方案
DRV8818PWPR+dsPIC30F4013工业级双极步进电机控制方案

/* MD / 富文本中的 .toc(含博客园搬家等嵌套结构);.toc-box 在侧栏,不受影响 */#content_views .toc,/* 编辑器常在目录前后插入空 p(:empty 仍占 20px),一并去掉避免顶空隙 */#content_views.markdown_views > p:empty:has(+ .toc),#content_views.markdown_views … · 2026/11/19 0:22:38

了解更多?预约专属演示

我们的顾问将为您一对一讲解产品与方案

企业微信二维码