展开菜单
首页 精品内容 本月促销 装机必备 Windows PDF教程 macOS软件 IOS软件 Android AI 专题
全部分类

当前位置:

首页 > 编程开发 > Python怎么利用NumPy实现特征的MinMax缩放_通过减去最小值并除以极差完成归一化

Python怎么利用NumPy实现特征的MinMax缩放_通过减去最小值并除以极差完成归一化

利用NumPy实现MinMax缩放的核心公式为(x-min)/(max-min),需注意极差为零时设置分母为1以避免除零错误。按列归一化应使用axis=0参数,并保存min和max用于反向还原。默认缩放范围为[0,1],该变换可保持数据分布,常用于机器学习预处理。

本文目录

    在实际项目中,常会遇到需要手动实现特征缩放的情况。今天就来聊聊如何用NumPy实现MinMaxScaler,顺便把那些容易踩的坑一一说清楚。

    Python怎么利用NumPy实现特征的MinMax缩放_通过减去最小值并除以极差完成归一化

    NumPy手动实现MinMaxScaler的核心公式怎么写

    直接套用公式 (x - x.min()) / (x.max() - x.min()) 就行,但有几个坑得提前说明,比如分母为零、单值数组、多维数组轴向处理,这三类问题一旦碰上,结果就全偏了。

    最容易踩的坑有两个:一个是 ZeroDivisionError: float division by zero,当某列所有值都相等(也就是极差为0)时就会触发;另一个是 RuntimeWarning: invalid value encountered in true_divide,虽然不报错,但结果里悄悄混进了 nan 或 inf,数据已经被污染了。

    • 一维数组的情况最简单,直接用 x_min = x.min() 和 x_max = x.max() 算标量极值就行。
    • 遇到二维数组(比如样本×特征的结构),通常按列归一化,用 axis=0,也就是 x.min(axis=0) 和 x.max(axis=0)。
    • 极差为0时,不能硬除,应该显式设成0或1,让原值保持不变。比如这么写:range_val = np.where(x_max == x_min, 1.0, x_max - x_min)。

    为什么不用sklearn的MinMaxScaler而手写NumPy版本

    并不是为了造轮子,而是有些场景确实绕不开。比如环境里没有scikit-learn,或者要嵌入轻量级部署(比如MicroPython的兼容层),又或者需要和JAX/TensorFlow的张量流无缝衔接,这时候纯NumPy实现反而更可控。

    从实际跑过的数据来看,NumPy手写版在小到中等规模数据上,反而会比sklearn的对应版本快10%~20%。原因很简单,省去了对象初始化、参数校验和fit-transform分离这些开销。不过代价也有,就是缺少了 feature_range 参数的灵活缩放,比如想缩放到[-1, 1]就得自己调整公式:(x - x_min) / (x_max - x_min) * (new_max - new_min) + new_min。

    • 如果需要复用缩放参数(比如训练集fit完再应用到测试集),必须显式保存 x_min 和 x_max,不能只存变换后的数组。
    • sklearn默认是 feature_range=(0, 1),纯NumPy实现默认也是[0,1],这里不需要额外参数。
    • NaN处理要留意:NumPy的 .min() 和 .max() 默认会忽略NaN,但万一数组里本身就有NaN,最好先用 np.nanmin() 和 np.nanmax(),配合 np.isnan() 的掩码做一次清理。

    处理多维数组时axis参数填0还是1

    填 0(默认)——按列缩放,每个特征独立归一化;填 1——按行缩放,每个样本的所有特征被拉到[0,1]区间。绝大多数机器学习场景都要求前者。

    常见的误用场景是:把 shape 为 (n_samples, n_features) 的数据误填了 axis=1,结果每个样本内部的特征关系被破坏,原始量纲关系彻底丢失,模型训练一下就失效了。

    • 验证方法很简单:缩放后检查 np.allclose(X_scaled.min(axis=0), 0) 和 np.allclose(X_scaled.max(axis=0), 1),如果都返回 True,说明没问题。
    • 如果输入是行向量(shape (1, n_features)),仍然用 axis=0,否则 min(axis=1) 会返回一个标量,没法广播。
    • 广播安全写法:用 keepdims=True,比如 x_min = x.min(axis=0, keepdims=True),避免维度塌缩导致减法出错。

    如何安全地反向还原归一化后的数据

    逆运算公式是 x_original = x_scaled * (x_max - x_min) + x_min,但前提是必须保留原始的 x_min 和 x_max。它们不是常数,而是随数据动态计算出的数组,尤其多维时,可能是一个长度为n_features的向量。

    容易被忽略的一点是:如果训练时用了 np.nanmin 处理缺失值,但预测时没做同样的清洗,x_min 和 x_max 的维度可能不匹配,直接运算会触发 ValueError: operands could not be broadcast together。

    • 推荐封装成函数,返回缩放后的数组再加一个参数字典:return X_scaled, {'min': x_min, 'max': x_max}。
    • 反向还原时,必须用同一组 min 和 max,不能重新计算——测试集的极值不等于训练集的极值。
    • 如果训练集里某列极差为0,还原时也要用原来的 x_min(而不是0),否则还原值会恒等于 x_min,而不是原始值。
    本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系bd@zhengruan.com
    作者最新文章
    编程开发 Python
    相关文章 更多
    精品专题 更多
    装机必备

    正软商城装机必备专区,精选办公、浏览器、安全防护、影音播放、压缩解压、设计创作和系统工具等电脑常用正版软件,帮助用户快速完成新电脑软件配置。

    Windows

    正软商城Windows软件专区,汇集适用于Windows电脑的办公、设计、安全防护、影音播放、开发工具和系统优化软件,提供软件介绍、系统要求、正版授权及购买下载服务。

    PDF教程

    正软商城PDF教程频道提供PDF编辑、转换、合并、拆分、压缩及格式处理方法,同时介绍常用PDF软件和工具的使用技巧。

    macOS软件

    正软商城macOS软件专区,精选适用于Mac电脑的办公、设计、影音、效率、开发和系统工具,提供软件功能介绍、macOS兼容版本、正版授权及购买下载服务。

    IOS软件

    正软商城iOS软件专区,精选适用于iPhone和iPad的办公、学习、影音、设计、效率及AI应用,提供功能介绍、适用设备、系统要求和正版获取方式等信息。

    AI

    正软商城AI软件专区,汇集AI写作、AI绘画、AI视频、AI办公、AI编程、AI翻译、智能客服和数据分析等人工智能工具,提供功能介绍、适用平台、收费方式及正版购买信息。

    Mac软件 更多
    火山引擎 网页版
    火山引擎 网页版

    火山引擎是字节跳动旗下企业级云与AI服务平台。聚焦大模型核心能力,依托字节自研豆包多模态大模型,凭借火山方舟一站式平台,提供模型精调、推理部署、智能应用搭建等全链路服务,结合高性能AI算力,助力各行业快速落地大模型数字化与智能化应用。

    立刻MV 网页版
    立刻MV 网页版

    立刻MV 面向音乐人、内容创作者和品牌团队,帮助用户低成本完成歌曲 MV、歌词视频、AI 分镜、图生视频与最终合成。

    蛙蛙写作 网页版
    蛙蛙写作 网页版

    蛙蛙写作 AI 创作工具,覆盖小说、剧本、文案,一键生成文稿,打通文字转视频全流程,高效解决创作难题。

    讯飞智作 网页版
    讯飞智作 网页版

    讯飞智作是一款基于语音合成技术、虚拟人驱动技术与数字人形象声音构建能力的 AI 数字人音视频创作平台。

    超级简历WonderCV 网页版
    超级简历WonderCV 网页版

    超级简历WonderCV是面向应届生和AI小白的智能求职平台,覆盖简历、面试与职业规划。

    音述AI 网页版
    音述AI 网页版

    音述AI,是一个以“用声音述说故事”为核心的 AI 音乐创作与声音分享社区。

    AionClaw macOS版
    AionClaw macOS版

    AionClaw 是可在桌面端运行的任务型 AI 助手,通过数字专家与技能市场组合办公、创作、数据和开发能力。

    Loomy macOS版
    Loomy macOS版

    Loomy 是科大讯飞推出的桌面 AI 助手,可通过对话、任务与工作目录协助处理办公、内容创作和资料整理。

    AirBuddy 3 macOS版
    AirBuddy 3 macOS版

    AirBuddy 3 是面向 macOS 的蓝牙外设增强工具,可集中查看 AirPods、Beats 与苹果设备电量,提供快速连接、播放控制、电量提醒、桌面小组件和多台 Mac 外设接力等功能。

    AirServer macOS版
    AirServer macOS版

    AirServer macOS版可把 Mac 转换为无线投屏接收端,通过 AirPlay 或 Google Cast 接收手机、平板和电脑画面,并支持多设备同时连接、高清镜像及会话录制,适合家庭娱乐、课堂教学、会议演示和应用展示。

    AnyDesk macOS版
    AnyDesk macOS版

    AnyDesk macOS版是一款适用于远程办公、设备维护和客户支持的远程桌面工具,可连接并操作异地计算机,支持文件传输、无人值守访问、会话权限控制及跨平台协作。

    Beamer 4 macOS版
    Beamer 4 macOS版

    Beamer 4是面向macOS的本地视频投屏工具,可将Mac中的影片投放到Apple TV、Chromecast及兼容设备,支持常见格式、多类字幕、环绕声、播放列表和电视遥控操作。

    WINDOWS 更多
    火山引擎 网页版
    火山引擎 网页版

    火山引擎是字节跳动旗下企业级云与AI服务平台。聚焦大模型核心能力,依托字节自研豆包多模态大模型,凭借火山方舟一站式平台,提供模型精调、推理部署、智能应用搭建等全链路服务,结合高性能AI算力,助力各行业快速落地大模型数字化与智能化应用。

    立刻MV 网页版
    立刻MV 网页版

    立刻MV 面向音乐人、内容创作者和品牌团队,帮助用户低成本完成歌曲 MV、歌词视频、AI 分镜、图生视频与最终合成。

    蛙蛙写作 网页版
    蛙蛙写作 网页版

    蛙蛙写作 AI 创作工具,覆盖小说、剧本、文案,一键生成文稿,打通文字转视频全流程,高效解决创作难题。

    讯飞智作 网页版
    讯飞智作 网页版

    讯飞智作是一款基于语音合成技术、虚拟人驱动技术与数字人形象声音构建能力的 AI 数字人音视频创作平台。

    超级简历WonderCV 网页版
    超级简历WonderCV 网页版

    超级简历WonderCV是面向应届生和AI小白的智能求职平台,覆盖简历、面试与职业规划。

    音述AI 网页版
    音述AI 网页版

    音述AI,是一个以“用声音述说故事”为核心的 AI 音乐创作与声音分享社区。

    AionClaw Windows版
    AionClaw Windows版

    AionClaw 是可在桌面端运行的任务型 AI 助手,通过数字专家与技能市场组合办公、创作、数据和开发能力。

    Loomy Windows版
    Loomy Windows版

    Loomy 是科大讯飞推出的桌面 AI 助手,可通过对话、任务与工作目录协助处理办公、内容创作和资料整理。

    讯飞绘文 网页版
    讯飞绘文 网页版

    讯飞绘文网页版是科大讯飞推出的AI图文创作与内容运营工具,覆盖热点选题、文章生成、稿件校对、智能配图、排版发布和数据复盘等环节,适合自媒体创作者及内容团队在线使用。

    AirServer Windows版
    AirServer Windows版

    AirServer Windows版可把电脑变成AirPlay、Google Cast和Miracast无线投屏接收端,适合会议演示、课堂教学及家庭大屏分享。发送设备通常无需另装客户端,并可同时接收和智能排列多个镜像会话。

    AlwaysUp Windows版
    AlwaysUp Windows版

    AlwaysUp是一款面向Windows的系统服务注册与程序托管工具,可让普通应用、脚本及批处理在无人登录时随系统启动,并通过状态检测、异常重启、资源监控和邮件通知保障关键任务持续运行。

    AnyDesk Windows版
    AnyDesk Windows版

    AnyDesk Windows版是一款轻量化远程桌面与技术支持工具,可用于控制异地电脑、传输文件、远程打印及无人值守访问。它兼顾连接响应、安全权限和部署灵活性,适合个人远程办公、企业设备维护与客服支持。