展开菜单
首页 精品内容 本月促销 装机必备 Windows PDF教程 macOS软件 IOS软件 Android AI 专题
全部分类

当前位置:

首页 > 系统应用 > 由浅入深了解羚珑平台统一接入服务——Monet

由浅入深了解羚珑平台统一接入服务——Monet

本文整理自 阿清 于 凹凸 2022 年技术分享,将带领大家一起由浅入深了解服务端羚珑平台统一 API 接入服务。一、背景介绍—羚珑作为一款智能设计平台,简单易懂、可视化操作,同时拥有大量模板与素材为用户、商家或业务团队节省了大量作图时间从而达到降本增效。随着使用的用户越来越多,同时业务也不断在增长

本文目录

    本文整理自 阿清 于 凹凸 2022 年技术分享,将带领大家一起由浅入深了解服务端羚珑平台统一 API 接入服务。

    一、背景介绍—

    羚珑作为一款智能设计平台,简单易懂、可视化操作,同时拥有大量模板与素材为用户、商家或业务团队节省了大量作图时间从而达到降本增效。

    随着使用的用户越来越多,同时业务也不断在增长,这也给羚珑服务端带来了挑战。

    羚珑服务端目前架构如图所示由多个平台组成,每个平台都有自己的域名。随着业务增长每次都是启动一个平台来扩展功能,这种模式弊端也显现出来了。

    对于后端同学来说,新建一个平台需要对接登录与权限;提供的 API 功能没有集中管理,不清楚正在开发的 API 是否有重复提供;开发的 API 在某些业务场景下还需要自行限流或降级;缺少全局 API 监控。

    对于运维同学来说,要为后端同学开发完成的每个平台新建域名映射(同时还需要申请证书)。

    对于前端同学来说,为了复用某些 API 功能还需要对接多个域名,同时还区分测试与生产环境域名,这就导致前端同学在项目中还需要维护一批域名。

    根据以上场景,我们可以总结为,缺少 API 的统一入口与管理(统一域名)、统一鉴权、统一流控、统一监控。

    如何解决以上架构痛点?我们需要一个服务承载在业务平台之上接收前端的请求,转发到相应的后端平台上,还可以对每个请求进行用户认证与权限校验,还可以对 API 精准限流与降级,同时对 API 请求响应异常进行监控上报。

    这个服务就呼之欲出:API 网关,并取名为:Monet。下面我将介绍下这个网关中间件服务。

    二、技术选型—

    确定了 Monet 需求之后,我们就开始进行技术选型。

    基础框架选择

    牛顿说过,如果说我别人看得更远些,那是因为我站在了巨人的肩膀上。所以我们需要站在巨人的肩膀才可以看得更远。那么 Monet 也一样,需要选取一款网关的框架,并在此基础之上进行扩展。

    在技术选型需要从语言体系、社区活跃度、扩展性、性能等角度考虑。我们从社区活跃度比较高的选出了两个分类:非 Ja va 语言网关:Nginx、Kong、Traefik;Ja va 语言网关:Spring Cloud Gateway 与 Spring Cloud Zuul 2。

    由于后端采用 Ja va 的 Spring 生态开发的,所以在编程语言一致性上更加倾向 Ja va 语言开发的组件。所以在 Spring 生态中有两款网关可供选择,分别是:Spring Cloud Gateway[1] 与 Spring Cloud Zuul 2

    Spring Cloud Gateway 由官方主推网关,Zuul 2 由 Netfix 公司开源的网关。两者在实际生产使用性能相比没有差距,Spring Cloud Gateway 基于 Spring 5.0、Spring Boot 2.0 与 Project Reactor,为服务提供一个简单有效的 API 网关;而 Zuul 1 基于同步 IO 与 Zuul 2 基于 Netty Server 异步 IO,都是 Spring Cloud 生态中的组件。以下两者一些区别:

    网关Spring Cloud GatewaySpring Cloud Zuul 2易用性简单易用参考资料较少可维护性Spring 系列可扩展强,易配置可维护性好可维护性差成熟度Spring 社区成熟,但 Gateway 资源较少开源不久,资料少

    两者相比之下,Spring Cloud Gateway 更具有接入的优势。所以我们最终选择了 Spring Cloud Gateway 作为基础框架

    三、落地实现—

    在前面介绍到我们需要 Monet 来完成统一 API 入口与管理、统一鉴权、统一流控与统一监控。接下来一一介绍实现。

    统一 API 入口与管理

    统一 API 入口

    统一API入口其实挺简单的,只需将一个域名解析到Monet就行。Monet是基于Spring Cloud Gateway实现的,通过路由配置,就能把请求转发到相应服务。这里跟大家讲讲我们在实现过程中遇到的问题。首先,Spring Cloud Gateway的路由配置有两种方式,一种是在项目配置文件中进行配置,另一种是基于代码进行路由配置。

    以上两种都有个弊端,那就是一旦路由配置有变更,都需要将 Monet 服务重启,在实际生产环境中不太可取。

    经资料查询可知,通过RouteDefinitionRepository[2]接口能够实现获取路由配置信息。我们可实现从数据库中获取路由配置信息,当路由配置发生变更后,触发Spring Cloud Gateway路由配置重载事件,这样Monet就能获取到最新的路由配置,进而达到动态路由的效果。因此,我们可将其扩展为以下流程:

    统一 API 管理

    为什么要做 API 管理呢?API 管理主要为了避免 API 重复建设与 API 安全。

    Monet 如何识别请求 URI 是属于哪个 API 呢?要知道在 Restful API 中 URI 目录中是带有参数的,给 Monet 识别是哪个 API 带来一定难度,但不是不可解。

    可以利用 前缀树[3] 数据结构来 API 解析与匹配,前缀树又叫单词查找树,典型应用于统计、排序等等,利用字符串的公共前缀来减少查询时间,最大限度地减少不必要的字符串比较,从而提高匹配的速度。将 API URI 部分拆分字符串后的树结构示意图:

    我们通过实现 Spring Cloud Gateway 的 GlobalFilter 实现 API 解析与监管,通过后端服务导出 API 信息导入到网关控制台(利用 Zookeeper[4] 存储 API 信息),API 解析过滤器也是从 Zookeeper 获取API 信息并缓存,如果找不到匹配 API 只能响应 404,能匹配上 API 的将解析出来的结果放到上下文中,方便后面的过滤器得到 API 信息进行下一步操作,例如权限校验等等;

    同时我们也会在网关控制台建立审核制度,得需要项目负责人审核后方可将 API 上线。

    统一鉴权

    统一鉴权也分为两部分:用户认证与权限校验。

    用户认证

    为了让后端服务无需关注登录流程,用户登录认证的过程只需要在 Monet 完成,与 API 解析过滤器一样,用户认证也是通过 GlobalFilter 实现形成 Monet 的过滤器,用户认证完了之后每个请求都能读取到用户的相关信息并且放入到上下文中,便于后面的过滤器或者后端服务获取到。如图所示:

    权限校验

    为了能够让后端服务将权限集中管理,特地形成了一套权限体系,并且专门由一个服务负责,并且根据后端服务需求在权限服务上进行自定义即可形成各个服务权限,权限服务就不在此过多讲述。由于前面 API 解析已经能够得到 API 信息与用户认证得到的用户信息,我们就可以对当前用户进行权限校验了。

    统一流控

    由于现在的限流与熔断组件都非常成熟了,我们直接在 Spring Cloud Gateway 所支持的限流与熔断的组件进行选型,支持限流熔断组件有:Hystrix 与 Sentinel[5],两个组件区别:

    功能SentinelHystrix成熟度社区活跃,文档较全已经停止维护熔断降级策略基于响应时间、异常比率、异常数基于异常比率实时统计实现滑动窗口滑动窗口动态规则配置支持多种数据源支持多种数据源扩展性多个扩展点插件形式限流基于 QPS,支持基于调用关系的限流优先支持流量整形支持预热模式、匀速器模式、预热排队模式(流量规则可配置)不支持系统自适应保护支持不支持

    根据以上功能区别我们最终选择 Sentinel ,Sentinel 功能丰富同时我们可将相关限流与熔断的配置规则放进 Zookeeper 便于我们在网关控制台上进行配置,通过 Sentinel 可以对用户、IP、或者 API 级别进行限流或者熔断降级能力。

    统一监控

    API 的监控也是比较简单,也是通过实现 GlobalFilter 并且在 API 解析之后,拿到 API 信息并记录请求信息上报,例如:API 请求时间、响应耗时等数据。在此处为了能够适配各种监控系统,在此处定义了一套监控接口,只需要实现该接口即可实现不同监控系统,例如:内部版本接入京东内部监控系统,对应的就是独立一个实现;同时可根据监控接口对接另外一套监控平台,更具有扩展性。

    以上就是完整的 Monet 架构。

    四、总结—

    我们先通过介绍目前架构的痛点讲述项目背景及技术选型,基于 Spring Cloud Gateway 落地实现 Monet 中的 统一入口与 API 管理、统一鉴权、统一流控、统一监控。虽然完成了以上功能,但是其实还有很多需要扩展的地方,例如:API 管理的审核流程、接入非 Ja va 服务、Access 日志等等。

    参考链接—

    [1]

    Spring Cloud Gateway: https://docs.spring.io/spring-cloud-gateway/docs/current/reference/html/

    [2]

    RouteDefinitionRepository: https://blog.knoldus.com/dynamic-conf-spring-cloud-gateway-routing/

    [3]

    前缀树: https://en.wikipedia.org/wiki/Trie

    [4]

    Zookeeper: https://zookeeper.apache.org

    [5]

    Sentinel: https://github.com/alibaba/Sentinel/wikis

    本文分享自微信公众号 - 凹凸实验室(AOTULabs)。
    如有侵权,请联系 support@oschina.cn 删除。
    本文参与“OSC源创计划”,欢迎正在阅读的你也加入,一起分享。

    本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系bd@zhengruan.com
    作者最新文章
    系统应用
    相关文章 更多
    精品专题 更多
    装机必备

    正软商城装机必备专区,精选办公、浏览器、安全防护、影音播放、压缩解压、设计创作和系统工具等电脑常用正版软件,帮助用户快速完成新电脑软件配置。

    Windows

    正软商城Windows软件专区,汇集适用于Windows电脑的办公、设计、安全防护、影音播放、开发工具和系统优化软件,提供软件介绍、系统要求、正版授权及购买下载服务。

    PDF教程

    正软商城PDF教程频道提供PDF编辑、转换、合并、拆分、压缩及格式处理方法,同时介绍常用PDF软件和工具的使用技巧。

    macOS软件

    正软商城macOS软件专区,精选适用于Mac电脑的办公、设计、影音、效率、开发和系统工具,提供软件功能介绍、macOS兼容版本、正版授权及购买下载服务。

    IOS软件

    正软商城iOS软件专区,精选适用于iPhone和iPad的办公、学习、影音、设计、效率及AI应用,提供功能介绍、适用设备、系统要求和正版获取方式等信息。

    AI

    正软商城AI软件专区,汇集AI写作、AI绘画、AI视频、AI办公、AI编程、AI翻译、智能客服和数据分析等人工智能工具,提供功能介绍、适用平台、收费方式及正版购买信息。

    Mac软件 更多
    Aperty macOS版
    Aperty macOS版

    Aperty 是 Skylum 推出的 AI 人像修图软件,支持自然肤质修饰、瑕疵处理、面部与身体调整、预设及批量同步。

    火山引擎 网页版
    火山引擎 网页版

    火山引擎是字节跳动旗下企业级云与AI服务平台。聚焦大模型核心能力,依托字节自研豆包多模态大模型,凭借火山方舟一站式平台,提供模型精调、推理部署、智能应用搭建等全链路服务,结合高性能AI算力,助力各行业快速落地大模型数字化与智能化应用。

    立刻MV 网页版
    立刻MV 网页版

    立刻MV 面向音乐人、内容创作者和品牌团队,帮助用户低成本完成歌曲 MV、歌词视频、AI 分镜、图生视频与最终合成。

    蛙蛙写作 网页版
    蛙蛙写作 网页版

    蛙蛙写作 AI 创作工具,覆盖小说、剧本、文案,一键生成文稿,打通文字转视频全流程,高效解决创作难题。

    讯飞智作 网页版
    讯飞智作 网页版

    讯飞智作是一款基于语音合成技术、虚拟人驱动技术与数字人形象声音构建能力的 AI 数字人音视频创作平台。

    超级简历WonderCV 网页版
    超级简历WonderCV 网页版

    超级简历WonderCV是面向应届生和AI小白的智能求职平台,覆盖简历、面试与职业规划。

    音述AI 网页版
    音述AI 网页版

    音述AI,是一个以“用声音述说故事”为核心的 AI 音乐创作与声音分享社区。

    AionClaw macOS版
    AionClaw macOS版

    AionClaw 是可在桌面端运行的任务型 AI 助手,通过数字专家与技能市场组合办公、创作、数据和开发能力。

    Loomy macOS版
    Loomy macOS版

    Loomy 是科大讯飞推出的桌面 AI 助手,可通过对话、任务与工作目录协助处理办公、内容创作和资料整理。

    AirBuddy 3 macOS版
    AirBuddy 3 macOS版

    AirBuddy 3 是面向 macOS 的蓝牙外设增强工具,可集中查看 AirPods、Beats 与苹果设备电量,提供快速连接、播放控制、电量提醒、桌面小组件和多台 Mac 外设接力等功能。

    AirServer macOS版
    AirServer macOS版

    AirServer macOS版可把 Mac 转换为无线投屏接收端,通过 AirPlay 或 Google Cast 接收手机、平板和电脑画面,并支持多设备同时连接、高清镜像及会话录制,适合家庭娱乐、课堂教学、会议演示和应用展示。

    AnyDesk macOS版
    AnyDesk macOS版

    AnyDesk macOS版是一款适用于远程办公、设备维护和客户支持的远程桌面工具,可连接并操作异地计算机,支持文件传输、无人值守访问、会话权限控制及跨平台协作。

    WINDOWS 更多
    Aperty Windows版
    Aperty Windows版

    Aperty 是 Skylum 推出的 AI 人像修图软件,支持自然肤质修饰、瑕疵处理、面部与身体调整、预设及批量同步。

    火山引擎 网页版
    火山引擎 网页版

    火山引擎是字节跳动旗下企业级云与AI服务平台。聚焦大模型核心能力,依托字节自研豆包多模态大模型,凭借火山方舟一站式平台,提供模型精调、推理部署、智能应用搭建等全链路服务,结合高性能AI算力,助力各行业快速落地大模型数字化与智能化应用。

    立刻MV 网页版
    立刻MV 网页版

    立刻MV 面向音乐人、内容创作者和品牌团队,帮助用户低成本完成歌曲 MV、歌词视频、AI 分镜、图生视频与最终合成。

    蛙蛙写作 网页版
    蛙蛙写作 网页版

    蛙蛙写作 AI 创作工具,覆盖小说、剧本、文案,一键生成文稿,打通文字转视频全流程,高效解决创作难题。

    讯飞智作 网页版
    讯飞智作 网页版

    讯飞智作是一款基于语音合成技术、虚拟人驱动技术与数字人形象声音构建能力的 AI 数字人音视频创作平台。

    超级简历WonderCV 网页版
    超级简历WonderCV 网页版

    超级简历WonderCV是面向应届生和AI小白的智能求职平台,覆盖简历、面试与职业规划。

    音述AI 网页版
    音述AI 网页版

    音述AI,是一个以“用声音述说故事”为核心的 AI 音乐创作与声音分享社区。

    AionClaw Windows版
    AionClaw Windows版

    AionClaw 是可在桌面端运行的任务型 AI 助手,通过数字专家与技能市场组合办公、创作、数据和开发能力。

    Loomy Windows版
    Loomy Windows版

    Loomy 是科大讯飞推出的桌面 AI 助手,可通过对话、任务与工作目录协助处理办公、内容创作和资料整理。

    讯飞绘文 网页版
    讯飞绘文 网页版

    讯飞绘文网页版是科大讯飞推出的AI图文创作与内容运营工具,覆盖热点选题、文章生成、稿件校对、智能配图、排版发布和数据复盘等环节,适合自媒体创作者及内容团队在线使用。

    AirServer Windows版
    AirServer Windows版

    AirServer Windows版可把电脑变成AirPlay、Google Cast和Miracast无线投屏接收端,适合会议演示、课堂教学及家庭大屏分享。发送设备通常无需另装客户端,并可同时接收和智能排列多个镜像会话。

    AlwaysUp Windows版
    AlwaysUp Windows版

    AlwaysUp是一款面向Windows的系统服务注册与程序托管工具,可让普通应用、脚本及批处理在无人登录时随系统启动,并通过状态检测、异常重启、资源监控和邮件通知保障关键任务持续运行。