百度360必应搜狗淘宝本站头条
当前位置:网站首页 > 技术文章 > 正文

一起看看阿里开源的RPC框架,dubbo是如何做埋点处理的

ccwgpt 2024-09-17 12:50 35 浏览 0 评论

上边几次都是说的单体的拦截埋点,应用的内部进行的,很多的情况系统都是分布式的,怎么去监听RPC(远程过程调用),dubbo,RMI,springcloud,http。只要远程调用,跨进程调用都属于RPC,也不可能所有的能都涉及到,很多公司都有自己的封装,例如阿里的HFS,这次只针对dubbo这种RPC进行调用。

源码:https://github.com/limingios/netFuture/tree/master/源码/『互联网架构』调?链系统工程结构(111)



(一)Dubbo执行过程

对于dubbo的埋点,首先要了解dubbo的执行过程



节点角色说明Provider暴露服务的服务提供方Consumer调用远程服务的服务消费方Registry服务注册与发现的注册中心Monitor统计服务的调用次数和调用时间的监控中心Container服务运行容器

  • Dubbo调用过程


  • 消费者调用过程


(二)调用端埋点实现

  • 埋点目的
  • 1.捕捉消费者调用信息(远程接口、URL、参数、用时、返回结果、异常)
  • 2.传递TraceRequest
  • 调用信息模型表结构

名称类型描述servicePathstring服务路径serviceNamestring服务inParamjson返回结果outParamjson返回结果ErrorMessagestring异常信息ErrorStacktext异常堆栈ResultStatestring执行状态beginTimedate开始时间endTimedate结束时间addressIpstring远程IPfromIpstring调用者IP

  • 埋点位置

如何才能完整的捕捉到以上信息呢?那么就需要了解Dubbo内部的调用

1.分解调用过程为多个步骤。

2.这些步骤分别是在哪些协作线程上完成的?

3.经过了哪些方法?

4.经过了哪些过滤器?

  • 调用过程分解&线程协作


  1. 选择断点位置Debug调试调用过程
  2. 消费者调用线程源码分析:


  • 经过对源码的分析,埋点的位置如下:
  • DubboInvoker.doInvoke()
  • FutureFilter.invoke()
  • DubboInvoker.doInvoke() 方法最靠近调用方,异常捕捉范围较大,但是该位置无法通过Attachment 向下传递TraceRequest 参数,所以需要FutureFilter.invoke() 进行补充,其具体分工如下:
  • ·1.DubboInvoker.doInvoke捕获如下信息: 1、开始时间 2、服务路径 3、服务方法 4、输入参数 5、异常信息 6、本地地址
  • 2.FutureFilter.invoke 基于Attachment 向下传递参数 2、异常信息与堆栈 3、返回结果

DubboInvoker.doInvoke拦截源码参见 :com.cbt.agent.collects.dubbo.DubboConsumerRpcExceptionMonitorHandle#invokerBefore

FutureFilter.invoke拦截源码参见 :

com.cbt.agent.collects.dubbo.DubboConsumerMonitorHandle#invokerBefore

(三)调用端埋点实现

  • 埋点目的
  • 接收TraceRequest信息 ,并创建会话



  • 埋点位置:
  • 相对调用广方接收方埋点目的较简单,但同样需分析源码找准埋点位置
  • 提供者处理线程分析


经分析埋点位置选在离实际调用方法较远的EchoFilter过滤器理由是捕捉的信息更全面。

具体会话开启过程:

  1. 基于Attachment获取TraceId、ParentId、TraceProperties。
  2. 封装TraceRequest ,并此为参数开启会话。
  3. 在调用结束时关闭会话。
  4. 具体源码参见:com.cbt.agent.collects.dubbo.DubboProviderMonitorHandle#invokerBefore



(二)Servlet处理埋点

  • Servlet埋点目的
  • 1.生成TraceId
  • 2.开启关闭监控会话
  • 3.捕捉Http请求(url、客户端IP、参数、响应时长、响应状态码)
  • 埋点埋在哪?
  • 1.每一个Control方法
  • 2.DispatcherServlet.doDispatch方法
  • 3.HttpServlet.service 方法
  • 方案对比

方案优点缺点应用层Control类简单,风险因素低判别成本高,有局限性,只能根据 HttpServlet 子类或@RequestMapping进行识别。DispatcherServlet.doDispatch简单,适应性强1、只能针对spring mvc 项目 2、spring boot 项目不支持HttpServlet.service适应性强,与应用层和框架无关1、不同的容器ClassPath不一样,存在兼容性问题。 2、存在风险,几乎所有请求都会经过此方法 3、业务异常无法捕获

总合比较还是选择 HttpServlet.service 会更好些。

  • HttpServlet.service 埋点需要做的工作:
  • 1.字节码插桩
  • 2.请求拦截并获取请求信息
  • 字节码插桩流程

字节码插是指在数据装载前在HttpServlet.service 插入监控指令,以拦截Http请求,其插桩的过程。



请求拦截是指具体Http请求过来时进行拦截过滤,这么做主要是为了完成两个目的

1.开启监控会话

2.开启对Servlet响应过程的监控




(三)Redis 调用埋点



  • 埋点可选方案

方案优点缺点埋点jedis 类Get、Set等API方法简单直接工作量大,方法较多、需要了解每个方法特性埋点 Connection sendCommand方法全面、所有命令都会经过此方法存在未知风险、不方便计算执行时间、和返回结果埋点 Protocol全面、所有命令都会经过此方法存在未知风险、不方便计算执行时间、和返回结果



PS:源码中可以查看DevelopBootMain类,我看这代码也看了2天,原来老写业务代码,看看这确实很容易懵X,确实这才是有技术含量的代码。其实有没有技术含量不太重要,重要是的有没有商业价值。

相关推荐

盲盒小程序背后的技术揭秘:如何打造个性化购物体验

在2025年的今天,盲盒小程序作为一种新兴的购物方式,正以其独特的魅力和个性化体验吸引着越来越多的消费者。这种将线上购物与盲盒概念相结合的应用,不仅为消费者带来了未知的惊喜,还通过一系列技术手段实现了...

小程序·云开发已支持单日亿级调用量,接口可用率高达99.99%

2019-10-1914:1210月19日,由腾讯云与微信小程序团队联合举办的“小程序·云开发”技术峰会在北京召开。会上,微信小程序团队相关负责人表示“小程序·云开发”系统架构已经支持每天亿级别的...

程序员副业开启模式:8个GitHub上可以赚钱的小程序

前言开源项目作者:JackonYang今天推荐的这个项目是「list-of-wechat-mini-program-list」,开源微信小程序列表的列表、有赚钱能力的小程序开源代码。这个项目分为两部分...

深度科普:盲盒小程序开发的底层逻辑

在当下的数字化浪潮中,盲盒小程序以其独特的趣味性和互动性,吸引着众多消费者的目光。无论是热衷于收集玩偶的年轻人,还是享受拆盒惊喜的上班族,都对盲盒小程序情有独钟。那么,这种备受欢迎的盲盒小程序,其开发...

微信小程序的制作步骤

SaaS小程序制作平台,作为数字化转型时代下的创新产物,不仅将易用性置于设计的核心位置,让非技术背景的用户也能轻松上手,快速制作出功能丰富、界面精美的小程序,更在性能和稳定性方面投入了大量精力,以确保...

携程开源--小程序构建工具,三分钟搞定

前言今天推荐的这个项目是「wean」,一个小程序构建打包工具。在wean之前,大量小程序工具使用webpack进行打包,各种loader、plugin导致整个开发链路变长。wean旨在解...

校园小程序的搭建以及营收模式校园外卖程序校园跑腿校园圈子系统

校园小程序的架构设计主要包括云端架构和本地架构两部分。云端架构方面,采用Serverless架构可以降低技术门槛,通过阿里云、腾讯云等平台提供的云服务,可以实现弹性扩容和快速部署。例如,使用云数据库、...

盲盒小程序开发揭秘:技术架构与实现原理全解析

在2025年的今天,盲盒小程序作为一种结合了线上购物与趣味性的创新应用,正受到越来越多用户的喜爱。其背后的技术架构与实现原理,对于想要了解或涉足这一领域的人来说,无疑充满了神秘与吸引力。本文将为大家科...

月活百万的小程序架构设计:流量暴增秘籍

从小程序到"大"程序的蜕变之路当你的小程序用户量从几千跃升至百万级别时,原有的架构就像一件不合身的衣服,处处紧绷。这个阶段最常遇到的噩梦就是服务器崩溃、接口超时、数据丢失。想象一下,在...

认知智能如何与产业结合?专家学者共探理论框架与落地实践

当前,以大模型为代表的生成式人工智能等前沿技术加速迭代,如何将认知智能与产业结合,成为摆在各行各业面前的一个问题。论坛现场。主办方供图7月4日,2024世界人工智能大会暨人工智能全球治理高级别会议在...

现代中医理论框架

...

认知行为(CBT)中的ABC情绪理论

情绪ABC理论是由美国心理学家阿尔伯特·艾利斯(AlbertEllis1913-2007)创建的理论,A表示诱发性事件(Activatingevent),B表示个体针对此诱发性事件产生的一些信...

说说卡伦霍妮的理论框架,对你调整性格和人际关系,价值很大

01自在今天我主要想说下霍妮的理论框架。主要说三本书,第一本是《我们时代的神经症人格》,第二本是《我们内心的冲突》,第三本是《神经症与人的成长》。根据我的经验,三本书价值巨大,但并不是每个人都能读进去...

供应链管理-理论框架

一个最佳价值的供应链,应该是一个具有敏捷性、适应性和联盟功能(3A)的供应链,其基本要素包括战略资源、物流管理、关系管理以及信息系统,目标是实现速度、质量、成本、柔性的竞争优势。篇幅有...

微信WeUI设计规范文件下载及使用方法

来人人都是产品经理【起点学院】,BAT实战派产品总监手把手系统带你学产品、学运营。WeUI是一套同微信原生视觉体验一致的基础样式库,由微信官方设计团队为微信Web开发量身设计,可以令用户的使用感知...

取消回复欢迎 发表评论: