一次日常需求处理带给我的思考

Posted 阿里巴巴淘系技术团队官网博客

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了一次日常需求处理带给我的思考相关的知识,希望对你有一定的参考价值。

大淘宝技术一位新人小同学在一次日常需求处理后的感悟,整理成文章后分享给大家,望可以得到各位前辈的指点、各位新人同行的交流。

需求背景

团队项目原来使用的云存储中间件已经下线了,由于历史原因未能及时将其全部迁移到新的云存储平台,进而导致部分功能在使用时出现问题。


比如在某些需要上传并存放文件的场景下,会导致上传失败,影响正常的业务逻辑;在某些需要下载文件的场景下无法找到正确的路径,从而无法下载相关业务数据。

这个问题之所以被发觉是因为前台客诉反馈过来:某个菜单里的导出按钮在点击后没有反应

排查思路

收到反馈后,我的思路大概是这样子的:

首先是先评估下这个问题的影响面,我的思路也比较简单:这个问题持续了多久了?影响到了多少用户/操作的触发呢?处于业务中的那一步?

还好云存储中间件这个系统是面向内部的,因此待导出的数据并不多。并且因为它是独立于业务主流程的,是需要单独手动触发的一个非必然操作,因此并未阻碍主流程的执行,影响范围较小。

在确定了大致的影响范围之后,就要进入排查环节。

排查环节可以从日志执行流程业务逻辑以及第三方依赖这几个方面入手(受个人的思维局限性影响,大家有建议请指正),套上这次具体的场景,大概就是以下几个问题。

  1. 服务器日志中有无错误信息?

  2. 提交后的表单是否通过了验证逻辑并进入下载处理流程?

  3. 下载处理流程是怎么样的?

  4. 中间是否有第三方依赖?以及第三方依赖状态是否正常?

我们把这些问题解了,大概率也就找到了这个bug藏在了哪里。

工作过程

找到问题在哪后,我先去看了后台被触发的方法,以及方法内打印的日志内容:save to *** failed, service not found,然后顺藤摸瓜找到了问题的原因:调用了某个已经下线的云存储中间件。

导出操作的时序图简化版如下:

导出操作时序图

在查看项目代码的时候,我发现之前有前辈做过相关工作的迁移,并且封装了几个上传到新的云存储平台的方法,大概是这个按钮不常被点击,历史迁移的时候也就给他漏了。于是结合老的文件导出的处理流程,我在已有方法的基础上新增了可以接收 File 类型的方法,文件存放的位置则沿用了之前前辈所使用的 bucket 和父目录。(bucket: 存放文件的某个桶,可以将不同的 bucket 理解为不同的存储空间)

新增完方法之后,为了简化该方法在使用时的成本,就在方法体内部根据 用户ID 和 UUID 自动生成了父目录下的文件子路径,从而将其封装为了仅需要一个 File 类型参数即可上传文件的方法。

相比于其他上传方法在调用前需要定义好几个方法参数来说,这里只需要一行代码直接 save 就行了。

这样乍一看感觉没什么问题,甚至在提交CR的时候我都觉得这个方法很不错,用起来可以说是干净又卫生。既然这样,我为什么还要写这篇文章呢?

问题就在于,它可能有点“干净”但并不“卫生”!

“干净”在于之前说的调用的时候只需要传入 File对象即可,对已有代码块只需要改动一行就成。那为什么说它不“卫生”呢?

思考总结

在代码上线前的CR环节,师兄从代码的安全性、通用性、维护性等几个角度进行了评估,发现存在很多问题。

安全性 角度来讲:不安全。本文之前有提到 “沿用了之前前辈的 bucket”,这点就是个容易被忽略的点,自己在使用这个 bucket 的时候并没有去查看这个 bucket 中文件的访问权限问题,而是直接默认“这个项目中用到 oss 存储的地方都是这个 bucket,应该只申请了这一个 bucket ”,那我直接用也是 ok 的。

这其实是一个十分危险的想法,只把目光放到了项目上,而并未下沉到业务角度。在 CR 的过程中我们发现,之前使用这个 bucket 存放内容,是因为对应的业务方法和存放的数据都是可以对外的。而本次需求对应的业务方法,则并不对外,而是针对公司小二的,那再用这个就不合适了。

通用性 角度来讲:不通用。设计初衷是这个方法可以直接传入对象就能存储,不需要再写几行代码来定义对应的 bucket 和文件子路径;但是其实在我们舍弃掉参数入口的时候,也关掉了灵活性和通用性的大门。这样的设计意味着如果用户使用这个方法,那么文件的存储配置就必须得用你这个方法里的了,那万一人家想改改配置呢?这种情况下就造成了使用者很大的不便。

整体维护性 角度来讲:目录不易维护。前边有提到,子目录的路径是在方法体内部由登录用户的ID和 UUID 生成的。这样的目录划分方式其实并不合理,因为我们存放的是文件,而在维护存储的时候,我们可能会时不时整理/清理目录与文件。

而这个整理/清理的维度通常是从业务角度出发的,并非用户角度,比方说,我们要清理某月以前的历史退款信息。一看目录,看到的都是一堆用户的id,这个时候负责处理的同学估计就是一脸懵了。相比较而言,文件目录首级以业务进行分类,下一级以用户信息或者日期信息再分类就会稍好点。那要怎么实现呢?答案就在 “通用性” 那一条:增加方法入参,把路径定义的权限给具体的业务方法,虽然业务方法可能要多写两行代码,但是最终的效果是好的。

举个例子

以上就是这次需求处理的整个流程了,综上,给自己最大的收获就是:

  1. 当某个需求中使用到了自己之前没用过的依赖/中间件的时候,要先去了解这个中间件的特性,以及在这个中间件中自己团队已有的配置信息及其所代表的含义,不要盲目根据看到的代码去YY;

  2. 对于一个方法的设计,不要去盲目的追求简洁或者通用,要以实际业务出发去思考如何设计,否则可能会适得其反;

  3. 任何时候安全性一定要纳入需求处理时的考虑范畴,千万不要觉得一个功能很隐蔽就不用着重考虑它的安全性,没有人能确定迟发性的影响会“送”我们一个多大的故障。

作为新入行的新人,我的经验和思考有很大的局限性,欢迎各位前辈指正文中内容的不足或给出建议,不胜感激。

团队介绍


我们是淘宝商家与开放技术-服务市场团队,主要负责淘宝服务市场及其子市场相关产品。服务市场服务于全体淘宝天猫商家,为商家提供电商经营链路中的工具、内容、运营等服务与能力。
服务市场致力于实现快捷、完善、低成本、有保障的商家服务交付体验,助力商家更好的进行电商经营。欢迎优秀服务商们入驻我们平台,一起构建更好的淘宝天猫生态!

✿  拓展阅读

作者|肖尊严(扶缨)

编辑|橙子君

以上是关于一次日常需求处理带给我的思考的主要内容,如果未能解决你的问题,请参考以下文章

日常需求一次使用EasyExcel而引发的问题与思考~

日常需求一次使用EasyExcel而引发的问题与思考~

敦煌游记

奇葩说结束了,但带给我的思考却刚刚开始

奇葩说结束了,但带给我的思考却刚刚开始

我的读书列表(持续更新......)