机器学习框架:开源的好,还是自研的香?

Posted 高校俱乐部

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了机器学习框架:开源的好,还是自研的香?相关的知识,希望对你有一定的参考价值。

 如今,机器学习在图像识别、多媒体创作、自然语言处理、搜索广告推荐等领域都有着广泛的应用和不俗的表现。

面对日益繁杂的应用场景,机器学习框架有助于节省编写大量底层代码的精力,也能省去部署和适配环境的烦恼,更聚焦业务场景和模型设计本身,因而被越来越多的行业接受。

全世界最为流行的深度学习框架有Tensorflow、PyTorch、Caffe、Theano、MXNet、Torch、PaddlePaddle等,这些开源框架均表现出色,且各有各的优势和特色。随着深度学习技术的普及,各家框架的成熟化,深度学习技术的门槛会越来越低。

但对于像小红书这样业务发展迅速的产品而言,双列场景和以UGC内容分发为主的特点,对系统的高时效性和稀疏内容表达提出了更高的要求,数据的处理挑战与日俱增。因此,开发符合自身业务需求的机器学习框架往往是更好的选择。

与此同时,在机器学习框架的实际应用中也诞生了许多共性的问题:

✦ 掌握一个深度学习框架,开发者需要做哪些准备?

✦ 深度学习框架能“包治百病”吗?是否适用于所有应用场景需求?

✦ 如何充分利用CPU、GPU的硬件能力提升机器学习效果?

✦ 国内的深度学习框架有哪些不同于欧美国家主流深度学习开发框架的特点和创新?

就在10月19日19:00,小红书技术REDtech邀请到了国内的深度学习框架初创公司One Flow的创始人袁进辉,与小红书智能分发部负责人瑞格带来新一期【REDtech 来了】技术直播。他们将围绕机器学习框架在工业界实际应用的挑战与前景展开精彩分享。

袁进辉

2008年于清华大学计算机系获得工学博士学位(优秀博士学位论文奖),2008~2011年在清华大学计算机系从事计算神经科学方面的博士后研究,原微软亚洲研究院主管研究员。于2017年创立北京一流科技有限公司,致力于打造新一代深度学习框架OneFlow。目前,他还兼任之江实验室天枢开源开放平台架构师,北京智源人工智能研究院大模型技术委员会委员。

 瑞格

小红书智能分发部负责人,在小红书搭建了支持超大规模参数的在线学习训练框架,支持搜广推个性化模型学习,通过前沿算法的不断探索显著提升了分发效果。曾在百度凤巢从事超大规模分布式训练算法研究,实践了如万亿特征LR、GBDT、大规模稀疏离散DNN等模型工业界应用,并在工业界广泛应用。在百度研发了适用于搜索广告相关性问题的半监督学习算法,显著提升了广告相关性。

✦✦ 详细日程 ✦✦

 

✦✦ 直播收看攻略 ✦✦

时间:2022 年 10 月 19 日(周三)19:00-21:00

直播平台:关注【小红书技术 REDtech 】视频号,预约直播,不见不散。(直播也将在抖音与B站同步进行,搜索“小红书技术 REDtech ”)

扫描下方二维码进入直播交流群,将第一时间获取直播链接及开播提醒。

我们将在微信群内发布嘉宾演讲精华和抽奖活动, 参与互动提问还有机会被嘉宾pick解答哦。

小红书技术秋招热烈进行中

还有以下岗位虚位以待

前端开发工程师

ios开发工程师

机器学习算法工程师

Java开发工程师

测试开发工程师

数据引擎开发工程师

……

点击【小红书招聘】,抓紧投递

REDcity等你加入!

以上是关于机器学习框架:开源的好,还是自研的香?的主要内容,如果未能解决你的问题,请参考以下文章

阿里开源支持10万亿模型的自研分布式训练框架EPL(EasyParallelLibrary)

19行关键代码,带你轻松入门PaddlePaddle单机训练

清华深度学习框架 Jittor 开源,创新元算子和统一计算图,推理速度可提升 10%-50%

小米AI移动端深度学习框架MACE开源了!

保存千年!小米自研机器学习框架MACE已被GitHub储存在北极

华为深度学习框架MindSpore正式开源:自动微分不止计算图