IDP:云原生的“Jupyter”,让算法团队更高产

Posted CSDN资讯

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了IDP:云原生的“Jupyter”,让算法团队更高产相关的知识,希望对你有一定的参考价值。

2022年1月14日,国产自研的云原生AI开发生产平台——IDP(Intelligent Development Platform) 试用版正式发布。IDP由白海科技研发,目标在于为数据科学家、算法工程师等提供易用的 AI 开发与生产工具,填补该领域国产软件的空白,打造更具极致体验的“Jupyter”。

AI 时代已至,但国产易用软件尚为空白
在数据、算法和算力“三驾马车”的协同推进下,AI的应用飞速发展,已逐渐渗透进国民经济的各行各业。伴随AI大生产而来的,是数据的庞杂繁芜、模型的日益复杂和计算量的指数级增长,算法开发团队亟需数据治理、模型开发、高性能计算等AI基础软件,以帮助其低成本、低门槛地进行AI开发与生产。
然而,目前国内市场对数据科学家和算法工程师在AI开发生产中的痛点关注不足,缺乏易用的、一体化的国产AI开发与生产工具。现存市场解决方案普遍为国外产品,这些产品或存在跨境使用速度较慢、体验受损的问题,或价格高昂、加重企业利用AI技术进行智能化转型的负担。
因此,白海科技创始团队决定打造AI智能开发平台IDP,专注赋能数据科学家、算法工程师以及欲转型为数据科学家的大数据工程师,为其提供易用的AI开发与生产工具,让其更加专注于模型开发和数据分析本身,提升工作效能,同时帮助企业提升效率,降低AI开发与应用成本。

云原生、专业轻量和按需使用
企业数据上云已成为不可逆转的趋势,从渗透率的角度讲,云服务已难以被称为一种“新兴技术”。根据红杉中国《2021企业数字化年度指南》中的调研数据,已有超过70%的企业使用了云服务,47%的企业正在大规模推广并应用。同时,随着企业业务的复杂化和云服务玩家的多元化,多云部署也成为新的趋势。
随着云服务的蓬勃发展,云原生应用也凭借快速部署、灵活扩展、降低成本等优势,逐渐受到广大企业的关注和喜爱。作为新一代AI开发生产平台,IDP致力于打造云原生的“Jupyter”,将Jupyter的交互式开发体验和云原生的卓越性能进行完美的结合,为广大开发者和企业客户提供更加易用、灵活、高效、可迁移的AI开发生产工具。
IDP并非工具集成式的、厚重且大而全的机器学习平台,而是以IDE为唯一入口,专业轻量、按需使用的工具平台。
IDP以集成开发环境IDP Studio为唯一用户交互界面,通过内置可灵活安装与卸载的机器学习库/包、算法开发涉及的各功能组件等,让使用者可在IDP Studio内一站式、稳定、高效地完成包括数据准备、数据探索、模型构建、模型训练、模型评估模型部署与发布的全流程工作。IDP Studio同时支持直接使用SQL进行数据处理,并支持团队协作编程和实时共享。
此外,值得一提的是,为满足专业算法开发团队对性能的要求,IDP以高性能分布式计算引擎IDP Engine为核心支撑,帮助企业实现智能分布式执行,提升算法开发效率,降低资源消耗成本。

易用、性能和协同
IDP主要具有三大核心特征:
易用:本地 IDE 级使用体验
IDP可提供与本地IDE同样优质的使用体验,同时满足交互式和非交互式编程的需求;且编程环境提供代码智能补全、代码自动修复等编码辅助功能,提升开发效率。
数据科学家可在同一开发环境中稳定、便捷地实现SQL处理和ML全流程工作,无需切换工具和平台;同时,可依托IDP Studio内置的主流数据科学库包和多种机器学习框架,快速上手算法开发。
性能:高效率、低成本
IDP通过可视化工作流编排与管理功能,帮助数据科学家和算法开发团队对数据预处理、数据探索、机器学习、深度学习、DB Engine等工作进行统一调度,提升开发效率。
IDP可帮助企业进行精细化的算力资源管理,支持抢占式调度和计算资源自动扩容,具备进程级别的断点续跑和自动休眠功能,帮助企业提升资源利用效率、减少资源浪费、缩短训练等待时间。
另外,IDP通过数据并行、代码分片、代码编译优化等方法对单机版代码进行优化,实现智能分布式执行。
协同:团队协作、多云兼容
IDP支持协作编程,算法团队可进行模型和项目的实时共享、协同编辑、评论交互等,以最大化团队生产力。
作为云原生的AI开发生产平台, IDP天然支持多云部署,为客户提供多样便捷的选择。

未来重点计划:核心开源
下一步,白海科技计划将IDP中IDP Studio的核心功能开源。同时,白海将进一步完善产品功能,一方面持续优化IPD Studio,以便更高效地满足企业对于团队协作和AI生产的基本需求;另一方面,夯实分布式计算引擎IDP Engine, 助力企业提升算法开发与训练的质量和效率。
白海科技创始人兼首席执行官卢亿雷表示:“提升专业数据科学家的生产力、促进企业的AI创新是IDP的初心,更是引领IDP未来发展的灯塔。我们希望通过开源IDP Studio,弥补国产易用IDE的市场空白,让算法开发团队有更多专业、简单、易上手的工具选择;希望通过开放的生态,与广大行业伙伴、开发者和客户,携手推进AI的开发、应用和落地,加速企业智能化转型与创新。”


荣誉体验官,IDP等你来
IDP试用版面向极客数据科学家和迫切希望提升算法团队生产力的企业,开放少量优先试用名额,您将有机会抢先体验IDP核心功能,探秘国产AI开发生产工具的惊喜。
与此同时,希望您积极反馈和分享实际场景下的试用体验,推动IDP的成长,共创中国AI基础软件工具的未来!

请点击链接申请试用: https://www.baihai.co/invitation
或扫描下方二维码联系您的专属顾问 

以上是关于IDP:云原生的“Jupyter”,让算法团队更高产的主要内容,如果未能解决你的问题,请参考以下文章

云原生应用架构转型不好做?阿里云这个平台让你一步到位!

云原生时代需要什么样的存储系统

拥有新时代的通信协议,引领云原生迈向更高的舞台解密Dubbo3是如何从微服务升华到云原生领域

阿里云边缘云原生团队招兵买马!

围观|第一代云原生企业米哈游如何让想象发生?

课程报名 | 《六周玩转云原生》- 云原生下的DevOps与持续交付