NetInside网络流量分析的可观测性功能

Posted 2022-12-23 NetInside_

一、运维需求

近年来，随着云计算、大数据、人工智能、区块链等高新技术的变革，加速了企业业务模式的创新发展，对传统企业掀起了一场数字化浪潮，逐步向数字化业务转型，运营模式和消费场景都出现了巨大变化。

与此同时，新技术的采用，也带来了竞争的加剧。在互联网浪潮的推动下，企业之间展开了一场模式与效率之争，企业的数字化业务要想拥有真正的竞争力，IT能力是关键，数字化业务体验是核心。今天任何一家企业对内对外的IT系统都是错综复杂的，IT运营能力直接影响企业数字化业务的质量与效率，决定了企业的市场开拓能力和整体竞争力。

二、NetInside可观测性方案

可观测性方案是网深科技NetInside全流量回溯分析解决方案中重要组成之一，用户通过创建或共享适合自身的观测视图，实时掌握全局。

在可观测性配置中，系统提供多种视角供个性化展现，集十余个维度、上百个指标、几十种组件任意组合于一体。使用可观测性功能，能够将系统自动识别的任何流量、任何对象，以及任何对象的钻取分析结果，按照场景、行业、部门及个人等需求，形成独立的实时监测分析与告警大屏。同时，大屏中的任何对象，支持进一步钻取分析。

产品架构

NetInside可观测性解决方案由软硬件结合组成，即可观测分析平台软件（下称：分析平台）和全流量回溯分析系统（下称：分析系统）硬件组成。其中可观测分析平台是主体部分，分析平台通过安全连接读取全流量分析系统及其它数据源的分析指标和数据，实现全面数据分析和监控。全流量回溯分析系统为独立的运行平台，系统内含操作系统及程序，系统集中数据采集、计算、分析和存储于一体。用户只需要通过浏览器即可轻松访问可观测分析平台或全流量回溯分析系统，查看和展示自己关注的内容。

对可观测分析平台来说，每台回溯分析系统仅为它的一个数据源。分析平台通过安全端口读取每台分析系统的指标数据，根据实际需求独立或关联展示。

 

 采集点即为全流量回溯分析系统，在各个关键节点、区域或位置部署分析系统，通过交换机端口镜像采集关键区域的网络通讯数据，分析并存储。每一台服务器加载各个功能模块对采集得到的网络通讯数据做深入分析，取得需要的各种网络流量指标、应用性能指标和产生相关警报。

用户通过浏览器实现对可观测分析平台和回溯分析系统访问查看，分析平台和分析系统的数据各自保存。可观测性分析平台对回溯分析系统服务器采集的数据和分析结果进行集中的管理，实现集中的告警分析、报表汇总、配置管理等重要功能，同时提供数据的挖掘分析功能，方便用户进行查看、检索、数据挖掘等应用。

数据采集和存储方式

通常情况下，回溯分析系统部署在靠近监控的线路旁，监控方法是通过从交换机把流量镜像，然后把镜像的流量导入到设备里分析。整个安装与配置过程在一个小时内能完成，其间对网络是零影响，并且服务器或客户端不需安装任何代理程序（如SNMP代理）。

可观测性分析平台为独立的系统软件，可以安装在任何操作系统平台。回溯分析系统和可观测性分析平台分别为独立的运行主体，互不影响。

分析平台数据采集和存储

可观测分析平台可以独立安装、配置和使用，其自带数据存储和前端服务。

在分析平台，通过添加数据源，获取想要分析和展示的数据。每台回溯分析系统都可以作为分析系统的数据源。分析平台获取数据源的方式灵活多样，包括各种数据库导入、日志文件导入、前端埋点、爬虫数据等等。

所有与分析平台展示相关的配置信息，独立保存在分析平台数据库。分析平台分析呈献的指标数据，都通过标准API即时读取。

分析系统数据采集和存储

为实现全面的链路和应用监控，分析系统常见的数据采集方式有2种：

多层应用架构环境

用户环境由多个设备组成的多层架构应用环境中，数据源来自多台网络设备，需要汇聚数据，然后接入到性能分析设备。

 单一应用架构环境

当应用架构较为集中时，数据源可从少量设备镜像获得，只需在对应设备进行镜像设置，然后将镜像流量接入性能分析设备。

 全流量支持多种原始数据存储方式，针对不同的应用，可选择是全包存储，还是截取包头一部分存储。

同时，所有的分析数据以动态聚合的方式，长期保存在设备中。

三、主要功能简介

数字化技术与业务场景融合 

在多种规模化应用的推动下，数字经济发展速度前所未有。数字产业与实体经济融合加速，数字以创新之力与各个行业业务场景相呼应，推动企业降本增效。

针对不同行业的不同业务场景需求，分析平台结合网络架构和业务流，实现个性化呈现。例如汽车行业对SAP接口应用性能监测，实时了解业务接口的访问信息、快慢状况和用户体验。

用户体验和性能管理

无论BS架构还是CS架构应用，使用可观测性分析平台，都可以自动识别和监测分析其最终用户体验状况。同时，配合与用户体验相关的指标参数，创建直观的可视内容。

 分析平台根据实际网络架构或业务流程状况，形成数字化“孪生”场景，轻松监控不同场景下的业务质量及运行情况。

自动化流程落地

推拽的对象布局，下拉式参数选择，多维度视角，只需轻敲键盘和点击鼠标即刻创造出满意的监测画面。

目前诸多企业技术团队往往依赖自己的开发、运维内容选择组件自带的监控工具，或自行编写的监测脚本、开源监控软件对相应对象进行监控，如基础网络环境、系统环境、服务器负载性能等数据监控等。但这种方式形成了只对各自负责的内容进行监控和管理，无法实现全局性统揽管理。

分析平台通过自动化流程，不但帮助用户了解后端性能、代码运行情况，还对前端用户体验呈现一个清晰的了解，业务人员、运维人员不需要花费更多的精力和时间来收集前端用户访问体验和访问故障信息。

四、方案优势

根据实际需求，采用业界领先的NetInside可观测性分析平台，该平台通过实时访问全流量回溯分析中的数据，实现个性化可观测性需求。

分析平台适配各种国产化服务器和设备，满足国内不断国产化需求。数据采集点产品通过旁路部署方式，对关键网络链路、关键网络节点、负载均衡设备、业务集中系统群的通信情况进行自动化发现，并对这些系统在网络中的运行状态进行实时监控、分析和告警。相比其他解决方案有着以下突出优势：

智慧运维，保持领先——业务的迅猛发展对配套服务提出更高要求，随着业务的迅速增长，以及新业务的不断上线，给支撑人员带来巨大压力，急需随业务发展同步提升整体运维、服务和监控能力。NetInside可观测性分析平台集业务、应用、网络、用户体验和安全可视于一体，以领先的技术水平，助力用户落地运维需求。

关注最终用户体验——IT能力是关键，数字化业务体验是核心。今天，任何一家企业对内对外的系统都是错综复杂的，IT运营能力直接影响企业数字化业务的质量与效率，决定了企业的市场开拓能力和整体竞争力。分析平台自动识别和监测分析任何业务平台的最终用户体验状况，事先优化，事后定位，都有理有据，高效快捷。

性能管理与安全分析结合——分析平台数据基于全流量分析技术，不但提供业务/应用/网络性能分析，故障定位能力，而且具有对隐藏攻击或潜在风险等安全分析能力。

旁路数据采集，全面展现——采集平台旁路监测分析所有网络流量，所有应用，所有用户，不会对现有网络结构、应用架构造成任何影响。分析平台分析亿万级数据流，从最小报文到应用语句，关系梳理，有序存储，秒级展示。

快速部署，即刻使用——仅简单配置一个步骤，即可将业务、应用、网络性能监控投入运行，在运维中迅速发挥价值，完全避免了传统方案部署实施周期长、投入大、见效慢的缺点。

个性化设计，享你所想——无论是大屏视图，还是监控视图、分析视图和告警视图分别针对网络运维中常见的场景而设计，不管是监控重要元素的状态，还是进行钻取分析，都非常方便，不像其他解决方案常见的指标泛滥、脱离场景的陈旧式视图设计。​