pesco
(磐石)大数据平台 -PescoData

PescoData产品架构
pescodata Product architecture

      PescoData是尚源智慧原始团队研发的企业级大数据平台。经过多年的不断打磨和实践,PescoData基于数据、模型和场景化应用的全流程设计,凭借强大算法引擎与大数据处理能力,打造智能、易用的人工智能分析与应用构建平台,助力AI时代的行业和企业实现数据化运营。

  • 容器化组件
       以PescoCloud原生云操作系统为核心的基础设施,为云上的大数据核心组件和应用部署以及资源管理调度提供全方位的支持。为大数据平台提供容器化标准的核心组件和服务安装部署。
  • 核心组件

       以Hadoop基础框架的HDFS和调度引擎为基础,提供内存计算、流式处理的计算引擎,数据仓库、nosql、分析数据库和流存储的数据存储引擎,机器学习和深度学习的数据科学平台,支持MPP架构下的即席查询。

  • 数据服务

       内置流程引擎和DAG支持,以可视化web控制台提供数据接入和数据同步,数据编排和数据血缘,数据缓存和数据可视化等。通过全局Gateway为行业提供数据服务,并提供流任务管理和机器学习编程。

  • 一体化平台
       PescoData提供统一的安全及权限控制,快速的安装部署和监控管理,支持多租户的安全隔离和资源调度。同时PescoData提供数据治理、数据服务和AI模型的高级数据服务支撑框架,加速数据业务创新。

企业级自助式数据分析应用工具

秉承“专业 敏捷 易用”的设计理念,丰富的可视化效果、灵动的视觉交互探索手段、交互式的即席分析体验,让业务人员更好地观察数据,与数据对话,发现数据规律,获取敏锐洞察,让数据分析更简单、更智能。 

data01new

PescoData大屏展示

PESCODATA提供基于不同视角的可视化大屏解决方案,支持企业经营管控、企业形象展示、生产管控等不同领域大屏展示,为决策者提供“科学决策”的依据。

赋能数据生态
Data ecology

  • 数据资产

       为企业提供统一的数据整合与管理工具,可视化呈现数据与服务;提供元数据与血缘分析,解决数据一致性、数据质量、数据共享等核心问题,汇聚并整合数据,使数据可视可管可用,形成企业行业资产发挥数据价值。

  • 数据服务

       提供数据对外API和数据编排服务;基于数据缓存对外服务提供冷热机制,融合部分数据编排功能,提供常用的数据分析工具组件,具备数据加密、扰乱等特色功能。用户使用可视化可拖拽的数据编排可以对数据进行高级加工和变换,连接对应服务。

  • 工业智能

       在工业领域通过对企业、设备、产品、生产、运营等统一进行数据资产管理,构建知识体系模型和工业模型库,提供建模分析服务开发创新服务应用,建立面向企业的工业数据服务大脑,为企业实现智能业务决策和数字化生产流程控制,推动行业和企业实现数字化智能化。

PescoData Paas的优势
pescocloud paas advantage

新一代数仓引擎

对数据仓库实时动态更新,低延迟高并发;支持高效率的增量抓取,数据回滚和存储点操作;自定义区间数据更新。

容器化资源调度

基于容器化的资源调度机制,充分利用资源提升处理和分析效能;一键安装和升级,简化大数据上云;提供统一的预警和健康监测功能。

热数据缓存管理

热点、高频或指定的数据缓存机制,可与新一代数据仓库实时联动;支持可插拔存储,可通过webUI和命令行(CLI)调用。

多维度数据服务

倾斜数据处理优化机制,即时查询服务及分析服务;亚秒级、低延时预处理数据分析;OLAP业务查询和交互式查询分析。

多租户安全机制

安全控制和资源调度的集中管控和租户隔离;支持Kerberos和LDAP认证,细粒度的鉴权和权限控制;数据血缘和数据安全。

智能化场景

赋予企业数据智能化力量,快速构建企业智能数据图谱;行业快速学习和模型建立,通过自学习强化AI能力。

大数据云产品
Big data cloud products

      PescoData在服务应用层提供了与大数据和人工智能相关的多种产品,这些产品由磐石大数据平台中的基础组件构成,产品内部组件之间自动建立逻辑依赖从而实现完整的产品功能,可以覆盖数据处理与分析的常见场景。

多租户管控
Multi tenant control

      PescoData管理平台围绕应用、数据、租户和用户等概念,实现权限和资源的合理划分与管理,由统一管理平台对多租户提供服务。租户管理员具有租户最高管理权限,负责权限的管理。租户内部以应用为单位管理产品实例,实现清晰合理的权限管理划分粒度。

       以磐石容器云平台为基础, PescoDATA可实现多租户间的应用隔离、数据隔离、资源隔离、运行隔离,即在同一平台彼此之间也完全透明。对于行业和企业自建私有云,PescoDATA可对企业内部租户提供统一的数据管理,企业共享数据放置于共享数据区,高价值数据和敏感数据位于敏感数据区,从而保证统一的企业元数据管理和数据质量控制,维护统一的数据生命周期管理,推动数据资产化。

统一图形化运维监控
Unified graphic operation and maintenance monitoring

       PescoData内部部署日志管理服务,对租户内部和平台实现统一的日志综合运维管理,提供以下六种功能。

data04

       PescoData的运维管理系统在吞吐性、安全性、可用性上占据优势,为云平台提供高质量的运维服务。

  • 全链路高吞吐
       吞吐量最高可以达到TB级,单节点每秒日志收集可达数万条,3节点的监控集群每日收集日志可以达到数亿规模。
  • 全链路安全
       日志数据经过Kerberos加密,不同租户的日志彼此隔离,用户读取和分析日志时需要得到安全认证。
  • 全链路高可用
       进行自身状态监控,保证数据高可用,数据不丢不重。

PescoData平台展示