# td-data **Repository Path**: summithwang/td-data ## Basic Information - **Project Name**: td-data - **Description**: td-data大数据开发平台 - **Primary Language**: Java - **License**: Apache-2.0 - **Default Branch**: 0.4.0 - **Homepage**: http://112.111.16.43:10000/ - **GVP Project**: No ## Statistics - **Stars**: 0 - **Forks**: 8 - **Created**: 2024-07-18 - **Last Updated**: 2024-07-18 ## Categories & Tags **Categories**: Uncategorized **Tags**: None ## README # TD-DATA大数据开发平台

## 如果您觉得有帮助，请点右上角 "Star" 支持一下谢谢 ## 如果贵司有类似数据中台需求的或有合作意向请联系作者：Tindy（李龙桂，18160987236，微信同号，欢迎打扰） ## 1. 产品概述 TD-DATA大数据开发平台，简称TD-DATA，是面向企业级市场打造的新一代大数据PaaS平台，支持和私有化部署，TD-DATA在统一、提效、规模等方面做了大量的企业级增强。 ### 统一传统大数据系统分而治之，功能散乱，给运维和使用上带来诸多不便。大数据云遵循“统一”思想，旨在打通大数据处理全流程，提供统一门户、统一调度、统一元数据管理、统一资源管理。 ### 提效区别于 Hadoop 裸平台，大数据云意在提升大数据处理效率，支持大数据加工全流程可视化界面操作，提供向导式配置、在线代码编写、拖拽式工作流编排、智能的全链路监控告警体系，非大数据专业人员也能分析处理大数据。 ### 规模随着业务量不断上涨，企业开始对大数据规模提出要求。Hadoop 系统本身支持分布式扩展，但达到一定规模会出现性能瓶颈，需要深度的优化措施保障大规模集群的正常运行。大数据云底层引擎具备高度的可扩展性，支持高达万台规模、百万级别作业调度、百万 QPS 实时处理、十万以上节点采集规模。 ## 2. 功能介绍 TD-DATA主要包含八大组件、两大支撑体系和 1 套公共服务。如下图所示： ![](td-doc/image/功能介绍.png) * 八大组件分别是数据采集组件、数据集成组件、数据开发组件、数据分析与可视化组件、数据服务组件、智能调度组件、数据管理组件和存储计算组件，八大组件是TD-Data的核心能力，支持大数据一站式处理与分析，通过灵活组装成不同的项目空间，适配大数据多种开发应用场景。 * 两大支撑体系分别是运维体系和运营体系。运维体系提供TD-Data全面的监控告警、服务管理、故障排查等能力；大数据运营体系提供产品管理、服务开通、资源计量等能力。两大体系同时保障大数据云正常对外服务。 * 1 套公共服务主要是平台端提供的共享服务，包括统一的平台门户、项目管理机制、产品资源管理以及用户权限体系。大数据云提供统一的平台门户，用户在切换产品时无需多次登录；大数据云提供项目管理机制，通过项目制来管理资源、人员、数据和作业；资源管理主要对开通的资源进行精细化管理，授权给不同的用户组和项目使用；大数据云同时提供统一的用户权限管理体系，通过 RBAC 控制功能访问权限。 ## 3. 项目说明 * **技术交流群** * TD-DATA大数据开发平台交流群 ![](td-doc/image/技术群二维码.png) * **详细在线文档** TD-DATA大数据开发平台使用手册.pdf * **演示环境地址**： [http://112.111.16.43:10000/](http://112.111.16.43:10000/) * 账号密码：13001/123456 * Gitee地址：https://gitee.com/tindy_3638/td-data * 前端工程Gitee地址：https://gitee.com/tindy_3638/td-data-web * **已编译好的部署安装包及相关第三方组件部署手册** https://pan.baidu.com/s/1GhqnAgCg-b6nk6VslyqoUw?pwd=cqi8 ## 4. 截图（点击可大图预览）