本章节主要介绍天翼云大数据平台 翼MapReduce产品的安全增强特性。 天翼云大数据平台 翼MapReduce支持海量数据存储、海量数据分析、实时处理等行业应用,平台具备高安全性。该产品主要从以下几个方面保障用户可以安全地存储、使用数据以及运行业务。 网络隔离 整个系统部署在用户在公有云上专享的虚拟私有云中,提供安全隔离的网络环境,保证用户大数据集群的业务、管理的安全性。通过结合虚拟私有云的子网划分、路由控制、安全组等功能,可以为用户提供高安全、高可靠的网络隔离环境。
--安全组在下拉框中选择可用的安全组。--主机大数据源服务器IP地址。192.168.0.233端口大数据源服务器的端口号。3306数据库名称输入数据库名称。--单击“确定”,大数据源资产添加完成。大数据资产添加完成后,该大数据源的状态“连通性”为“检查中”,DSC会测试数据源的连通性,即测试DSC是否能够通过您配置的用户名和密码正常访问添加的大数据源。数据安全中心DSC能正常访问已添加的大数据源,该大数据源的状态“连通性”状态为“成功”。
本节提供大数据管理平台 DataWings用户手册,请您点击下载。 大数据管理平台 DataWings用户手册.pdf
天翼云为您提供大数据管理平台 DataWings产品公测服务协议说明,请您点击查看。 大数据管理平台 DataWings公测服务协议
4、统一管理与规范难 由于各类厂商、各个系统、各种多云异构数据、各样技术栈使得统一监控管理以及统一规范十分困难。 5、数据多元异构 公安大数据涉及各种数据库、文件系统、应用系统等以及各种格式与协议。 6、需求响应要求快 各警种业务需求急迫,公安大数据平台需要快速响应前端数据需求。 四、平台能力 构建统一的数据接入能力,打造统一的数据传输通道,完成全警种数据的整合汇聚,所有的数据接入、跨网传输、ETL处理、数据分发等任务都可以在一个平台完成。
一、大数据平台的数据安全与隐私保护策略 在构建大数据平台时,数据安全与隐私保护策略是确保数据合规使用和安全存储的基础。这些策略包括但不限于以下几个方面: 1.1 数据分类与分级 首先,应对大数据平台上的数据进行分类与分级,明确不同数据的敏感程度和重要性。根据数据的敏感级别,采取相应的保护措施,如加密存储、访问控制等。通过数据分类与分级,可以实现对数据的精细化管理,降低数据泄露的风险。 1.2 访问控制与身份认证 访问控制与身份认证是大数据平台数据安全的关键环节。
四、云存储与大数据平台集成的实施步骤 需求分析 首先,需要对业务需求进行详细的分析,明确数据处理的目标、范围和规模。 根据业务需求,确定云存储和大数据平台的选择和配置要求。 系统架构设计 在需求分析的基础上,设计云存储与大数据平台的集成架构。 确定数据的接入方式、存储策略、处理流程和分析方法。 考虑系统的可扩展性、高可用性和安全性等因素。 数据接入与预处理 根据系统架构设计,实现数据的接入和预处理功能。 搭建ETL工具或编写自定义脚本,将云存储中的数据导入到大数据平台中。
安全性:云服务商通常提供多层次的安全防护措施,包括数据加密、防火墙、入侵检测等,确保云主机的安全性。 二、大数据平台的构成与特点 大数据平台是指用于处理和分析大规模数据集的软硬件环境,包括数据采集、存储、处理、分析和可视化等环节。大数据平台具有以下特点: 海量数据处理能力:大数据平台能够处理PB级甚至EB级的数据量,满足企业对大规模数据的需求。 高并发处理能力:大数据平台支持高并发访问和查询,确保数据处理的实时性和高效性。
集群总规模达5000+,承担日均20W+条高复杂度作业的业务数据处理和分析。经中国电信集团多年的生产实践验证,大数据平台全年稳定性可达99.5% 研发优势 天翼云大数据团队隶属中国电信集团,多年来致力于开源大数据底座自主研发,拥有丰富的建设集成经验。团队工作涵盖大数据平台建设、运维技术支撑等。研发人员具备大数据业务分析和应用层建设能力,可提供电信级别优秀服务 设备优势 大数据平台的搭建借助了电信大数据平台,可提供优良的通信配套硬件和基础设施服务。
天翼云大数据平台率先通过信通院无服务器架构大数据平台测试 近日,天翼云大数据平台顺利完成中国信通院无服务器(Serverless)架构大数据平台测试,成为首批通过该测试的单位之一。本次测试依据《基于无服务器(Serverless)架构的大数据平台技术要求》展开。该要求是中国信通院云计算与大数据研究所依托中国通信标准化协会大数据技术标准推进委员会(CCSA TC601),联合大数据产业甲方用户与头部企业参与编制的技术标准,覆盖资源调度、数据应用、应用管理三大能力域。
广西电信大数据中心:释放数据要素价值,翼MapReduce为广西电信大数据中心建设注智赋能
同时,在科技自立自强步伐加快、国产化战略大形势下,广西电信计划采用鲲鹏国产服务器,并搭载CTyunOS操作系统,加快实现大数据平台全面自主可控进程,筑牢广西数据安全底座。因此,构建一个全面支持国产化生态的大数据平台集群势在必行。面对广西电信的建设需求,在自研产品能力和资源布局基础上,天翼云围绕采集、存储、调度、计算等四层核心业务,打造了“天翼云大数据平台”翼MapReduce。
关于天翼云旅游大数据平台产品下线公告 尊敬的天翼云客户因业务结构调整,天翼云将于7月25日下线旅游大数据平台产品(https://www.ctyun.cn/products/lydsjpt),请在正式下线之前完成相关的数据迁移工作。对您的影响: 1、新增客户:2023年7月25日起,您将无法新订购天翼云旅游大数据平台产品。同类产品已在中国电信集团公司上线销售,天翼云可提供代报价服务。 2、存量客户:数据服务维护至合同期结束。待合同到期后会提供1个自然月的历史数据查询服务。