大数据消费下的安全技术实践_罗哲@饿了么 百度外卖.pdf
2.虚拟产品一经售出概不退款(资源遇到问题,请及时私信上传者)
在当今大数据消费的背景下,安全技术实践成为企业维护数据完整性、保障用户隐私和防止数据泄露的关键。罗哲在其演讲中,以饿了么和百度外卖为案例,探讨了用户安全、数据安全、系统安全和网络安全的实践策略,并详细介绍了大数据安全框架的设计和实施。 用户安全是大数据安全体系的基础,包括身份认证、权限控制和操作审计。身份认证确保只有合法用户能够访问系统,而权限控制确保用户在其权限范围内操作数据,操作审计则用于记录用户的操作行为,以便于后续的安全分析和问题追踪。 数据安全是指在数据的存储、消费和溯源过程中所采用的一系列安全措施。数据存储安全关注于数据在物理介质中的安全性,比如使用加密存储等技术;数据消费安全涉及对数据访问的严格控制,避免数据被滥用;数据溯源则关注于能够追踪数据的使用历史和流向,用于事后的安全审计。 系统安全方面,涉及操作系统的安全性以及分布式集群的安全管理。操作系统安全关注内核级别的安全漏洞防护,而分布式集群安全则需要考虑到集群内各节点间的数据同步、任务调度和资源分配的安全性。 网络安全关注的是网络传输过程中数据的加密和访问授信。传输加密可以阻止数据在传输过程中被截获和篡改,而访问授信则确保只有被授权的用户可以访问网络资源。 大数据安全框架是保障数据安全的核心组成部分,框架中包含多个关键环节。数据交付权限管理涉及数据内容的访问控制和行为审计,确保数据访问被正确授权,并对异常行为进行记录和分析。动态脱敏技术用于保护敏感数据,通过对敏感字段进行脱敏处理,以防止在数据使用过程中泄露用户隐私。数据溯源技术可以追踪数据的使用历史,为数据审计提供支持。个人账号鉴权、系统账号身份管理和授权库等安全措施构成了整个大数据安全框架的防护体系。 此外,ADHOC技术作为大数据消费的重要实践之一,它提供了基于SQL语义的数据消费能力。ADHOC支持不同服务权限粒度,适应了复杂的权限运维需求,并支持C->S(客户端到服务器)模式下的多对多交互。ADHOC的权限控制涉及到对库、表、字段的复杂权限管理,以及系统账号API和用户账号的Web-ui(用户界面)的权限设置。同时,ADHOC还支持同步查询和异步查询,以应对不同复杂度的查询需求。 在数据动态脱敏方面,ADHOC通过SQL提交语法树解析实现敏感字段的SQL替换和注入检测,以确保即使在动态脱敏的过程中,数据的安全性也不会受损。基于RBAC(基于角色的访问控制)的权限设计,则将产品权限和数据权限结合起来,通过角色与资源的绑定实现精细化的权限管理。 多维分析环节,基于指标建模的数据消费同样需要关注数据的安全。通过基于RBAC的指标权限设计和基于Mondrian Schema的解析实现指标溯源,可以确保在多维分析过程中数据的安全性和准确性。此外,通过日志结合schema解析实现指标访问审计,进一步增强了数据使用的透明度和安全性。 总结来说,大数据消费环境下的安全技术实践,需要综合运用多种技术手段和策略,从用户安全、数据安全、系统安全、网络安全等多个维度出发,建立完整的数据安全管理体系。在此过程中,权限控制、数据脱敏、行为审计和数据溯源等环节尤为关键,它们共同构成了保障大数据安全的坚固防线。
- 粉丝: 48
- 资源: 8282
- 我的内容管理 展开
- 我的资源 快来上传第一个资源
- 我的收益 登录查看自己的收益
- 我的积分 登录查看自己的积分
- 我的C币 登录后查看C币余额
- 我的收藏
- 我的下载
- 下载帮助