认证和鉴权
Doris 的权限管理系统参照了 Mysql 的权限管理机制,做到了行级别细粒度的权限控制,基于角色的权限访问控制,并且支持白名单机制。
名词解释
用户标识 User Identity
在权限系统中,一个用户被识别为一个 User Identity(用户标识)。用户标识由两部分组成:
username
和host
。其中username
为用户名,由英文大小写组成。host
表示该用户链接来自的 IP。User Identity 以username@'host'
的方式呈现,表示来自host
的username
。User Identity 的另一种表现方式为
username@['domain']
,其中domain
为域名,可以通过 DNS 解析为一组 IP。最终表现为一组username@'host'
,所以后面我们统一使用username@'host'
来表示。权限 Privilege
权限作用的对象是节点、数据目录、数据库或表。不同的权限代表不同的操作许可。
角色 Role
Doris 可以创建自定义命名的角色。角色可以被看做是一组权限的集合。新创建的用户可以被赋予某一角色,则自动被赋予该角色所拥有的权限。后续对角色的权限变更,也会体现在所有属于该角色的用户权限上。
用户属性 User Property
用户属性直接附属于某一用户,而不是用户标识。即
user@'192.%'
和user@['domain']
都拥有同一组用户属性,该属性属于用户user
,而不是user@'192.%'
或user@['domain']
。用户属性包括但不限于:用户最大连接数、导入集群配置等等。
认证和鉴权框架
用户登录 Apache Doris 的过程,分为认证和鉴权两部分。
- 认证:根据用户提供的凭据(如用户名、客户 IP、密码)等,进行身份验证。验证通过后,会将用户个体映射到系统内的用户标识(User Identity)上。
- 鉴权:基于获取到的用户标识,根据用户标识所对应的权限,检查用户是否有相应操作的权限。
认证
Doris 支持内置认证方案和以及 LDAP 的认证方案。
Doris 内置认证方案
基于 Doris 自身存储的用户名,密码等信息来认证。
管理员通过 CREATE USER
命令来创建用户,通过 SHOW ALL GRANTS
来查看创建的所有用户。
用户登录时,会判断用户名,密码及客户端的 IP 地址是否正确。
密码策略
Doris 支持以下密码策略,可以帮助用户更好的进行密码管理。
PASSWORD_HISTORY
是否允许当前用户重置密码时使用历史密码。如
PASSWORD_HISTORY 10
表示禁止使用过去 10 次设置过的密码为新密码。如果设置为PASSWORD_HISTORY DEFAULT
,则会使用全局变量password_history
中的值。0 表示不启用这个功能。默认为 0。示例:
- 设置全局变量:
SET GLOBAL password_history = 10
- 为用户设置:
ALTER USER user1@'ip' PASSWORD_HISTORY 10
- 设置全局变量:
PASSWORD_EXPIRE
设置当前用户密码的过期时间。如
PASSWORD_EXPIRE INTERVAL 10 DAY
表示密码会在 10 天后过期。PASSWORD_EXPIRE NEVER
表示密码不过期。如果设置为PASSWORD_EXPIRE DEFAULT
,则会使用全局变量default_password_lifetime
中的值(单位为 天)。默认为 NEVER(或 0),表示不会过期。示例:
- 设置全局变量:
SET GLOBAL default_password_lifetime = 1
- 为用户设置:
ALTER USER user1@'ip' PASSWORD_EXPIRE INTERVAL 10 DAY
- 设置全局变量:
FAILED_LOGIN_ATTEMPTS
和PASSWORD_LOCK_TIME
设置当前用户登录时,如果使用错误的密码登录 n 次后,账户将被锁定,并设置锁定时间。如
FAILED_LOGIN_ATTEMPTS 3 PASSWORD_LOCK_TIME 1 DAY
表示如果 3 次错误登录,则账户会被锁定一天。管理员可以通过ALTER USER
语句主动解锁被锁定的账户。示例:
- 为用户设置:
ALTER USER user1@'ip' FAILED_LOGIN_ATTEMPTS 3 PASSWORD_LOCK_TIME 1 DAY
- 为用户设置:
密码强度
该功能由全局变量
validate_password_policy
控制。默认为NONE/0
,即不检查密码强度。如果设置为STRONG/2
,则密码必须包含“大写字母”,“小写字母”,“数字”和“特殊字符”中的 3 项,并且长度必须大于等于 8。示例:
SET validate_password_policy=STRONG
更多帮助,请参阅ALTER USER。
基于 LDAP 的认证方案
请参阅基于 LDAP 的认证方案。
鉴权
权限操作
- 创建用户:CREATE USER
- 修改用户:ALTER USER
- 删除用户:DROP USER
- 授权/分配角色:GRANT
- 撤权/撤销角色:REVOKE
- 创建角色:CREATE ROLE
- 删除角色:DROP ROLE
- 修改角色:ALTER ROLE
- 查看当前用户权限和角色:SHOW GRANTS
- 查看所有用户权限和角色:SHOW ALL GRANTS
- 查看已创建的角色:SHOW ROLES
- 设置用户属性:SET PROPERTY
- 查看用户属性:SHOW PROPERTY
- 修改密码:SET PASSWORD
- 查看支持的所有权限项:[SHOW PRIVILEGES]
- 查看行权限策略 [SHOW ROW POLICY]
- 创建行权限策略 [CREATE ROW POLICY]
权限类型
Doris 目前支持以下几种权限
Node_priv
节点变更权限。包括 FE、BE、BROKER 节点的添加、删除、下线等操作。
Root 用户默认拥有该权限。同时拥有
Grant_priv
和Node_priv
的用户,可以将该权限赋予其他用户。该权限只能赋予 Global 级别。
Grant_priv
权限变更权限。允许执行包括授权、撤权、添加/删除/变更 用户/角色 等操作。
给其他用户/角色授权时,2.1.2 版本之前,当前用户只需要相应层级的
Grant_priv
权限,2.1.2 版本之后当前用户也要有想要授权的资源的权限。给其他用户分配角色时,要有 Global 级别的
Grant_priv
权限。Select_priv
对数据目录、数据库、表的只读权限。
Load_priv
对数据目录、数据库、表的写权限。包括 Load、Insert、Delete 等。
Alter_priv
对数据目录、数据库、表的更改权限。包括重命名 库/表、添加/删除/变更 列、添加/删除 分区等操作。
Create_priv
创建数据目录、数据库、表、视图的权限。
Drop_priv
删除数据目录、数据库、表、视图的权限。
Usage_priv
Resource 和 Workload Group 的使用权限。
Show_view_priv
执行
SHOW CREATE VIEW
的权限。
权限层级
全局权限
即通过 GRANT 语句授予的 *.*.*
上的权限。被授予的权限适用于任意 Catalog 中的任意库表。
数据目录(Catalog)权限
即通过 GRANT 语句授予的 ctl.*.*
上的权限。被授予的权限适用于指定 Catalog 中的任意库表。
库级权限
即通过 GRANT 语句授予的 ctl.db.*
上的权限。被授予的权限适用于指定数据库中的任意表。
表级权限
即通过 GRANT 语句授予的 ctl.db.tbl
上的权限。被授予的权限适用于指定表的任意列。
列级权限
列权限主要用于限制用户对数据表中某些列的访问权限。具体来说,列权限允许管理员设定某些列的查看、编辑等权限,以控制用户对特定列数据的访问和操作。
可以通过 GRANT Select_priv(col1,col2) ON ctl.db.tbl TO user1
授予的指定表的部分列的权限。
目前列权限仅支持 Select_priv
。
行级权限
行权限(Row Policy)使得管理员能够基于数据的某些字段来定义访问策略,从而控制哪些用户可以访问哪些数据行。
具体来说,Row Policy 允许管理员创建规则,这些规则可以基于存储在数据中的实际值来过滤或限制用户对行的访问。
从 1.2 版本开始,可以通过 CREATE ROW POLICY
命令创建行级权限。
从 2.1.2 版本开始,支持通过 Apache Ranger 的 Row Level Filter
来设置行权限。
使用权限
Resource 权限
Resource 权限是为 Resource 单独设置的权限,和库表等权限没有关系,只能分配
Usage_priv
和Grant_priv
权限。给所有 Resource 分配权限可以通过
GRANT USAGE_PRIV ON RESOURCE '%' TO user1
语句。Workload Group 权限
Workload Group 权限是为 Workload Group 单独设置的权限,和库表等权限没有关系,只能分配
Usage_priv
和Grant_priv
权限。给所有 Workload Group 分配权限可以通过
GRANT USAGE_PRIV ON WORKLOAD GROUP '%' TO user1
语句。
数据脱敏
数据脱敏是一种保护敏感数据的方法,它通过对原始数据进行修改、替换或隐藏,使得脱敏后的数据在保持一定格式和特性的同时,不再包含敏感信息。
例如,管理员可以选择将信用卡号、身份证号等敏感字段的部分或全部数字替换为星号 *
或其他字符,或者将真实姓名替换为假名。
从 2.1.2 版本开始,支持通过 Apache Ranger 的 Data Masking 来为某些列设置脱敏策略,目前仅支持通过 Apache Ranger 来设置。
Doris 内置的鉴权方案
Doris 权限设计基于 RBAC(Role-Based Access Control)的权限管理模型,用户和角色关联,角色和权限关联,用户通过角色间接和权限关联。
当角色被删除时,用户自动失去该角色的所有权限。
当用户和角色取消关联,用户自动失去角色的所有权限。
当角色的权限被增加或删除,用户的权限也会随之变更。
┌────────┐ ┌────────┐ ┌────────┐
│ user1 ├────┬───► role1 ├────┬────► priv1 │
└────────┘ │ └────────┘ │ └────────┘
│ │
│ │
│ ┌────────┐ │
│ │ role2 ├────┤
┌────────┐ │ └────────┘ │ ┌────────┐
│ user2 ├────┘ │ ┌─► priv2 │
└────────┘ │ │ └────────┘
┌────────┐ │ │
┌──────► role3 ├────┘ │
│ └────────┘ │
│ │
│ │
┌────────┐ │ ┌────────┐ │ ┌────────┐
│ userN ├─┴──────► roleN ├───────┴─► privN │
└────────┘ └────────┘ └────────┘
如上图所示:
user1 和 user2 都是通过 role1 拥有了 priv1 的权限。
userN 通过 role3 拥有了 priv1 的权限,通过 roleN 拥有了 priv2 和 privN 的权限,因此 userN 同时拥有 priv1,priv2 和 privN 的权限。
为了方便用户操作,是可以直接给用户授权的,底层实现上,是为每个用户创建了一个专属于该用户的默认角色,当给用户授权时,实际上是在给该用户的默认角色授权。
默认角色不能被删除,不能被分配给其他人,删除用户时,默认角色也自动删除。
基于 Apache Ranger 的鉴权方案
常见问题
权限项说明
拥有 ADMIN 权限,或 GLOBAL 层级的 GRANT 权限的用户可以进行以下操作:
- CREATE USER
- DROP USER
- ALTER USER
- SHOW GRANTS
- CREATE ROLE
- DROP ROLE
- ALTER ROLE
- SHOW ROLES
- SHOW PROPERTY FOR USER
GRANT/REVOKE
- 拥有 ADMIN 权限,可以授予或撤销任意用户的权限。
- 拥有 ADMIN 或 GLOBAL 层级 GRANT 权限可以把角色分配给用户。
- 同时拥有相应层级的 GRANT 权限和要分配的权限,可以把权限分配给用户/角色。
SET PASSWORD
- 拥有 ADMIN 权限,或者 GLOBAL 层级 GRANT 权限的用户,可以设置非 ROOT 用户的密码。
- 普通用户可以设置自己对应的 User Identity 的密码。自己对应的 User Identity 可以通过
SELECT CURRENT_USER()
命令查看。 - ROOT 用户可以修改自己的密码。
其他说明
Doris 初始化时,会自动创建如下用户和角色:
- operator 角色:该角色拥有
Node_priv
和Admin_priv
,即对 Doris 的所有权限。 - admin 角色:该角色拥有
Admin_priv
,即除节点变更以外的所有权限。 - root@'%':root 用户,允许从任意节点登陆,角色为 operator。
- admin@'%':admin 用户,允许从任意节点登陆,角色为 admin。
- operator 角色:该角色拥有
不支持删除或更改默认创建的角色或用户的权限。
operator 角色的用户有且只有一个,即 Root。admin 角色的用户可以创建多个。
一些可能产生冲突的操作说明
域名与 ip 冲突:
假设创建了如下用户:
CREATE USER user1@['domain'];
并且授权:
GRANT SELECT_PRIV ON *.* TO user1@['domain']
该 domain 被解析为两个 IP:ip1 和 ip2。
假设之后,我们对
user1@'ip1'
进行一次单独授权:GRANT ALTER_PRIV ON . TO user1@'ip1';
则
user1@'ip1'
的权限会被修改为 Select_priv 和 Alter_priv。并且当我们再次变更user1@['domain']
的权限时,user1@'ip1'
也不会跟随改变。重复 ip 冲突:
假设创建了如下用户:
CREATE USER user1@'%' IDENTIFIED BY "12345";
CREATE USER user1@'192.%' IDENTIFIED BY "abcde";在优先级上,
'192.%'
优先于'%'
,因此,当用户user1
从192.168.1.1
这台机器尝试使用密码'12345'
登陆 Doris 会被拒绝。
忘记密码
如果忘记了密码无法登陆 Doris,可以在 FE 的 config 文件中添加
skip_localhost_auth_check=true
参数,并且重启 FE,从而无密码在本机通过 root 登陆 Doris。登陆后,可以通过
SET PASSWORD
命令重置密码。任何用户都不能重置 root 用户的密码,除了 root 用户自己。
Admin_priv
权限只能在 GLOBAL 层级授予或撤销。current_user()
和user()
用户可以通过
SELECT current_user()
和SELECT user()
分别查看current_user
和user
。其中current_user
表示当前用户是以哪种身份通过认证系统的,而user
则是用户当前实际的 User Identity。举例说明:
假设创建了
user1@'192.%'
这个用户,然后以为来自192.168.10.1
的用户user1
登陆了系统,则此时的current_user
为user1@'192.%'
,而user
为user1@'192.168.10.1'
。所有的权限都是赋予某一个
current_user
的,真实用户拥有对应的current_user
的所有权限。
最佳实践
这里举例一些 Doris 权限系统的使用场景。
场景一
Doris 集群的使用者分为管理员(Admin)、开发工程师(RD)和用户(Client)。其中管理员拥有整个集群的所有权限,主要负责集群的搭建、节点管理等。开发工程师负责业务建模,包括建库建表、数据的导入和修改等。用户访问不同的数据库和表来获取数据。
在这种场景下,可以为管理员赋予 ADMIN 权限或 GRANT 权限。对 RD 赋予对任意或指定数据库表的 CREATE、DROP、ALTER、LOAD、SELECT 权限。对 Client 赋予对任意或指定数据库表 SELECT 权限。同时,也可以通过创建不同的角色,来简化对多个用户的授权操作。
场景二
一个集群内有多个业务,每个业务可能使用一个或多个数据。每个业务需要管理自己的用户。在这种场景下。管理员用户可以为每个数据库创建一个拥有 DATABASE 层级 GRANT 权限的用户。该用户仅可以对用户进行指定的数据库的授权。
黑名单
Doris 本身不支持黑名单,只有白名单功能,但我们可以通过某些方式来模拟黑名单。假设先创建了名为
user@'192.%'
的用户,表示允许来自192.*
的用户登录。此时如果想禁止来自192.168.10.1
的用户登录。则可以再创建一个用户cmy@'192.168.10.1'
的用户,并设置一个新的密码。因为192.168.10.1
的优先级高于192.%
,所以来自192.168.10.1
将不能再使用旧密码进行登录。