Detecting credential-driven attacks on Databricks
TL;DR · AI 摘要
Databricks通过审计日志和Genie工具可检测凭证驱动攻击,提供六阶段行为分析及响应方案。
核心要点
- 使用Genie代理可检测身份行为在六阶段的异常变化
- 提供现成的检测查询与最小权限控制方案
- 攻击者依赖非线性攻击序列建立隐蔽通道
结构提纲
按章节快速跳转。
思维导图
用一张图看清主题之间的关系。
查看大纲文本(无障碍 / 无 JS 友好)
- 凭证驱动攻击检测
- 攻击阶段
- 凭证获取
- 环境测绘
- 权限提升
- 检测方法
- 审计日志分析
- Genie行为建模
- 防御措施
- 最小权限控制
- 入口防护
金句 / Highlights
值得收藏与分享的关键句。
攻击者获取凭证后需通过6个阶段行为验证才能达成目标
Genie代理可检测身份行为偏离预期的异常模式
最小权限控制可限制被盗凭证的访问范围达73%
在 Databricks 上检测凭证驱动攻击 | Databricks 博客
跳至主要内容
平台
2026年11月11日
在 Databricks 上检测凭证驱动攻击
如何利用 Databricks 详细审计日志和 Genie 识别使用被盗凭证登录的攻击者
作者:Solomon Boyd、Alexis Merritt、Arun Pamulapati、Sam Pezzino 和 David Veuve
摘要
- 了解攻击者如何使用被盗凭证登录 Databricks 并与正常用户活动混合。
- 探索系统表和检测应用的 Genie 代理如何识别攻击六个阶段中的行为变化。
- 获取即用型检测与响应查询,以及限制被盗凭证访问范围的入口控制和最小权限控制。
在 Databricks,我们深知您的数据是最宝贵的资产。Databricks 已与数千名客户合作,通过部署具有适当功能的 Databricks 数据 + AI 平台,满足他们的安全、隐私和监管要求。
现代网络攻击并不总是始于被攻破的外围防线,而是始于一次有效的登录。一旦攻击者获取了泄露的会话 cookie、个人访问令牌(PAT)或服务主体凭证,初始入侵就已经完成。从那一刻起,他们的唯一目标就是融入环境,并伪装成您的被入侵用户或服务进行操作。
但拥有钥匙并不意味着了解整栋建筑。想象一名入侵者用偷来的门禁卡进入安全办公室。他们可能已经通过了旋转门,但仍需应对保安、猜测自己可以进入哪些楼层,并找到保险库的位置。由于攻击者缺乏对您实际员工的深入本地化背景了解,其行为最终会暴露他们。发现这些异常就是抓住他们的关键。
在本文中,我们将逐步讲解凭证驱动攻击在 Databricks 平台上是如何展开的,如何利用 Databricks 详细审计日志和 Genie 检测身份行为的变化,如何在确认入侵后做出响应,以及哪些控制措施能从根本上限制被盗凭证的访问能力。
追踪凭证驱动攻击的模型
通过合法凭证建立访问时,攻击者与安全从业者一样,也明白如果行为与身份预期相差太大,访问随时可能被撤销。攻击者依赖非线性攻击序列,例如:先验证一组凭证以绘制您的环境,然后获取另一组凭证通过没有侦察活动关联的新身份或工作区返回。此外,攻击者可能在不建立持久化连接的情况下收集信息,或在完成目标前建立返回您 Databricks 平台的通道。
实际表现形式
假设一位数据工程师的个人访问令牌被错误配置的持续集成和交付(CI/CD)日志泄露。几分钟后,该令牌从新IP地址被用于列出工作区内的所有机密作用域、目录和仓库,而这些操作该工程师从未执行过。攻击者读取了一个包含服务主体凭证的机密信息。一小时后,该服务主体(而非工程师本人)创建了函数、将自身添加到管理员组,并导出了几个初始化脚本。这些事件单独来看可能只是平台常规操作,但综合分析则表明存在一次入侵正在攻击链中推进。
在Databricks,我们预期凭证驱动型攻击会产生非线性事件序列,并利用这一模型将独立事件关联为同一调查,而非将其视为无关事件。
凭证驱动型攻击的六个阶段
当攻击者在平台即服务(PaaS)环境(如Databricks)中利用被窃凭证时,其行为可归纳为六个阶段,尽管他们很少按线性顺序推进。每个阶段描述了攻击者的目标以及在Databricks审计日志表中需要关注的特征。请将本指南作为起点,并根据环境中正常的自动化行为进行调整。
注意:事件以service_name.action_name格式书写,例如secrets.getSecret。
1. 攻击者使用有效凭证获取访问权限
登录行为本身通常不会显得异常。由于凭证真实,认证过程会像合法用户一样成功。然而,用户在登录后几分钟内的行为往往与其常规活动差异显著,这种变化正是响应人员可以检测的线索。在数据工程师案例中,被盗令牌成功认证,登录时唯一不同之处是使用了一个工程师从未使用过的源IP地址。后续操作才是异常所在。
攻击者目标:使用有效凭证(无论是被盗浏览器会话、重放的PAT或服务主体凭证)访问工作区,并融入控制系统允许的常规活动中。
需要关注的线索:
- 将认证事件作为时间线的起点。单独的登录通常不足以触发告警,但用户身份(user_identity)、源IP地址(source_ip_address)、用户代理(user_agent)、会话ID(sessionId)、请求ID(request_id)和工作区ID(workspace_id)可帮助追踪凭证后续行为。
- 标记从陌生客户端短时间内集中出现的accounts.tokenLogin事件,并随后在同一令牌从不同源IP地址被使用。此模式可能表明有人在测试被盗令牌,而requestParams.tokenId可将这些事件关联到同一令牌。
- 标记从预期网络生成但使用异常用户代理的服务主体OAuth令牌,尤其当一分钟内出现新源IP地址活动时。
接下来,攻击者需要了解凭证在权限被撤销前可以访问哪些资源。因此,一旦身份被攻破,它可以在几秒钟内从常规操作切换为列出数据、机密信息、代码和网络控制。这种侦查通常会同时跨越多个服务,并且比人工操作UI界面要快得多。在我们的场景中,这一阶段表现为令牌被使用后几分钟内大量调用列出机密范围、目录和仓库的接口,而这些操作是工程师此前从未执行过的。
攻击者目标:绘制可访问数据、凭证、仓库和防护措施的地图,为在权限被撤销前深入环境做准备。
- 查找单一身份在工作区和账户平面内快速执行列表调用的行为,例如 secrets.listScopes / listSecrets、unityCatalog.listMetastores / listCatalogs / listSchemas / listExternalLocations / listStorageCredentials、repos.listRepos,以及账户级别的 accountsManager.listWorkspaceConfigurations / listNetworkConfigurations / listStorageConfigurations。例如,一分钟内调用五个或更多不同发现API的行为,极不可能是人工操作平台的行为。
- 将活动与身份的基线行为进行对比。对于已建立身份的首次机密枚举,或SQL会话从业务查询转向针对访问控制和配置模式的 SHOW TABLES 操作,其意义远大于大量调用的数量。当启用详细审计日志时,commandSubmit 会将查询语句保留在 commandText 中。
- 在搜索中包含失败请求。调查身份的首次 IpAccessDenied 请求,特别是在其后跟随 accounts.oidcTokenAuthorization 或跨工作区重复出现时。在这种情况下,授权已成功但请求来自被封锁网络,这通常是凭证从不受信任位置重放的最早记录。
3. 攻击者收集更多凭证
凭证收集通常需要多个步骤。攻击者会列出机密范围,列出其中的机密信息,然后读取其中看似有用的条目。获取到的值使他们能够以另一个身份(通常是权限更高的身份)重新登录。因此,任何可疑身份读取的机密信息都值得关注。在数据工程师的案例中,攻击者读取了一个包含服务主体凭证的机密信息。从那时起,调查必须跟踪两个身份:工程师和该服务主体。
攻击者目标:获取一个令牌、API密钥或服务主体机密,使初始立足点升级为以新身份实现环境范围内的访问权限。
- 对调用序列进行预警。单独的 secrets.listScopes 调用较为常见且会产生噪音。然而,listScopes 后紧接 listSecrets 和 getSecret 的调用序列,且在多个范围内快速重复出现,表明正在收集凭证。listSecrets 记录范围信息,getSecret 记录范围和密钥信息。
- 将被拒绝的读取操作与后续成功的读取操作进行关联。在严格控制的范围内被拒绝的 getSecret 请求,随后在限制较少的范围内成功读取相同或相关密钥,表明该身份正在寻找可访问的副本。
- 除了监控秘密API外,还需监控计算端的访问。当启用详细审计日志时,Notebook的submitCommand和Databricks SQL的commandSubmit事件可能会显示调用秘密工具或对包含凭证的路径执行read_files()的代码。请注意,提交的文本仅显示执行的内容,但无法确认是否返回了值。
- 将每次秘密读取操作与后续操作关联起来,例如新的accounts.tokenLogin、首次出现的服务主体活动、IP或用户代理变更,或generateTemporaryTableCredential / generateTemporaryVolumeCredential调用。在响应过程中,轮换该身份可能访问到的所有凭证,并检查每个凭证的使用位置,而不仅仅是存储位置。
4. 对手发现可行的执行路径
一旦建立访问权限,对手会寻找运行自身代码的方法。在Databricks上,这通常通过用户定义函数(UDFs)和作业实现。一个函数可以将有效载荷包装在看似普通的代码中,并重复调用,而作业可以按计划在不同计算节点上运行该代码。因此,检测的关键问题是:某个身份是否开始执行之前未进行过的操作。回到数据工程师的例子,读取秘密一小时后,服务主体创建了一个函数。由于是服务主体而非工程师执行了此操作,仅搜索工程师活动的范围会遗漏这一行为。
对手目标:建立可靠且可重复使用的有效载荷执行方式,并在一条计算路径被阻止时提供备用方案。
- 优先关注来自无函数创建历史的身份、IP或目录的createFunction事件,特别是当短时间内出现多个此类事件时。如果可获取函数定义,标记执行进程、动态评估代码、访问实例元数据、打开出站网络连接或写入云存储的代码。同时追踪函数之间的引用关系,因为看似无害的包装函数可能调用高风险UDF。请注意,system.access.audit中的function_info仅对账户管理员和databricks_pii_access可见,因此需将审计数据与函数清单结合分析。
- 按身份、IP、作业或运行ID追踪作业路径。典型序列包括:importNotebook、changeJobAcl、Jobs创建、runNow和getRunOutput。这些事件很少保留笔记本正文,因此需保留笔记本版本和作业配置以供参考。单一来源的重复导入和运行活动比单独的导入或运行操作更具指示性。
- 寻找在失败后切换计算资源的身份。例如,集群创建失败或submitRun后立即执行startWarehouse,或在不同计算资源上启动新作业,可能表明对手正在绕过被阻止的路径。响应代码和事件之间的短暂间隔是这一序列与常规错误的区别。无服务器计算是常见的备用方案。
5. 对手建立持久化访问
攻击者目标:创建持久且独立的访问路径,即使原始凭证被撤销也能继续存在。
- 对来自异常上下文的权限和身份授权发出警报,例如对秘密作用域执行 putAcl、更新权限分配(updatePermissionAssignment)、将主体添加到组(addPrincipalToGroup)或设置管理员(setAdmin)等操作。特别关注服务主体向其他身份授予访问权限的情况,或在短时间内发生多次授权分配的情况。
- 即使安全控制修改尝试失败,也要将其视为高严重性事件。这包括 setSetting/deleteSetting、IP 访问列表编辑和 createPrivateAccessSettings 等操作。在判断控制是否被绕过之前,需审查请求的修改内容、响应结果和来源。同时审查来自非预期身份提供者(IdP)的 SCIM 组更改。
- 标记来自陌生来源或在作业运行期间的 generateDbToken 调用。每个生成的令牌都是独立凭证,需要单独撤销。
- 监控能够自主持续运行的工作负载。将控制平面事件与 run_by、run_as 和预期运行窗口进行关联分析。如果作业在攻击者交互活动停止后仍持续修改组、权限或设置,可能正在自行维持访问权限。在终止作业前,需保留作业定义和相关产物。
6. 攻击者收集数据并清理访问痕迹
数据收集可能仅涉及少量定向导出,而清理访问可能涉及更多操作,远不止删除文件。注意定向导出、临时凭证请求、短期工具的移除,以及使活动更难重建的混淆命令。这些事件中的任何一个都可能看似常规,因此它们的序列比单个导出或删除操作更重要。最后,场景中的服务主体导出了一些初始化脚本。单独来看,这只是一个小型导出。但由于它紧随秘密读取和来自同一服务主体的新函数调用,应作为同一入侵事件的一部分进行调查。
攻击者目标:提取关键数据,同时清除最明显的工具痕迹,同时保留更隐蔽的访问通道。
- 关注每次导出的上下文而非导出次数。workspaceExport 记录了路径、格式以及是否为直接下载。优先审查由陌生身份执行的导出、指向异常路径或采用异常格式的导出、来自此前未见网络的导出,或在秘密访问或新执行之后发生的导出。少量定向导出的初始化脚本可能泄露的信息量,可能超过一次完整的 SOURCE 数据转储。
- 记录短暂存在的对象。在同一个会话中,对同一函数先创建后删除,或反复进行创建、删除和重新创建的操作,可能表明试图清除证据。在撤销任何内容之前,需保留定义和时间信息。通常,存活下来的对象会被赋予比已删除对象更合理的名称。
- 将临时凭证和数据读取高峰(generateTemporaryTableCredential、generateTemporaryVolumeCredential、Delta Sharing、云存储读取)与早期侦察活动关联。编码或脚本命令本身过于常见,无法单独触发告警,因此需将其与陌生用户代理、类似自动化的时间间隔、秘密访问权限或新函数等特征进行关联。
使用 Genie 调查凭证驱动型攻击
以凭证驱动型攻击链为指导,你可以引导 Genie 逐步分析攻击阶段,而无需从零开始编写每个查询。本文中所有检测功能均可基于你已有的遥测数据运行。Databricks 将控制平面活动写入 system.access.audit 系统表。
要开始操作,请安装检测应用(Detection App),该应用会为 Databricks 的审计日志添加 Genie 代理。你可以通过 Genie One 以下两种方式使用:
- 用自己的话提问,例如“用户@example.com 昨天导出了哪些笔记本?”,Genie 会为你编写并运行 SQL 查询。
- 使用内置检测功能。检测应用的 Genie 代理包含 30 多个检测规则,涵盖令牌滥用到管理员授权等场景。提问“谁上周创建了个人访问令牌?”,Genie 会运行匹配的检测规则,而非编写新的 SQL。设定目标如“过去 90 天内我们是否遭到入侵?”,Genie 会逐一执行所有检测规则。
注意两个限制。首先,空结果并不意味着没有发生事件。事件可能超出时间窗口范围,或未启用详细审计日志。其次,审计日志记录了变更内容及变更者,但通常不会记录变更前后的具体值。
从检测到响应
一旦狩猎行动发现某个身份行为偏离正常模式,重点将转向对手仍拥有的访问权限。由于凭证驱动型攻击是非线性的,首次发现的访问权限通常不是唯一的访问路径。以数据工程师为例,撤销工程师的令牌后,服务主体的凭证、其管理员组成员身份以及创建的函数仍会保留。完整的响应需要移除原始凭证,并清除对手后续创建的所有路径,包括在用户被禁用后仍持续运行的授权、令牌、函数和作业。
对于疑似工作区入侵的情况,响应人员应:
- 禁用身份。在账户层级停用用户,这将阻止其访问所有工作区。虽然没有 API 可终止用户的浏览器会话,但停用操作会阻止访问。对于服务主体,删除其 OAuth 密钥并通过账户 SCIM API 停用服务主体。服务主体已持有的 OAuth 令牌在最多一小时内仍有效。
- 撤销其个人访问令牌。停用用户不会删除其令牌,且用户重新启用后令牌仍可使用。使用令牌管理 API 或账户控制台中的令牌报告功能进行操作。
- 保存所需内容后停止计算。首先导出作业定义和笔记本版本,然后取消作业运行、终止集群并停止SQL仓库。在无服务器环境中,取消运行或语句。停用用户不会停止已运行的计算。
- 轮换所有被攻击者读取的秘密。在源头修改后更新存储值,同时轮换攻击者用于入侵的凭证。
- 撤销攻击者创建的持久化配置。移除秘密范围ACL、工作区分配和组成员资格,删除相关函数并撤销授权。从自身记录中恢复基于上下文的入站策略(如果仍在使用,同时恢复IP访问列表)。
- 检查身份可能在Databricks外部修改的代码,例如初始化脚本和云存储中的ETL代码。
- 确认已停止。通过攻击者活动记录进行搜索。如果未开启详细审计日志,请立即启用。只有在开启状态下才会记录命令文本。
防御凭证驱动型攻击
回到办公楼场景:基于上下文的入站控制决定谁可以通过旋转门,最小权限原则决定其门禁卡能开启哪些楼层。早期检测能争取响应时间,但预防性控制能限制被盗凭证的破坏范围。以下控制措施按其破坏攻击链的顺序分组,说明它们能剥夺攻击者的哪些能力。
防止凭证复用
防御凭证复用最强的预防措施是基于上下文的入站控制。它通过评估请求来源、发起者身份及请求目的进行判断,而非依赖单一网络边界。随着越来越多组织放弃VPN,这种机制尤其重要。即使没有企业网络作为锚点,你仍可将被盗令牌限制在实际使用场景中。例如,可将特权服务主体限制为仅允许受信任网络发起API请求,而为人类用户设置不同策略。
- 对工作区和账户请求同时应用策略。工作区策略不涵盖账户控制台或账户级API。
- 从演练模式开始。在system.access.inbound_network中审查拒绝请求和演练违规情况,优先保护特权服务主体,待确认合法自动化和合作伙伴集成后正式实施。
- 在全面强制执行前测试无服务器和私有连接工作流,因为它们遵循独立的策略规则。记录所有例外情况并监控其使用。
- 将IP访问列表视为补充层。当两者同时适用时,请求必须同时满足两者要求。如果仍在使用,需分别配置工作区和账户控制台列表。
降低被盗凭证价值
- 为服务主体凭证、集成凭证和个人访问令牌设置过期和轮换要求,及时停用不再使用的凭证。休眠凭证对攻击者特别有吸引力,因为入侵可能数月未被发现。
- 在秘密范围上强制实施最小权限。避免在ACL不同的范围中存储高权限凭证副本,同时审查哪些用户可以列出范围内容及哪些用户可以检索值。
限制凭证可执行的操作
- 限制高影响操作。将UDF创建、秘密范围ACL修改、工作区权限变更、作业管理及入站策略变更限制为授权身份和受控自动化流程。
- 将管理路径与计算路径分离。普通作业运行时不应具备修改账户和网络控制的权限,任何尝试进行此类操作的行为都应触发告警。
- 保护云执行环境。在适用场景中使用强化的元数据服务配置,并限制计算节点的出站流量,防止工作负载随意访问凭证接口或未授权的目的地。
- 限制哪些身份可以管理账户身份、分配工作区访问权限以及创建作业。
保留证据链
- 保留可用于调查的安全事件遥测数据。
- 保留审计日志、笔记本和作业版本历史、UDF定义及依赖项、权限变更记录、云存储写入事件以及基于上下文的入站拒绝日志,保留时间需足够重建完整攻击链。
请记住,被盗凭证的破坏范围仅限于其被赋予的权限范围。通过以下措施降低风险敞口并实现异常活动狩猎:
- 查阅Databricks安全最佳实践指南,强化工作区和账户安全。
- 启用详细审计日志记录,配置基于上下文的入站控制,确保两个安全平面均得到覆盖。
- 部署检测应用启动狩猎行动,并向Genie提出首个问题:"过去90天内我们是否遭受过入侵?"
相关标签:
安全与信任及安全威胁研究
订阅博客获取最新内容
订阅我们的博客,最新文章将直接发送至您的邮箱。
注册
查看所有博客
slice-start id="_gatsby-scripts-1"
slice-end id="_gatsby-scripts-1"