大网数据广告活动
数据库与应用安全

管理和集成在 SQL Server 中的机器学习工作负荷

· 52CE 我爱测

为 SQL Server DBA,查看用于部署机器学习 R 和 Python 的子系统,数据库引擎实例上的管理任务。

适用对象:yesSQL Server(仅限 Windows)noAzure SQL 数据库 noAzure SQL 数据仓库 no并行数据仓库

本文适用于 SQL Server 数据库管理员负责部署高效的数据科学基础结构上支持多个工作负荷的服务器资产。 帧与 R 的管理相关的管理问题空间和 Python 代码在 SQL Server 上的执行。

什么是功能集成

提供 R 和 Python 机器学习SQL Server 机器学习服务作为数据库引擎实例的扩展。 集成是主要通过安全层和数据定义语言,总结如下:

  • 存储的过程都配备了能够接受 R 和 Python 代码作为输入的参数。 可以使用开发人员和数据科学家系统存储过程或创建包装其代码的自定义过程。
  • T-SQL 函数 (即PREDICT),可使用先前定型的数据模型。 此功能是可通过 T-SQL。 在这种情况下,它可以调用不专门具有机器学习安装扩展的系统上。
  • 现有的数据库登录名和基于角色的权限包括利用相同的数据的用户调用脚本。 作为一般规则,如果用户无法访问数据,通过一个查询,但不能访问通过脚本或者。

功能可用性

R 和 Python 集成变得可通过一系列步骤。 第一个参数是安装程序,当您包括或添加机器学习服务到数据库引擎实例的功能。 作为后续步骤中,必须启用外部脚本 (其默认处于关闭状态) 在数据库引擎实例上。

在此情况下,只有数据库管理员具有完全权限创建和运行外部脚本、 添加或删除包,并创建存储的过程和其他对象。

必须为所有其他用户授予 EXECUTE ANY EXTERNAL SCRIPT 权限。 其他标准数据库权限确定用户是否可以创建对象、 运行脚本,使用序列化和训练模型和等等。

资源分配

存储的过程和调用外部处理的 T-SQL 查询到默认资源池使用可用的资源。 作为默认配置的一部分,外部的进程,如 R 和 Python 会话允许最多 20%的总内存的主机系统上。

如果你想要重新调整资源,可以修改默认池,使用相应运行该系统上的机器学习工作负荷的影响。

另一种方法是创建一个自定义的外部资源池来捕获源自特定程序、 主机或发生在特定时间间隔期间活动的会话。 有关详细信息,请参阅若要修改的 R 和 Python 执行资源级别的资源调控并如何创建资源池有关分步说明。

隔离和包容

处理体系结构设计,以隔离来自核心引擎处理的外部脚本。 R 和 Python 脚本作为单独的进程,在本地的辅助角色帐户下运行。 在任务管理器中,你可以监视 R 和 Python 进程执行低特权本地用户帐户,不同于 SQL Server 服务帐户。

在单个低特权帐户中运行 R 和 Python 进程具有以下优势:

  • 将 R 和 Python 会话而不会影响核心数据库操作,可以终止 R 或 Python 进程中的核心引擎进程中隔离出来。

  • 减少了在主计算机上的外部脚本运行时进程的权限。

最小特权帐户将在安装期间创建并在 Windows 中放置用户帐户池称为SQLRUserGroup。 默认情况下,此组具有可执行文件、 库和内置的数据集使用对 R 和 Python 在 SQL Server 中的程序文件夹的权限。

作为数据库管理员,可以使用 SQL Server 数据安全性来指定哪些人拥有权限来执行脚本,并在作业中使用的数据进行管理下的相同的安全角色来控制访问通过 T-SQL 查询。 作为系统管理员,你可以显式拒绝SQLRUserGroup对通过创建 Acl 在本地服务器上的敏感数据的访问。

Note: 默认情况下SQLRUserGroup中 SQL Server 本身不具有登录名或权限。 如果数据访问辅助角色帐户需要一个登录名,您必须自行创建它。 专门调用创建一个登录名的方案是在执行中,数据或对数据库引擎实例中的操作支持来自脚本的请求时的用户标识是 Windows 用户和连接字符串指定受信任的用户。 有关详细信息,请参阅作为数据库用户添加 SQLRUserGroup。

禁用脚本执行

出现失控脚本时可以禁用所有脚本执行,撤消以前执行第一个位置中启用外部脚本执行的步骤。

  1. 在 SQL Server Management Studio 或其他查询工具中,运行以下命令来设置external scripts enabled为 0 或 FALSE。

    EXEC sp_configure  'external scripts enabled', 0
    RECONFIGURE WITH OVERRIDE
    
  2. 重新启动数据库引擎服务。

一旦解决此问题,请记住重新启用脚本执行的实例上,如果你想要恢复 R 和 Python 脚本支持数据库引擎实例上。 有关详细信息,请参阅启用脚本执行

扩展功能

数据科学通常引入了新的包部署和管理的要求。 对于数据科学家,它是利用开源和第三方包的自定义解决方案中常见的做法。 一些这些包将其他包上具有依赖项,这种情况下,可能需要评估和安装多个包来访问您的目标。

负责服务器资产 DBA,作为部署到生产服务器上的任意 R 和 Python 包表示一个不熟悉的挑战。 然后再添加包,您应评估外部包提供的功能是否真正需要,使用内置中没有等效项R 语言并Python 库安装SQL Server 安装程序。

Server 包安装的替代方法,为数据科学家可能能够生成并运行解决方案外部的工作站上,从 SQL Server 中检索数据,但使用所有分析执行本地工作站上而不是服务器本身上。

如果您随后确定外部库函数有必要,不会造成服务器操作或作为一个整体的数据风险,您可以选择从多个方法添加包。 在大多数情况下,都需要将包添加到 SQL Server 管理员权限。 若要了解详细信息,请参阅SQL Server 中的安装 Python 包并SQL Server 中的安装 R 包。

Note: 获取 R 包,服务器管理员权限不专门需要针对包安装如果您使用替代方法。 请参阅SQL Server 中的安装 R 包有关详细信息。

监视脚本执行

在中运行的 R 和 Python 脚本SQL Server由启动SQL Server 快速启动板接口。 但是,快速启动板不受约束或分别监视,因为它是安全的服务提供的 Microsoft 适当管理资源的资源。

使用管理 Launchpad 服务下运行的外部脚本Windows 作业对象。 使用作业对象可将进程组作为一个单元进行管理。 每个作业对象都是分层的,可控制与其关联的所有进程的属性。 针对某个作业对象执行的操作会影响与该作业对象关联的所有进程。

因此,如果需要终止与某个对象关联的一个作业,请注意所有相关的进程也会终止。 如果运行一个已分配到 Windows 作业对象的 R 脚本,并且该脚本运行一个必须终止的相关 ODBC 作业,则父 R 脚本进程也会终止。

如果您启动使用并行处理的外部脚本时,单个 Windows 作业对象将管理所有并行子进程。

若要确定进程是否在作业中运行,请使用 IsProcessInJob 函数。

后续步骤

历史资料。此文对应 2018-11-30 的中文文档快照,适用产品版本和命令行为以原文为准。

来源与署名:Microsoft 和文档贡献者(原始作者元数据 HeidiSteen)。固定版本原文。文档采用 CC BY 4.0,示例代码采用 MIT 授权。本站展开固定版本仓库内的引用内容,将 Markdown 转为 HTML,规范化链接,移除外部媒体、发布器占位标签和导航标记。

资料来源与适用范围

资料来源
Microsoft / SQL Server 中文文档历史快照
适用范围
历史中文快照 2018-11-30;详见原文产品版本;文档日期 10/10/2018
内容语言
中文;命令、路径和错误标识保留技术原文
本地收录日期
2026-11-16
授权说明
CC BY 4.0(文档)/ MIT(示例代码)

正文与所需资源由本站本地存储。查看来源及更新记录 ↗

请按适用版本和实际日志确认原因;本站没有对每一种系统或设备逐项执行文中的操作。