访问S3提供临时会话凭证

您可以使用我会话令牌使用Hadoop配置支持访问S3存储数据砖运行时8.3及以上。信息不能挂载S3路径DBFS山当使用会话凭证。您必须使用S3A URI。从集群中提取会话凭证从集群中提取会话的凭证。你需要实例…

不能使用我的角色与表ACL

问题你想用我的角色当表启用了acl,但你得到一个错误凭证说不能。NoCredentialsError:无法找到凭证导致当一个表启用了ACL, EC2实例元数据服务的访问。这是一个安全措施,防止用户获取我访问凭证。索尔……

使生成的笔记本

生成客户端库,允许您执行所有AWS S3操作从任何机器。生成并不是默认安装在砖集群。你必须安装它通过集群级init脚本可以使用之前。信息示例init脚本存储路径环境变量的一个秘密。你应该以这种方式存储秘密……

如何检查如果火花属性修改的笔记本吗

您可以调整应用程序通过设置不同的配置问题。某些配置必须设置集群级别,而一些设置在笔记本或应用程序。解决方案,以检查是否一个特定的火花配置可以设置在一个笔记本,笔记本电池运行以下命令:% scala spark.conf.isModifiable (“spark.databrick…

JSON读者解析值为零

问题你是试图读取JSON文件。你知道文件数据,但是Apache火花JSON读者返回一个null值。示例代码可以使用这个示例代码来重现该问题。创建一个测试在DBFS JSON文件。% python dbutils.fs.rm (“dbfs: / tmp / json / parse_test.txt”) dbutils.fs.put (“dbfs: / tmp / json / parse_test。txt”、“”“{…

常见的错误在笔记本

有一些使用笔记本电脑时出现的常见问题。本节概述了一些常见问题和最佳实践,您应该遵循。. lang火花工作失败。NoClassDefFoundError有时候你可能会遇到一个错误:% scala . lang。行..... NoClassDefFoundError:无法初始化类读这个c美元……

显示()没有显示正确微秒

问题你想显示一个时间戳值以微秒级精度,但是当你使用显示()它不显示值过去毫秒。例如,Apache火花SQL显示()命令:% SQL显示(火花。sql(“选择演员(2021 - 08 - 10 t09:08:56.740436的时间戳)作为测试”))返回一个截断值:2021 - 08 - 10 - t09:08:56.740 + 0000因为……

错误:收到命令对象id p0 c

进口Python库的问题,但是当你试图执行Python代码在一个笔记本你重复信息作为输出。信息:py4j。java_gateway:收到命令c对象id p0信息:py4j。java_gateway:收到命令c对象id p0信息:py4j。java_gateway:收到命令c对象id p0信息:py4j。java_gateway:收到命令……

当访问或安装存储失败

问题你想访问现有的挂载点,或创建一个新的挂载点,它失败,并显示一条错误消息。无效的山例外:后端无法获得路径/ mnt的令牌。导致根山路径(/ mnt)也安装一个存储位置。你可以确认安装的根路径列出所有挂载点……

项目太大出口

问题你想出口笔记本电脑使用工作区UI和得到一个错误消息。这个项目太大出口。尝试出口较小或更少的物品。导致笔记本大于10 MB的文件大小。解决问题最简单的解决方案就是限制大小的笔记本或文件夹,你想下载10 MB或…

访问所拥有的笔记本用户删除

当你删除一个用户(AWS | Azure)从砖,在工作区中创建一个特殊的备份文件夹。这个备份文件夹中包含的所有用户的内容删除。备份文件夹出现在工作区中删除<用户名> - Backup—#。信息只有管理员用户可以访问一个备份文件夹。访问一个备份文件夹:登录砖作为一个…

由于文件大小限制笔记本自动保存失败

问题笔记本自动保存失败,并显示以下错误消息:未能保存修订:笔记本大小超过限制。这是最常见的引起的细胞与大的结果。删除一些细胞或把笔记本。导致最大笔记本大小允许自动保存8 MB。先解决方案,使用你的br检查你的笔记本大小的文件……

如何发送电子邮件或短信从砖笔记本

你可能需要发送一个通知从砖一组接收者笔记本。例如,您可能想要发送电子邮件匹配基于业务规则或基于命令的成功或失败。本文描述了两种方法来发送电子邮件或短信从一个笔记本。这两个示例使用Python笔记本:发送电子邮件或短信重新…

故障排除反应迟钝的Python笔记本或取消命令

本文概述了故障排除步骤可以采取一个笔记本是反应迟钝或取消命令。检查metastore连接性问题简单的命令在新附加笔记本失败,但成功的笔记本电脑连接到相同的集群。故障排除步骤检查metastore连接。无法……

更新工作为多个用户权限

当你运行作业时,您可能想要更新多个用户的用户权限。为此,您可以使用砖工作权限的API (AWS | Azure | GCP)和Python代码。指令示例代码复制到一个笔记本。进入<作业id >(或多个作业ids)[]的arr数组。输入载荷{}。在这种服务……

服务主体不能创建访问令牌

问题你想创建一个令牌代表一个服务主体,使用/ 2.0 /令牌管理/代表/令牌在REST API,但越来越PERMISSION_DENIED错误。{“error_code”:“PERMISSION_DENIED”、“消息”:“用户xxxxxxxx-xxxx-xxxx-xxxx-xxxxxxxxxxxx没有权限使用令牌。”} Cause This happens when the servic...

生成浏览器HAR文件

当故障诊断界面问题,有时需要获得额外的信息在您的浏览器中生成的网络请求。如果这是必要的,我们的支持团队将让你生成一个哈尔文件。本文描述了如何生成一个哈尔文件,每个主要的web浏览器。警告HAR d文件包含敏感……

恢复删除垃圾笔记本

DBR版:这适用于工作区UI,因此分开DBR版本。类别:笔记本电脑二级类别:<二级类别列表,如果适用>云版本:AWS, Azure, GCP作者:vivian.wilfred@www.neidfyre.com拥有团队:<印度+平台>票务URL: <链接到原始Salesforce或Jira票>最后里维…bob体育客户端下载

得到工作空间配置细节

本文解释了如何显示完整的砖工作空间的配置细节。这可能是有用的,如果你想查看配置设置和服务使您的工作区中。例如,您可以使用工作空间配置细节很快看到如果统一目录或联合身份验证上启用了y……

遍历所有工作在工作区中使用工作2.1 API

在砖工作API 2.0 (GCP) AWS | Azure |列表返回一个无限数量的职位描述。在乔布斯API 2.1 (AWS | Azure | GCP),这种行为已经发生了改变。现在命令返回一个列表最多25个工作,从最新到最古老的,。在本文中,我们向您展示如何手动工作区中的遍历所有的工作……

现在太多的执行上下文是开放的

问题你遇到以下错误消息当你试图把一个笔记本一个集群或工作失败。运行结果不可用:工作太多的失败与错误消息执行上下文现在是开放的。(限制目前设置为150)导致砖创建一个执行上下文,当你把一个笔记本一个集群。执行控制……

使用Azure广告服务主体计算ACL

当授予权限的计算集群(计算访问控制),可以授予权限以下实体:用户组服务主体(仅Azure)警告之前,您可以使用计算访问控制,管理员必须为工作区中启用它。审查使集群访问控制为工作区正…