磚管理局(GCP)

找到你的工作區ID

學習如何找到你的磚工作區ID在web UI以及通過筆記本命令....

最後更新:2022年10月25日,通過sivaprasad.cs

不能開始磚工作區從穀歌雲控製台

檢查以確保磚訂閱是活躍的,你使用正確的Google賬戶....

最後更新:2022年12月21日通過vivian.wilfred

未能添加用戶錯誤由於電子郵件或用戶名已經存在有不同的情況

你應該確保所有賬戶的用戶名是一致的套管係統和提供者....

最後更新:2023年1月20日,通過harrison.schueler

不能訪問數據磚秘密當使用一個“不”隔離共享集群

您不能使用dbutils.secrets.get()管理保護沒有隔離共享集群時啟用您的帳戶....

最後更新:2023年3月31日,通過sivaprasad.cs
雲基礎設施(GCP)

設置交叉賬戶桶訪問穀歌雲

使用服務帳戶授權訪問存儲桶....在另一個賬戶

最後更新:2022年12月21日通過navya.athiraram
商業智能工具(GCP)

配置辛巴與代理在Windows ODBC驅動程序

如何配置辛巴ODBC驅動程序通過代理服務器連接時使用Windows ....

最後更新:2022年3月2日,通過jordan.hicks

故障排除JDBC、ODBC連接

學習如何解決磚.... JDBC、ODBC連接錯誤

最後更新:2022年8月15日,通過亞當Pavlacka
集群(GCP)

安裝一個私人PyPI回購

如何安裝庫從私人PyPI庫....

最後更新:2022年3月4日,通過darshan.bargal

不能應用集群政策更新

當執行一個更新現有的集群政策,更新不適用,除非你刪除和重新添加....政策

最後更新:2022年3月4日,通過jordan.hicks

集群配置Apache火花不會應用

值設置在您的集群的火花配置不正確應用....

最後更新:2022年3月4日,通過Gobinath.Viswanathan

管理員用戶不能重新啟動集群運行工作

學習如何re-grant特權磚Admin用戶....

最後更新:2022年3月4日,通過亞當Pavlacka

集群未能從虛擬開始不存在錯誤

集群不是開始由於不存在假的Apache ....引發錯誤消息

最後更新:2022年3月4日,通過arvind.ravish

集群經濟放緩由於Ganglia指標填充根分區

解決集群經濟放緩是因為Ganglia度量數據爆炸填充根分區....

最後更新:2022年3月4日,通過arjun.kaimaparambilrajan

未能創建集群與無效的標記值

集群創建失敗如果可選的標記值不符合雲供應商要求....

最後更新:2022年3月4日,通過kavya.parag

設置執行器日誌級別

學習如何在磚上設置日誌級別執行人....

最後更新:2022年3月4日,通過亞當Pavlacka

禁用自動終止集群在開始工作

自動終止集群....政策不支持工作

最後更新:2022年8月23日,通過navya.athiraram

如何在磚上覆蓋log4j配置集群

學習如何在磚上覆蓋log4j配置集群....

最後更新:2022年12月8日,通過亞當Pavlacka

Apache火花執行人內存分配

了解引發執行人內存分配在磚集群....工作

最後更新:2022年3月4日,通過亞當Pavlacka

配置一個集群使用一個自定義的國家結核控製規劃服務器

配置您的服務器集群使用定製的國家結核控製規劃(公立或私立),而不是使用默認服務器....

最後更新:2022年12月8日,通過xin.wang

使GCM密碼套件

使AES-GCM加密(GCM密碼套件)使用SSL連接到其他集群。解決javax.net.ssl.SSLHandshakeException錯誤....

最後更新:2022年12月8日,通過xin.wang

在init腳本中啟用重試

重試功能添加到您的init腳本....

最後更新:2022年3月4日,通過arjun.kaimaparambilrajan

不能設置一個自定義PYTHONPATH環境

設置一個自定義PYTHONPATH環境不支持在一個init腳本或DCS ....

最後更新:2022年9月13日,通過prakash.jha

您的集群上運行自定義數據磚運行時

配置您的集群運行自定義數據磚運行時圖像通過UI或API ....

最後更新:2022年10月26日,通過rakesh.parija

集群init腳本錯誤失敗與鏡像同步進步

如果您正在使用鏡子不是同步與主庫,apt-get更新返回一個鏡像同步在進行錯誤....

最後更新:2022年10月31日,通過harrison.schueler

銷集群配置使用API

銷100計算集群配置使用API ....

最後更新:2022年12月21日通過simran.arora

拔掉集群配置使用API

使用API ....拔掉計算集群配置

最後更新:2022年12月21日通過simran.arora

Apache火花UI任務日誌間歇性地返回HTTP 500錯誤

如果火花spark.databricks.ui屬性。logViewingEnabled設置為false,您不能查看任務日誌的火花UI ....

最後更新:2023年3月17日,通過vivian.wilfred

禁用集群級DBFS init腳本

設置一個集群政策,以防止用戶創建集群,負載集群級init腳本從DBFS ....

最後更新:2023年5月2日,通過亞當Pavlacka

Cluster-named和集群級init腳本遷移筆記本

容易cluster-named和集群級init腳本遷移到集群級init腳本存儲為工作區文件....

最後更新:2023年7月17日,通過亞當Pavlacka

集群失敗的致命異常錯誤。綁定失敗。

如果其他軟件使用6062端口,它可以與IPython內核REPL衝突,防止司機節點開始....

最後更新:2023年7月17日,通過simran.arora
數據管理(GCP)

附加到一個DataFrame

了解如何添加在磚DataFrame ....

最後更新:2022年3月4日,通過亞當Pavlacka

如何提高性能與用桶裝嗎

學習如何提高磚的性能通過使用用桶裝....

最後更新:2022年3月4日,通過亞當Pavlacka

如何處理blob數據包含在一個XML文件嗎

學習如何處理blob數據包含在一個XML文件....

最後更新:2022年3月4日,通過亞當Pavlacka

簡化鏈接轉換

你學會如何簡化鏈接轉換DataFrame磚....

最後更新:2022年5月25日,通過亞當Pavlacka

蜂巢udf

學習如何創建和使用一個蜂巢UDF磚....

最後更新:2022年5月31日,通過亞當Pavlacka

當加入兩個DataFrames防止複製列

學習如何防止重複列在連接兩個DataFrames磚....

最後更新:2022年10月13日,通過亞當Pavlacka

撤銷所有用戶權限

使用正則表達式和一係列的for循環為單個用戶....撤銷所有特權

最後更新:2022年5月31日,通過pavan.kumarchalamcharla

如何在磚和刪除文件列表更快

學習如何在磚....更快和刪除文件列表

最後更新:2022年5月31日,通過亞當Pavlacka

如何處理損壞的鑲花的文件不同的模式嗎

學習如何使用磚....讀取拚花文件與一個特定的模式

最後更新:2022年5月31日,通過亞當Pavlacka

沒有使用權限的數據庫

用戶沒有使用權限的數據庫....

最後更新:2022年5月31日,通過rakesh.parija

null和空字符串在分區列保存為null

學習為什麼null和空字符串在分區列保存為null磚....

最後更新:2022年5月31日,通過亞當Pavlacka

randomSplit方法的行為

學習使用磚.... randomSplit方法時不一致的行為

最後更新:2022年5月31日,通過亞當Pavlacka

從用例類生成模式

了解如何從一個Scala類....生成模式

最後更新:2022年5月31日,通過亞當Pavlacka

如何指定斜在數據集和DataFrame-based加入命令提示嗎

學習如何指定斜在數據集和DataFrame-based加入命令提示磚....

最後更新:2022年5月31日,通過亞當Pavlacka

如何更新嵌套列

了解如何更新中嵌套列磚....

最後更新:2022年5月31日,通過亞當Pavlacka

不兼容的模式在一些文件

學習如何解決不兼容的模式在鋪磚....的文件

最後更新:2022年5月31日,通過亞當Pavlacka

獸人無法推斷出模式的錯誤

Apache火花返回一個錯誤對於獸人文件如果沒有定義當閱讀模式從一個空目錄或基本路徑與多個文件夾....

最後更新:2022年12月1日通過chandana.koppal

用戶沒有權限選擇任何文件

普通用戶無法創建表未經許可....啟用訪問控製時,

最後更新:2023年5月16日,通過sivaprasad.cs
數據源(GCP)

在JSON數據集創建表

在JSON數據集創建表;需要SerDe JAR ....

最後更新:2022年5月31日,通過ram.sankarasubramanian

優化從JDBC數據源讀取性能

學習如何優化性能當閱讀從JDBC數據源數據磚....

最後更新:2022年6月1日通過亞當Pavlacka

故障檢測在JSON編碼

學習如何解決故障檢測編碼輸入JSON文件在使用BOM與磚....

最後更新:2022年6月1日通過亞當Pavlacka

不一致的時間戳與JDBC應用程序結果

時間戳記錄不一致與JDBC應用程序....夏令時調整時

最後更新:2022年6月1日通過manjunath.swamy

卡夫卡與OffsetOutOfRangeException客戶終止

卡夫卡客戶終止與“OffsetOutOfRangeException”當試圖獲取信息…

最後更新:2022年6月1日通過vikas.yadav

在Avro模式不允許遞歸引用

Apache Avro數據源模式中不能有遞歸引用火花....一起使用時

最後更新:2022年12月1日通過saikrishna.pujari

當使用SQL訪問控製錯誤雪花作為數據源

雪花並不正式支持模式作為一個選項;您必須使用sfschema ....

最後更新:2023年1月20日,通過John.Lourdu
磚文件係統(GCP)

FileReadException DBFS掛載的文件係統

使用dbutils.fs.refreshMounts()刷新掛載點在你的火花工作....引用DBFS路徑之前

最後更新:2023年4月11日,通過Gobinath.Viswanathan
磚SQL (GCP)

Null列值顯示為南

Null列值正確顯示為南磚SQL ....

最後更新:2022年3月4日,通過亞當Pavlacka

檢索查詢屬於殘疾用戶

如何檢索查詢屬於禁用用戶在磚SQL ....

最後更新:2022年3月4日,通過John.Lourdu

工作超時當連接到一個JDBC SQL端點

增加SocketTimeout價值JDBC連接URL,以防止線程請求超時....

最後更新:2023年1月20日,通過Atanu.Sarkar

緩慢在抓取結果磚SQL

確保啟用雲獲取最佳性能在使用ODBC / JDBC ....獲取結果

最後更新:2023年2月3日,通過emad.rizkallah

ZORDER導致“希爾伯特索引隻能用於9或少列”錯誤

優化ZORDER命令有一個硬限製九列....

最後更新:2023年3月15日,通過emad.rizkallah

不能自定義配置Apache火花在磚SQL倉庫

你隻能配置一組有限的全球引發屬性使用一個SQL時倉庫....

最後更新:2023年3月15日,通過mounika.tarigopula
開發工具(GCP)

Apache在DBConnect引發會話是null

“sparkSession零而試圖executeCollectResult”使用DBConnect ....時出現錯誤信息

最後更新:2022年4月1日通過何塞·岡薩雷斯

未能創建過程與磚CLI在Windows的錯誤

磚CLI可能不會正常工作在Windows中如果您的Python路徑有一個空間....

最後更新:2022年5月9日,通過John.Lourdu

GeoSpark未定義的函數與DBConnect錯誤

使用DBConnect會話.... GeoSpark代碼

最後更新:2022年6月1日通過arjun.kaimaparambilrajan

Apache配置在DBConnect火花

使用REST API調用和DBConnect Apache配置集群....火花

最後更新:2022年5月9日,通過arvind.ravish

在DBConnect ProtoSerializer棧溢出錯誤

堆棧溢出錯誤DBConnect表明你在本地PC ....需要分配更多的內存

最後更新:2022年5月9日,通過ashritha.laxminarayana

使用tcpdump創建pcap文件

分析網絡流量節點之間在特定集群使用tcpdump ....創建pcap文件

最後更新:2023年4月10日,通過pavan.kumarchalamcharla

起程拓殖注冊中心沒有提供錯誤

你不能安裝磚起程拓殖提供者如果required_providers塊不是模塊中定義....

最後更新:2022年8月16日,通過prabakar.ammeappin

磚連接工作失敗後的磚運行時更新

使用最新版本的磚連接相匹配你的磚的運行時版本,以避免錯誤....

最後更新:2023年7月27日,通過拉傑夫kannan Thangaiah
三角洲湖(GCP)

比較兩個版本的δ表

使用時間旅行來比較兩個版本的三角洲表....

最後更新:2022年5月10日,通過mathan.pillai

達美航空合並不能解決嵌套的領域

達美航空合並失敗的“三角洲合並不能解決”字段數據類型不匹配的錯誤消息....

最後更新:2022年5月10日,通過亞當Pavlacka

δ緩存集群行為的自動定量多少

學習如何三角洲緩存集群行為的自動定量....

最後更新:2022年5月10日,通過亞當Pavlacka

如何提高性能的三角洲湖並入查詢使用分區修剪

學習如何使用分區修剪提高....三角洲湖合並成查詢的性能

最後更新:2023年6月1日通過亞當Pavlacka

最佳實踐管理三角洲湖表

學習的最佳實踐將....三角洲湖管理表

最後更新:2022年5月10日,通過亞當Pavlacka

如何填充或更新現有的三角洲表中列

學習如何填充或更新現有的三角洲表中列....

最後更新:2022年5月10日,通過亞當Pavlacka

識別重複的數據添加操作

…

最後更新:2022年5月10日,通過chetan.kardekar

優化三角洲沉在一個結構化的流媒體應用程序

優化你的三角洲水槽使用國防部價值batchId foreachBatch ....運行時優化

最後更新:2022年5月10日,通過mathan.pillai

無法把字符串varchar

在磚使用varchar類型運行時8.0及以上。它隻能用於表模式。它不能用於函數或運算符....

最後更新:2022年5月10日,通過DD沙瑪

真空零保留導致數據丟失

不要禁用spark.databricks.delta.retentionDurationCheck.enabled與保留零和運行真空,以避免數據丟失....

最後更新:2022年10月7日,通過DD沙瑪

z值將是無效的,而不是收集統計數據

z值是無效的,錯誤不收集統計數據。重新排序的列的表你想優化....內第一個32列上

最後更新:2022年5月10日,通過mathan.pillai

改變集群配置為三角洲住表管道

自定義集群配置時使用三角洲住表管道....

最後更新:2022年7月1日通過pratik.bhawsar

不同與相同的數據表用於相同查詢時產生不同的計劃

確保表與相同的數據生成相同的物理計劃引發SQL ....

最後更新:2022年10月14日,通過deepak.bhutada

允許空格和特殊字符與三角洲表嵌套列名稱

升級到磚運行時的10.2或更高版本,並使用列映射模式允許在列名....空格和特殊字符

最後更新:2022年10月26日,通過shanmugavel.chandrakasu

三角洲寫空文件當源是空的

三角洲可以寫空文件在運行時7.3 LTS磚。你應該升級到磚運行時9.1 LTS以上....解決問題

最後更新:2022年12月2日,通過拉傑夫kannan Thangaiah

三角洲生活表自動真空管道沒有運行

你必須有一個維護集群定義為真空自動運行....

最後更新:2023年2月2日,通過priyanka.biswas

真空三角洲湖上的最佳實踐

學習使用的最佳實踐,和故障排除,真空....三角洲湖上

最後更新:2023年2月3日,通過mathan.pillai

優化隻是支持表誤差δ湖

使用創建或替換表當δ表從一個存儲位置移動到另一個....

最後更新:2023年2月3日,通過mathan.pillai

從DELTA_LOG腐敗錯誤中恢複過來

學習如何修理三角洲表報告錯誤查詢IllegalStateException ....

最後更新:2023年2月17日,通過gopinath.chandrasekaran

以編程方式確定表是一個三角洲表

在磚的筆記本使用Python代碼來確定是否一個表是一個三角洲表....

最後更新:2023年3月16日,通過mounika.tarigopula

當查詢三角洲共享表RESOURCE_LIMIT_EXCEEDED錯誤

三角洲共享共享表的元數據大小限製。如果超出這些限製它生成一個錯誤....

最後更新:2023年4月19日,通過拉傑夫kannan Thangaiah

發現錯誤塊創建一個三角洲表複製列

不允許重複的列名在三角洲表....

最後更新:2023年7月28日,通過deepak.bhutada
喬布斯(GCP)

區分活躍和死的工作

學習如何區分活躍和死磚工作....

最後更新:2022年5月10日,通過亞當Pavlacka

火花與司機工作失敗是暫時不可用

工作失敗由於司機不可用或沒有響應....

最後更新:2023年4月17日,通過亞當Pavlacka

使用REST API如何刪除所有工作

學習如何使用REST API ....刪除所有數據磚的工作

最後更新:2022年5月10日,通過亞當Pavlacka

工作筆記本集群限製輸出

集群有一個最大的筆記本工作輸出20 MB的大小。如果輸出較大,它導致一個錯誤....

最後更新:2022年5月10日,通過何塞·岡薩雷斯

工作失敗,但是Apache火花任務完成

你的工作失敗,但是所有的Apache火花任務成功完成。您正在使用spark.stop()或system . exit(0)在代碼中....

最後更新:2022年5月10日,通過harikrishnan.kunhumveettil

由於工作速率限製工作失敗

學習如何解決....磚工作失敗由於工作速度的限製

最後更新:2023年4月17日,通過亞當Pavlacka

工作失敗,無效的訪問令牌

運行的工作時間超過48小時失敗與無效的訪問令牌錯誤當dbutils令牌到期....

最後更新:2022年5月11日,通過manjunath.swamy

任務反序列化時間很高

配置cluster-installed庫安裝在執行器在集群啟動vs執行人啟動運行....加快你的工作任務

最後更新:2023年2月23日,通過亞當Pavlacka

傳遞參數到一個筆記本作為一個列表

使用JSON文件臨時存儲參數,您想要使用你的筆記本....

最後更新:2022年10月29日,通過pallavi.gowdar

未提交的文件導致數據重複

部分未提交的文件從一個失敗的寫會導致明顯的數據重複。調整真空設置....來解決這個問題

最後更新:2022年11月8日,通過gopinath.chandrasekaran

多任務工作流使用不正確的參數值

如果並行任務運行在同一個集群使用Scala的同伴對象可以使用錯誤的值將在JVM ....共享一個類

最後更新:2022年12月5日,通過拉傑夫kannan Thangaiah

工作失敗引發洗牌FetchFailedException錯誤

禁用默認的火花洗牌服務解決FetchFailedException錯誤....

最後更新:2022年12月5日,通過shanmugavel.chandrakasu

用戶無法查看工作結果在使用遠程Git源代碼

磚沒有管理權限遠程回購,所以你必須同步變化與當地筆記本所以非管理用戶可以查看結果....

最後更新:2023年3月7日,通過ravirahul.padmanabhan

嚐試多次運行單一的計劃工作

確保你的cron調度工作時語法是正確的。一個通配符在錯誤的空間可以產生意想不到的結果....

最後更新:2023年1月20日,通過monica.cao

添加自定義標記三角洲住表管道

手動編輯JSON配置文件添加自定義標簽....

最後更新:2023年2月24日,通過John.Lourdu

更新通知API設置崗位的工作

您可以使用工作API添加郵件通知,在您的工作區....或全部的工作

最後更新:2023年3月17日,通過manoj.hegde

停止所有安排工作

使用示例代碼包含在工作區....停止你所有的安排工作

最後更新:2023年6月7日,通過simran.arora
工作執行(GCP) 庫(GCP)

不能從AutoGluon進口TabularPrediction

不能從AutoGluon進口TabularPrediction v0.0.14由於命名空間衝突。升級到AutoGluon v0.0.15 ....

最後更新:2022年5月11日,通過kavya.parag

如何正確更新Maven庫在磚嗎

學習如何正確地更新Maven庫磚....

最後更新:2022年5月11日,通過亞當Pavlacka

Init腳本未能下載Maven JAR

集群init腳本未能下載一個Maven JAR當試圖安裝一個圖書館....

最後更新:2022年5月11日,通過arvind.ravish

安裝包使用前凹口快照

避免包安裝錯誤的安裝一個凹口快照....早些時候

最後更新:2022年5月11日,通過darshan.bargal

安裝PyGraphViz

安裝PyGraphViz ....所有必需的依賴關係

最後更新:2022年5月11日,通過pavan.kumarchalamcharla

安裝Turbodbc通過init腳本

安裝Turbodbc及其依賴項、libboost-all-dev unixodbc-dev, python-dev, init腳本....

最後更新:2022年5月11日,通過John.Lourdu

不能卸載從UI庫

學習做什麼當你不能卸載一個圖書館用戶界麵使用磚....

最後更新:2022年5月11日,通過亞當Pavlacka

在一個集群上安裝Cartopy時錯誤

Cartopy安裝失敗如果libgeos和libproj不安裝....

最後更新:2022年5月11日,通過prem.jayaraj

在一個集群上安裝pyodbc時錯誤

學習如何解決一個錯誤當磚集群上安裝pyodbc ....

最後更新:2022年5月11日,通過亞當Pavlacka

圖書館除了依賴失敗

學習為什麼notebook-scoped庫觸發一個Apache火花依賴異常;返回一個錯誤....需求不能滿足

最後更新:2022年5月11日,通過jordan.hicks

閱讀與xlrd .xlsx文件失敗

xlrd不再支持.xlsx文件。使用openpyxl讀.xlsx文件....

最後更新:2022年5月12日,通過prakash.jha

刪除Log4j 1。x JMSAppender SocketServer類從類路徑中

刪除Log4j 1。從類路徑.... x JMSAppender SocketServer類

最後更新:2022年5月16日,通過亞當Pavlacka

替換默認庫jar

學習如何替換默認的Java或Scala庫jar ....與另一個版本

最後更新:2022年5月16日,通過ram.sankarasubramanian

與AssertionError Python命令失敗:錯誤的顏色格式

解決顏色格式錯誤造成AssertionError nbconvert Python命令失敗時....

最後更新:2022年5月16日,通過John.Lourdu

PyPMML失敗找不到py4j jar錯誤

…

最後更新:2022年5月16日,通過arjun.kaimaparambilrajan

TensorFlow無法導入

TensorFlow未能導入如果你有一個不兼容的版本的集群上安裝protobuf ....

最後更新:2022年5月16日,通過kavya.parag

驗證集群的Log4j版本

驗證Log4j集群上安裝和升級的版本如果需要....

最後更新:2022年5月16日,通過亞當Pavlacka

Apache火花工作失敗與環境目錄沒有發現錯誤

火花工作出現超時後安裝一個圖書館,因為安全規則是防止工人解決.... Python可執行路徑

最後更新:2022年7月1日通過亞當Pavlacka

將安裝庫從一個集群複製到另一個地方

圖書館集群從源複製到目標集群與一個定製的Python腳本....

最後更新:2023年1月6日,通過manoj.hegde

沒有安裝Elasticsearch通過Maven

如果庫依賴關係已經安裝,它會導致庫安裝失敗....

最後更新:2023年3月17日,通過ankitha.vijayanandana
機器學習(GCP)

Conda未能從蟒蛇下載包

Conda未能下載包PackagesNotFoundError當你試圖安裝包從蟒蛇....

最後更新:2022年5月16日,通過mathan.pillai

從MLflow下載工件

如何下載工件從MLflow到本地存儲....

最後更新:2022年5月16日,通過shanmugavel.chandrakasu

如何提取特征信息基於樹的Apache SparkML管道模型

基於樹的學習如何提取特征信息 毫升管道模型磚....

最後更新:2022年5月16日,通過亞當Pavlacka

安裝一個Apache SparkML模型拋出錯誤

學習如何解決錯誤拋出磚當SparkML模型擬合或管道....

最後更新:2022年5月16日,通過亞當Pavlacka

H2O。人工智能集群不可到達的蘇打水

H2O。集群ai蘇打水不可以如果蘇打水包的版本不匹配的版本火花用於集群....

最後更新:2022年5月16日,通過shanmugavel.chandrakasu

如何執行組K-fold交叉驗證與Apache火花

學習如何執行組K-fold交叉驗證與Apache火花磚....

最後更新:2023年2月24日,通過亞當Pavlacka

MLflow項目無法訪問Apache蜂巢表

解決“表或視圖不發現“錯誤當一個MLflow項目無法訪問Apache蜂巢表....

最後更新:2022年5月16日,通過vikas.yadav

如何加快交叉驗證

學習如何提高交叉驗證性能與磚SparkML ....

最後更新:2022年5月16日,通過亞當Pavlacka

與maxNumConcurrentTasks Hyperopt失敗錯誤

不要安裝Hyperopt ....磚運行時對機器學習的集群

最後更新:2022年5月16日,通過chetan.kardekar

使用文檔作為輸入時不正確的結果

你的模型不返回文檔輸入使用TfidfVectorizer時預期的結果。JSON數組…

最後更新:2022年5月16日,通過pradeepkumar.palaniswamy

實驗中使用自定義構件存儲位置時發出警告

解決實驗中警告當一個自定義工件存儲位置是用來代替.... MLflow管理位置

最後更新:2022年5月16日,通過亞當Pavlacka

實驗使用遺留工件存儲位置時發出警告

解決實驗遺留工件存儲位置時警告代替.... MLflow管理位置

最後更新:2022年5月16日,通過亞當Pavlacka

然而使用pyfunc返回ModuleNotFoundError或FileNotFoundError模型

預測資訊模型返回ModuleNotFoundError或使用pyfunc FileNotFoundError ....

最後更新:2022年5月16日,通過pradeepkumar.palaniswamy

OSError當訪問MLflow實驗工件

解決一個“OSError”當試圖訪問、下載、或日誌MLflow實驗工件....

最後更新:2022年5月16日,通過亞當Pavlacka

PERMISSION_DENIED錯誤當訪問MLflow實驗工件

解決PERMISSION_DENIED錯誤當試圖訪問MLflow實驗工件....

最後更新:2022年5月16日,通過亞當Pavlacka

運行不嵌套在Hyperopt啟用SparkTrials時

當啟用SparkTrials Hyperopt, MLflow跑不是嵌套在父跑....

最後更新:2022年5月16日,通過pradeepkumar.palaniswamy
Metastore (GCP)

自動定量與外部metastore緩慢

提高自動定量性能隻安裝metastore jar司機....

最後更新:2022年5月16日,通過Gobinath.Viswanathan

數據太長列的錯誤

如果一個列超過4000個字符是太大的默認數據類型並返回一個錯誤....

最後更新:2022年5月16日,通過亞當Pavlacka

減少數據庫沒有刪除

使用蜂巢命令來刪除一個數據庫沒有刪除底層存儲文件夾....

最後更新:2022年5月24日,通過arvind.ravish

與外部蜂巢metastore錯誤創建表

創建表的錯誤使用MySQL 8.0外部蜂巢metastore由於字符集....

最後更新:2022年5月16日,通過jordan.hicks

日本在外部metastore字符支持

在一個外部表中使用日文字符metastore ....

最後更新:2022年5月16日,通過亞當Pavlacka

拚花時間戳需要蜂巢metastore 1.2或以上

更新蜂巢metastore版本1.2或以上使用時間戳與拚花表....

最後更新:2022年5月16日,通過rakesh.parija
度量(GCP) 筆記本電腦(GCP)

JSON讀者解析值為零

當你讀一個JSON文件,引發讀者JSON返回null值,而不是實際的數據....

最後更新:2022年5月16日,通過saritha.shivakumar

顯示()沒有顯示正確微秒

使用顯示()來顯示時間戳值與微秒級精度。顯示()僅限於毫秒精度....

最後更新:2022年5月16日,通過harikrishnan.kunhumveettil

錯誤:收到命令對象id p0 c

你看到錯誤消息的信息:py4j。java_gateway:收到命令後c的對象id p0運行Python代碼與進口庫....

最後更新:2022年5月16日,通過sandeep.chandran

當訪問或安裝存儲失敗

不掛載存儲根路徑....山

最後更新:2022年5月16日,通過kiran.bharathi

更新工作為多個用戶權限

使用工作權限API來更新多個用戶的權限....

最後更新:2022年5月17日,通過Atanu.Sarkar

生成瀏覽器HAR文件

學習如何記錄HAR文件在您的web瀏覽器。進行故障診斷時,這些都是非常有用的UI問題....

最後更新:2022年7月1日通過vivian.wilfred

恢複刪除垃圾筆記本

刪除項目可以從垃圾中恢複刪除....後30天

最後更新:2022年9月2日,通過vivian.wilfred

得到工作空間配置細節

顯示完整的配置細節磚工作區....

最後更新:2022年10月28日,通過kavya.parag

遍曆所有工作在工作區中使用工作2.1 API

2.1使用工作API遍曆並顯示在工作區....工作列表

最後更新:2023年7月28日,通過debayan.mukherjee

現在太多的執行上下文是開放的

減少筆記本用來限製執行上下文工作所需的數量....

最後更新:2023年5月31日,通過akash.bhat

生成一個列表的所有工作空間管理員

使用包含示例代碼來生成所有工作空間的列表管理員....

最後更新:2023年6月7日,通過simran.arora
安全性和權限(GCP)

SSL連接GCP秘密管理器時例外

GCP秘密經理需要GCM密碼套件安裝在您的集群。磚運行時10.4 LTS以上GCM密碼套件默認啟用....

最後更新:2023年1月20日,通過John.Lourdu
流(GCP)

不支持添加輸出沒有水印

添加輸出模式不支持聚合DataFrames沒有水印....

最後更新:2022年5月17日,通過亞當Pavlacka

不支持Apache DStream火花

不支持DStreams磚。從DStream API遷移到結構化流....

最後更新:2022年5月17日,通過亞當Pavlacka

流與文件水槽:複蘇的問題如果你改變檢查點或輸出目錄

學習如何解決問題,出現複蘇如果你改變檢查點或輸出目錄流媒體文件時水槽....

最後更新:2022年5月17日,通過亞當Pavlacka

得到文件的路徑被自動加載程序

得到所有文件的路徑和文件名被自動加載程序,寫出來一個新列....

最後更新:2022年5月18日,通過亞當Pavlacka

如何啟動一個結構化流查詢從去年寫抵消嗎

學習如何重啟一個結構化流查詢上次寫抵消....

最後更新:2022年5月18日,通過亞當Pavlacka

卡夫卡的錯誤:沒有引導url解析

沒有引導url解析的錯誤發生當你試圖讀或寫數據到卡夫卡流....

最後更新:2022年5月18日,通過亞當Pavlacka

readStream()不是白名單查詢運行時錯誤

readStream()不是白名單錯誤的集群表啟用訪問控製....

最後更新:2022年5月19日,通過mathan.pillai

檢查點文件不刪除當使用顯示()

學習如何防止顯示(streamingDF)檢查點文件使用了大量的存儲....

最後更新:2022年5月19日,通過亞當Pavlacka

檢查點文件不刪除當使用foreachBatch ()

學習如何防止foreachBatch()從使用大量的存儲....檢查點文件

最後更新:2022年5月19日,通過亞當Pavlacka

衝突的目錄結構錯誤

你應該使用不同的路徑的存儲位置,否則矛盾的目錄結構可能會導致一個錯誤....

最後更新:2022年5月19日,通過阿施施

RocksDB未能獲得一個鎖

當使用RocksDB作為一個國家商店,您可能需要增加獲得SQL配置超時....

最後更新:2023年2月25日,通過亞當Pavlacka

流工作卡住寫作檢查點

流工作似乎卡住了即使沒有錯誤。您使用的是DBFS檢查點存儲,但卻填滿....

最後更新:2022年5月19日,通過何塞·岡薩雷斯

顯式路徑自動加載程序所需數據定義或模式

如果你不指定一個明確的路徑數據或定義您的數據模式,得到卻是IllegalArgumentException錯誤當你開始一個汽車裝載機工作....

最後更新:2022年10月12日,通過何塞·岡薩雷斯

優化與.trigger流交易

使用.trigger定義存儲更新間隔。更高的價值減少的數量存儲事務....

最後更新:2022年10月26日,通過chetan.kardekar

結構化流工作減緩每十日批

文件夾可以減緩結構化的元數據的自動壓實流工作....

最後更新:2022年10月28日,通過gopinath.chandrasekaran

得到所有文件最後修改時間在自動加載程序和批處理作業

定義一個UDF列出所有文件路徑和回報每一個....的最後修改時間

最後更新:2022年12月1日通過DD沙瑪
可視化(GCP) Python與Apache火花(GCP)

AttributeError:函數的對象沒有屬性

使用受保護的關鍵字從DataFrame API列名的結果在一個函數對象沒有....屬性錯誤消息

最後更新:2022年5月19日,通過noopur.nigam

Python datetime對象轉換為字符串

顯示日期和時間值的列,作為一個datetime對象,和一個字符串....

最後更新:2022年5月19日,通過亞當Pavlacka

顯示文件和目錄的時間戳的細節

顯示文件創建日期、修改日期使用Python ....

最後更新:2022年5月19日,通過rakesh.parija

閱讀大型DBFS-mounted文件使用Python api

學習如何解決錯誤讀取大型DBFS-mounted文件時使用Python api ....

最後更新:2022年5月19日,通過亞當Pavlacka

如何導入一個定製的CA證書嗎

學習如何定製CA證書導入到磚集群用於Python ....

最後更新:2023年2月27日,通過arjun.kaimaparambilrajan

工作開始前仍然閑置

Apache火花開始....前工作仍然閑置很長一段時間

最後更新:2022年5月19日,通過阿施施

列出所有工作區對象

列出所有磚工作區對象在給定路徑....

最後更新:2022年5月19日,通過亞當Pavlacka

Python命令失敗在高並發集群

Python命令失敗在高並發集群啟用了Apache火花處理隔離和共享會話。....警告錯誤消息

最後更新:2022年5月19日,通過xin.wang

集群取消Python命令執行後安裝散景

學習做什麼當你的磚集群取消Python命令執行後安裝散景....

最後更新:2022年5月19日,通過亞當Pavlacka

由於圖書館集群取消Python命令執行衝突

學習做什麼當你的磚集群取消Python命令執行由於庫衝突....

最後更新:2022年5月19日,通過亞當Pavlacka

與AttributeError Python命令執行失敗

學習Python命令時要做什麼在你的磚筆記本的失敗與AttributeError ....

最後更新:2022年5月19日,通過亞當Pavlacka

工作與Java IndexOutOfBoundsException錯誤失敗

當groupby()連同applyInPandas使用它生成一個異常由於箭緩衝區限製....

最後更新:2022年12月21日通過rakesh.parija

工作與NoSuchElementException失敗錯誤

NoSuchElementException錯誤可能發生在使用Apache箭頭....

最後更新:2023年3月3日,通過阿施施

工作與IndexOutOfBoundsException和ArrowBuf錯誤失敗

當Groupby applyinPandas使用它會導致Apache箭頭....緩衝區大小估計錯誤

最後更新:2023年3月3日,通過阿施施

字段名稱排序Apache火花3. x的變化

從引發3.0.0,行創建的命名參數沒有字段名稱字母順序....

最後更新:2023年4月21日,通過sergios.lalas

工作失敗“沒有足夠的內存來構建哈希映射”錯誤

您應該使用自適應查詢執行而不是顯式的廣播提示執行連接上麵的磚運行時11.3 LTS和....

最後更新:2023年5月12日,通過saritha.shivakumar
R與Apache火花(GCP)

更改版本的R (r-base)

學習如何改變你磚集群.... R的版本

最後更新:2022年5月20日通過亞當Pavlacka

修複R包的版本

了解如何修複.... R包的版本

最後更新:2022年5月20日通過亞當Pavlacka

如何並行化和新聞出版總署R代碼嗎

學習如何使用新聞出版總署並行化R代碼....

最後更新:2022年5月20日通過亞當Pavlacka

如何並行化和spark.lapply R代碼嗎

學習如何使用spark.lapply並行化R代碼....

最後更新:2022年5月20日通過亞當Pavlacka

安裝rJava和RJDBC庫

學習如何在磚集群安裝rJava和RJDBC庫....

最後更新:2022年12月22日,通過亞當Pavlacka

呈現一個R減價文件包含sparklyr代碼失敗

學習如何解決故障時呈現一個R減價文件包含sparklyr ....

最後更新:2022年5月20日通過亞當Pavlacka

解決方案或命名空間加載錯誤

學習如何解決方案或命名空間在磚筆記本....加載錯誤

最後更新:2022年5月20日通過亞當Pavlacka

RStudio服務器後端連接錯誤

RStudio服務器端連接發生錯誤如果你超過RBackends最大數量的集群....

最後更新:2022年5月20日通過arvind.ravish

通過init腳本驗證R包安裝

驗證R包通過一個init腳本成功安裝。列出所有R包沒有安裝....

最後更新:2022年5月20日通過kavya.parag
Scala使用Apache火花(GCP)

Apache火花UI並不是與工作同步

火花的狀態工作時不同步,火花UI事件從事件隊列之前處理....

最後更新:2023年2月27日,通過chetan.kardekar

Apache火花工作失敗,鑲花的列不能轉換錯誤

鑲木地板列不能出現轉換錯誤當你閱讀鋪十進製數據格式和寫作....δ表

最後更新:2022年5月20日通過shanmugavel.chandrakasu

緩存的最佳實踐(),count (), ()

學習的最佳實踐使用緩存(),“count()”,“()”的火花DataFrame ....

最後更新:2022年5月20日通過ram.sankarasubramanian

不能導入timestamp_millis或unix_millis

不能直接使用timestamp_millis或unix_millis DataFrame。你必須首先使用selectExpr()或者使用SQL命令....

最後更新:2022年5月20日通過saritha.shivakumar

不能修改Apache配置火花的價值

您不能修改引發的價值配置設置在一個筆記本上。它必須設置集群級別....

最後更新:2022年5月20日通過亞當Pavlacka

嵌套的JSON轉換為DataFrame夷為平地

如何將一個扁平的DataFrame嵌套JSON使用嵌套的情況下類....

最後更新:2022年5月20日通過亞當Pavlacka

從一個JSON字符串創建一個DataFrame或Python字典

從一個變量創建一個Apache火花DataFrame包含一個JSON字符串或Python字典....

最後更新:2022年7月1日通過ram.sankarasubramanian

十進製美元DecimalIsFractional斷言錯誤

使用“圓()”或套管雙十進製的結果在一個十進製DecimalIsFractional美元的斷言錯誤。. lang。AssertionError斷言失敗……

最後更新:2022年5月23日,通過saikrishna.pujari

在Apache 3.0火花from_json返回null

火花3.0及以上不能解析JSON數組結構;from_json返回null ....

最後更新:2022年5月23日,通過shanmugavel.chandrakasu

管理三角洲表的大小

建議,可以幫助您管理....三角洲表的大小

最後更新:2022年5月23日,通過何塞·岡薩雷斯

選擇文件使用模式匹配

使用一個水珠模式匹配選擇特定的文件在一個文件夾....

最後更新:2022年5月23日,通過mathan.pillai

工作失敗ExecutorLostFailure由於“內存溢出”錯誤

解決執行器故障的根本原因是由於執行人.....耗盡內存

最後更新:2022年11月7日,通過mathan.pillai

工作失敗ExecutorLostFailure因為遺囑執行人是忙碌的

解決執行器故障的根本原因是由於執行人忙碌....

最後更新:2022年11月7日,通過mathan.pillai

理解投機執行

學習投機執行是如何工作的,如何識別它,當你應該使用它....

最後更新:2022年11月7日,通過mounika.tarigopula

使用自定義類和對象的模式

您必須定義自定義類和對象在一個包,如果你想使用它們在一個筆記本……

最後更新:2022年11月8日,通過saritha.shivakumar

工作失敗TimeoutException錯誤

這個錯誤通常是由一個廣播完成....加入這需要太長

最後更新:2023年3月3日,通過swetha.nandajan
SQL與Apache火花(GCP)

日期函數隻接受int值在Apache 3.0火花

日期函數隻接受int值在Apache 3.0火花;分數和字符串值返回AnalysisException錯誤....

最後更新:2023年2月28日,通過亞當Pavlacka

複製列元數據錯誤

火花工作與org.apache.spark.sql失敗在處理一個三角洲表。AnalysisException發現重複的列(s)的元數據錯誤....

最後更新:2022年5月23日,通過vikas.yadav

生成惟一增加數值

使用Apache函數來生成惟一的火花和越來越多的列在一個表文件或DataFrame ....

最後更新:2022年5月23日,通過ram.sankarasubramanian

在SQL語句錯誤:AnalysisException:表或視圖不發現

學習如何解決AnalysisException SQL錯誤“表或視圖沒有找到“....

最後更新:2022年5月23日,通過亞當Pavlacka

錯誤當下載完整的結果後加入

如果你有重複的列加入後,你會得到一個錯誤當試圖下載完整的結果....

最後更新:2022年5月23日,通過manjunath.swamy

MSCK修理表並行運行時錯誤

不並行運行“MSCK修複”命令。它導致一個讀....超時或內存不足錯誤消息

最後更新:2022年5月23日,通過ashritha.laxminarayana

找到一個表的大小

如何找到一個表的大小....

最後更新:2022年5月23日,通過mathan.pillai

內連接滴記錄結果

避免了記錄在執行內連接....

最後更新:2022年5月23日,通過siddharth.panchal

當從雪花讀取數據是不正確的

數據讀取時雪花是不正確的時區值沒有被正確設置....

最後更新:2022年5月24日,通過DD沙瑪

JDBC編寫與PrimaryKeyViolation失敗錯誤

JDBC編寫SQL數據庫與“PrimaryKeyViolation”錯誤或失敗導致重複數據……

最後更新:2022年5月24日,通過harikrishnan.kunhumveettil

外部表查詢不跳過標題行

外部蜂巢表時不要跳過標題行查詢從火花SQL ....

最後更新:2022年5月24日,通過manisha.jena

顯示數據庫命令返回意想不到的列名

運行顯示數據庫的命令返回一個意想不到的列名....

最後更新:2022年5月24日,通過何塞·岡薩雷斯

不能查看表SerDe屬性

顯示創建表隻返回Apache引發DDL。它不顯示SerDe屬性....

最後更新:2022年7月1日通過saritha.shivakumar

解析下午時間(PM) to_timestamp()返回null

當轉換12小時時間24小時時間與to_timestamp ....()小時變量必須是小寫的

最後更新:2022年7月22日,通過chetan.kardekar

to_json()導致不能使用null作為地圖關鍵錯誤

您必須在您的輸入過濾或替換空值數據在使用to_json () ....

最後更新:2022年7月22日,通過gopal.goel

設置nullability當使用SaveAsTable與δ表

學習如何創建一個增量表列設置為false的nullability ....

最後更新:2022年10月14日,通過anshuman.sahu

3.0確保一致性在統計函數之間的火花,火花3.1及以上

下麵的磚運行時7.3 LTS和統計功能返回NaN除以零發生時。設置一個火花配置返回null而不是....

最後更新:2022年10月14日,通過chetan.kardekar

使用在火花datetime值3.0及以上

如何正確使用datetime函數與磚火花SQL運行時7.3 LTS以上....

最後更新:2022年10月26日,通過deepak.bhutada

ANSI兼容小數精度和等級

學習如何使ANSI兼容錯誤消息當不正確的值用於....小數精度和規模

最後更新:2022年10月29日,通過saritha.shivakumar

重建LISTAGG功能與火花SQL

使用collect_list和concat_ws火花SQL實現相同的功能作為其他平台上的LISTAGG ....Beplay体育安卓版本

最後更新:2023年2月24日,通過manjunath.swamy

使用刪除時性能下降與子查詢運行時10.4 LTS磚

自動優化應該禁用刪除與子查詢時一方足夠小是廣播....

最後更新:2023年4月21日,通過sergios.lalas
起程拓殖(GCP) 統一目錄(GCP)

同步命令失敗與錯誤匹配輸入錯誤

統一目錄必須啟用集群之前,你可以使用同步遺留蜂巢表遷移到統一目錄....

最後更新:2023年4月11日,通過John.Lourdu

不能訪問統一編目視圖

你不能訪問一個視圖,如果你沒有足夠的權限在底層表....

最後更新:2023年5月10日,通過John.Lourdu

INVALID_PARAMETER_VALUE。LOCATION_OVERLAP:與管理存儲錯誤

外部表不能重疊目錄/ schema存儲位置。他們應該創建子目錄,而不是....

最後更新:2023年6月7日,通過simran.arora
三角洲生活表(GCP)

不能選擇一個磚當使用三角洲生活表管道運行時版本

三角洲生活表不允許您直接配置數據磚....運行時版本

最後更新:2023年4月20日通過何塞·岡薩雷斯

三角洲生活表工作失敗當使用收集()

不應該使用功能,比如收集()、count ()、toPandas(),保存()和saveAsTable表和視圖中()函數定義....

最後更新:2023年5月10日,通過何塞·岡薩雷斯