如何在 Azure Databricks SQL 中将字段值转换为逗号分隔

Posted 2023-02-19

【中文标题】如何在 Azure Databricks SQL 中将字段值转换为逗号分隔

【英文标题】：How to convert field values as comma separated in Azure databricks SQL

【发布时间】：2019-10-04 06:10:28

【问题描述】：

我正在尝试获取字段值作为每个 ID 的单个单元格中的逗号分隔值

我在 Azure Databricks (SQL) 上使用，我知道我们可以使用 xml 路径在传统 SQL 上实现此功能.. 但在 Azure Databricks 中看不到此功能。我们还有其他方法可以实现以下预期结果吗？

示例数据如下

ID  User      Department
1   User1     Admin
2   User1     Accounts
3   User2     Finance
4   User3     Sales
5   User3     Finance

我正在寻找数据块上的 SQL 查询，它给我以下输出

ID  User      Department
1   User1     Admin,Accounts
2   User2     Finance
3   User3     Sales, Finance

select distinct t.[user],
  STUFF((SELECT distinct ', ' + t1.department
         from yourtable t1
         where t.[user] = t1.[user]
            FOR XML PATH(''), TYPE
            ).value('.', 'NVARCHAR(MAX)') 
        ,1,2,'') department
from yourtable t;

我正在寻找适用于数据块的类似脚本..

【参考方案1】：

我认为找到了解决方案...它可以使用 spark 功能之一实现.. concat_ws(', ',collect_set( col_name )) .. 谢谢