Databricks 发布大数据分析平台 Spark 用 AI 模型 SDK:一键生成 SQL 及 FySpark 语言图表代码

人工智能
Databricks 日前发布大数据分析平台 Spark 所用的 AI 模型 SDK,开发者写代码时,可用英文下指令,编译器就会将英文指令转换为 PySpark 或 SQL 语言代码,以提升开发者效率。

7 月 10 日消息,Databricks 日前发布大数据分析平台 Spark 所用的 AI 模型 SDK,开发者写代码时,可用英文下指令,编译器就会将英文指令转换为 PySpark 或 SQL 语言代码,以提升开发者效率

▲ 图源 Databricks 网站

据悉,Spark 是一款开源大数据分析工具,每年超过 10 亿次下载、在全球 208 个国家和地区使用

▲ 图源 Databricks 网站

Databricks 表示,微软的 AI 代码助手 GitHubCopilot 固然强大,但使用门槛也相当高,Databricks 的 SDK 相对更具普适性,更易于上手。

Databricks 声称,他们发现大型语言模型非常了解 Spark,Spark 社区在过去 10 年贡献大量的开放、高质量文本以供 AI 学习发展。Databricks 团队也正是凭借 Spark 社区提供的一系列学习数据进行训练,用 LLM 开发一套英文版 SDK。开发者利用这套 SDK,即可直接用英文下指令,并得到相对应结果,提升开发效率。

▲ 图源 Databricks 网站

IT之家发现,Databricks 同时声称,当下这款英文版 SDK 还在早期开发阶段,他们欢迎更多使用者加入使用,来提升这款 SDK。

责任编辑:庞桂玉 来源: IT之家
相关推荐

2015-08-18 13:35:42

spark

2024-04-08 14:07:51

Animagine开源

2020-09-08 12:48:19

数据分析图表互联网

2013-09-02 17:42:28

大数据分析FusionInsig华为

2020-09-16 10:05:31

代码开发AI

2021-06-06 19:03:25

SQL大数据Spark

2017-07-22 00:41:27

大数据数据存储

2019-07-31 14:16:35

大数据人工智能算法

2015-09-23 09:24:56

spark数据分析

2024-04-08 13:59:03

大模型Replicate

2013-05-22 08:55:14

R语言

2023-03-05 23:11:07

Go语言服务

2017-10-11 11:10:02

Spark Strea大数据流式处理

2013-01-18 10:04:33

大数据分析

2011-08-12 11:14:42

大数据数据分析平台架构

2014-07-26 14:44:01

Databricks连城Spark

2023-06-01 15:30:30

Service代码生成工具

2018-06-23 07:53:31

大数据分析框架数据

2020-07-09 15:21:58

大数据RStudioR语言
点赞
收藏

51CTO技术栈公众号