华为云AI开发平台ModelArts执行spark sql脚本_云淘科技

概述

对数据集执行spark sql脚本操作。

输入

参数

子参数

参数说明

inputs

dataframe

inputs为字典类型,dataframe为pyspark中的DataFrame类型对象

输出

数据集

参数说明

参数

子参数

参数说明

sql_string

sql脚本的格式化字符串,例如:

“SELECT age FROM adult_table WHERE age > 50”

样例

inputs = {
    "dataframe": None  # @input {"label":"dataframe","type":"DataFrame"}
}
params = {
    "inputs": inputs,
    "sql_string": ""  # @param {"label":"sql_string","type":"string","required":"true","helpTip":""}
}
execute_sql____id___ = MLSExecuteSql(**params)
execute_sql____id___.run()
# @output {"label":"dataframe","name":"execute_sql____id___.get_outputs()['output_port_1']","type":"DataFrame"}

父主题: 数据处理

同意关联代理商云淘科技,购买华为云产品更优惠(QQ 78315851)

内容没看懂? 不太想学习?想快速解决? 有偿解决: 联系专家