栏目分类:
子分类:
返回
名师互学网用户登录
快速导航关闭
当前搜索
当前分类
子分类
实用工具
热门搜索
名师互学网 > IT > 前沿技术 > 大数据 > 大数据系统

传多个参数(pyspark脚本)

传多个参数(pyspark脚本)

#############################################################################################
from pyspark.sql import SparkSession
import datetime
spark=SparkSession.builder.appName(“w9010794”).getOrCreate()

def gethql(dayno,dayno1) :
hql=f"""

   """

print(hql)
spark.sql(hql)
return

if name==“main” :
start = datetime.datetime.strptime(“19-03-2021”,"%d-%m-%Y")
end = datetime.datetime.strptime(“19-08-2021”,"%d-%m-%Y")
start1 = datetime.datetime.strptime(“20-03-2021”,"%d-%m-%Y")
end1 = datetime.datetime.strptime(“20-08-2021”,"%d-%m-%Y")
ran = [start + datetime.timedelta(days=x) for x in range(0,(end-start).days)]
ran1 = [start1 + datetime.timedelta(days=x) for x in range(0,(end1-start1).days)]
for dail,daily in zip(ran,ran1) :
dail1 = dail.strftime("%Y%m%d")
dail2 = daily.strftime("%Y%m%d")
gethql=(dayno=dail1,dayno1=dail2)
##############################################################################################

转载请注明:文章转载自 www.mshxw.com
本文地址:https://www.mshxw.com/it/706550.html
我们一直用心在做
关于我们 文章归档 网站地图 联系我们

版权所有 (c)2021-2022 MSHXW.COM

ICP备案号:晋ICP备2021003244-6号