栏目分类:
子分类:
返回
名师互学网用户登录
快速导航关闭
当前搜索
当前分类
子分类
实用工具
热门搜索
名师互学网 > IT > 前沿技术 > 大数据 > 大数据系统

Structured Streaming遇到的问题(windows,idea,scala)

Structured Streaming遇到的问题(windows,idea,scala)

1.背景

使用scala语言,调用Structured Streaming进行流处理
配置环境:

  1. IDEA 2021.2.2 Community Edition
  2. scala-2.12.15
2.Could not locate executable nullbinwinutils.exe in the Hadoop binaries问题

解决文章:https://www.cnblogs.com/tijun/p/7567664.html

Hadoop都是运行在Linux系统下的,在windows下IDA中运行spark程序,要首先安装Windows下运行的支持插件(我的是hadoop2.7.2)

发生问题前的操作:
下图为在IDEA中添加scala支持插件,

添加scalaSDK 2.12.15

然后在项目添加scala框架支持:

发生问题后:

环境变量指定HADOOP_HOME = …
在PATH变量中指定:%HADOOP_HOME%/bin
然后报错:

ExitCodeException exitCode=-1073741701:
1073741701转换为16进制为0xc000007b
双击运行wintuils.exe 运行不了,报错0xc000007b

但是在别人电脑上wintuils.exe 正常运行,发现缺少msvcr100.dll,

然后下载:Visual C++ 2010 Runtime Redistributable Package 动态运行库
解决问题

转载请注明:文章转载自 www.mshxw.com
本文地址:https://www.mshxw.com/it/676937.html
我们一直用心在做
关于我们 文章归档 网站地图 联系我们

版权所有 (c)2021-2022 MSHXW.COM

ICP备案号:晋ICP备2021003244-6号