浏览问题
等待回复
精选文章
申请试用
资源中心
漏洞修复
注册
|
登录
SuperMap技术问答社区
我要
提问
智能客服
首页
/
浏览问题
/
云GIS
/
问题详情
超图FAQ:请教个大数据分析的问题,使用iserver搭建gpa模型,用的是外置的spark集群,在保存矢量数据这一算子时报错
root
55,378EXP
2024年08月19日
请教个大数据分析的问题,使用iserver搭建gpa模型,用的是外置的spark集群,在保存矢量数据这一算子时报错
iserver
请
登录
或者
注册
后回答这个问题。
1个回答
【问题原因】这是由于没有读取到spark任务进程导致的,经过排查发现在小数据量下执行能支持完成,但在千万级数据量执行就会出现问题,需要进行大数据分析调优; 【解决方法】大数据分析调优可以从以下方面进行:spark环境调优,数据调优,GIS产品调优,具体操作可参考博客https://blog.csdn.net/supermapsupport/article/details/131696348
root
55,378EXP
2024年08月19日
请
登录
或者
注册
后再添加评论。
智能推荐
相关问题
相关文章
推荐教程
超图FAQ:咨询一个问题,iServer 11.1.1版本。通过GPA算子“大数据矢量数据管理--读取矢量数据“读取HDFS中存储的shp数据,参考算子给的范例,提示Have no index file。请问这个问题该如何解决呢?
超图FAQ:请教下使用iserver gpa做2400w体量矢量数据叠加分析,执行后iserver直接崩溃了,spark用的是单独部署的外部spark,哪位可以帮忙看下
超图FAQ:请教一下, 擦除分析时 (OverlayAnalyst.erase)计算时,提示 The FieldInfo Name is not exist。使用不同的数据测试都会报数据集中第一个属性异常
超图FAQ:请教一个问题,用三维网络数据集发数据服务,查看帮助文档中这个接口目前不支持三维的数据进行空间分析查询;但是客户构建二维面范围去做CONTAIN(包含关系)去做空间分析查询,返回的是所有数据的信息
超图FAQ:在iServer的GPA中构建的自定义模型,每个算子单独执行都能成功,但连接到一起后再执行就提示失败。
超图FAQ:可有大佬比较了解GPA服务配置外部spark参数的相关问题,根据帮助文档配置运行失败
超图FAQ:请教一下,在使用iDesktopX机器学习-影像分析-模型训练时,输出该报错信息,未成功执行模型训练,是什么原因?
超图FAQ:请教下,使用iPortal大屏中添加场景,模型不显示,且报错401,添加的三维服务在iserver中预览是正常的,且权限设置为匿名可访问。iserver和iPortal都是11.1.1版本
热门文章
查看更多>
关注我们
超图软件官网
SuperMap Online
地图慧
帮助中心
备案信息
技术资源中心
...