Question

请教个大数据分析的问题，使用iserver搭建gpa模型，用的是外置的spark集群，在保存矢量数据这一算子时报错

Answer 1

【问题原因】这是由于没有读取到spark任务进程导致的，经过排查发现在小数据量下执行能支持完成，但在千万级数据量执行就会出现问题，需要进行大数据分析调优； 【解决方法】大数据分析调优可以从以下方面进行：spark环境调优，数据调优，GIS产品调优，具体操作可参考博客https://blog.csdn.net/supermapsupport/article/details/131696348