关于桌面端倾斜数据处理功能的几个问题

0 投票

使用产品:iserver 10i 10.0.1  操作系统:win10 x64
数据类型:倾斜数据 osgb
在对倾斜数据进行倾斜入库时遇到了下面几个问题:

  1. 倾斜入库功能中有修改模型中心点的选项,其功能应是生成一个scp文件,加载多组倾斜数据。但是在实际应用是,并没有生成一个总的scp文件。
    单独使用 修改模型中心点功能时,是可以的,但原始数据不能是s3mb格式的。

    请问是否是因为在倾斜入库功能中先进行了其他的优化操作,将数据转为s3mb格式了,所以不能进行修改模型中心点了呢?
  2. 在使用倾斜入库、修改模型中心点、提取高度值等几个功能时发现,速度非常慢。
    数据量是200G,4500个文件夹。电脑配置i7-6700 3.4GHz  16G内存  7200转硬盘  4G显存。
    每一步处理时间都在9个小时左右或以上。好像只有修改模型中心点有进度条,其他的都看不出是否在处理。只能从电脑的资源监视器中查看,过程中发现这几个处理对于CPU或内存的占用率并不是很高,主要卡在磁盘读写速度。
    近期在“地信大讲堂”中了解到,这些操作可以进行分布式计算,但是在10.0.1版本的桌面端中尚未找到相关操作介绍,请问目前有倾斜入库分布式计算的功能么?还是会在下个版本中更新?
  3. 另外在“地信大讲堂”中还了解到,可以对倾斜数据进行批量旋转平移的操作,在目前10.0.1版本的桌面端中也没有找到,请问会在下个版本中更新么?

谢谢!

3月 13 分类:  57次浏览 | 用户: lightzoe 初出茅庐 (27 分)

1个回答

0 投票
 
已采纳
您好,倾斜数据的分布式处理时需要基于基于大数据的环境来做的,目前倾斜摄影批量平移的功能是没有的

倾斜入库指的是将多个功能一起做,并不是说合并成一个scp文件的

因为是多个功能一起运行的,数据量稍微大了,肯定也是需要时间的呢
3月 13 用户: 华红霞 名扬四海 (4,180 分)
采纳于 3月 16 用户:lightzoe
倾斜摄影数据量大的话,处理时需要时间的,您的数据200G还是算比较大的呢

好哒,谢谢laugh

...