ploadText返回的顺序分区内存表中数据顺序与CSV文件中是否一致?

使用loadText时,磁盘性能没有拉满。一个文件大小超过100GB,换作ploadText的话,返回的是顺序分区的内存表,担心会有排序上的问题,需不需要自己再做下sort 处理?

请先 登录 后评论

1 个回答

Juntao Wang

ploadText导入后的顺序与CSV文件一致的。如果CSV文件中数据是按Time列递增,导入后可以使用 isMonotonicIncreasing() 函数验证下。

请先 登录 后评论