使用loadText时,磁盘性能没有拉满。一个文件大小超过100GB,换作ploadText的话,返回的是顺序分区的内存表,担心会有排序上的问题,需不需要自己再做下sort 处理?
ploadText导入后的顺序与CSV文件一致的。如果CSV文件中数据是按Time列递增,导入后可以使用 isMonotonicIncreasing() 函数验证下。