问题描述
最近在开发中遇到了一个问题,首先是抓取到了大量数据,格式化后存入了数据库表,然后要为这个表建立索引。若是一次把数据全部读取出来封装成对象,放到一个List中建立索引,很可能就会产生内存溢出(数据量很大),而且每条记录都作为一个文档对象,一条条地添加索引,那么就要不断地修改索引,这样的效率是不是太低了?谢谢,希望您的解答!
时间: 2024-11-08 17:28:47
最近在开发中遇到了一个问题,首先是抓取到了大量数据,格式化后存入了数据库表,然后要为这个表建立索引。若是一次把数据全部读取出来封装成对象,放到一个List中建立索引,很可能就会产生内存溢出(数据量很大),而且每条记录都作为一个文档对象,一条条地添加索引,那么就要不断地修改索引,这样的效率是不是太低了?谢谢,希望您的解答!