pymongo.errors.CursorNotFound: cursor id 1598856597812 not found原因以及解决方式
程序员文章站
2024-02-10 13:56:34
...
代码日常运行都没问题突然报错如下
pymongo.errors.CursorNotFound: cursor id 1598856597812 not found
根据异常找到报错位置如下
def initMaterialOrgAll(self):
materialAndEnterpriseIdList = formmongodbUtil.findAll(
"form_ins_d0fd94e7-df33-4e04-b020-24bedcf10a57"
)
self.handleMaterialOrg(materialAndEnterpriseIdList)
def handleMaterialOrg(self, materialAndEnterpriseIdList):
global ogIdColl
returnMaterialOrgIdInfo_List = []
for materialAndEnterpriseIdDic in materialAndEnterpriseIdList://报错行
//处理代码逻辑省略
在循环pymongo的cursor时候就报错,在本地运行里面又是有数据的但是为何报错。
经过查证默认 mongo server维护连接的时间窗口是十分钟
默认 单次从 server获取数据是101条或者 大于1M小于16M的数据
所以默认情况下,如果10分钟内未能处理完数据,则抛出该异常
刚好这次数据量比较大比平时处理慢,可能是这个问题导致
解决方案:
def findAll(self, collName):
result = None
try:
result = self.getCollection(collName).find(no_cursor_timeout = True)//此处增加no_cursor_timeout = True 永不超时,游标连接不会主动关闭,需要手动关闭
except BaseException as e:
self.logger.error(e)
return result
处理完后需要手动关闭游标,我这里是materialAndEnterpriseIdList.close()