項目中遇到一個需求,需要將一個千萬條記錄級別的mongodb庫提取部分字段轉(zhuǎn)到postgresql中。由于mongodb一直在更新,所以每隔一段時間就需要倒一次數(shù)據(jù)。所以想實現(xiàn)增量更新的功能。問題是,我要如何保存上一次python遍歷到的位置?ps:mongodb的_id字段是自動生成的,其他字段無嚴格的遞增或遞減的數(shù)量關(guān)系。
添加回答
舉報
0/150
提交
取消