文章詳情頁
python - mongodb去重
瀏覽：261日期：2022-10-14 09:36:55
問題描述
1.功能里需要根據有一個字段來判斷是否重復,比如叫做ownnerId,凡是存在的就丟棄.于是我用到了distinct這個方法,但是這段時間隨著數據量逐漸增大,出現了一個問題:
OperationFailure: distinct too big, 16mb cap
這是命令行里邊的錯誤,說distinct返回的結果太大了,超過了16M.請問各位高手能否貢獻一些方法.
需求:每次通過檢查數據庫中ownnerId這個字段是否出現了,其中數據庫是一直在更新的,而且這個不存在的ownnerId在一會處理后就會存到數據庫中去,所以要求每次判斷都要重新檢查一遍數據庫中這個ownner字段.因此對速度的要求也比較高.各位大神瞅瞅,求給個意見.
問題解答
回答1：如果我理解的對的話，是否考慮過Unique Indexes。
供參考。
Love MongoDB！ Have fun！
相關文章：
1. javascript - sublime快鍵鍵問題2. javascript - 移動端上不能實現拖拽布局嗎？3. 實現bing搜索工具urlAPI提交4. javascript - react native在run-android時出現這個錯誤該怎么解決？大神賜教5. angular.js - 單頁應用（ng/vue）該如何監聽用戶離開當前頁面（或者路由）？6. javascript - 如何判斷不同兩個對象觸發同一事件？7. 前端 - 這段代碼一直生效不了，查半天因為 top: 0px; 分號后一個隱藏的東西，也不是占位符...刪了就可以生效，這是什么情況。。8. thinkPHP5中獲取數據庫數據后默認選中下拉框的值，傳遞到后臺消失不見。有圖有代碼，希望有人幫忙9. index.php錯誤，求指點10. c++ - QWebEngineView加載url后直接點擊鏈接沒有反應要怎么解決？
排行榜
網公網安備