如何使用mongoDB作爲搜索引擎？

Question

我嘗試使用mongoDB作爲搜索引擎，並意識到這是一場災難。我試着做對5百萬個地理位置文件的簡單查詢。

db.runCommand({ dropDatabase: 1 }) 

db.createCollection("places"); 

db.places.createIndex({ "locs.loc" : "2dsphere" }) 


function randInt(n) { return parseInt(Math.random()*n); } 
function randFloat(n) { return Math.random()*n; } 

for(var j=0; j<10; j++) { 
    print("Building op "+j); 
    var bulkop=db.places.initializeOrderedBulkOp() ; 
    for (var i = 0; i < 1000000; ++i) { 
    bulkop.insert( 
     { 
     locs: [ 
      { 
      loc : { 
       type: "Point", 
       coordinates: [ randFloat(180), randFloat(90) ] 
      } 
      }, 
      { 
      loc : { 
       type: "Point", 
       coordinates: [ randFloat(180), randFloat(90) ] 
      } 
      } 
     ] 
     } 
    ) 
    }; 
    print("Executing op "+j); 
    bulkop.execute(); 
} 

，然後我跑不匹配文檔的查詢：

db.runCommand(
    { 
    geoNear: "places", 
    near: { type: "Point", coordinates: [ 73.9667, 40.78 ] }, 
    spherical: true, 
    query: { category: "xyz" } 
    } 
) 

它需要4分鐘來回報您！

"waitedMS" : NumberLong(0), 
    "results" : [ ], 
    "stats" : { 
      "nscanned" : 10018218, 
      "objectsLoaded" : 15000000, 
      "maxDistance" : 0, 
      "time" : 219873 
    }, 
    "ok" : 1 

用於爲例somethink像獅身人面像指數於同查詢（其實根本就沒有索引的所有此類查詢使用，它只是滾動所有已經在內存中的reccord對其進行過濾）在200回ms

我做錯了什麼？他們的計算機上有32GB的免費內存，所有數據僅使用150MB。他們有什麼方法來加速mongoDB？或者明確地說我們不能使用mongoDB作爲搜索引擎？

Answer 1

MongoDB的3.4rc與2mln記錄

我覺得你的代碼的問題是關係到「查詢」 PARAM，因爲你正在對集合另一個查詢沒有索引。

UPDATE（帶結果/數據）：

db.runCommand({ dropDatabase: 1 }) 

db.createCollection("places"); 

db.places.createIndex({ "locs.loc.coordinates" : "2dsphere" }) 


function randInt(n) { return parseInt(Math.random()*n); } 
function randFloat(n) { return Math.random()*n; } 

for(var j=0; j<10; j++) { 
    print("Building op "+j); 
    var bulkop=db.places.initializeOrderedBulkOp() ; 
    for (var i = 0; i < 1000000; ++i) { 
    bulkop.insert( 
     { 
     locs: [ 
      { 
      loc : { 
       type: "Point", 
       coordinates: [ randFloat(180), randFloat(90) ] 
      } 
      }, 
      { 
      loc : { 
       coordinates: [ randFloat(180), randFloat(90) ] 
      } 
      } 
     ] 
     } 
    ) 
    }; 
    print("Executing op "+j); 
    bulkop.execute(); 
} 

這是查詢：

db.runCommand(
    { 
    geoNear: "places", 
    near: { type: "Point", coordinates: [ 73.9667, 40.78 ] }, 
    spherical: true 
    } 
) 

58ms：

個

2ms的第二次運行：

db.runCommand(
    { 
    geoNear: "places", 
    near: { type: "Point", coordinates: [ 73.9667, 40.78 ] }, 
    spherical: true, 
    query: { category: "private" } 
    } 
) 

156996ms： {locs.loc：

創建 「類別」 索引之後。座標： 「2dsphere」，類別：1}

13562ms：

UPDATE： 加入 「maxDistance」 可以執行396ms VS 6863ms

db.runCommand(
    { 
    geoNear: "places", 
    near: { type: "Point", coordinates: [ 73.9667, 40.78 ] }, 
    spherical: true, 
    query: {category: "private"}, 
    maxDistance: 1000000 
    } 
) 

maxDistance：1000000

"stats" : { 
    "nscanned" : NumberInt(107820), 
    "objectsLoaded" : NumberInt(1), 
    "avgDistance" : 938598.1782650856, 
    "maxDistance" : 938598.1782650856, 
    "time" : NumberInt(396) 
} 

沒有 「maxDistance」：

db.runCommand(
    { 
    geoNear: "places", 
    near: { type: "Point", coordinates: [ 73.9667, 40.78 ] }, 
    spherical: true, 
    query: {category: "private"} 
    } 
) 

"stats" : { 
    "nscanned" : NumberInt(2023916), 
    "objectsLoaded" : NumberInt(6), 
    "avgDistance" : 3013587.205365039, 
    "maxDistance" : 4263919.742779636, 
    "time" : NumberInt(6863) 
} 

來源： https://www.mongodb.com/blog/post/geospatial-performance-improvements-in-mongodb-3-2

更爲您的查詢使用，我認爲 「座標的陣列」 是無用的，因爲一個對象（一般）有1地理定位點。

另一種優化的方法是製作「geoWithin」，因爲沒有按「距離」進行排序（也許你想按「最投票餐廳」排序）。取決於場景。