Solr的複合唯一鍵

Question

我有一個名爲Solr中LocationIndex與字段的索引如下：

<fields> 
    <field name="solr_id" type="string" stored="true" required="true" indexed="true"/> 
    <field name="solr_ver" type="string" stored="true" required="true" indexed="true" default="0000"/> 
    // and some more fields 
</fields> 
<uniqueKey>solr_id</uniqueKey> 

但現在我要改變架構，以便唯一的密鑰必須是複合兩個已經存在田solr_id和solr_ver ......東西如下：

<fields> 
    <field name="solr_id" type="string" stored="true" required="true" indexed="true"/> 
    <field name="solr_ver" type="string" stored="true" required="true" indexed="true" default="0000"/> 
    <field name="composite-id" type="string" stored="true" required="true" indexed="true"/> 
    // and some more fields 
</fields> 
<uniqueKey>solr_ver-solr_id</uniqueKey> 

搜索，我發現這是可以通過增加以下內容架構後：（參考：Solr Composite Unique key from existing fields in schema）

<updateRequestProcessorChain name="composite-id"> 
    <processor class="solr.CloneFieldUpdateProcessorFactory"> 
    <str name="source">docid_s</str> 
    <str name="source">userid_s</str> 
    <str name="dest">id</str> 
    </processor> 
    <processor class="solr.ConcatFieldUpdateProcessorFactory"> 
    <str name="fieldName">id</str> 
    <str name="delimiter">--</str> 
    </processor> 
    <processor class="solr.LogUpdateProcessorFactory" /> 
    <processor class="solr.RunUpdateProcessorFactory" /> 
</updateRequestProcessorChain> 

所以我改變了模式，最後它看起來像：

<updateRequestProcessorChain name="composite-id"> 
    <processor class="solr.CloneFieldUpdateProcessorFactory"> 
    <str name="source">solr_ver</str> 
    <str name="source">solr_id</str> 
    <str name="dest">id</str> 
    </processor> 
    <processor class="solr.ConcatFieldUpdateProcessorFactory"> 
    <str name="fieldName">id</str> 
    <str name="delimiter">-</str> 
    </processor> 
    <processor class="solr.LogUpdateProcessorFactory" /> 
    <processor class="solr.RunUpdateProcessorFactory" /> 
</updateRequestProcessorChain> 

<fields> 
    <field name="solr_id" type="string" stored="true" required="true" indexed="true"/> 
    <field name="solr_ver" type="string" stored="true" required="true" indexed="true" default="0000"/> 
    <field name="id" type="string" stored="true" required="true" indexed="true"/> 
    // and some more fields 
</fields> 
<uniqueKey>id</uniqueKey> 

但同時增加了文檔它給我的錯誤：

org.apache.solr.client.solrj.SolrServerException: Server at http://localhost:8983/solr/LocationIndex returned non ok status:400, message:Document [null] missing required field: id 

我沒有收到在架構中哪些改變需要根據需要工作？

在我添加的文檔中，它包含字段solr_ver和solr_id。通過結合這兩個字段（如solr_ver-solr_id），它將如何以及在哪裏（solr）創建id字段？

編輯：

在this link這給如何引用這條產業鏈。 Bu我無法理解它將如何在模式中使用？我應該在哪裏進行更改？

Answer 1

所以它看起來像你有你的updateRequestProcessorChain正確定義，它應該工作。但是，您需要將此添加到solrconfig.xml文件而不是schema.xml。您提供的附加鏈接向您展示瞭如何修改solrconfig.xml文件並將您定義的updateRequestProcessorChain添加到solr實例的當前/update請求處理程序。

所以找做到以下幾點：

1. 將您<updateRequestProcessorChain>你solrconfig.xml中的文件。

2. 更新您的solrconfig.xml中文件<requestHandler name="/update" class="solr.UpdateRequestHandler">條目，所以它看起來像修改如下：

   <requestHandler name="/update" class="solr.UpdateRequestHandler"> 
       <lst name="defaults"> 
        <str name="update.chain">composite-id</str> 
       </lst> 
   </requestHandler> 
   

這應該然後執行你定義的更新鏈和新的文件的時候填充id字段被添加到索引。

Answer 2

上述解決方案可能會有一些限制，如果由於連接字段太長而導致「dest」超過最大長度，該怎麼辦？ 還設有MD5Signature一個更溶液（能夠產生從一組指定的文檔字段的級聯的簽名串的類，用於128位散列對於精確副本檢測）

<!-- An example dedup update processor that creates the "id" field on the fly 
    based on the hash code of some other fields. This example has 
    overwriteDupes set to false since we are using the id field as the 
    signatureField and Solr will maintain uniqueness based on that anyway. --> 
<updateRequestProcessorChain name="dedupe"> 
    <processor class="org.apache.solr.update.processor.SignatureUpdateProcessorFactory"> 
    <bool name="enabled">true</bool> 
    <bool name="overwriteDupes">false</bool> 
    <str name="signatureField">id</str> 
    <str name="fields">name,features,cat</str> 
    <str name="signatureClass">org.apache.solr.update.processor.Lookup3Signature</str> 
    </processor> 
    <processor class="solr.LogUpdateProcessorFactory" /> 
    <processor class="solr.RunUpdateProcessorFactory" /> 
</updateRequestProcessorChain> 

從這裏：http://lucene.472066.n3.nabble.com/Solr-duplicates-detection-td506230.html

Answer 3

我想添加爲評論，但它不可能得到vim的信任狀，這些天...反正這裏是一個更好的鏈接： https://wiki.apache.org/solr/Deduplication