<div>Thanks DM,<br></div><div><br></div><div>Not all searches make use of the Lucene index !<br></div><div><br></div><div>e.g. In <b>Xiphos</b>, the advanced search panel gives the user a choice of which type of search.<br></div><div>Lucene is only one of these mutually exclusive options.<br></div><div><br></div><div>btw. Where is it documented that the creation of a Lucene search index normalizes the Unicode for the index?<br></div><div>Do we know for certain that this would occur irrespective of whether normalization was suppressed during module build?<br></div><div>i.e. With <b>osis2mod</b> option &nbsp;<b> -N</b>                         do not convert UTF-8 or normalize UTF-8 to NFC<br></div><div><br></div><div><br></div><div class="protonmail_signature_block"><div class="protonmail_signature_block-user"><div>Best regards,<br></div><div><br></div><div>David<br></div></div><div><br></div><div class="protonmail_signature_block-proton">Sent with <a href="https://protonmail.com" target="_blank">ProtonMail</a> Secure Email.<br></div></div><div><br></div><div>‐‐‐‐‐‐‐ Original Message ‐‐‐‐‐‐‐<br></div><div> On 22 March 2018 10:20 AM, DM Smith &lt;dmsmith@crosswire.org&gt; wrote:<br></div><div> <br></div><blockquote class="protonmail_quote" type="cite"><div>The requirement is not that the search is normalized to nfc but rather that it is normalized the same as the index. This should not be a front end issue.<br></div><div><br></div><div><div>Btw it doesn’t matter how Hebrew is stored in the module. Indexing should normalize it to a form that is internal to the engine.&nbsp;<br></div><div><br></div><div id="AppleMailSignature"><div>— DM Smith<br></div><div>From my phone. Brief. Weird autocorrections.&nbsp;<br></div></div><div><div><br></div><div>On Mar 22, 2018, at 5:22 AM, David Haslam &lt;<a href="mailto:dfhdfh@protonmail.com">dfhdfh@protonmail.com</a>&gt; wrote:<br></div></div><blockquote type="cite"><div><div>Dear all,<br></div><div><br></div><div>Not all front-ends automatically <b>normalize the search string</b> to Unicode <b>NFC</b>.<br></div><div>e.g.<br></div><ul><li><b>Eloquent</b> does<br></li><li><b>Xiphos</b> does not<br></li></ul><div>The data is incomplete for this feature in the table in our wiki page.<br></div><div><a href="https://wiki.crosswire.org/Choosing_a_SWORD_program#Search_and_Dictionary">https://wiki.crosswire.org/Choosing_a_SWORD_program#Search_and_Dictionary</a><br></div><div><br></div><div><span class="size" style="font-size:16px">Please would other front-end app developers supply the missing information</span>. <i>Thanks</i>.<br></div><div><br></div><div><u>Further thought</u>:<br></div><div>For front-ends that also have an <b>Advanced search</b> feature, would it not be a useful enhancement to have a <u>tick box option</u> for <b>Search string normalization</b>?<br></div><div>Then if we do make any <u>Biblical Hebrew</u> modules with <i><b>custom normalization</b></i>, search could at least still work for the "corner cases" in Hebrew, providing the user gave the proper input in the search box.<br></div><div><br></div><div><div>cf. The source text for the <b>WLC</b> at <a href="http://tanach.us">tanach.us</a> is <u>not</u> normalized to NFC, but our module is.<br></div><div><i>I'll refrain from going into a lot more detail here. There's an issue in our tracker that covers this.</i><br></div></div><div><br></div><div class="protonmail_signature_block"><div class="protonmail_signature_block-user"><div>Best regards,<br></div><div><br></div><div>David<br></div></div><div><br></div><div class="protonmail_signature_block-proton">Sent with <a target="_blank" href="https://protonmail.com">ProtonMail</a> Secure Email.<br></div></div><div><br></div></div></blockquote><blockquote type="cite"><div><div><span>_______________________________________________</span><br></div><div><span>sword-devel mailing list: <a href="mailto:sword-devel@crosswire.org">sword-devel@crosswire.org</a></span><br></div><div><span><a href="http://www.crosswire.org/mailman/listinfo/sword-devel">http://www.crosswire.org/mailman/listinfo/sword-devel</a></span><br></div><div><span>Instructions to unsubscribe/change your settings at above page</span><br></div></div></blockquote></div></blockquote><div><br></div>