fix #580 replace with analysis-fess plugin
This commit is contained in:
Shinsuke Sugaya
parent
7d1115dd44
commit
df0479655e
3 changed files with 161 additions and 32 deletions
25
plugin.xml
25
plugin.xml
|
|
@ -11,14 +11,14 @@
|
|||
<mkdir dir="${target.dir}" />
|
||||
<delete dir="${plugins.dir}" />
|
||||
<mkdir dir="${plugins.dir}" />
|
||||
<!-- analysis-kuromoji-neologd -->
|
||||
<!-- analysis-fess -->
|
||||
<antcall target="install.plugin">
|
||||
<param name="repo.url" value="${maven.release.repo.url}" />
|
||||
<param name="repo.url" value="${maven.snapshot.repo.url}" />
|
||||
<param name="plugin.groupId" value="org/codelibs" />
|
||||
<param name="plugin.name.prefix" value="elasticsearch-" />
|
||||
<param name="plugin.name" value="analysis-kuromoji-neologd" />
|
||||
<param name="plugin.version" value="2.3.1" />
|
||||
<param name="plugin.zip.version" value="2.3.1" />
|
||||
<param name="plugin.name" value="analysis-fess" />
|
||||
<param name="plugin.version" value="2.3.0-SNAPSHOT" />
|
||||
<param name="plugin.zip.version" value="2.3.0-20160714.212731-1" />
|
||||
</antcall>
|
||||
<!-- analysis-ja -->
|
||||
<antcall target="install.plugin">
|
||||
|
|
@ -74,21 +74,6 @@
|
|||
<param name="plugin.version" value="2.3.0" />
|
||||
<param name="plugin.zip.version" value="2.3.0" />
|
||||
</antcall>
|
||||
<!-- seunjeon -->
|
||||
<antcall target="install.plugin">
|
||||
<param name="repo.url" value="${maven.release.repo.url}" />
|
||||
<param name="plugin.groupId" value="org/bitbucket/eunjeon" />
|
||||
<param name="plugin.name.prefix" value="elasticsearch-" />
|
||||
<param name="plugin.name" value="analysis-seunjeon" />
|
||||
<param name="plugin.version" value="${elasticsearch.version}.0" />
|
||||
<param name="plugin.zip.version" value="${elasticsearch.version}.0" />
|
||||
</antcall>
|
||||
<jar destfile="${plugins.dir}/analysis-seunjeon/elasticsearch-analysis-seunjeon-${elasticsearch.version}.jar">
|
||||
<zipfileset
|
||||
src="${plugins.dir}/analysis-seunjeon/elasticsearch-analysis-seunjeon-assembly-${elasticsearch.version}.0.jar"
|
||||
excludes="org/slf4j/**"/>
|
||||
</jar>
|
||||
<delete file="${plugins.dir}/analysis-seunjeon/elasticsearch-analysis-seunjeon-assembly-${elasticsearch.version}.0.jar"/>
|
||||
<!-- kopf -->
|
||||
<get dest="${target.dir}">
|
||||
<url url="http://maven.codelibs.org/archive/elasticsearch/plugin/kopf/elasticsearch-kopf-2.0.1.0.zip" />
|
||||
|
|
|
|||
144
src/main/resources/fess-suggest-default-analyzer.json
Normal file
144
src/main/resources/fess-suggest-default-analyzer.json
Normal file
|
|
@ -0,0 +1,144 @@
|
|||
{
|
||||
"analysis" : {
|
||||
"tokenizer" : {
|
||||
"fess_japanese_normal" : {
|
||||
"type" : "fess_japanese_tokenizer",
|
||||
"mode" : "normal",
|
||||
"discard_punctuation" : "false"
|
||||
}
|
||||
},
|
||||
"analyzer" : {
|
||||
"reading_analyzer" : {
|
||||
"type" : "custom",
|
||||
"tokenizer" : "fess_japanese_normal",
|
||||
"filter" : ["reading_form"]
|
||||
},
|
||||
"reading_term_analyzer" : {
|
||||
"type" : "custom",
|
||||
"tokenizer" : "fess_japanese_normal"
|
||||
},
|
||||
"normalize_analyzer" : {
|
||||
"type" : "custom",
|
||||
"tokenizer" : "keyword",
|
||||
"char_filter" : ["mapping_char"],
|
||||
"filter" : ["lowercase"]
|
||||
},
|
||||
"contents_analyzer" : {
|
||||
"type" : "custom",
|
||||
"tokenizer" : "fess_japanese_normal",
|
||||
"filter" : ["stopword_en_filter", "pos_filter", "content_length_filter", "limit_token_count_filter"]
|
||||
}
|
||||
},
|
||||
"char_filter" : {
|
||||
"mapping_char" : {
|
||||
"type" : "mapping",
|
||||
"mappings" : ["ｶﾞ=>ガ", "ｷﾞ=>ギ", "ｸﾞ=>グ", "ｹﾞ=>ゲ", "ｺﾞ=>ゴ", "ｻﾞ=>ザ", "ｼﾞ=>ジ", "ｽﾞ=>ズ", "ｾﾞ=>ゼ", "ｿﾞ=>ゾ", "ﾀﾞ=>ダ", "ﾁﾞ=>ヂ", "ﾂﾞ=>ヅ",
|
||||
"ﾃﾞ=>デ", "ﾄﾞ=>ド", "ﾊﾞ=>バ", "ﾋﾞ=>ビ", "ﾌﾞ=>ブ", "ﾍﾞ=>ベ", "ﾎﾞ=>ボ", "｡=>。", "｢=>「", "｣=>」", "､=>、", "･=>・", "ｦ=>ヲ", "ｧ=>ァ", "ｨ=>ィ", "ｩ=>ゥ", "ｪ=>ェ", "ｫ=>ォ", "ｬ=>ャ", "ｭ=>ュ", "ｮ=>ョ", "ｯ=>ッ", "ｱ=>ア",
|
||||
"ｲ=>イ", "ｳ=>ウ", "ｴ=>エ", "ｵ=>オ", "ｶ=>カ", "ｷ=>キ", "ｸ=>ク", "ｹ=>ケ", "ｺ=>コ", "ｻ=>サ", "ｼ=>シ", "ｽ=>ス", "ｾ=>セ", "ｿ=>ソ", "ﾀ=>タ", "ﾁ=>チ", "ﾂ=>ツ", "ﾃ=>テ", "ﾄ=>ト", "ﾅ=>ナ", "ﾆ=>ニ", "ﾇ=>ヌ", "ﾈ=>ネ", "ﾉ=>ノ", "ﾊ=>ハ",
|
||||
"ﾋ=>ヒ", "ﾌ=>フ", "ﾍ=>ヘ", "ﾎ=>ホ", "ﾏ=>マ", "ﾐ=>ミ", "ﾑ=>ム", "ﾒ=>メ", "ﾓ=>モ", "ﾔ=>ヤ", "ﾕ=>ユ", "ﾖ=>ヨ", "ﾗ=>ラ", "ﾘ=>リ", "ﾙ=>ル", "ﾚ=>レ", "ﾛ=>ロ", "ﾜ=>ワ", "ﾝ=>ン",
|
||||
"ａ=>a", "ｂ=>b","ｃ=>c","ｄ=>d","ｅ=>e","ｆ=>f","ｇ=>g","ｈ=>h","ｉ=>i","ｊ=>j","ｋ=>k","ｌ=>l","ｍ=>m","ｎ=>n","ｏ=>o","ｐ=>p","ｑ=>q","ｒ=>r","ｓ=>s",
|
||||
"ｔ=>t","ｕ=>u","ｖ=>v","ｗ=>w","ｘ=>x", "ｙ=>y", "ｚ=>z",
|
||||
"Ａ=>A", "Ｂ=>B","Ｃ=>C","Ｄ=>D","Ｅ=>E","Ｆ=>F","Ｇ=>g","Ｈ=>H","Ｉ=>I","Ｊ=>j","Ｋ=>k","Ｌ=>L","Ｍ=>M","Ｎ=>N","Ｏ=>O","Ｐ=>P","Ｑ=>Q","Ｒ=>R","Ｓ=>S",
|
||||
"Ｔ=>T","Ｕ=>U","Ｖ=>V","Ｗ=>W","Ｘ=>X", "Ｙ=>Y", "Ｚ=>Z",
|
||||
"１=>1", "２=>2", "３=>3", "４=>4", "５=>5", "６=>6", "７=>7", "８=>8", "９=>9", "０=>0"
|
||||
]
|
||||
}
|
||||
},
|
||||
"filter" : {
|
||||
"reading_form" : {
|
||||
"type" : "fess_japanese_readingform"
|
||||
},
|
||||
"pos_filter" : {
|
||||
"type" : "fess_japanese_part_of_speech",
|
||||
"stoptags" : [
|
||||
"その他",
|
||||
"その他-間投",
|
||||
"フィラー",
|
||||
"感動詞",
|
||||
"記号",
|
||||
"記号-アルファベット",
|
||||
"記号-一般",
|
||||
"記号-括弧開",
|
||||
"記号-括弧閉",
|
||||
"記号-句点",
|
||||
"記号-空白",
|
||||
"記号-読点",
|
||||
"形容詞",
|
||||
"形容詞-接尾",
|
||||
"形容詞-非自立",
|
||||
"語断片",
|
||||
"助詞",
|
||||
"助詞-格助詞",
|
||||
"助詞-格助詞-一般",
|
||||
"助詞-格助詞-引用",
|
||||
"助詞-格助詞-連語",
|
||||
"助詞-間投助詞",
|
||||
"助詞-係助詞",
|
||||
"助詞-終助詞",
|
||||
"助詞-接続助詞",
|
||||
"助詞-特殊",
|
||||
"助詞-副詞化",
|
||||
"助詞-副助詞",
|
||||
"助詞-副助詞／並立助詞／終助詞",
|
||||
"助詞-並立助詞",
|
||||
"助詞-連体化",
|
||||
"助動詞",
|
||||
"接続詞",
|
||||
"接頭詞",
|
||||
"接頭詞-形容詞接続",
|
||||
"接頭詞-数接続",
|
||||
"接頭詞-動詞接続",
|
||||
"接頭詞-名詞接続",
|
||||
"動詞",
|
||||
"動詞-自立",
|
||||
"動詞-接尾",
|
||||
"動詞-非自立",
|
||||
"非言語音",
|
||||
"副詞",
|
||||
"副詞-一般",
|
||||
"副詞-助詞類接続",
|
||||
"名詞-ナイ形容詞語幹",
|
||||
"名詞-引用文字列",
|
||||
"名詞-形容動詞語幹",
|
||||
"名詞-数",
|
||||
"名詞-接続詞的",
|
||||
"名詞-接尾",
|
||||
"名詞-接尾-サ変接続",
|
||||
"名詞-接尾-一般",
|
||||
"名詞-接尾-形容動詞語幹",
|
||||
"名詞-接尾-助数詞",
|
||||
"名詞-接尾-助動詞語幹",
|
||||
"名詞-接尾-人名",
|
||||
"名詞-接尾-地域",
|
||||
"名詞-接尾-特殊",
|
||||
"名詞-接尾-副詞可能",
|
||||
"名詞-代名詞",
|
||||
"名詞-代名詞-一般",
|
||||
"名詞-代名詞-縮約",
|
||||
"名詞-動詞非自立的",
|
||||
"名詞-特殊",
|
||||
"名詞-特殊-助動詞語幹",
|
||||
"名詞-非自立",
|
||||
"名詞-非自立-一般",
|
||||
"名詞-非自立-形容動詞語幹",
|
||||
"名詞-非自立-助動詞語幹",
|
||||
"名詞-非自立-副詞可能",
|
||||
"名詞-副詞可能",
|
||||
"連体詞"
|
||||
]
|
||||
},
|
||||
"stopword_en_filter": {
|
||||
"type": "stop",
|
||||
"stopwords": "_english_"
|
||||
},
|
||||
"content_length_filter": {
|
||||
"type": "length",
|
||||
"max": 30
|
||||
},
|
||||
"limit_token_count_filter": {
|
||||
"type": "limit",
|
||||
"max_token_count": 10000
|
||||
}
|
||||
}
|
||||
}
|
||||
}
|
||||
|
|
@ -34,8 +34,8 @@
|
|||
"type": "stop",
|
||||
"stopwords": "_english_"
|
||||
},
|
||||
"kuromoji_neologd_pos_filter" : {
|
||||
"type" : "kuromoji_neologd_part_of_speech",
|
||||
"japanese_pos_filter" : {
|
||||
"type" : "fess_japanese_part_of_speech",
|
||||
"stoptags" : [
|
||||
"その他",
|
||||
"その他-間投",
|
||||
|
|
@ -405,15 +405,15 @@
|
|||
}
|
||||
},
|
||||
"tokenizer": {
|
||||
"kuromoji_neologd_tokenizer": {
|
||||
"type": "reloadable_kuromoji_neologd_tokenizer",
|
||||
"japanese_tokenizer": {
|
||||
"type": "fess_japanese_reloadable_tokenizer",
|
||||
"mode": "normal",
|
||||
"user_dictionary": "${fess.dictionary.path}ja/kuromoji.txt",
|
||||
"discard_punctuation": false,
|
||||
"reload_interval":"1m"
|
||||
},
|
||||
"seunjeon_default_tokenizer": {
|
||||
"type": "seunjeon_tokenizer",
|
||||
"korean_tokenizer": {
|
||||
"type": "fess_korean_tokenizer",
|
||||
"user_dict_path": "${fess.dictionary.path}ko/seunjeon.txt"
|
||||
},
|
||||
"unigram_synonym_tokenizer": {
|
||||
|
|
@ -436,14 +436,14 @@
|
|||
"type": "custom",
|
||||
"char_filter": [
|
||||
"mapping_ja_filter",
|
||||
"kuromoji_neologd_iteration_mark"
|
||||
"fess_japanese_iteration_mark"
|
||||
],
|
||||
"tokenizer": "kuromoji_neologd_tokenizer",
|
||||
"tokenizer": "japanese_tokenizer",
|
||||
"filter": [
|
||||
"truncate10_filter",
|
||||
"kuromoji_neologd_baseform",
|
||||
"kuromoji_neologd_stemmer",
|
||||
"kuromoji_neologd_pos_filter",
|
||||
"fess_japanese_baseform",
|
||||
"fess_japanese_stemmer",
|
||||
"japanese_pos_filter",
|
||||
"lowercase"
|
||||
]
|
||||
},
|
||||
|
|
@ -458,7 +458,7 @@
|
|||
},
|
||||
"korean_analyzer": {
|
||||
"type": "custom",
|
||||
"tokenizer":"seunjeon_default_tokenizer"
|
||||
"tokenizer":"korean_tokenizer"
|
||||
},
|
||||
"german_analyzer": {
|
||||
"type": "custom",
|
||||
|
|
|
|||
Loading…
Add table
Reference in a new issue