需求背景:目前存在部分介词大小写问题和截断问题,需要统一处理
需求实现;
1、修改V1和V2标题规则,在做关键词统一首字母大写处理时,介词不要处理
2、修改截断处理,如果最后一个字符是介词,则将介词也一起截断。
介词列表:
意大利语FUNCTION_WORD_IT=['un','una','uno','delle','il','la','i','le','io','tu','lui','lei','noi','voi','loro','essere','avere','fare','potere','ere','dovere','che','se','come','quando','perché','a','di','in','su','con','per','senza','tra','fra','e','o','Ma','quindi','perché','se','iché','quando','verso','fra','lungo','riguardo a','salvo','mediante','nonante','al fine di','per mancanza di','stato','essendo','un','fuori','anche','esso','essa','lo','gli','nel'',''nella','così','quello','ma','da','ad','dell','d','l','degli','all','del','ed','dei','alle','alla','sulla','della','quella','dal','nei','sugli','dello','allo','ai','dallo','dagli','nello','nei','negli','sullo','sull','sui','nell','al']
FUNCTION_WORD_FRA = ["un", "une", "des", "le", "la", "les", "je", "tu", "il", "elle", "nous", "vous", "ils", "elles","être", "avoir", "aller", "faire", "pouvoir", "vouloir", "voir", "que", "si", "comme", "lorsque","à", "de", "d", "dans", "sur", "avec", "pour", "sans", "en", "et", "ou", "mais", "donc","parce que", "vers", "parmi", "quant à", "hormis", "moyennant", "malgré", "afin de", "faute de","cet", "étant", "un", "la", "les", "par", "hors", "ainsi", "aussi", "elle", "cela", "du", "au", "aux", "ni", "sous"]
德语
德语
['an',
'auf',
'aus',
'bei',
'durch',
'für',
'fürs',
'gegen',
'mit',
'nach',
'ohne',
'seit',
'über',
'um',
'unter',
'vor',
'zu',
'zum',
'Fur',
'in',
'von',
'ab',
'außer',
'bis',
'zur',
'hinter',
'zwischen',
'entlang',
'während',
'entgegen',
'gegenüber',
'laut',
'anstatt',
'statt',
'lang',
'mittels',
'zugunsten',
'zulasten',
'zufolge',
'beiderseits',
'im',
'aber',
'da',
'dass',
'denn',
'oder',
'wenn',
'weil',
'und',
'obwohl',
'so dass',
'nachdem',
'bevor',
'als',
'sondern',
'doch',
'jedoch',
'dennoch',
'allerdings',
'deshalb',
'daher',
'folglich',
'infolgedessen',
'trotzdem',
'freilich',
'außerdem',
'namentlich',
'schließlich',
'endlich',
'danach',
'dann',
'ob',
'bis',
'sobald',
'solange',
'während',
'seitdem',
'indem',
'ehe',
'falls',
'damit',
'als ob',
'ohne dass',
'anstatt dass',
'statt dass',
'der',
'die',
'das',
'ein',
'eine',
'keine',
'den',
'kein',
'des',
'dem',
'derer',
'dessen',
'deren']
意大利语
['a',
'ante',
'bajo',
'con',
'contra',
'de',
'desde',
'en',
'entre',
'hasta',
'para',
'por',
'sin',
'sobre',
'tras',
'del',
'al',
'y',
'o',
'pero',
'ni',
'porque',
'aunque',
'si',
'cuando',
'mientras',
'antes de que',
'después de que',
'hasta que',
'como',
'el',
'la',
'los',
'las',
'un',
'una',
'unos',
'unas']
英语
['about',
'above',
'across',
'after',
'against',
'along',
'among',
'around',
'at',
'before',
'behind',
'below',
'between',
'by',
'during',
'for',
'from',
'in',
'inside',
'into',
'near',
'of',
'on',
'over',
'through',
'to',
'under',
'until',
'with',
'without',
'and',
'but',
'or',
'nor',
'for',
'so',
'yet',
'if',
'because',
'although',
'unless',
'while',
'since',
'before',
'after',
'more',
'the',
'a',
'an']
调整需求第二部分处理逻辑,介词处理需求包括开头介词,末尾介词,连续介词,具体逻辑待补充AI组的逻辑
https://alidocs.dingtalk.com/i/nodes/vy20BglGWOe6NLDZFa4dMD11JA7depqY?cid=47752748:2542522296&corpId=dingf19b2e3f192a433da39a90f97fcb1e09&doc_type=wiki_doc&iframeQuery=utm_medium=im_card&utm_source=im&utm_medium=im_card&utm_scene=team_space&utm_source=im