Commit Graph

148 Commits

Author SHA1 Message Date
狮子的魂
db696b0adf 增加static目标用于生产静态friso库. 2013-12-19 16:11:50 +08:00
狮子的魂
c8bd3ad787 修复count_chunk_mdf中语素自由度计算bug(加上log(e->free)和e->length的GBK判断) 2013-12-13 23:37:29 +08:00
狮子的魂
171fc59703 完善GBK切分的全角转半角,大写转小写的实现. 2013-12-12 21:49:42 +08:00
狮子的魂
e7438965fe 去除默认对^,-,/等标点的保留. 2013-12-11 14:14:22 +08:00
狮子的魂
0ca7bcd1d8 去除默认对^,/,-等标点的保留 2013-12-11 14:13:12 +08:00
狮子的魂
c0f256a9d3 去除utf_cjk_string中对0x3200-0x32FF段CJK文字和月份的纳入 2013-12-11 13:12:22 +08:00
狮子的魂
b1a6b6c68e 修改测试程序, 加入版本和编码提示 2013-12-11 13:10:24 +08:00
狮子的魂
c223ed2172 next_basic_latin中添加GBK全角转半角,大写转小写 2013-12-11 13:09:49 +08:00
狮子的魂
3dcb8247a1 完善UTF8,GBK编码接口函数的实现. 2013-12-10 20:18:04 +08:00
狮子的魂
95fd776054 去掉注释 2013-12-10 20:17:11 +08:00
狮子的魂
142cdbf600 增加依据编码来限制最大词条长度 2013-12-10 20:16:49 +08:00
狮子的魂
caba942b6d 修改停止词词库, 增加对'/'的过滤 2013-12-10 20:15:53 +08:00
狮子的魂
9ba43373e5 去掉lex-main.lex中的无用词条 2013-12-10 14:08:11 +08:00
狮子的魂
a95a732c42 添加新版本的词库包括GBK和UTF8词库. 2013-12-10 14:06:32 +08:00
狮子的魂
815593e13d 修改适用GBK接口. 2013-12-10 14:05:54 +08:00
狮子的魂
cdb1a317eb 修改使用GBK封装 2013-12-10 14:04:57 +08:00
狮子的魂
78a3f40e5a 删除旧版词库 2013-12-10 14:04:07 +08:00
狮子的魂
81c10af90c Friso的GBK接口的实现.. 2013-12-10 14:03:29 +08:00
狮子的魂
2ec3b479d5 增加ctype封装, friso字符类型判断编码控制器 2013-12-08 21:16:01 +08:00
狮子的魂
9971c7d565 UTF8编码ctype接口实现源程序 2013-12-08 21:15:06 +08:00
狮子的魂
a991c197e9 GBK编码ctype接口实现源程序 2013-12-08 21:14:45 +08:00
狮子的魂
86f117c946 增加编码wrap, 增加对GBK编码的支持. 2013-12-08 21:14:04 +08:00
狮子的魂
c55338381c 添加编码选项 2013-12-08 21:11:42 +08:00
狮子的魂
6cfc9fbdbc 修复jcseg转friso词库工具语素自由度未添加bug. 2013-12-08 14:00:49 +08:00
狮子的魂
4ec07c6319 新版本词库. 2013-12-08 13:58:15 +08:00
狮子的魂
ef030b7215 更改CAHNGES,加入更新计划 2013-12-04 21:48:12 +08:00
狮子的魂
b244b8f7f5 修复WinNT的Run-Time Check Failed错误. 2013-12-04 21:47:33 +08:00
狮子的魂
164db98c6e Jcseg词库转Friso词库java源程序 2013-11-28 14:16:58 +08:00
狮子的魂
9748041a16 从jcseg最新词库中转换过来的词库 2013-11-28 14:16:34 +08:00
狮子的魂
02d20f92b8 最新版本的friso.lex.ini 2013-11-28 14:16:11 +08:00
狮子的魂
49f064e1e3 添加了旅游地点词库 2013-11-28 14:15:23 +08:00
狮子的魂
2431dcbeb0 加入Win下的dll文件托管 2013-11-28 13:09:29 +08:00
狮子的魂
ef90a35130 加入lib托管 2013-11-28 13:09:05 +08:00
狮子的魂
5f0082490d 加入最新版本Friso接口是使用说明 2013-11-28 13:02:33 +08:00
狮子的魂
b1a908ff3c 添加Friso-1.5.0功能说明. 2013-11-28 10:27:02 +08:00
狮子的魂
65a21a63eb 增加最版本Friso功能说明. 2013-11-28 10:24:43 +08:00
狮子的魂
ee5da2a2e4 增加更改到CHANGES.md 2013-11-25 22:12:39 +08:00
狮子的魂
05b414a76d 增加friso_config_t, 适合多线程下的多配置使用. 2013-11-25 22:12:13 +08:00
狮子的魂
d6d9e14638 添加Friso开发帮助文档.pdf 2013-11-23 19:17:54 +08:00
狮子的魂
90e43bdaed 依据最新friso接口更改测试程序 2013-11-23 19:15:52 +08:00
狮子的魂
8fee218b79 引入friso_config_t, 适合多线程多配置使用 2013-11-23 19:13:34 +08:00
狮子的魂
88a65368f2 增加CHANGES.md来记录friso的更改 2013-11-19 20:22:32 +08:00
狮子的魂
3aed146b2a 修复friso.c#next_basic_latin中数字+空格+单位组合中忽略空格直接组合数字和单位的bug 2013-11-19 20:20:32 +08:00
狮子的魂
14afa2f928 更改了friso.ini中的默认配置 2013-11-19 20:19:21 +08:00
狮子的魂
d762803645 添加friso完整版本下载地址. 2013-11-18 10:48:39 +08:00
狮子的魂
c3df8afe9d Add brief introdution to friso 2013-11-16 15:38:32 +08:00
狮子的魂
3025c1c96d Add brief introdution to friso 2013-11-16 15:37:05 +08:00
狮子的魂
900a1715e5 First commit of friso chinese tokenizer 2013-11-16 15:12:33 +08:00