下载本文档
版权说明:本文档由用户提供并上传,收益归属内容提供方,若内容存在侵权,请进行举报或认领
文档简介
一、实验目的 理解搜索引擎中的分词技术。二、实验内容 编写程序实现对一段中文文章,利用最长正匹配算法进行分词三、实验过程 3.1分词程序流程图开始开始初始化字典打开文本文件文本内容是否读完读取一行字符字符串是否分析完依次从当前位置向后截取不同长度字符串,截取长度从大到小。如果匹配如果匹配输出截取的字符,将当前位置修改为截取字符串末尾位置将字符串与字典进行匹配无法再截取结束3.2分词程序源代码booleanf; intDlen=33; Stringdictionary[]={ "生命","最后","余光","仔仔细细","检视","一点","一滴","鲜明", "生动","日子","熟悉","面孔","一言一语","生活","装进","装入", "扉页","钟爱", "一并","自己","一遍","甘心","二十","收拾","一切", "灿烂","结束","微笑","昨天","还给","孤单","留给","自己"}; try{ FileInputStreamin=newFileInputStream("d:\\123.txt"); BufferedReaderbreader=newBufferedReader(newInputStreamReader(in,"gb2312")); Stringinputstr,word=null; inti,j,k; while((inputstr=breader.readLine())!=null) { for(i=0;i<inputstr.length();) { f=false; for(j=4;j>1;j--) { word=inputstr.substring(i,i+j); for(k=0;k<Dlen;k++) if(dictionary[k].equals(word)) { f=true; break; } if(f)break; } word=inputstr.substring(i,i+j); if(!(word.equals(",")||word.equals("。")||word.equals("?")||word.equals("!")||word.equals("“")||word.equals("”"))) System.out.print(word+"\n"); i=i+j; } } }catch(FileNotFoundExceptione) {}catch(Exceptione) {
温馨提示
- 1. 本站所有资源如无特殊说明,都需要本地电脑安装OFFICE2007和PDF阅读器。图纸软件为CAD,CAXA,PROE,UG,SolidWorks等.压缩文件请下载最新的WinRAR软件解压。
- 2. 本站的文档不包含任何第三方提供的附件图纸等,如果需要附件,请联系上传者。文件的所有权益归上传用户所有。
- 3. 本站RAR压缩包中若带图纸,网页内容里面会有图纸预览,若没有图纸预览就没有图纸。
- 4. 未经权益所有人同意不得将文件中的内容挪作商业或盈利用途。
- 5. 人人文库网仅提供信息存储空间,仅对用户上传内容的表现方式做保护处理,对用户上传分享的文档内容本身不做任何修改或编辑,并不能对任何下载内容负责。
- 6. 下载文件中如有侵权或不适当内容,请与我们联系,我们立即纠正。
- 7. 本站不保证下载资源的准确性、安全性和完整性, 同时也不承担用户因使用这些下载资源对自己和他人造成任何形式的伤害或损失。
最新文档
- 媒体广告合作协议三篇
- 班主任如何引导学生正确使用社交媒体计划
- 企业安全管理人员安全培训试题及答案新
- 工厂车间安全培训试题答案可打印
- 呼叫中心客户服务代表的积极问题解决能力考核试卷
- 个人汽车租赁合同下载
- 社区卫生服务在健康教育和健康促进中的创新考核试卷
- 食用冰卫生标准与质量控制考核试卷
- 零售业客户需求挖掘与产品设计考核试卷
- 职业中介服务的智能化发展与应用考核试卷
- 《第六章:幼儿园课程》PPT课件
- 公路工程施工图的识读
- 绞吸式挖泥船施工设计方案
- 水泥混凝土路面监理实施细则
- 脱硫系统运行操作手册.docx
- 金属化薄膜电容器两种喷金工艺探索
- 新教师如何备课与上课PPT
- 社会工作视角下社区老年志愿服务问题及对策研究
- Sjogren`s Syndrome 修格蘭氏症
- 24-临床麻醉监测指南(2021)
- 六尺巷的故事英语版.ppt
评论
0/150
提交评论