詹卫东老师中文信息处理教学课件

詹卫东老师中文信息处理1、不要轻言放弃，否则对不起自己。2、要冒一次险!整个生命就是一场冒险。走得最远的人，常是愿意去做，并愿意去冒险的人。“稳妥”之船，从未能从岸边走远。--戴尔．卡耐基。3、人生就像一杯没有加糖的咖啡，喝起来是苦涩的，回味起来却有久久不会退去的余香。4、守业的最好办法就是不断的发展。5、当爱不能完美，我宁愿选择无悔，不管来生多么美丽，我不愿失去今生对你的记忆，我不求天长地久的美景，我只要生生世世的轮回里有你。詹卫东老师中文信息处理詹卫东老师中文信息处理1、不要轻言放弃，否则对不起自己。2、要冒一次险!整个生命就是一场冒险。走得最远的人，常是愿意去做，并愿意去冒险的人。“稳妥”之船，从未能从岸边走远。--戴尔．卡耐基。3、人生就像一杯没有加糖的咖啡，喝起来是苦涩的，回味起来却有久久不会退去的余香。4、守业的最好办法就是不断的发展。5、当爱不能完美，我宁愿选择无悔，不管来生多么美丽，我不愿失去今生对你的记忆，我不求天长地久的美景，我只要生生世世的轮回里有你。第七章词汇分析(一)找出字符串中的“词詹卫东/doubtfire/提纲口1从字符串到词串口2英语词汇处理口2.1Tokenizationa2.2Lemmatizatio口3汉语词汇处理口3.1分词算法口3.2汉语自动分词的困难口3.3对分词质量的评价口4小结基金项目：2011年吉林省教育厅“十二五”社会科学研究项目“整合传统与现代大学英语课堂教学模式的研究与实践”的阶段性成果。英语是高校开设的公共基础课，它是不同学科和领域的基础，一直以来都受到各高校的重视。《大学英语课程教学要求》也明确提出了培养学生英语综合应用能力，特别是听说能力，以适应经济发展和国际交流需要的目标。高校英语教师为达到这一教学目标，纷纷进行教学方法的改革与实践。本文就自己学校的英语教学现状以及所开展的英语教学活动的调查与分析，初步探索农业院校提高大学生英语学习的有效途径。1大学英语教学的现状及存在的问题1.1学生英语基础相对较差农业院校中，学生生源具有自己的特殊性，学生多数来自边远的地区，他们和来自都市的学生，在英语学习方面有很大的差别。都市的学校中，英语教学环境较好，学生可以通过各种渠道，例如广播或电视的英文节目，网络计算机等获得更多的语言输入；而在边远地区，学生主要是通过课堂教学获得英语知识。相对来讲，他们的英语基础较差，英语的听说读写综合应用能力迫切地需要提高。农业院校一定要针对自己学生的特点，找到适合本校的教学方法。1.2教学模式有待转变由于学生英语水平相对较低的原因，教师把教学的重点放到了词汇讲解，句法操练上，这样就导致学生养成了不善于思考，被动学习的局面。学生过多地关注单词，语法要素等个体的语言学习单位，而忽视了学习内容的宏观特征，例如说作者的写作目的，文章的整体结构等，使得所学内容分裂开来，不能有机地结合在一起，学习过程变得很僵硬，无法达到预期的学习效果，所以找到切实可行的教学方法势在必行。1.3影响教学的主要因素需待把握影响英语教学的因素很多，其中与学习者联系紧密的主要有两部分，即学习者的内部因素和学习者的外部因素；而内部因素与学习者的个体差异有关，如学习动机，学习策略，学习风格等，也包括学生的智力水平，语言潜能等；外部因素则涉及到教学环境和师生的互动情况。我们在对教学方法进行探索，改革，创新的过程中，就要以这两个领域为基础进行具体的操作。2创新与实践的具体实施2.1使用语篇分析理论改革总是以研究历史和传统为前提的，大学英语教学的改革也同样遵循这一规律，教学法的创新仍然和传统的课堂教学密切相关，重要的是教师已经转变了教学观念。课堂教学中，教师除了分析语法，句法和词义的同时，更加注重对语篇的结构分析，引导学生把握文章的主题思想，领会作者的创作意图和立场观点。例如：《新视野大学英语》第一册第三单元“AGoodHearttoleanon”描述了作者从小到大对残疾爸爸的复杂的情感历程。未成年时很勉强地陪爸爸一起走，对于人们注视的目光就会感到很难堪；随着年龄的增长，不禁惊叹父亲的伟大，他从不表现出对比他幸运或健康的人的羡慕或妒忌，他从别人那寻找的就是一个好心态。父亲乐观向上的精神深深地影响着作者，成为他时刻鞭策自己的一条行为准则。在讲授课文时，教师就引导学生把握住这一主题，使学生能够按照这一主线顺利地掌握课文的主要内容。文中多次出现倒叙结构，目的在于突出作者在对父亲回忆时，心中充满愧疚与歉意，他的后悔之情正是源自从前不理解父亲与现在钦佩父亲的强烈反差。对语篇的结构分析，有助于学生深切体会到作者对父亲的崇敬之情。此外，教师还可以将学习内容和学生的生活联系在一起，例如让学生谈谈自己和父亲之间的情感话题等。学生只有明白了作者的写作思想，对文章的主题产生浓厚的兴趣，才能更好地学习其中涉及的语言表达方式。2.2加强写作训练英文写作通常是检测和衡量学生英语水平的一个尺度，随着社会的发展与进步，英文写作变得更为重要。在大学英语四六级考试中，英文写作的分值也占据相当大的比例。但对很多学生来说，英文写作却是他们的弱项。以往的写作教学也是按照给出题目，教师讲解，学生练习的套路来完成，学生在写作上的进步并不理想。特别是农业院校中，一些学生来自较边远的地区，英语水平相对较差，他们真的不知道如何下笔，到底写些什么，怎么写。针对这样的情形，教师就必须改变写作的教学策略。首先，教师在讲解课文篇章结构时，就渗透一些写作的方法。例如：《新视野大学英语》第一册第一单元“LearningaForeignLanguage”，作者在叙述英语学习过程时，就运用了cause-effect的写作方法。作者在不同的阶段学习效果不一样，就是由于不同的原因而导致了不同的结果。教师指导学生完成课后的练习-Succeedinginlanguagelearning，实际上就是对cause-effect的写作方法的一次模拟训练，学生会很轻松地完成任务。其次，教师主要采用任务型教学法（Task-basedEnglishTeachingMethod），加强对学生在规定时间内完成写作的训练，课堂上抽出一定的时间，让学生在任务的驱动下完成写作，以达到强化其学习的目的。同时，教师还把学生在作文中所犯的错误进行分类讲评，如，名词单复数，介词的使用，不定式，分词，therebe句型，定语从句等等，经过一段时间的训练，学生的语法错误明显减少，基本上能够掌握作文的写作要领了。2.3举办文化体验活动作为理想的外语教学，应该能向学生提供一个这样的学习环境：它既能帮助学习者获取知识；同时更重要的是，能够使学生获得更多的直接使用目的语的场所和机会，让学生“体验”于使用目的语的环境之中，从而获得较高的语言使用技能。因而伴随着课堂教学的改革，学院创办了以“体验英语，体验生活，体验未来”为主题的大学英语体验月活动。所谓体验，即接触英语文化的生活方式，了解英语文化环境中的文学，艺术；具体而言，体验主要包括文化学习，理解文化信息，体会文化实践活动，以及了解文化观念等。外语教学建立了实践的环境，真正实现了教学生活化。通过举办一系列的活动，大学英语体验月满足了学生课余的兴趣爱好，活跃了校园的文化生活。这样就巧妙地把英语演讲，英语辩论，英美文化赏析，英语手抄报制作，外国影片欣赏以及英语戏剧表演与课内教学结合起来，潜移默化地使学生受到感染和熏陶。一方面，教师指导学生参与戏剧表演，配音大赛，诗歌朗诵的活动，给学生更多体验情感的机会，以争取在教学中能够产生共鸣；另一方面，文化赏析可以帮助学生了解异域的风土人情，例如希腊的神话故事，就令学生听得如醉如痴；影片欣赏则可吸引学生融入到剧情当中，其中的人物对白不仅是对学生听力的一次考验，同时对于深刻把握作品的内容和特色也是一个挑战。语言学习有了广阔的知识面做基础，学生对所学国家的文化，历史，地理，文学也有所了解，在外语学习中就收到了事半功倍的效果，这些活动成了课堂教学必不可少的一个补充。2.4开展课外自主学习作为一门公共课，大学英语每周只有4学时，这对于提高学生的英语水平来说是远远不够的，所以课外的自主学习尤为必要。开展自主学习的前提，就是教师要在教学实践中培养学生自主学习的能力，使学生养成自主学习的习惯。更重要的是，学生要学会适应由高中以教师为中心转变为现在以学生为中心的教学模式，明确自己的学习目的和要求，从而采取有效的学习方法。为了帮助学生顺利地完成这一转变过程，教师对教学安排做了一些设计。一般在学习新的课文内容之前，教师设置一些问题，让学生自己去寻找答案，这样就增强了学生的好奇心和学习的欲望。随着计算机和网络技术的普及和发展，信息技术在英语学习中也被广泛地推广和使用。一方面，学生按照老师的布置，可以利用图书馆和网络资源去搜索与课文内容相关的资料；另一方面，学校统一配备了语言听力教室，学生可以去那进行自主听力的学习，教师还会在固定的时间给予指导。自主听力的内容不仅仅局限于听，而是把听，说，读，写融合在一起，能够使学生的英语综合能力得到锻炼和提高。为了更有效地敦促学生学习，所有学生在课堂上的活动，学生的学习态度，参与第二课堂的表现都在学生的期末成绩中占有一定的比例，这样就激发了学生的学习热情，使英语教学能更有效地进行。总之，这些教学方法的改革，不仅调动了学生的智力因素，还激发了学生的非智力因素；解决了学生在学习过程中遇到的一些问题，增强了学生的自信心；使学生不仅将英语体验月活动进行得如火如荼，同时他们在英语学习方面的语言技能，思维能力和文化知识都得到了全面的提高；学生的英语学习也有了极大的进步，特别是近几次的大学英语四级测试，全校的英语过级率呈阶梯状上升，由原来的20%多达到了现在的33.08%。实践证明，我们农业院校只有找到适合自己的教学法，才能达到预期的教学目标。我县地处河西走廊石羊河下游，近年来由于严重干旱缺水，为加强综合治理，政府大力推进石羊河流域重点治理，相继采取节水治沙、关井压田等措施。由于耕地面积减少，农村富余劳动力不断增多，越来越多的农民工不得不离开故土到外地或城市务工，使得大批的儿童脱离父母亲的直接监护成为留守儿童。留守儿童已成为目前我县农村学校中一种普遍存在的现象。由于各方面因素的影响，留守儿童心理与生理的健康成长都面临诸多问题。农村留守儿童教育问题直接关系到农村社会的和谐稳定与经济的可持续发展。农村留守儿童的教育问题应当成为目前农村教育工作者亟待研究的课题。一、我校留守儿童教育现状为了深入开展留守儿童教育工作，课题组成员通过走访、座谈、调查问卷等方式，对我校“留守儿童”的生活和教育状况进行了专题调查。问卷调查的对象为三、四年级学生，共发出调查表50份，回收有效表格48份。调查中，我们发现，留守儿童的学习情况与其他儿童相比有一定差距。大多数留守儿童对学习感到有困难，在学习中遇到困难时主要依靠老师和同学，非留守儿童还可依靠父母。日常生活中，留守儿童的大多数经济条件较差，年龄稍大点的孩子还要承担家务，学习时间得不到保障，对学习成绩的提高自然造成一定影响。在监护问题上，较多留守儿童的监管人为祖辈，他们只能在生活上给予关怀照顾，对学习辅导基本是空白，留守儿童缺少正常的监护。二、我校留守儿童教育中的突出问题由于父母无暇顾及、监护人监管不力以及学校教育缺位、社会不良因素影响等方面的原因，使得留守儿童在成长中出现这样那样的问题。概括地讲，主要表现在以下几个方面。（一）情感问题留守儿童大都和祖辈住在一起。由于监护祖辈与孩子年龄差距大存在代沟，自身又担负大量繁杂的劳务，孩子出现情感方面的问题很难找到倾诉的对象。从表中可见主动打电话帮父母联系的儿童仅占不到38%，他们又很少与在外的父母联系，所以留守儿童存在较为严重的情感教育问题。因缺少关怀、倾诉，又很少与外界接触，导致他们感情比较冷漠，甚至孤僻、偏激。大部分留守儿童存在内向、自卑、不善交流等共性问题。（二）学习问题由于父母在外务工的影响及各种娱乐场所的增多，尤其是网吧在农村的日益普及，使得不少留守儿童沉溺其中不能自拔。大多留守儿童在学习中缺乏主动性、自觉性。据调查，留守儿童的学习成绩普遍不好。一半以上的留守儿童的学习成绩处在中等以下位置。（三）道德教育留守儿童大多跟祖辈一起生活，祖辈年龄偏大、文化层次偏低，对孩子纵容溺爱，物质生活上给予满足多，道德和精神上约束引导少，容易造成留守儿童在思想道德上的放任自流，留守儿童容易形成一些不好的习惯和道德品行。农村留守儿童中最大的问题便是，没有人能管得了的问题儿童。祖辈年纪大，还要种地务农，不懂孩子的生理心理状况，难以进行针对性的教育；寄居在亲戚朋友家的，主人不便对孩子进行教育；寄宿在学校的由于缺少监护人，更是忘乎所以；至于与单亲生活在一起的虽然情况稍好一些，但是仍然存在有诸多问题。三、我校留守儿童教育突出问题的成因分析农村留守儿童问题的实质上也是“三农”问题的一个表现。外出务工农民由于工作稳定性不高，收入又比较低，加之城乡二元户籍制度以及城市昂贵的生活成本和教育成本等已成为农民工难以逾越的鸿沟。经济、环境、家庭和学校因素等成为不利于留守儿童健康成长的因素。（一）经济因素我县地处偏僻，经济落后。近年来随着学生的逐步减少，学校面临着巨大的经济压力，公用经费严重不足，应付日常开支捉襟见肘，不同程度地制约教育软硬件条件的改善。寄宿条件较差，生活教师不全，班主任负担较重，直接影响到留守儿童的学习和思想教育。（二）环境因素在市场经济大潮冲击下，“吃喝享乐”、“金钱万能”等不良习气已由城市向农村蔓延。对于自制力弱、内空虚寂寞、学习成绩较差的留守儿童来说，网吧、游戏厅成为他们的最佳选择与去处，有的沉溺其间不能自拔，随之逃学、厌学、撒谎、偷摸等行为就慢慢形成。（三）家庭因素父母长期不在身边，平时对子女疏于管教、缺少沟通，造成亲情淡漠。隔代监护中祖辈文化程度偏低，教育观念方式陈旧，溺爱大于教育，感情多于理智，祖辈们习惯用自己陈旧的观念和经验去教育孩子，教育存在缺陷。（四）学校因素农村学校的未成年人思想道德教育工作中，存在年龄层次不明、针对性不强的现象，无论内容还是形式都存在盲目性和“一刀切”的问题。如老师不能及时向家长了解真实情况，学校对留守儿童的日常生活照顾不周、缺乏必要的生活关爱和指导，乡镇学校缺乏专职心理辅导老师，留守儿童的心理问题在学校得不到有效的解决等。总之，我们只有对农村留守儿童教育问题的成因进行分析，才能深入剖析制约农村留守儿童健康发展的原因，为今后解决留守儿童问题打下坚实有力的基础。（甘肃省教育科学“十二五”重点规划课题研究成果，课题编号：GS[2013]GHB0627）（责编张敬亚）第七章词汇分析(一)找出字符串中的“词詹卫东/doubtfire/提纲口1从字符串到词串口2英语词汇处理口2.1Tokenizationa2.2Lemmatizatio口3汉语词汇处理口3.1分词算法口3.2汉语自动分词的困难口3.3对分词质量的评价口4小结1从字符串到词串从字符串到词串,是个降低不确定性的一汉字的简繁转换後面,皇后松树,鬆开后松词汇分■文本校对(改错别字)析是许;多NLP应抛妻别字抛妻别子(字音编码输入)用系统于预—千预(字形编码输入)的基础基于字的检索和基于词的检索■检索“人为”,可能输出的结果人为因素、人为什么活着、以人为本、从字符串到词串(续)■张店区大学生不看重大城市的户口本张店区大学生不看重大城市的户口本张店区大学生不看重大城市的户口本从字符你认为学生会听老师的吗串到词你认为学生会听老师的吗在着不你认为学生会听老师的吗确定性■我家门前的小河很难过从字符串到词串(续)DoasLet'sadhoc-andsoon-newyorkstrong-stronger-strongestbuy-bought在“字符串”这个层次上,“eateat-ate-eaten跟“ate”是相同字母的不同顺序形try-tried-tries在“词串”这个层次上,t跟“ate是同-伞词的不同表现形式treat-treatment52英语的词汇处理Tokenization:把字符串变为词串I'mastudent-i'mastudentLemmatization:对词进行内部结构和形式分析took->takeed(pasttense)2.1Tokenization1)数字:123456781907%3/811/20/20002)缩略(包含不同的情况):a.字母一点号一字母一点号组成的序列,比如:U.s.i.e.等等b字母开头,最后以点号结束,比如:A.b.Mf3)包含非字母字符,比如:AT&TMicro$oft4)带杠的词串,比如:three-years-old,one-third,so-called5)带瞥号的词串,比如:I'mcan"tdog'slets6)带空格的词串,比如:"andsoon","adhocNote1:不同语言书写数字的习惯可能有较大差别,比如法语文本中这个数字就写成:123456,78数字的识别(正则表达式/regularexpression)a.识别分数,日期的正则表达式:0-9]+([09]+)+eg.1