搜索引擎的难点包括如下几点.doc

搜索引擎的难点包括如下几点：
    1) 是否支持并发的爬取数据，如果要并发，要保证所有采集器能合作采集，不会出现重复采集的情况.
    2) 采集的数据还要有一个排重的过程. 只需要采集一个网站更新的数据
    3) 对于需要cookie数据的网页如何采集的问题,部分网站需要通过cookie数据登陆网站
    4) 自动通过识别码的验证
    5) 一些网站对于密集访问的请求会拒绝，技术上也要进行处理
    6) 对于一些特殊网页的采集问题, 比如flash网页，一些游戏网页等，很多网站会让采集程序陷入其中，采集数万无效数据，显然是浪费了采集程序的精力
    7) 大数据量的存储也是个难点，据说Google的存储是自己开发的架构，没用任何的数据库，因为数据库的查询效率还是有一定损失. 可以采用数据块的模式，然后通过散列表的模式连接.
    以上主要列出的是后台采集器的相关技术难点，在前台检索、查询效率等方面仍有许多难点.
21世纪人类社会已进入了信息化时代，作为信息化时代标志之一的因特网在全世界以史无前例的速度和规模不断发展壮大，而因特网上的信息也象原子裂变一样迅速膨胀，面对这些浩瀚无边的信息人们已经显得无所适从了。的确，人们要想在这信息的海洋中准确找到自己所需要的信息是一件很不容易的事情。

为了能够克服这样的困难，人们制作出来了搜索引擎，它通过内部的某些软件程序把INTERNET上的信息进行分类整理，或者是通过人工组织的方式把某些数据归类，形成一个可供查询的大型数据库。可以说：“搜索是一种组织和查询信息的方式！”

一般来说，在每个搜索引擎中均提供分类目录及关键词检索这两种信息查询的方法。而这些搜索引擎的基本用法是搜索引擎站点中都提供一个可以输入关键词的文本输入框和一个“搜索”的按钮，用户可以在输入框中键入关键词，然后按“搜索”按钮，搜索引擎就会自动地在其内部的数据库中进行检索，最后把与关键词相符合的或者是与关键词相近的网站显示在结果页中，接着用户只需通过搜索引擎提供的链接地址，就可以访问到相关信息。这种查询方法的关键之处在于关键词的选择和表达上。

如果关键词选择不当，搜索的结果会返回大量无用的垃圾信息；或者有用的信息被淹没在大量的冗余的页面之中。所以在选择关键词时，应该熟练掌握关键词语法表达方式，这样就可以少走弯路，能得到更精确的搜索结果，从而迅速找到自己所需要的信息。虽然各个搜索引擎的搜索语法不完全相同，但下面一些搜索语法还是比较通用和常见的，笔者分别举例来说明各个语法符号的使用方法。

（1）直接键入关键字，搜索引擎就把包括关键字的网站和与关键字意义相近的网站地址一起返回给用户。例如：键入“网上教学”，搜索引擎就会把“网上学习”、“远程教学”以及“网上教学”等内容的网址一起反馈给用户，因此这种查询方法往往会返回大量不需要的信息。

图1 直接搜索

（2）利用双引号，来查询完全符合关键字串的网站。例如：键入“电脑硬件”，会找出包含网络资源的网站、但是会忽略过包含“电脑硬件行情”的网站；这种查询方法要求用一对半角的双引号来把关键字包括起来。

（3）加t:在关键字前，搜寻引擎仅会查询网站名称。例如：键入t:电脑，会找出包含电脑的网站名称。

（4）加u:在关键字前，搜寻引擎仅会查询网址(URL)。例如：键入u:yancheng，会找出包含yancheng的网址。

（5）利用+来限定关键字串一定要出现在结果中。例如：键入电脑+网络，会找出包含电脑和网络的网站。

（6）利用-来限定关键字串一定不要出现在结果中。 例如：键入电脑-网络，会找出包含电脑但除了网络的网站；键入发如雪 -html，会在发如雪的相关网页中过滤掉后缀名为 html 网页。

（7）利用*代替所有的字母，用来检索那些变形的关键词或者是不能确定的关键词。 例如：键入“电*”后的查询结果可以包含电脑、电影、电视等内容。

（8）利用（）可以把多个关键词作为一组，并进行优先查询。例如：键入“（电脑+网络）-（硬件+价格）”来搜索包含“电脑”与“网络”的信息，但不包含“硬件”与“价格”的网站。

（8）利用AND（&）表示前后两个关键词是"与"的逻辑关系。 例如：键入关键词：ENGLISH AND CHINESE，会找出将包含ENGLISH和CHINESE的网站。

图2 高级搜索

（9）利用OR（|）表示前后两个词是"或"的逻辑关系。 例如：键入关键词：ENGLISH OR CHINESE，会找出将包含ENGLISH或者CHINESE的网站。

（10）利用NOT（-）表示要限制关键词在结果中出现。 例如：键入关键词：CHINESE NOT ENGLISH，会找出将包含CHINESE信息，而不包含ENGLISH信息。
（11）利用NEAR来检索两个关键词之间的信息。 例如：键入关键词“THE NEAR BOOK”，会找出关键词“THE”和“BOOK之间的信息，比如可以找到THE INTERSETING CHINESE BOOK这样的信息。NEAR后面可以跟数字来限定两个指定关键字之间允许出现的关键词数。以上是搜索引擎中一些基本的语法知识，各搜索引擎的具体使用方法有可能与上述的有一点儿差别，所以笔者建议大家在使用搜索引擎时，最好研究一下所选搜索搜索引擎主页上的说明，它们往往在Help、advanced search、FAQ（frequently asked questions）、查询诀窍（search tips）中 。一旦你研究过这些说明，就能极大地提高你的搜索效率。

随着社会地不断发展，远程教育迅速发展，它在人们的生活中日益重要。作为一名教师，面对众多的远程教育资源，如何深刻认识远程教育资源，正确把握远程教育资源特点、整合使用远程教育资源，更好地提高课堂地教学效率呢？本文将结合上述问题，谈谈我的个人见解。 一、深刻认识现代远程教育资源 现代远程教育是随现代信息技术的发展而产生的一种通过internet互联网、卫星数据传输和电视信号传输系统而进行的新型教育方式，是构筑知识经济时代人们终身学习体系的主要手段。
二、 正确把握现代远程教育资源特点 现代远程资源内容丰富，具有以下特点：
（1）围绕教学中心，教育资源内容具有全面性 远程教育资源包括了课堂教学所涉及到的各个环节和所有内容，以便于教师实现预定的教学计划、过程、方法和策略，支持教学活动的全过程。远程教育资源的内容主要有：课程标准及其解读、教材内容及其解析、课程教学计划及建议、教学大纲、课程教学实施细则等教学信息；还有课程讲授实录；章节重点、难点讲解辅导；典型习题及解析；案例分析；期末复习指导等等。
（2）远程教学资源呈现形式的多样性 从形式上看，远程教学资源有纸质文字、磁带、光盘，还有多媒体课件或 Web形式的网页；从教学用途上看，有“授课型”的，有“模拟实验型”的，有“示教型”的，有“练习自测型”的，还有“知识搜索引擎型”的。
（3）注重资源的易操作性和智能化 现代远程教学资源既简单又方便，智能化程度较高，从而避免了因技术含量高而使用起来复杂的情况。（4）教学资源的交互性 现代远程教学资源网提供的多媒体课件等教学资源把电视所具有的视听合一的功能与计算机的交互功能整合在一起，使学生在学习过程中实现即时反馈，双向会意。学生在利用现代远程教育资源进行自学时可以根据自己的学习基础和学习兴趣选择学习内容，甚至可以按照自己的意愿安排学习的顺序和进度。
三、整合使用现代远程教育资源 现代远程教育资源内容丰富多彩，怎样将它用于我们的课堂教学，为我们的教学工作服务呢？
1.备课参考 备课是讲课的前提。以前备课时只有教材、教参等参考资料。现在有远程教育工程，网上教育教学资源非常丰富，为我们的教学设计提供了很多可以借鉴的资料。 特别是我们现在一年级使用的教材，由于都是初次接触这个教材，没有什么经验，所以遇到一点问题就可以上网查一查，该如何处理，比如：教学左右时，由于一年级的学生刚入学，不知道能不能把几种情况都给学生讲清，通过网上的资料，我们明白该如何给学生讲解了。再比如：《美丽的田园》这一节课，是引导学生观察，然后提出简单的问题的，到底让学生能提出多少问题才算达到要求，提出几种合适，哪几种类型才行呢？通过上网查找，看了别人的经验，以及中央教科所的资料，我们才弄清了该如何来要求学生。（2）现代远程资源有利于我们改进自己的教学方法。
2.媒体使用
（1）直接引用 根据教学内容的需要，有些网上提供的媒体我们可以采取拿来主义的方法直接使用。
（2）选择性使用 有些网上提供的课件，是作者根据他自己的思维创作出来的，并不一定完全符符合我们的教学需要，这样，我就根据我的教学需要，选择其中的一部分或几部分来使用。
（3）深层次整合 这是使用网上资源的最高境界，也是我们追求的最高目标。 现代远程教育技术的运用，贵在整合。这种整合不是超市的捆绑式销售，而应该是一杯水与另一杯水的融合；要让现代教育教学技术有机地融入到课堂教学这个整体之中，使其成为课堂教学这个有机整体中的一部分，让优化了的教学技术环境与我们的课堂教学实现无缝连接。这就是深层次整合。 而现实中，现代教育技术的应用出现了这样或那样的问题。如讲求形式的多，注重实效的少；比赛中用得多，平时用得少；网上下载的多，自己制作的少；生搬硬套的多，有效整合的少等等。这说明，我们尽管有了比较先进的教育技术环境，但远没有发挥出它应有的作用。这既有技术上的因素，也有操作上的原因，更与人们的认识密切相关。