面向企業(yè)應用的網絡信息搜索機器人的設計與實現(xiàn).pdf

1、現(xiàn)在,有一類被稱為網絡機器人的軟件系統(tǒng)在Internet上的應用越來越廣泛.網絡機器人就象在流水線上工作,不斷焊接同樣裝置的機器人一樣,它們被程序控制在網絡上反復執(zhí)行同樣的任務.由于網絡機器人的實用性,引起了很多程序員,特別是Web程序員的興趣.本文所要介紹的網絡信息搜索機器人就是網絡機器人的一種.現(xiàn)在大型網絡信息搜索機器人應用非常廣泛,最典型的例子就是搜索引擎(如Google,Baidu,Yahoo等).當用戶需要在廣闊的Intern

2、et尋找特定信息時,這些搜索引擎非常有用處,但針對一些特殊的,細節(jié)的情況時,這種大型網絡信息搜索機器人就顯得不合時宜,甚至常常得不到希望的結果.例如,某跨國公司有一個強大的內部網站,里面有一些對公司內部非常有用但不能對外公布的信息,這時當公司一個成員想得到相應的信息時,他通過Internet上的大型網絡信息搜索機器人顯然束手無策,只能通過瀏覽網頁得到他想要的信息,而這些信息常常又分布在毫無關系的很多網頁上.這樣查找起來不僅很慢,而且也不

3、一定能把有效信息收集齊全.由此可見,現(xiàn)有的搜索引擎并不能用于在公司內部網站上搜索有效的信息,因此,還需要能夠適應企業(yè)內部搜索應用的中小型網絡信息搜索機器人.根據本人的關注,現(xiàn)在還沒有很成體系的提供給企業(yè)內部使用的網絡信息搜索機器人.由于以上的需求,我在Motorola成都軟件中心作為核心成員設計并實現(xiàn)了文中將要介紹的面向企業(yè)應用的網絡信息搜索機器人,并給它取了一個很酷的名字:Crazy Info Collector(文中簡稱為CIC).

4、本文主要介紹了整個CIC系統(tǒng)的設計與實現(xiàn)過程,從系統(tǒng)總體架構到各重要模塊的分析.CIC系統(tǒng)具有非常重要的普遍意義,它可以應用于任何需要內部網頁搜索功能的企業(yè).當一個企業(yè)需要內部網頁搜索功能時,它可以選擇不重新開發(fā)搜索系統(tǒng),而是通過修改CIC系統(tǒng)或直接復用該系統(tǒng)來滿足自己的需要.相信隨著CIC系統(tǒng)的不斷升級及功能增強,它將會變得越來越強大,給需要該應用的企業(yè)帶來越來越多的方便.CIC系統(tǒng)是用Java語言來開發(fā)的,集成開發(fā)環(huán)境使用的是Ecl