python+flask+jieba+mongodb+whoosh实现自己的搜索引擎

一、目录

二、基于python的爬虫

三、网页去燥，URL去重

四、基于mongodb的数据存储

五、基于whoosh的全文搜索

六、基于flask的web应用