java在提供的网页上创建一个知识库作为提要

Question

我对我最后一年的部分项目有一些问题。我们正在实施一个剽窃检测框架。我正在研究网络资源检测部分。目前我的互联网搜索算法已经完成。但我需要加强它，这样互联网搜索延迟就会减少

我的想法是这样的：

第一个用户被提示插入一些web链接作为系统的初始知识提要。 然后它在互联网上爬行，扩展知识

一旦获取了知识，系统就不需要再次查询internet。有人能为我提供一些实施指南吗？我们正在使用Java。但任何抽象的细节肯定会对我有所帮助