风讯官方论坛

ydflys2008 - 2008-10-9 10:34:00

因为我采集一个网站的几十页的新闻，而我是一页页的采集的，但那个网站的新闻很多都是重复的标题，而我怎么样能采集的时候把重复的标题给自动刷选掉呢，我一页页采集的时候，历史记录我都没有清除的，这种情况如何解决呢。谢谢了！

huade - 2008-10-9 23:02:00

我没碰到这问题呢

xiaosa - 2008-10-10 09:48:00

在采集的历史记录中包含有的记录，在下次采集的时候会主动对比而不予采集的。