请教下火车头高手，关于采集！

laowen · 发表于 2021-11-28 13:03:50

采集一个几万数据的站，有部分内容没采集发布好，
现在重新采集的话，之前已经采集发布好的内容，会重复吗？
比如图片和文字内容，会重复吗

honey · 发表于 2021-11-28 13:06:49

之前的已入库了吧，不会发布重复的了吧

laowen · 发表于 2021-11-28 13:08:50

honey 发表于 2021-11-28 13:06
之前的已入库了吧，不会发布重复的了吧

之前的入了，现在我想把火车头之前采集的内容全部删了，但是网站内容的不删，然后全部重新采集发布一遍，不知道会不会重复内容

honey · 发表于 2021-11-28 13:10:39

laowen 发表于 2021-11-28 13:08
之前的入了，现在我想把火车头之前采集的内容全部删了，但是网站内容的不删，然后全部重新采集发布一遍， ...

如果删除库里的重新采集那就算新的了吧，除非设置了不允许重复标题，不然都算新的重新发布吧……看看别的大佬咋说吧

z6045670 · 发表于 2021-11-28 13:15:57

没采集好？如果是没采集成功重新采集一遍就可以了
如果采集成功但内容不理想（如没过滤好或没获取到想要的内容）那就不好弄了
发布的时候如果网站程序有检测重复标题的功能还可以杜绝重复如果没有就白费
建议重新采集网站清空数据

六翼天使 · 发表于 2021-11-28 13:18:36

标题一样会覆盖吧

laowen · 发表于 2021-11-28 13:28:17

z6045670 发表于 2021-11-28 13:15
没采集好？如果是没采集成功重新采集一遍就可以了
如果采集成功但内容不理想（如没过滤好或没获取到想 ...

大佬，如果部分内容，没发布成功，我点击了停止键，怎么从新全部发布一遍啊

z6045670 · 发表于 2021-11-28 13:52:17

正常重发就行了火车头数据库会记录已发布和未发布

专业黑人抬棺 · 发表于 2021-11-28 13:59:53

火车头如果不清空自带库的采集任务的话，是不会重复的，火车头会自带排除掉同样链接的内容不采集，已经发布的也不会在发布，但是如果你清空的火车头的采集任务

然后再采集了一次，就会全部重复发布一次

sky21022 · 发表于 2021-11-28 14:04:03

建议清空数据重新采集

		自动登录	找回密码
密码			注册