如何避免重复数据采集？

各位老师，我想问下如何避免重复采集和重复操作呢？规避并且跳过已经采集的数据，只采集新出现的数据。