批量插入数据的同时自动去重,在laravel中有什么高效的写法吗

我这有个需求,每五分钟获取1000条数据,插入到数据库中,数据库里一天存一张表,表规模大概30w左右,现在想在插入的时候顺便去重,请问在laravel下有什么高效的写法不。

touge
修改的评论也不能少于六个字哦!
iswant 回复 touge
修改的评论也不能少于六个字哦!
dope2008
修改的评论也不能少于六个字哦!
jasester
修改的评论也不能少于六个字哦!