文科法学论文或者相关论文的爬虫怎么做左论文检索

尤其到了一年一度的毕业季了，但是在毕业之前，一个大官就是毕业论文。然后我想问一下有没有相关的爬虫方法去爬一些论文资料，我自己单个检索的话，感觉检索出来好慢，而且也不知道检索自己需要的哪些论文。目前刚进入了选题阶段，已经确定了选题，但具体的一些还不熟，之前看到有人发过说可以用AI把自己下载下来的论文进行通读解说和重点问题摘要。重点提炼出来的那种工具skill，有没有指引