如何将Django与基于Python的爬虫机器连接起来?

Question

美好的一天伙计们

最近，我制作了一个基于 python 的网络爬虫机器，它可以抓取一些新闻和 django 网页，从用户那里收集搜索标题和 URL。

但是我不知道如何将基于 python 的爬虫机和 django 网页连接在一起，所以我正在寻找我可以参考的任何好资源。

如果有人知道我可以参考的资源， 你们能分享这些吗？

谢谢

Answer 1

有很多方法可以做到这一点。

您可以直接将它们集成在一起。两者都使用Python，所以抓取器只是作为Django的一部分编写的。

你可以让抓取器将数据馈送到数据库，并让 Django 从该数据库中读取。

你可以构建一个从抓取工具到你的 Django 实现的 API。

根据您的需要，有很多选择供您选择。