使用Python抓取工作人员Google Cloud的NodeJS Web服务器的最佳解决方案

Question

因此，我创建了一个使用selenium的Python脚本

我已经为数据创建了Nodejs（Adonis框架）web界面

我正在谷歌sql解决方案上存储数据，我正在寻找一个解决方案，用谷歌解决方案运行上述所有功能

我想到的解决方案是：

1. VM安装Nodejs安装Python。缺点：昂贵，复杂
2. nodejs部分的Web服务器和python工作人员的另一个服务器。缺点：价格昂贵，需要照看2台服务器
3. 用于nodejs的Web服务器+用于python的无服务器。缺点：scaping需要登录，serverless=新机器每次都需要新的ip。。。可能会导致一些错误

但我相信有更好的解决方案，我没有想到

当然，web界面应该是全天候的，对于一个大约需要10-20分钟的作业，python抓取应该每天运行一次