最近在写一个扫描工具
网页端发送一个任务,后台根据任务类型,调用 celery 的服务,进行相应的扫描。 现在能够运行,但是效率很低。
我想进行几处优化: 1. 把分发任务的代码当作一个 worker,多启几个实例 2. 再有一个类似 scheduler 的角色,将网页端发的任务,做个负载均衡的功能,转发给 worker 3. worker 再每隔一定时间给网页端返回一个心跳
各位大佬,能不能给我介绍能够实现我需求的框架 /思路?