V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
推荐学习书目
Learn Python the Hard Way
Python Sites
PyPI - Python Package Index
http://diveintopython.org/toc/index.html
Pocoo
值得关注的项目
PyPy
Celery
Jinja2
Read the Docs
gevent
pyenv
virtualenv
Stackless Python
Beautiful Soup
结巴中文分词
Green Unicorn
Sentry
Shovel
Pyflakes
pytest
Python 编程
pep8 Checker
Styles
PEP 8
Google Python Style Guide
Code Style from The Hitchhiker's Guide
seizetheday
V2EX  ›  Python

求推荐 python 的任务管理的方法

  •  
  •   seizetheday · 2016-12-07 17:05:24 +08:00 · 4673 次点击
    这是一个创建于 2890 天前的主题,其中的信息可能已经有所发展或是发生改变。
    比如,有 3 个 py 文件: a.py, b.py, c.py

    希望:
    1. 17 : 00 执行 a.py
    2. 每隔 5 分钟执行 b.py
    3. 每隔 1 天执行 c.py

    通过什么包来管理这些任务比较好?

    环境: python 2.7, linux/windows
    24 条回复    2017-06-07 22:55:03 +08:00
    DozySun
        1
    DozySun  
       2016-12-07 17:06:06 +08:00
    apscheduler
    tonghuashuai
        2
    tonghuashuai  
       2016-12-07 17:08:16 +08:00   ❤️ 1
    这样的情况一般用 crontab 最简单把,其他的包什么的估计还得写代码去调度。
    sinux
        3
    sinux  
       2016-12-07 17:08:27 +08:00
    native cron
    SlipStupig
        4
    SlipStupig  
       2016-12-07 17:26:01 +08:00
    @tonghuashuai 我也是用 crontab ,但是不知道为什么任务根本没执行
    sevncz
        5
    sevncz  
       2016-12-07 17:28:06 +08:00
    crontab +1
    sunwei0325
        6
    sunwei0325  
       2016-12-07 17:28:07 +08:00
    airflow
    tonghuashuai
        7
    tonghuashuai  
       2016-12-07 17:31:28 +08:00
    @SlipStupig print 下 log 看看
    smartdie
        8
    smartdie  
       2016-12-07 17:41:20 +08:00
    一般用 crontab ,
    如果你的项目里用 celery 了,可以考虑 celery beat
    glasslion
        9
    glasslion  
       2016-12-07 17:42:56 +08:00
    这种简单 情况, crontab 最合适,
    windfarer
        10
    windfarer  
       2016-12-07 17:50:13 +08:00
    crontab 用用就行了
    cdwyd
        11
    cdwyd  
       2016-12-07 17:53:50 +08:00 via Android
    @SlipStupig
    我也遇到了手动运行正常 crontab 不执行的问题,后面发现是路径问题,加一个 os.chdir 到工作目录就可以了
    qweweretrt515
        12
    qweweretrt515  
       2016-12-07 19:50:13 +08:00
    celery
    brucedone
        13
    brucedone  
       2016-12-07 20:01:26 +08:00
    clino
        14
    clino  
       2016-12-07 20:03:57 +08:00 via Android
    buildbot
    lunaticus7
        15
    lunaticus7  
       2016-12-07 20:59:29 +08:00
    celery
    FiveDDD
        16
    FiveDDD  
       2016-12-07 21:33:44 +08:00
    不想添加依赖,就 crontab ;另外项目的话,可以试试 celery , apscheduler 。
    Contextualist
        17
    Contextualist  
       2016-12-07 21:39:53 +08:00 via iPad
    个人比较喜欢 https://github.com/dbader/schedule ,适合简单的任务,比 apscheduler 更轻
    SlipStupig
        18
    SlipStupig  
       2016-12-07 21:48:29 +08:00
    @cdwyd 手动我也不执行
    这个是我的配置文件

    30 23 * * * /home/ubuntu/drogen/starup.sh > /dev/null 2>&1
    10 1 * * 6,0 python ~/jdspier/spidermain.py > /dev/null 2>&1
    */1 * * * * /bin/bash /home/cron.sh > /dev/null 2>&1Ø
    clino
        19
    clino  
       2016-12-07 21:59:51 +08:00 via Android
    buildbot 这种自动构建软件有个好处是能在 web 上看所有 stdio 输出
    Lycnir
        20
    Lycnir  
       2016-12-07 22:42:00 +08:00
    crontab 尽量用全路径
    Chyroc
        21
    Chyroc  
       2016-12-08 05:36:21 +08:00
    luigi?
    zhuf
        22
    zhuf  
       2016-12-08 10:40:37 +08:00
    apscheduler 比较方便
    glogo
        23
    glogo  
       2016-12-08 13:07:49 +08:00
    celery beat 可以,不过比较重型了
    heraldboy
        24
    heraldboy  
       2017-06-07 22:55:03 +08:00
    linux 好处理,关键是 windows 下大家有什么好建议
    关于   ·   帮助文档   ·   博客   ·   API   ·   FAQ   ·   实用小工具   ·   5898 人在线   最高记录 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 44ms · UTC 02:02 · PVG 10:02 · LAX 18:02 · JFK 21:02
    Developed with CodeLauncher
    ♥ Do have faith in what you're doing.