与背景工作者螺纹的Python网app
内容导读
互联网集市收集整理的这篇技术教程文章主要介绍了与背景工作者螺纹的Python网app,小编现在分享给大家,供广大互联网技能从业者学习和参考。文章包含913字,纯文字阅读大概需要2分钟。
内容图文
![与背景工作者螺纹的Python网app](/upload/InfoBanner/zyjiaocheng/792/6f3de189bcdf465784f952a24307babf.jpg)
要求:
>定义具有开始时间t,批量大小s,调用间隔i和应处理的列表的“作业”
>从时间t开始每隔i秒从列表中抓取下一个项目并进行处理
>作业可以暂停和恢复(用户应该能够告诉作业停止抓取新的列表项进行处理)
Flask将用于Web应用程序.显然,我需要一些后台进程/线程来定期执行处理代码.
由于状态将持久化到数据库,我能想到的最简单的方法是定义一个cronjob,它将定期执行检查活动作业并执行处理的python脚本.
关于如何使用python设计这个的任何建议?
>启动另一个定期检查并执行活动作业的python进程?
>从Flask生成一个工人线程?
> ……?
解决方法:
我强烈建议您使用像Redis或RabbitMQ这样的排队机制. Flask将充当生产者,并且您的“工人”将消费和处理.
设置这些工具中的任何一个都不如您想象的那么令人生畏.
sudo apt-get install redis-server
sudo apt-get install python-pip
sudo pip install redis
您的烧瓶应用程序充当生产者
>>> from redis import Redis
>>> r = Redis()
>>> r.lpush('task_queue', 'task1')
1L
而你的“工人”以异步方式消耗和处理:
>>> r.rpop('task_queue')
'task1'
内容总结
以上是互联网集市为您收集整理的与背景工作者螺纹的Python网app全部内容,希望文章能够帮你解决与背景工作者螺纹的Python网app所遇到的程序开发问题。 如果觉得互联网集市技术教程内容还不错,欢迎将互联网集市网站推荐给程序员好友。
内容备注
版权声明:本文内容由互联网用户自发贡献,该文观点与技术仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容, 请发送邮件至 gblab@vip.qq.com 举报,一经查实,本站将立刻删除。
内容手机端
扫描二维码推送至手机访问。