怎么用一个 py 文件来执行其他多个 py 文件，谢谢。

我新学习 Python ，看了两个爬虫框架，觉得对我来说太重了，也不利于继续学习基础的知识，于是准备自己先写着。
1 、我封装好基本的 requests 库和写入数据库的文件，已完成。
2 、有 a,b,c,d....需要爬取的网站，我个每个网站写一个爬取文件 a.py ， b.py 每个都能单独的很好运行，从列表读取待爬取的 url ，然后存入 redis 做队列，接着从 redis 获取 url ，爬取的文档页面内容存入 mongodb 。已完成。

但问题是，我每次都要逐个去运行 a.py b.py c.py.... 能不能一起运行呢？谢谢。

Redis

文件

URL

存入

9 replies • 2016-06-17 09:08:35 +08:00

JhZ7z587cYROBgVQ

Jun 15, 2016

map(lambda name: os.popen('python {}.py').format(name), ['a', 'b', 'c']) 这样子？感觉比较挫，坐等楼下的好办法

just4test

Jun 15, 2016

import os
os.system('a.py')
os.system('b.py')

为什么不用配置文件呢？
a.py a.config b.config c.config 。。。。。。。

Neagle

Jun 15, 2016

@just4test 非常感谢，主要是不会用配置文件啊，我刚啃完 Python 学习手册，没见着这部分内容。汗...

fohnwind

Jun 15, 2016

@Neagle parseconfig 这个库

maowu

Jun 15, 2016

用__import__()这个函数如何？把每个爬取文件作为库动态导入。

ryanking8215

Jun 16, 2016

难道不是 a.py, b.py, c.py 使用 `if name==__main__'作为独立运行，再有个`all.py` import a, b, c ，调用模块接口吗？

ZoomQuiet

Jun 16, 2016

import them all as one work line
or just usage bash

Neagle

Jun 16, 2016

@ryanking8215 非常感谢，麻烦再说详细点，新手，还有点看不懂，谢谢。

ryanking8215

Jun 17, 2016

@Neagle 假设`a.py`里有`crawl_v2ex()`的函数, 有`if __name__=='__main__': crawl_v2ex()`，表示`a.py`文件单独运行时执行的内容。也可以有`all.py`文件，里面`import a`, 然后就可以调用`a.crawl_v2ex()`，同理可用于 b 和 c 。

最简单的还是用 sh 写个脚本，不就都跑起来了。

#!/bin/sh

python a.py
python b.py
python c.py