前言：
如今兄弟们对“python爬虫mooc”可能比较关注，我们都需要了解一些“python爬虫mooc”的相关文章。那么小编也在网摘上网罗了一些对于“python爬虫mooc””的相关内容，希望小伙伴们能喜欢，咱们快快来学习一下吧！前段时间安装了一个慕课网app,发现不用注册就可以在线看其中的视频,就有了想爬取其中的视频，用来在电脑上学习。决定花两天时间用学了一段时间的python做一做。我使用的是pycharm进行开发,使用BeautifulSoup模块解析html,整个代码进行了比较详细的注释。
----entity
--------__init__.py
--------fileinfor.py用来描述视频文件信息
----filedeal
--------__init__.py
--------file_downloader.py用于视频文件的下载
----spider 爬虫的核心内容
--------__init__.py
--------html_downloader.py html下载器
--------html_parser.py html解析器
--------spiderman.py 爬虫核心逻辑
----test test文件夹主要是用来测试一些用例,不参与整个程序运行
----conf.py 一些全局变量
----index.py 程序启动入口
运行环境:
python 2.7.X
需要安装的支持模块:
BeautifulSoup (pip install或者下载源代码包setup.py),下载链接:
运行:在windows上直接双击start.bat,linux上没试
现在将程序运行起来,双击start.bat:
输入课程号，选择视频品质:
等到显示100%时，会将视频下载到当前目录下
版权声明：
本站文章均来自互联网搜集，如有侵犯您的权益，请联系我们删除，谢谢。
标签： #python爬虫mooc
