爬虫
用python最爬虫比较方便的框架有scrapy,还有一个国人开发的pyspider。当然,对于一些比较简单的请求,用requests即可,杀鸡焉用牛刀。框架的话scrapy是比较全面的,解耦也做得比较好,做大型爬虫如果你对settings文件中的每一个选项都了解透彻的话,可以利用scrapy框架写出很好的项目代码,至少我之前在网易实习的时候项目都是用scrapy写的。
web开发
web开发方面的python框架有django、flask、tornado。三个框架各有各的好处。django开箱即用,文档丰富;flask拓展方便;tornado支持异步;如果是找工作为首位的话,推荐django,毕竟现在django的市场份额还是比较大的。如果是个人开发的话,建议用flask,几行代码就可以跑起来。
数据分析
数据分析方面,numpy和pandas是必备的,然后还可以用pyecharts去制作图表。总而言之,用python去进行数据分析可以更加自由灵活的去实现你想实现的功能。
其他方面诸如人工智能、大数据因为没接触过,不好高谈论阔,欢迎其他小伙伴补充。