今天跟大家聊聊我这几天折腾的“EDG战队队员”这个事儿，一开始就是图个乐呵，想看看能不能把EDG现在的队员都扒拉出来，整理整理。
我打开了几个常用的电竞网站，像什么玩加电竞、虎扑之类的，开始手动搜索。一个一个队员的名字敲进去，看看能不能找到最新的名单。结果发现信息挺零散的，有的网站有，有的没有，而且版本还不太一样，有点晕。
后来我想，这样不行，太慢了！得想个更效率的法子。我就琢磨着能不能用爬虫，直接把网页上的信息抓下来。之前学过一点Python，就想着能不能拿来用用。于是我赶紧翻出以前的代码，开始对着改。安装requests库，然后分析网页结构，找队员名字和位置的标签，这步挺关键，找错了就白费功夫。
抓取数据的时候，发现有些网站的反爬机制还挺厉害，一会儿就给我ban了。我就想着加个代理IP池，换着IP来抓。这个代理IP也是个坑，免费的很多都用不了，要么太慢，要么直接连不上。还是花了点小钱，买了几个稳定的代理IP。
数据抓下来之后，还得清洗。网页上有很多乱七八糟的信息，得把队员的名字、位置、ID这些有用的东西提取出来。用正则表达式搞了好久，总算把数据整理干净了。
我把整理好的队员名单，按位置分了个类，上单、打野、中单、ADC、辅助，排了个队，还把他们的游戏ID、常用英雄啥的也加上了。搞完之后，感觉还挺有成就感的。虽然过程有点折腾，但是学到了不少东西。
目前的EDG战队队员大概是这样的：
- 上单：Ale、Solokill
- 打野：Jiejie、Monki
- 中单：Fisher
- ADC：Leave、Uzi
- 辅助：Meiko、Vampire
这回实践，让我更熟悉了Python爬虫，也知道了数据清洗的重要性。以后再遇到类似的需求，就能更快地搞定了。不过爬虫这东西，还是得小心点，别爬人家有版权的东西，也别给人家服务器造成太大压力，文明爬虫，人人有责。
