2、网站编码问题，特别是正则表达式的编码要和网页编码相一致(特别是re搜索中文的时候);
3、连接并打开网页是否成功?不成功应当怎么处理?
4、有一些网页内容可能是通过ajax动态加载的，这可能就需要额外的解决方案了(比如selenimum, phantomJS等等) 。
5、有时为了提高抓取效率需要进行多线程扩充，这就涉及到Queue、multithreading等许多额外的库了 。

• 大家都在刷“张同学”，到底刷的是什么？
• 赵立坚：美国选总统要花140亿美元 这算什么民主？
• 就聊十分钟|吉林越狱犯朱贤健逃亡41天经历了什么
• 日本将禁止所有海外旅客入境 “封国”到底是为什么？
• 替人提取公积金一小时到账？背后有什么猫腻？
• 从放烟花到弹钢琴，疫情防控的“温情”背后是什么
• 乡村振兴需要什么样的人才？乡村产业发展也需要CEO
• “迄今为止最糟糕的变异株”，Omicron的出现意味着什么
• 变异株Omicron的出现意味着什么？突变数量“前所未有”
• 新冠新变体＂奥密克戎＂引发什么症状？外国专家发声