Python面试题

dumps,loads 与 dump,load 的区别？

Python爬虫

dumps,loads 与 dump,load 的区别？

json.dumps() 将 pyhton 的 dict 数据类型编码为 json 字符串 ...

271

为什么 requests 请求需要带上 header？

Python爬虫

为什么 requests 请求需要带上 header？

原因是：模拟浏览器，欺骗服务器，获取和浏览器一致的内容 header 的形式：字典 head...

448

robots 协议有什么用处？

Python爬虫

robots 协议有什么用处？

Robots 协议：网站通过 Robots 协议告诉搜索引擎哪些页面可以抓取，哪些页面不能抓...

246

代理 IP 里的“透明”“匿名”“高匿”分别是指？

Python爬虫

代理 IP 里的“透明”“匿名”“高匿”分别是指？

(1) 透明代理它的意思是客户端根本不需要知道有代理服务器的存在，但是它传送的仍然是真实的...

378

谈一谈你对 Selenium 和 PhantomJS 了解？

Python爬虫

谈一谈你对 Selenium 和 PhantomJS 了解？

Selenium 是一个 Web 的自动化测试工具，可以根据我们的指令，让浏览器自动加载页面...

493

动态加载又对及时性要求很高怎么处理？

Python爬虫

动态加载又对及时性要求很高怎么处理？

Selenium + Phantomjs，尽量不使用 sleep 而使用 WebDriver...

228

cookie 过期的处理问题？

Python爬虫

cookie 过期的处理问题？

因为 cookie 存在过期的现象，一个很好的处理方法就是做一个异常类，如果有异常的话 co...

492

爬的那些内容数据量有多大，多久爬一次，爬下来的数据是怎么存储？

Python爬虫

爬的那些内容数据量有多大，多久爬一次，爬下来的数据是怎么存储？

京东整站的数据大约在 1 亿左右，爬下来的数据存入数据库，mysql 数据库中如果有重复的 ...

346

13/26 上一页 10 11 12 13 14 15 16 下一页