Spark & Shine

spark me up, and shine my surroundings

Skip to content
  • Home
  • Contiki OS
  • The ONE
  • DA
  • About Me
  • Guest Book
  • More
    • Qiankun SU
    • Network Coding
    • Stack Overflow
    • Old Blog
    • Zhili Tea
    • Donation
  • English
    • 中文 中文

Month: August 2020

爬虫与反爬:使用代理proxy

2020-08-30 Updated: 2021-02-08 2K

使用同一个IP地址频繁抓取数据,IP容易被封。可以使用代理解决这个问题。

Read more →

Data Analysis proxy, 代理, 反爬, 爬虫 Leave a comment

爬虫与反爬:使用用户代理User-agent

2020-08-28 Updated: 2021-02-08 1.4K

网页抓取机器人容易被服务器识别并拒绝提供服务,通过网页请求指定用户代理User-agent为浏览器,将爬虫伪装成浏览器访问,从而提升爬取成功率。

Read more →

Data Analysis fake-useragent, User Agent, 反爬, 爬虫, 用户代理 Leave a comment

Donation

ABC Pay QRcode

Have tea?

Zhili Tea WeChat Public QRcode

Categories

Tag Cloud

VPN 会议 安装 EC2 MySQL 迦太基 wordpress PageRank 网络编码 The ONE 发音规则 代数 Eclipse Java awk Latex ns3 消息 使用笔记 NetworkX AWS 爬虫 Packet Tracer 域名 matplotlib 英语 词以类记 整理 布匿战争 法语 GTFS 目录 MessageEventGenerator application notes Ubuntu 地缘看世界 Python 数据集 法国 罗马 DTN 代码高亮 beamer Markdown 基本语法

Recent Comments

  • SparkAndShine on 留言
  • 唐怡 on 历史时间轴(中国、欧洲、世界)
  • peter on 留言
  • SparkAndShine on 优先级调度、优先级反转、优先级继承、优先级天花板
  • SparkAndShine on The ONE使用笔记:读取外部事件存在BUG

Popular

  • 历史时间轴(中国、欧洲、世界) (181.7K)
  • 解决“The requested URL was not found on this server” (83.7K)
  • The ONE使用笔记:目录 (55.6K)
  • 《圆桌派》片尾曲 (53.5K)
  • WordPress目录下产生一堆随机文件 (52K)
  • 代数结构入门:群、环、域、向量空间 (38.1K)
Based on WordPress and Radiate | Total views: 1,519,787 | Total posts: 305