值得关注的互联网行业趋势
2022-05-06 16:40:28
  • 0
  • 0
  • 0

持续不断的疫情让大多数公司的招聘需求缩减,并且很多的公司人才招聘要求愈来愈高!确实疫情以来的经济状况不好,但是我们要搞清楚一个现实,那就是:企业不是不招人了,而是更想要招到专业能力水平高的人才!如果大家能看到新趋势和行业前景,及时抓住时机说不定也能弯道超车。

今天我们就利用爬虫抓取某招聘网站近几年的招聘需求来分析下,大公司的招聘需求是如何需求越来越高的。目标网站我们就以https://www.zhipin.com/为数据来源,但是这个网站并不是很好采集,反爬机制比较严,需要我们的爬虫程序做好,并且做了反爬措施(包括随机ua,cookie,爬虫代理IP)。尤其是爬虫代理IP的需求比较高,这里推荐高质量的亿牛云代理,自营线路,IP速度快,延迟低。具体的数据获取实现方式如下示例:

#! -*- encoding:utf-8 -*-

import requests

import random

# 要访问的目标页面

targetUrl = "http://httpbin.org/ip"

# 要访问的目标HTTPS页面

# targetUrl = "https://httpbin.org/ip"

# 代理服务器(产品官网 www.16yun.cn)

proxyHost = "t.16yun.cn"

proxyPort = "31111"

# 代理验证信息

proxyUser = "username"

proxyPass = "password"

proxyMeta = "http://%(user)s:%(pass)s@%(host)s:%(port)s" % {

"host" : proxyHost,

"port" : proxyPort,

"user" : proxyUser,

"pass" : proxyPass,

}

# 设置 http和https访问都是用HTTP代理

proxies = {

"http" : proxyMeta,

"https" : proxyMeta,

}

# 设置IP切换头

tunnel = random.randint(1,10000)

headers = {"Proxy-Tunnel": str(tunnel)}

resp = requests.get(targetUrl, proxies=proxies, headers=headers)

print resp.status_code

print resp.text

从获取的近千份数据进行分析,有一个重要发现——越来越多的企业重视 “ 数据分析 ” 这一技能。具体表现在这两点。1、“数据分析师” 招聘需求旺盛,并且薪资待遇近几年来不断走高。2、 除了数据分析师专业岗之外,产品、运营、市场等大类下的细分岗位,也开始要求应聘者具备数据分析能力。了解这个趋势后, 如果对这方面感兴趣的童鞋可以研究下哦。

 
最新文章
相关阅读