最新公告
  • 年底活动:凡在本站购买过源码超过99元的老用户,可免费领取1张99元优惠券,用于抵扣开通会员!升级SVIP
  • 如何使用Python爬取BOSS职位薪酬?

     数据来源的一个重要途径就是爬虫,有了数据才能进行后续的数据分析和办公自动化。比如本期主题想找一份Python开发类工作,可以在BOSS直聘网上查找,薪酬在15-40k之间比比皆是。这种垂直类渠道网站比较有针对性,可以很快找到目标岗位的职位,分类也比较细。具体来看下实现方式。

    1、相关库的导入

    import time
    import csv
    from selenium import webdriver
    from lxml import etree
    import random

    2、计算总页数

    try:
    next_page_tag = driver.find_element_by_xpath("//a[@class='next']")
    next_page_tag.click()
    flag = True
    time.sleep(3)
    except:
    flag = False
    print("如果没有找到,这里可以认为到了最后一页")

    3、匹配职位

    html = etree.HTML(page_source)
    info_links = html.xpath("//div[@class='job-list']/ul/li")
    print(info_links)
    for link in info_links:
    name = link.xpath(".//span[@class='job-name']/a/text()") 
    print(name)

    4、最终结果

    本章目标实现抓取“Python”的职位薪酬,并保存到CSV文件中。现已实现,大家如果有类似需求,可以自行尝试学习下哦~

    转载自:python学习网 https://www.py.cn/

    找互联网优质资源,上知事网!
    知事网 » 如何使用Python爬取BOSS职位薪酬?

    发表评论

    • 2177会员总数(位)
    • 1371资源总数(个)
    • 144本周发布(个)
    • 1 今日发布(个)
    • 3516稳定运行(天)

    提供最优质的资源集合

    Mac软件 Dedecms源码
    升级SVIP尊享更多特权立即升级