python爬虫筛选工作实例讲解

作者:小妮浅浅 时间:2023-12-01 19:59:26 

我们在选择一件商品的时候,会先了解一些相关的商品信息,根据自己的需求和情况再进行选择。这种现象也同样适用于找工作,筛选一个岗位的重要环节,就是看自身是否符合工作经验的要求。不过因为信息量比较大,有没有什么方法可以用python爬虫中的知识点帮我们解决一下呢~具体内容往下看:

根据工作经验年限,划分招聘等级


# 校正拉勾网工作年限描述,以 Boss直聘描述为准
def update_lagou_workyear():
 items = db.jobs_lagou_php.find({})
 for item in items:
   if item['workYear'] == '应届毕业生':
     item['workYear'] = '应届生'
   elif item['workYear'] == '1年以下':
     item['workYear'] = '1年以内'
   elif item['workYear'] == '不限':
     item['workYear'] = '经验不限'
   update_lagou(item)
 print('ok')
# 设置招聘的水平,分两次执行
def set_level():
 items = db.jobs_zhipin_php.find({})
 # items = db.jobs_lagou_php.find({})
   if item['workYear'] == '应届生':
     item['level'] = 1
   elif item['workYear'] == '1年以内':
     item['level'] = 2
   elif item['workYear'] == '1-3年':
     item['level'] = 3
   elif item['workYear'] == '3-5年':
     item['level'] = 4
   elif item['workYear'] == '5-10年':
     item['level'] = 5
   elif item['workYear'] == '10年以上':
     item['level'] = 6
   elif item['workYear'] == '经验不限':
     item['level'] = 10
   update(item)
print('ok')

这里有点坑的就是,一般要求经验不限的岗位,需求基本都写在任职要求里了,所以为了统计的准确性,这个等级的数据,后面会被舍弃掉。

从后续的平均数据来看,这里的经验不限,一般要求的是1-3年左右,但是还是建议舍弃掉。

拉勾网的职位描述和 Boss直聘稍有不同,需要先校正,然后再设置等级

实例扩展:

python实现图片筛选程序


#_*_coding:utf-8_*_
'''
Version V17.1.0
Date 2017-10-15
@Author Cheney
'''

# 收集EL 图片集中需要的图片,在elpick目录下进行

from PIL import Image
import csv
import os

# 获取需要图片的文件名
def readImageName():
# 在elpick目录下读取sn.scv文件,该文件读取出来后元素是list 需要转换为str
get_csv = csv.reader(open("elpick/sn.csv"))
origSN = []
transSN = []
for sn in get_csv:
 origSN.append(sn)
tempList = origSN

# 读取csv文件获时获取到的列表,其元素也是列表,需要将其转换为字符串元素,使用下面for语句实现
for s in tempList:
 # 去掉列表元素中的[''] 这几个字符
  s = str(s).strip('[\'')
 s = str(s).strip('\']')
transSN.append(s)
ImageName = transSN
return ImageName

pickImageName = readImageName()
# 遍历所有图片集的文件名
for image in os.listdir("elpick/original_el"):
# 将读取到的文件名进行处理,去扩展名,若是int文件名需要对文件名进行int 处理
imageName = image.strip(".jpg")

# 比较判断 若遍历的文件名在需要收集的列表中,读取之后并保存到pick_el文件夹下
if imageName in pickImageName:
 pickImage = Image.open(('elpick/original_el/%s.jpg') % imageName)
 pickImage.save(("elpick/picked_el/%s.jpg") % imageName)

来源:https://www.py.cn/jishu/jichu/21132.html

标签:python爬虫,筛选工作
0
投稿

猜你喜欢

  • python格式化字符串实例总结

    2023-09-01 04:36:11
  • mysql基础教程:安装与操作

    2009-07-30 08:18:00
  • MySQL8重置root账户密码图文教程超详细讲解

    2024-01-25 17:40:55
  • JS求解三元一次方程组值的方法

    2024-05-02 17:39:00
  • JavaScript实现简单图片轮播效果

    2024-04-22 13:02:05
  • Python函数之zip函数的介绍与实际应用

    2022-06-02 00:52:51
  • OpenCV视频流Python多线程处理方法详细分析

    2022-02-14 20:29:45
  • MySQL性能优化的最佳20+条经验

    2024-01-27 15:25:06
  • vue中对象数组去重的实现

    2024-04-27 16:18:27
  • Ubuntu上mysql的安装及使用(通用版)

    2024-01-23 04:52:43
  • 利用Python实现图书超期提醒

    2021-03-25 18:58:05
  • python标准库OS模块详解

    2022-08-21 21:47:06
  • FrontPage XP设计教程1——站点初建与管理

    2008-10-11 12:13:00
  • PHP json_encode中文乱码解决方法

    2023-07-12 20:20:14
  • DB为何大量出现select @@session.tx_read_only 详解

    2024-01-15 15:26:15
  • 在Lighttpd服务器中运行Django应用的方法

    2021-08-05 20:19:50
  • python用pandas数据加载、存储与文件格式的实例

    2021-09-05 03:44:47
  • 将备份的SQLServer数据库转换为SQLite数据库操作方法

    2024-01-23 18:52:52
  • SQL中where语句的用法及实例代码(条件查询)

    2024-01-17 22:37:16
  • python中如何打包用户自定义模块

    2022-12-25 11:22:53
  • asp之家 网络编程 m.aspxhome.com