基于python的it岗位就业数据的收集与分析.docx

基于Python的IT岗位就业数据的收集与分析

摘要

随着和互联网的发展和技术的发展，搜索引擎已经成为人们生活中的必需品，但是由于网络信息的爆炸式的增长，信息的查找和定位也变得越来越困难，网络上的IT相关岗位越来越多，但标题大多相近，如要确定该岗位的具体工作职责，使用的技术栈等，均需要用户手动查看详情，分析后才得知结果，造成了岗位检索的效率低效。

为解决IT岗位就业信息多而乱、获取就业信息的时间成本高昂的问题，提出通过网络爬虫进行就业信息收集，使用python及其aiohttp库与asyncio库为主要工具，对相关平台进行数据获取与筛选并分析，以减少人工操作由机器替代检索的过程为实