期刊文献+
共找到212篇文章
< 1 2 11 >
每页显示 20 50 100
基于Python的青海西宁房价分析与可视化
1
作者 李生霞 冯桂莲 《科技创新与生产力》 2025年第5期38-42,共5页
文章通过爬虫技术收集了近3年青海省西宁市的房价数据,并进行了可视化分析,这不仅让数据更直观,便于分析,还提升了决策的效率和准确性,促进了信息的共享和交流。通过这种方式,复杂数据被转化为易于理解的图表,大大节省了分析时间,并使... 文章通过爬虫技术收集了近3年青海省西宁市的房价数据,并进行了可视化分析,这不仅让数据更直观,便于分析,还提升了决策的效率和准确性,促进了信息的共享和交流。通过这种方式,复杂数据被转化为易于理解的图表,大大节省了分析时间,并使关键信息的识别更加迅速。此外,可视化分析还帮助工作人员及时发现数据中的异常或趋势变化,从而及时应对,具有很大的实际应用价值。 展开更多
关键词 python 爬虫技术 数据分析 数据可视化
在线阅读 下载PDF
Python环境下的JavaScript逆向技术分析
2
作者 魏霞 《微型电脑应用》 2025年第9期267-269,277,共4页
在数据下载和网络爬虫领域,经常会遇到各种问题,如难以理解网页代码、无法破解数据加密方式等。为了解决这些问题,运用JavaScript逆向技术,结合某售房网站的实例,使用排错法和断点调试技术对数据加密问题进行深入分析,得到可用数据。结... 在数据下载和网络爬虫领域,经常会遇到各种问题,如难以理解网页代码、无法破解数据加密方式等。为了解决这些问题,运用JavaScript逆向技术,结合某售房网站的实例,使用排错法和断点调试技术对数据加密问题进行深入分析,得到可用数据。结果表明,运用JavaScript逆向技术后爬虫效果(获取数据)得到明显提升,模拟参数解密方式也取得了成功。 展开更多
关键词 网络爬虫 JavaScript逆向技术 python 数据加密
在线阅读 下载PDF
基于Python爬虫技术的智能法拍计算工具
3
作者 吴晓涵 王雪静 刘扬 《信息与电脑》 2025年第6期30-32,共3页
随着法拍涉税业务的增长,税务机关的监管工作面临挑战,且现有处理方式存在诸多问题。为此,文章提出了一款基于Python爬虫技术的智能法拍计算工具。该工具可自动从互联网公共数据中采集法拍事项,自动进行税额计算,展示计算步骤及相关税... 随着法拍涉税业务的增长,税务机关的监管工作面临挑战,且现有处理方式存在诸多问题。为此,文章提出了一款基于Python爬虫技术的智能法拍计算工具。该工具可自动从互联网公共数据中采集法拍事项,自动进行税额计算,展示计算步骤及相关税收政策,并通过多税种结果展示和自动生成Excel表格实现自动归档。此工具实现了法拍信息互联网采集、计税自动化和数据可视化等功能,解决了法拍事项采集途径单一、分析依赖人工、机外流转以及碎片化管理等问题。 展开更多
关键词 python爬虫技术 法拍事项 智能计算工具
在线阅读 下载PDF
基于Python的图书信息爬取与可视化应用研究
4
作者 梁玉清 《无线互联科技》 2025年第11期46-50,共5页
随着信息技术的发展,图书信息的快速获取与分析成为图书管理与推荐系统的重要需求。为实现高效、低成本的数据收集与整理,文章以国内知名图书平台为实证对象,设计并实现了一种基于Python的图书信息爬取与可视化方法。通过编写爬虫脚本,... 随着信息技术的发展,图书信息的快速获取与分析成为图书管理与推荐系统的重要需求。为实现高效、低成本的数据收集与整理,文章以国内知名图书平台为实证对象,设计并实现了一种基于Python的图书信息爬取与可视化方法。通过编写爬虫脚本,自动获取并存储大量图书信息至本地Excel表格,利用可视化技术从微观和宏观2个角度分析数据:微观层面揭示单一变量的分布规律,宏观层面提取整体统计特征。研究结果表明,该方法能够为特定类型或具体图书信息的定量分析和整理提供支持,具有较高的实用性与可行性。因此,基于Python技术的图书信息爬取与可视化方法是一种有效的数据获取与分析手段,为图书资源管理与决策提供了科学依据。 展开更多
关键词 python 爬虫 图书信息 可视化研究
在线阅读 下载PDF
基于Python爬虫的招聘信息可视化分析
5
作者 张乐 王自一 谢毅 《电脑与信息技术》 2025年第3期84-88,共5页
随着网络招聘的发展,广大毕业生面对众多的招聘网站,出现了招聘信息数量繁杂、无法快速筛选所需信息和选择正确信息等问题。针对这些问题,基于Python爬虫技术获取招聘相关数据,经数据处理后对招聘信息数据进行可视化分析,使用Matplotlib... 随着网络招聘的发展,广大毕业生面对众多的招聘网站,出现了招聘信息数量繁杂、无法快速筛选所需信息和选择正确信息等问题。针对这些问题,基于Python爬虫技术获取招聘相关数据,经数据处理后对招聘信息数据进行可视化分析,使用Matplotlib和Wordcloud等库绘制岗位数量对比直方图、岗位来源饼图、平均薪资直方图和岗位能力要求词云图,并做以分析。结果表明,计算机、工商管理、土木工程可作为就业首选,民营和国营企业对人才需求量大,计算机专业平均薪资最高且岗位对专业能力要求高等。该研究有助于毕业生求职者快速筛选出自己心仪的职位,从而为广大毕业生提供参考。 展开更多
关键词 python 网络爬虫 数据可视化
在线阅读 下载PDF
Python网络爬虫技术在信息安全监测中的应用与防范策略
6
作者 胡红玲 《信息与电脑》 2025年第12期152-154,共3页
为探讨Python网络爬虫技术在信息安全监测时的应用与防范手段,文章采取技术特点分析和典型应用场景分析相配合的途径,探讨了其在网络舆情把控、威胁情报汇聚和异常行为监测中的实际效能,剖析滥用造成的安全漏洞及防范办法。Python网络... 为探讨Python网络爬虫技术在信息安全监测时的应用与防范手段,文章采取技术特点分析和典型应用场景分析相配合的途径,探讨了其在网络舆情把控、威胁情报汇聚和异常行为监测中的实际效能,剖析滥用造成的安全漏洞及防范办法。Python网络爬虫借助技术优势,提升了信息安全监测效率,但需利用反爬虫机制、数据加密与法律规范等多维度策略,有效避开潜在风险。 展开更多
关键词 python网络爬虫 信息安全 安全监测 防范策略
在线阅读 下载PDF
基于Python语言的计算机专业招聘信息的爬取及分析 被引量:5
7
作者 王彩玲 许欣黎 《现代信息科技》 2024年第16期88-92,97,共6页
文章对计算机专业的招聘信息进行了研究,通过使用Python爬虫定向抓取拉勾网中的各种招聘资料和信息数据,结合职业要求、学历要求等相关基础条件,合理分析某一具体职业的具体状况,并将所得的分析数据结果进行可视化展示。报告了计算机相... 文章对计算机专业的招聘信息进行了研究,通过使用Python爬虫定向抓取拉勾网中的各种招聘资料和信息数据,结合职业要求、学历要求等相关基础条件,合理分析某一具体职业的具体状况,并将所得的分析数据结果进行可视化展示。报告了计算机相关专业就业现状,帮助计算机专业学生对未来的就业岗位和对应岗位所需要的专业知识有一个基本的认知,帮助他们有针对性地提高自身的专业能力和综合素养,以培养既懂技术又具备工作能力的复合型计算机人才。 展开更多
关键词 python语言 网络爬虫 可视化 招聘信息处理 人才培养
在线阅读 下载PDF
基于Python的多线程网络爬虫系统的研究与实现 被引量:4
8
作者 刘莹 《无线互联科技》 2024年第14期44-46,共3页
网络爬虫是通过编写程序模拟浏览器访问服务器、获取目标数据的方法。在大数据环境下,爬虫速度成为影响网络爬虫性能的重要评价条件之一。Python语言因其丰富的第三方库,被广泛应用于网络爬虫及数据分析等场景。文章基于Python编程语言... 网络爬虫是通过编写程序模拟浏览器访问服务器、获取目标数据的方法。在大数据环境下,爬虫速度成为影响网络爬虫性能的重要评价条件之一。Python语言因其丰富的第三方库,被广泛应用于网络爬虫及数据分析等场景。文章基于Python编程语言,以提高网络爬虫速度为目的,探讨实现网络爬虫速度提升的方案,并以某网站智能图片爬取为例实现多线程爬虫系统。 展开更多
关键词 python技术 网络爬虫 大数据 多线程
在线阅读 下载PDF
基于Python爬虫的豆瓣TOP250电影数据分析与可视化研究 被引量:4
9
作者 王晨 《现代信息科技》 2024年第16期93-97,共5页
随着互联网技术的发展,传统的只根据榜单数据进行电影筛选的方式已经不能满足消费者的需求。基于Python实现了豆瓣网站TOP250电影数据爬虫,调用Requests下载网页并使用Beautifulsoup进行网页解析,利用PyeCharts等技术进行数据可视化分析... 随着互联网技术的发展,传统的只根据榜单数据进行电影筛选的方式已经不能满足消费者的需求。基于Python实现了豆瓣网站TOP250电影数据爬虫,调用Requests下载网页并使用Beautifulsoup进行网页解析,利用PyeCharts等技术进行数据可视化分析,将数据以图表的形式展现,以让消费者更清晰地看到热门电影数据特征,为消费者选择电影提供参考依据。通过可视化分析发现,电影的评分与评论人数无正相关性。 展开更多
关键词 python 爬虫 豆瓣 数据可视化
在线阅读 下载PDF
Python爬虫技术在学术聚合系统中的应用 被引量:3
10
作者 崔梦银 邓茵 刘满意 《现代信息科技》 2024年第10期68-74,共7页
爬虫技术是搜索引擎和信息网站获取数据的核心技术之一,专用的网络爬虫能够在短时间内从网络上抓取大量有用数据。基于为研究者提供所需学术资源的目的,研究了爬虫技术在爬取学术网站论文数据中的应用。分析了Python爬虫技术在学术聚合... 爬虫技术是搜索引擎和信息网站获取数据的核心技术之一,专用的网络爬虫能够在短时间内从网络上抓取大量有用数据。基于为研究者提供所需学术资源的目的,研究了爬虫技术在爬取学术网站论文数据中的应用。分析了Python爬虫技术在学术聚合系统中的应用,借助大数据技术手段对所爬取的学术数据进行存储、清洗、聚合、消歧和融合。Python爬虫技术在学术聚合系统中起着关键作用,助力研发人员构建强大的数据聚合和分析平台,为学术研究人员提供有价值的信息资源,对学术研究、文献检索和信息发现都具有重要意义。 展开更多
关键词 python爬虫 学术资源 大数据技术 学术聚合系统
在线阅读 下载PDF
基于Python的网易云音乐评论数据分析系统的设计与实现 被引量:2
11
作者 华康民 殷旭颂 《现代信息科技》 2024年第24期72-76,共5页
网易云音乐评论数据作为用户对音乐作品的直接反馈,蕴含着丰富的信息价值。文章使用Python爬虫技术对评论数据进行采集,将采集的数据结果存储到SQLite数据库中,通过使用Python第三方库对评论数据进行处理和分析,使用Python的Flask框架搭... 网易云音乐评论数据作为用户对音乐作品的直接反馈,蕴含着丰富的信息价值。文章使用Python爬虫技术对评论数据进行采集,将采集的数据结果存储到SQLite数据库中,通过使用Python第三方库对评论数据进行处理和分析,使用Python的Flask框架搭建Web应用,实现评论数据的动态可视化展示。通过对网易云音乐评论数据深入挖掘,可以了解用户对不同歌曲评价、情感倾向、热门话题等信息,为音乐推荐系统的优化和舆情监测提供科学依据。此外,在数据可视化方面,网易云音乐评论数据分析系统采用了多种图表形式,如柱状图、饼图和词云图等,直观地展示分析结果。通过这些图表,用户可以轻松地了解评论数据的分布情况、趋势变化等信息。 展开更多
关键词 网易云音乐 python爬虫 情感分析
在线阅读 下载PDF
基于Python的房源信息大数据分析和可视化 被引量:3
12
作者 闫梦婷 《信息与电脑》 2024年第5期46-48,52,共4页
二手房市场是我国房地产市场的重要组成部分,买卖双方在交易中都希望能够了解各类信息。文章采用Python作为编程语言,爬取上海二手房市场的房源信息进行大数据分析,并通过Python的可视化库,将分析结果以直观的图表形式展示出来。该方法... 二手房市场是我国房地产市场的重要组成部分,买卖双方在交易中都希望能够了解各类信息。文章采用Python作为编程语言,爬取上海二手房市场的房源信息进行大数据分析,并通过Python的可视化库,将分析结果以直观的图表形式展示出来。该方法具有较好的拓展性,可以应用于其他领域的数据分析和可视化工作。 展开更多
关键词 房源 网络爬虫 python 大数据 可视化
在线阅读 下载PDF
基于Python的全国旅游信息统计网站数据抓取研究 被引量:3
13
作者 郭晨灏 柳箐 +3 位作者 姜澳 赵美娇 徐子薇 王博 《电脑与信息技术》 2024年第5期71-74,90,共5页
伴随网络信息时代的发展,网民人数持续增加,人们可以通过各种方式查找信息,但数据量太大导致获取个性化信息变得困难,耗时变长。基于此,借助Python爬虫技术,采用Scrapy框架,创建针对旅游信息的数据抓取项目。主要介绍了爬取数据的基本流... 伴随网络信息时代的发展,网民人数持续增加,人们可以通过各种方式查找信息,但数据量太大导致获取个性化信息变得困难,耗时变长。基于此,借助Python爬虫技术,采用Scrapy框架,创建针对旅游信息的数据抓取项目。主要介绍了爬取数据的基本流程,给出了爬取数据的具体实例,对爬取数据的持久化存储进行了相关论述。 展开更多
关键词 python语言 旅游网站 数据爬虫
在线阅读 下载PDF
基于Python网络爬虫技术的国内古树公园现状研究 被引量:1
14
作者 夏甜甜 郭敏 《园林》 2024年第12期118-125,共8页
建设古树公园是一项重要的古树保护措施,在平衡古树保护和人民利益的矛盾方面具有重要的作用。通过Python网络爬虫技术,系统调查国内古树公园现状,对国内古树公园的现状包括地理分布、建设要求、存在的问题进行分析。近5年中国古树公园... 建设古树公园是一项重要的古树保护措施,在平衡古树保护和人民利益的矛盾方面具有重要的作用。通过Python网络爬虫技术,系统调查国内古树公园现状,对国内古树公园的现状包括地理分布、建设要求、存在的问题进行分析。近5年中国古树公园数量显著增加,古树公园建设主要分布在浙江、广东、山东、四川等古树资源丰富和历史悠久的地区,在空间上的聚集程度较高,整体分布不均,其中大部分位于乡镇。古树公园中的古树树种基本符合中国物种分布规律,北方地区的古树种类较为稀少,主要包括国槐、银杏和侧柏等树种;而南方地区的古树种类则相对丰富,其中香樟、银杏和榕树尤为突出。目前国内古树公园还存在相关法律法规不完善、缺少专业的设计理念和规划、开发主体单一等问题,针对古树公园现有问题提出对策,并展望未来研究方向和发展趋势。 展开更多
关键词 python网络爬虫 古树公园 历史文化 风景园林 古树保护 建设
在线阅读 下载PDF
基于Python的佛山市青年住房数据可视化分析
15
作者 黄鹏 刘贤丽 姚庚梅 《移动信息》 2024年第10期297-299,共3页
佛山市经济的快速发展带动了青年群体常住人口的快速增长,但也导致住房成本逐渐增加。文中利用Python爬虫技术爬取了佛山市青年住房市场数据,进行了数据可视化分析。研究发现,佛山市青年面临较高的住房成本和保障性房源不足的问题。对此... 佛山市经济的快速发展带动了青年群体常住人口的快速增长,但也导致住房成本逐渐增加。文中利用Python爬虫技术爬取了佛山市青年住房市场数据,进行了数据可视化分析。研究发现,佛山市青年面临较高的住房成本和保障性房源不足的问题。对此,文中提出了增加住房供给、改善住房资源结构、优化租房市场环境等建议,旨在提升青年住房的可负担性和居住品质。 展开更多
关键词 python 爬虫技术 青年住房 数据可视化分析
在线阅读 下载PDF
基于Python爬虫的阜阳二手房数据可视化分析
16
作者 黄昂 杨旭 +1 位作者 周婷 朱琪 《计算机应用文摘》 2024年第19期179-180,183,共3页
以阜阳市二手房市场为例,文章首先利用Python爬虫技术从“58同城”二手房交易网站爬取了阜阳三区五县的在售二手房数据,随后对爬取的数据进行了清洗及预处理,旨在确保数据的准确性和可用性,接着应用Python语言及多种可视化工具对清洗后... 以阜阳市二手房市场为例,文章首先利用Python爬虫技术从“58同城”二手房交易网站爬取了阜阳三区五县的在售二手房数据,随后对爬取的数据进行了清洗及预处理,旨在确保数据的准确性和可用性,接着应用Python语言及多种可视化工具对清洗后的数据进行了多维度分析,以揭示阜阳市二手房市场的区域差异、价格分析及热门户型等关键信息,为潜在二手房购买者与房地产交易从业者提供了决策支持。 展开更多
关键词 python爬虫 数据清洗 可视化分析 二手房市场 阜阳市
在线阅读 下载PDF
基于Python的网络爬虫设计与数据采集方法研究
17
作者 陶冯炜 陈哲瀚 《智能城市应用》 2024年第12期123-125,共3页
随着信息技术的快速发展,网络爬虫在数据采集和处理领域中扮演着越来越关键的角色。文章详细探讨了基于Python的网络爬虫设计方法与数据采集技术,着重分析了爬虫架构的构建、数据解析、存储方案以及避免反爬措施的策略。此外,还评估了... 随着信息技术的快速发展,网络爬虫在数据采集和处理领域中扮演着越来越关键的角色。文章详细探讨了基于Python的网络爬虫设计方法与数据采集技术,着重分析了爬虫架构的构建、数据解析、存储方案以及避免反爬措施的策略。此外,还评估了不同爬虫技术的效率与应用范围,通过案例研究展示了这些技术在实际环境中的应用效果和挑战。 展开更多
关键词 网络爬虫 python 数据采集 反爬技术 数据解析
在线阅读 下载PDF
广西非遗文化知识图谱构建与数据处理研究 被引量:1
18
作者 张涛 周卫 《智能计算机与应用》 2025年第3期72-78,共7页
非物质文化遗产代表着地区文化历史的沉淀,是中华优秀传统文化的重要组成部分,也是人类文明的宝贵财富,具有无可替代的历史文化价值。对于维护文化多样性来说,保护和传承非物质文化遗产至关重要。然而,在当前网络环境下,广西的非物质文... 非物质文化遗产代表着地区文化历史的沉淀,是中华优秀传统文化的重要组成部分,也是人类文明的宝贵财富,具有无可替代的历史文化价值。对于维护文化多样性来说,保护和传承非物质文化遗产至关重要。然而,在当前网络环境下,广西的非物质文化遗产信息存在着杂乱无章、结构不清晰的问题。针对此问题,通过采用Python爬虫技术,对广西非物质文化遗产信息进行了系统采集,通过应用自然语言处理模型、特别是命名实体识别和关系抽取技术,能够将其中的非结构化信息转化为结构化数据,随后对这些数据进行了全面整理和清洗。最终,运用知识图谱技术的强大信息整合和表示能力,成功构建出一个结构清晰的广西非物质文化遗产知识图谱。 展开更多
关键词 知识图谱 python爬虫 命名实体识别 关系抽取 Neo4j图数据库 RoBERTa
在线阅读 下载PDF
基于Python语言的罗技设备数据可视化系统
19
作者 张智浩 鞠爽爽 《南通职业大学学报》 2024年第1期77-80,共4页
为了给用户匹配罗技设备提供数据参考,基于Python语言开发了罗技设备数据可视化系统。通过爬虫算法爬取罗技设备的官网数据,运用“Vue+Django+MySQL”技术栈完成可视化系统的开发;以用户为核心设计系统功能,允许用户直观浏览电子产品和... 为了给用户匹配罗技设备提供数据参考,基于Python语言开发了罗技设备数据可视化系统。通过爬虫算法爬取罗技设备的官网数据,运用“Vue+Django+MySQL”技术栈完成可视化系统的开发;以用户为核心设计系统功能,允许用户直观浏览电子产品和罗技设备的相关数据,且支持用户进行评论、收藏等互动操作。实践表明,该系统不仅可为用户选择罗技设备提供有效的数据参考,也可为罗技设备市场及用户行为等数据分析提供平台。 展开更多
关键词 罗技设备 数据爬虫 可视化系统 数据分析 python语言
在线阅读 下载PDF
针对北京旅游景点的评论文本情感标注数据集 被引量:4
20
作者 朱登赟 万福成 +2 位作者 国旗 张东娇 于洪志 《中国科学数据(中英文网络版)》 2025年第1期453-462,共10页
在旅游业高速发展背景下,潜在出行用户想在大量信息中寻找合适的旅游景点不仅耗费时间且缺乏可信度。各类旅游平台的用户评论具有很高的参考价值,本研究基于携程网提取北京部分旅游景点评论文本,通过文本爬取、文本预处理、文本情感倾... 在旅游业高速发展背景下,潜在出行用户想在大量信息中寻找合适的旅游景点不仅耗费时间且缺乏可信度。各类旅游平台的用户评论具有很高的参考价值,本研究基于携程网提取北京部分旅游景点评论文本,通过文本爬取、文本预处理、文本情感倾向标注过程,制作了北京部分旅游景点评论文本情感数据集。实验所爬取旅游景点评论文本数据量为5万条。通过与用户在线查看旅游评论对比验证表明,本数据集具有较高可靠性。本数据集可为做旅游数据文本的情感分析提供数据支撑。 展开更多
关键词 旅游景点 情感分析 评论文本 python爬虫技术
在线阅读 下载PDF
上一页 1 2 11 下一页 到第
使用帮助 返回顶部