履带起重机转台防变形工装优化设计与应用

1

作者 李长洲 李新群 +1 位作者 张鹏 田旭 《金属加工(热加工)》 2025年第2期74-76,82,共4页

针对履带起重机转台结构形式和焊接过程中易变形的特点,设计了一种转台防变形工装。该工装为组装式结构,结构简单,使用方便,容易操作,适用于不同吨位履带起重机产品,有效保证了转台生产质量,降低了工人劳动强度。

关键词 履带起重机 转台 防变形 工装

在线阅读 下载PDF 职称材料

基于PyTorch框架的不定长验证码抗干扰识别系统设计

2

作者 常荣 《微型电脑应用》 2025年第1期299-303,共5页

为了降低干扰信息对验证码识别效果的影响,提高不定长验证码的识别准确率,设计基于PyTorch框架的不定长验证码抗干扰识别系统。系统由采集模块、处理模块、识别模块三部分组成。采集模块利用网络爬虫获取验证码图像,并在图像处理模块中... 为了降低干扰信息对验证码识别效果的影响,提高不定长验证码的识别准确率,设计基于PyTorch框架的不定长验证码抗干扰识别系统。系统由采集模块、处理模块、识别模块三部分组成。采集模块利用网络爬虫获取验证码图像,并在图像处理模块中完成灰度化处理。调用全局阈值法对处理后的图像实施二值化操作,区分图像背景与字符。将采用滑动窗口法在去除噪声后的验证码图像中输入基于PyTorch框架的验证码识别模块,利用改进的ResNet-18网络提取图像特征后,通过长短期记忆网络模型获取字符序列特征,利用时序分类算法完成标签的对齐,实现对不定长验证码的抗干扰识别。实验结果表明,所设计系统可以有效实现对验证码图像的灰度化及去噪处理,并完成含不同程度干扰信息的不定长验证码的准确识别。 展开更多

关键词 PyTorch框架 验证码 抗干扰识别 网络爬虫 LSTM网络

在线阅读 下载PDF 职称材料

履带吊用超高强度NAT35(W)×K7-26.00 mm钢丝绳研制

3

作者 汪波 李教教 +1 位作者 金国飞 令狐新建 《金属制品》 2025年第2期1-4,共4页

35(W)×K7类抗旋转钢丝绳因具有良好的抗旋转性能而被应用于履带吊等高扬程吊装场所,根据客户技术要求,NAT35(W)×K7-26.00 mm超高强度履带吊钢丝绳破断拉力要求达到662 kN,相当于2360级,超过了YB/T 5359—2020《压实股钢丝绳... 35(W)×K7类抗旋转钢丝绳因具有良好的抗旋转性能而被应用于履带吊等高扬程吊装场所,根据客户技术要求,NAT35(W)×K7-26.00 mm超高强度履带吊钢丝绳破断拉力要求达到662 kN,相当于2360级,超过了YB/T 5359—2020《压实股钢丝绳》要求。针对客户要求进行了产品研制,通过优化钢丝绳工艺设计,优化钢丝拉拔、捻股、合绳等各工序生产工艺。研制出相当于2360级破断拉力的超高强度钢丝绳,实测破断拉力678 kN,高于技术要求的662 kN,钢丝绳实测直径26.68 mm,符合公差要求,捻制质量及各项技术性能指标满足要求。 展开更多

关键词 履带吊 钢丝绳 破断拉力 抗旋转 高扬程 捻制

在线阅读 下载PDF 职称材料

面向订票服务器端爬虫的可视检测方法研究 被引量：3

4

作者 吴向阳 陈万烤 +2 位作者 张祯 王程 刘宇 《计算机辅助设计与图形学学报》 EI CSCD 北大核心 2018年第1期20-29,共10页

恶意下载爬虫对电子商务造成了不可忽视的损失,为此设计了一套适用于各航空公司的通用查订票爬虫检测系统.首先系统以航线图、柱状图、饼图等多种可视化手段展现各时段的爬虫检测效果;其次基于SVM分类器,并结合IP地址聚合和查询量排序技... 恶意下载爬虫对电子商务造成了不可忽视的损失,为此设计了一套适用于各航空公司的通用查订票爬虫检测系统.首先系统以航线图、柱状图、饼图等多种可视化手段展现各时段的爬虫检测效果;其次基于SVM分类器,并结合IP地址聚合和查询量排序技术,设计了高效识别动态IP爬虫等多种爬虫的检测算法;最后通过特征筛选、IP历史详情查询等可视界面支持用户手工筛选训练样本,以更新SVM分类模型.以某航空公司访问E-Build服务器的日志数据进行的实验结果表明,该系统能够有效地抓取多种爬虫,大大降低无效查询量,并且能方便地更新分类模型,保持检测算法的长效性. 展开更多

关键词 反爬虫 订票系统 可视分析 支持向量机

在线阅读 下载PDF 职称材料

基于决策树算法的爬虫识别技术 被引量：4

5

作者 刘宇 程学林 《软件》 2017年第7期122-125,共4页

网络爬虫指的是一种按照一定的规则,自动地抓取万维网信息的程序或者脚本^([1])。但是实际上爬虫还分为正规爬虫和非正规爬虫,所谓的正规爬虫就是通过正规途径和手段获取网站信息和数据,非正规爬虫又称为恶意爬虫,主要用于非法盗窃数据... 网络爬虫指的是一种按照一定的规则,自动地抓取万维网信息的程序或者脚本^([1])。但是实际上爬虫还分为正规爬虫和非正规爬虫,所谓的正规爬虫就是通过正规途径和手段获取网站信息和数据,非正规爬虫又称为恶意爬虫,主要用于非法盗窃数据,给网站服务器增加负担以及偷窥一些敏感信息数据等。本文将会基于决策树算法设计一种新爬虫检测技术,并根据爬虫检测结果提供一些反爬机制,对恶意爬虫进行进行评屏蔽等,进而实现对网站和服务器以及部分数据,信息的保护,降低互联网资源重叠现象。 展开更多

关键词 网络爬虫 爬虫检测 恶意爬虫 反爬虫

在线阅读 下载PDF 职称材料

网络爬虫行为的入罪路径及其限度 被引量：4

6

作者 詹红星 王李 《北京邮电大学学报（社会科学版）》 2023年第1期94-103,共10页

恶意爬虫蕴含计算机信息系统破坏、计算机信息系统侵入、计算机信息系统数据泄露三重风险,有必要对其进行刑事规制。为避免刑事打击泛化,应依据网络爬虫运行流程对其作出情景化区分,根据不同情境下网络爬虫所含风险特征作法律性质辨析,... 恶意爬虫蕴含计算机信息系统破坏、计算机信息系统侵入、计算机信息系统数据泄露三重风险,有必要对其进行刑事规制。为避免刑事打击泛化,应依据网络爬虫运行流程对其作出情景化区分,根据不同情境下网络爬虫所含风险特征作法律性质辨析,以此建构恶意爬虫入罪路径,并划定刑事规制范围。当数据抓取行为违反授权判断型技术措施、所抓取数据已侵害数据安全法益、达到相当危害程度,则属于恶意网络爬虫,应予刑事规制。 展开更多

关键词 网络爬虫 技术风险 反爬虫措施 爬虫协议 刑法规制

在线阅读 下载PDF 职称材料

履带起重机臂架后倾动力学仿真 被引量：20

7

作者 屈福政 刘海涛 《起重运输机械》 北大核心 2005年第12期40-43,共4页

履带起重机在突然卸载时臂架后倾是整机稳定性和防后倾机构设计要考虑的工况。应用ADAMS软件对臂架及整机在履带起重机在突然卸载时臂架后倾工况时的动力过程进行仿真,并对防后倾机构的刚度和阻尼进行参数优化,以达到减轻臂架振动、提... 履带起重机在突然卸载时臂架后倾是整机稳定性和防后倾机构设计要考虑的工况。应用ADAMS软件对臂架及整机在履带起重机在突然卸载时臂架后倾工况时的动力过程进行仿真,并对防后倾机构的刚度和阻尼进行参数优化,以达到减轻臂架振动、提高整机防后倾稳定性的目的。 展开更多

关键词 履带起重机 动力学仿真 ADAMS 防后倾

在线阅读 下载PDF 职称材料

对反爬虫网站的应对策略 被引量：20

8

作者 刘石磊 《电脑知识与技术》 2017年第5X期19-21,23,共4页

随着网络的发展和网络爬虫技术的普及,越来越多的个人用户使用了网络爬虫技术从网站获取信息,而过多的网络爬虫会对目标网站的运营造成一定的影响。某些网站为了防止自己的网站不被除搜索引擎以外的网络爬虫访问,使用了一些反爬虫技术... 随着网络的发展和网络爬虫技术的普及,越来越多的个人用户使用了网络爬虫技术从网站获取信息,而过多的网络爬虫会对目标网站的运营造成一定的影响。某些网站为了防止自己的网站不被除搜索引擎以外的网络爬虫访问,使用了一些反爬虫技术。笔者探讨了一些常见的反爬虫措施以及对应用了该类机制的网站的进行爬虫活动的手段和策略。 展开更多

关键词 网络爬虫 反爬虫 反反爬虫 抓取策略 分布式爬虫

在线阅读 下载PDF 职称材料

基于反过滤规则集和自动爬虫的XSS漏洞深度挖掘技术 被引量：13

9

作者 吴子敬 张宪忠 +1 位作者 管磊 胡光俊 《北京理工大学学报》 EI CAS CSCD 北大核心 2012年第4期395-401,共7页

为解决Web网站跨站脚本攻击(XSS)问题,通过对XSS漏洞特征及过滤方式的分析,提出了通过反过滤规则集转换XSS代码并用自动爬虫程序实现漏洞代码的自动注入和可用性检验的XSS漏洞挖掘技术,依此方法可以获取XSS漏洞代码的转换形式及漏洞的... 为解决Web网站跨站脚本攻击(XSS)问题,通过对XSS漏洞特征及过滤方式的分析,提出了通过反过滤规则集转换XSS代码并用自动爬虫程序实现漏洞代码的自动注入和可用性检验的XSS漏洞挖掘技术,依此方法可以获取XSS漏洞代码的转换形式及漏洞的注入入口,以实现对Web跨站漏洞深度挖掘.提出的XSS漏洞挖掘技术在邮箱XSS漏洞挖掘及Web网站XSS漏洞检测方面的实际应用验证了该技术的有效性. 展开更多

关键词 跨站 XSS反过滤 XSS漏洞挖掘 自动爬虫

在线阅读 下载PDF 职称材料

基于网页浏览行为的反爬虫研究 被引量：4

10

作者 刘洋 《现代计算机》 2019年第7期58-60,70,共4页

在大数据的背景下,数据的潜在价值被不断地挖掘出来。能够有效识别或阻挡爬取行为的反爬虫方法对于商业服务网站来说尤为重要。基于网页浏览行为,提出一种新的反爬虫方法。该方法通过对真实用户和网络爬虫浏览网页的行为进行特征提取,... 在大数据的背景下,数据的潜在价值被不断地挖掘出来。能够有效识别或阻挡爬取行为的反爬虫方法对于商业服务网站来说尤为重要。基于网页浏览行为,提出一种新的反爬虫方法。该方法通过对真实用户和网络爬虫浏览网页的行为进行特征提取,然后构造并使用决策树对一个用户是否属于爬虫进行预测。该方法对网络爬虫的敏感性高,并具有较低的假阴率。 展开更多

关键词 网络爬虫 反爬虫方法 用户浏览行为 网站

在线阅读 下载PDF 职称材料

动态网页解析下的分布式网络爬虫系统设计 被引量：2

11

作者 陈春晖 《无线互联科技》 2022年第20期81-83,共3页

由于Web前端技术和反爬虫技术的发展,系统的复杂性也在逐渐增大,爬虫在爬取数据时获取动态网页数据、应对反网络爬虫以及集群稳定性还存在问题,这些问题对爬虫系统获取动态网页数据的效率存在着很大影响。文章基于分布式网络的爬虫器,... 由于Web前端技术和反爬虫技术的发展,系统的复杂性也在逐渐增大,爬虫在爬取数据时获取动态网页数据、应对反网络爬虫以及集群稳定性还存在问题,这些问题对爬虫系统获取动态网页数据的效率存在着很大影响。文章基于分布式网络的爬虫器,对上述问题进行了深入的研究和分析。首先,对所设计的分布式爬虫系统进行了需求分析;其次,结合系统需求,给出了系统整体结构和各模块的设计;最后,重点分析了系统中的关键技术,即爬虫的健壮性分析、网页动态加载分析。 展开更多

关键词 分布式网络爬虫 动态网页资料获取 防网络爬虫

在线阅读 下载PDF 职称材料

基于Scrapy框架的爬虫和反爬虫研究 被引量：27

12

作者 韩贝 马明栋 王得玉 《计算机技术与发展》 2019年第2期139-142,共4页

伴随着互联网的快速发展,获取信息已经成为人们日常生活中必不可少的一部分。在众多信息来源中,通过浏览器进入网站获取信息是绝大多数人的选择,但如果按照这种方式正常地进行信息获取,获取信息速度较慢,量较小,由此便产生了网络爬虫。... 伴随着互联网的快速发展,获取信息已经成为人们日常生活中必不可少的一部分。在众多信息来源中,通过浏览器进入网站获取信息是绝大多数人的选择,但如果按照这种方式正常地进行信息获取,获取信息速度较慢,量较小,由此便产生了网络爬虫。网络爬虫又称为网络蜘蛛或网络机器人,可以按照使用人定制的规则,短时间内在万维网上搜集大量特定信息。网络爬虫在爬取信息的同时,也带了一些问题,如大量信息被非正常获取,是一种损失,同时,大量爬虫对网站维护也是一个巨大的负担。如何在维护网民正常访问的前提下,有效阻止这些爬虫就显得十分重要。因此,文中主要研究Python语言开发的开源爬虫框架Scrapy所开发的爬虫,对目前网站常用的一些反爬虫手段进行分析,基于Scrapy框架以及具体网站,举例说明爬虫如何应对网站这些反爬措施。 展开更多

关键词 网站 网络爬虫 反爬虫 PYTHON Scrapy框架

在线阅读 下载PDF 职称材料

大型履带起重机防后倾系统机液耦合动力学分析 被引量：5

13

作者 徐齐 王欣 王殿龙 《液压与气动》 北大核心 2017年第9期92-97,共6页

以750 t履带起重机液压防后倾系统为例,基于多体动力学和虚拟仿真技术建立机液耦合模型,分析了在突然卸载时系统对主臂稳定性的影响及突然卸载系数的变化规律。应用ADAMS和AMESim软件分别建立刚柔耦合模型和液压系统模型,并进行联合仿... 以750 t履带起重机液压防后倾系统为例,基于多体动力学和虚拟仿真技术建立机液耦合模型,分析了在突然卸载时系统对主臂稳定性的影响及突然卸载系数的变化规律。应用ADAMS和AMESim软件分别建立刚柔耦合模型和液压系统模型,并进行联合仿真。在不同起重量、不同工作角度工况下,分析该液压防后倾系统对臂架抗倾覆稳定性的作用,同时获得臂架系统的动态响应曲线。根据臂架突然卸载时的受力情况,计算突然卸载系数,并对比GB/T 3811《起重机设计规范》以探讨突然卸载系数的变化规律,为履带起重机安全性能设计计算提供参考依据。 展开更多

关键词 履带起重机 防后倾 突然卸载 ADAMS AMESIM

在线阅读 下载PDF 职称材料

网络爬虫反爬策略研究 被引量：9

14

作者 胡俊潇 陈国伟 《科技创新与应用》 2019年第15期137-138,140,共3页

网络爬虫在工作时会对目标站点发送大量的请求,这样的爬虫工作方式决定了其会消耗不少目标站点的服务器资源,这对于一个服务器不大的中小型站点来说负载是巨大的,甚至会导致该站点直接崩溃。另外某些网站也不希望自己的内容被轻易的获取... 网络爬虫在工作时会对目标站点发送大量的请求,这样的爬虫工作方式决定了其会消耗不少目标站点的服务器资源,这对于一个服务器不大的中小型站点来说负载是巨大的,甚至会导致该站点直接崩溃。另外某些网站也不希望自己的内容被轻易的获取,如电商网站的交易额,这些数据是一个互联网产品的核心,因此采取一定的手段保护敏感的数据。因此很多网站都在站点中加入了反爬机制。例如User-Agent+Referer检测、账号登陆及Cookie验证等。文章讨论了几种主流的方法来避免爬虫被目标站点服务器封禁,从而保证爬虫的正常运行。 展开更多

关键词 网络爬虫 反爬虫 抓取策略

在线阅读 下载PDF 职称材料

基于网页对比的校园二级网站防篡改监控系统的设计与实现 被引量：3

15

作者 鲁寅辉 高珺 《实验技术与管理》 CAS 北大核心 2011年第6期119-121,133,共4页

在高校信息化建设过程中,校园网内大量的二级网站内容和安全监管工作存在着多种薄弱环节。提出了针对高校中大量二级网站防篡改监控系统的方案,使用爬虫程序抓取二级网站的网页内容。使用网页对比工具对网页的新旧数据作比对,运用正则... 在高校信息化建设过程中,校园网内大量的二级网站内容和安全监管工作存在着多种薄弱环节。提出了针对高校中大量二级网站防篡改监控系统的方案,使用爬虫程序抓取二级网站的网页内容。使用网页对比工具对网页的新旧数据作比对,运用正则表达式定制忽略列表以过滤自动变更的信息,将有变动的网页展示给监控人员;监控人员对结果作出审核确认,及时发现网页异常改动的情况,从而在第一时间知道并应对可能发生的篡改事件。 展开更多

关键词 监控系统 防篡改 网页爬虫 网页对比 校园二级网站

在线阅读 下载PDF 职称材料

双面履带式抗翻转机器人的设计

16

作者 钟国坚 《现代机械》 2017年第5期53-56,共4页

研发了一种探知复杂地面环境的抗翻转双面履带机器人,包括机器人本体结构设计、参数优化分析和控制模块三个部分内容。机器人本体设计采用了运动稳定和越障能力很强的履带式传动,对机器人的外观作了新颖的设计;针对履带机器人履带容易... 研发了一种探知复杂地面环境的抗翻转双面履带机器人,包括机器人本体结构设计、参数优化分析和控制模块三个部分内容。机器人本体设计采用了运动稳定和越障能力很强的履带式传动,对机器人的外观作了新颖的设计;针对履带机器人履带容易脱落的问题进行了分析从而找到解决方法;采用无线网络远程控制和现场信息实时反馈的方式达到探知环境信息的目的。机器人运动灵活,对环境的适应性强。在火灾和矿井事故现场探测有广阔应用前景。 展开更多

关键词 履带式 机器人 抗翻转

在线阅读 下载PDF 职称材料

基于Python的网络爬虫与反爬虫技术研究 被引量：53

17

作者 李培 《计算机与数字工程》 2019年第6期1415-1420,1496,共7页

论文主要为网络爬虫的设计及实现、反爬虫技术的实现及相关技术的研究。通过研究目标网站爬虫门槛的协商及通过的条件,及反爬虫相关技术及最新发展。基于Python设计及实现一个完整的网络爬虫,最终完成了对目标网站所有文章数据的提取和... 论文主要为网络爬虫的设计及实现、反爬虫技术的实现及相关技术的研究。通过研究目标网站爬虫门槛的协商及通过的条件,及反爬虫相关技术及最新发展。基于Python设计及实现一个完整的网络爬虫,最终完成了对目标网站所有文章数据的提取和存储,并借助对实验室内部网站的测试并实现了绕过反爬虫及反爬虫技术的研究,并对网络爬虫及反爬虫技术进行了理论说明和发展展望。 展开更多

关键词 网络爬虫 Scrapy框架 反爬虫

在线阅读 下载PDF 职称材料

大数据时代数据抓取行为的竞争法规制与反思 被引量：1

18

作者 丁国峰 王静 《贵阳学院学报（社会科学版）》 2024年第5期68-73,共6页

作为数据时代的新型商业行为,数据抓取既具有中立性,也具有竞争性,体现了平台企业间数据共享利益与数据竞争利益之间的博弈。我国竞争法对数据抓取行为的规制主要适用一般条款与互联网专条,然而条款的模糊性、商业道德的不确定性、法官... 作为数据时代的新型商业行为,数据抓取既具有中立性,也具有竞争性,体现了平台企业间数据共享利益与数据竞争利益之间的博弈。我国竞争法对数据抓取行为的规制主要适用一般条款与互联网专条,然而条款的模糊性、商业道德的不确定性、法官的权益侵害式判断逻辑都不利于对数据抓取行为正当性的合理界定。实践中应当从数据抓取的行为本身出发,秉承社会福祉最大化理念,运用狭义比例原则对数据抓取行为进行衡量。 展开更多

关键词 数据抓取 网络爬虫 反不正当竞争法 法律规制

在线阅读 下载PDF 职称材料

基于python的分布式网络反爬虫数据有序性研究 被引量：4

19

作者 朱镕申 孙川钘 潘虹 《计算机仿真》 北大核心 2023年第5期426-429,447,共5页

爬虫产生的负面影响导致网站无法正常访问、运行,故反爬虫技术应运而生,针对反爬虫数据存在的无序性问题,提出面向分布式网络反爬虫数据有序性研究,降低数据后续处理难度。基于python语言及其Scrapy结构,架构分步式网络反爬虫模型,采取... 爬虫产生的负面影响导致网站无法正常访问、运行,故反爬虫技术应运而生,针对反爬虫数据存在的无序性问题,提出面向分布式网络反爬虫数据有序性研究,降低数据后续处理难度。基于python语言及其Scrapy结构,架构分步式网络反爬虫模型,采取人为纠错、主成分分析线性降维以及数据转换等预处理手段,获取特征清晰的反爬虫数据集;根据反爬虫数据样本集与训练集的合并集,结合有向图,利用k最邻近分类算法划分反爬虫数据类别,针对分布式网络反爬虫数据的无序性,设计比特序列递推算法,赋予反爬虫数据有序性。仿真阶段中,经对比百度图片与反爬取到的图片顺序,验证所提方法的有效性,通过探索带宽环境对数据有序性的影响可知,其有序性不受带宽环境影响。 展开更多

关键词 分布式网络 反爬虫数据 有序性 分类算法

在线阅读 下载PDF 职称材料

面向跨境电商的网络抓取技术研究 被引量：1

20

作者 南博成 向杰益 +3 位作者 沈晓红 李邱溢 潘君妮 张斌 《计算机时代》 2018年第8期13-16,共4页

网络爬虫已成为提高跨境电商数据化运营效率的一项热门技术。本文通过叙述商业爬虫软件采集商品页面信息的基本方法,论述了爬虫程序提取商品价格与评价信息的常用算法,分析了抓取Ajax生成的Json信息、实现动态翻页和应对网站的反对爬虫... 网络爬虫已成为提高跨境电商数据化运营效率的一项热门技术。本文通过叙述商业爬虫软件采集商品页面信息的基本方法,论述了爬虫程序提取商品价格与评价信息的常用算法,分析了抓取Ajax生成的Json信息、实现动态翻页和应对网站的反对爬虫的技术和方法。实践证明,由于电商平台反爬虫策略会动态调整,如何利用人工智能技术更好地模仿人类行为来实现有效的信息采集是跨境电商爬虫技术提升的要点。 展开更多

关键词 跨境电商 爬虫 AJAX JSON 反爬虫

在线阅读 下载PDF 职称材料