基于Python的天猫商品爬虫技术被引量：4

下载PDF

导出

摘要信息技术的跨越式发展,尤其是人工智能新潮浪起的时代,不论身处哪个领域,数据已经成为一种重要的资源,而数据的采集很大程度上依赖于爬虫技术。该文结合对天猫出售的商品信息的抓取,阐述数据采集的基本流程。

作者侯洁茹吕继续

机构地区辽宁科技学院

出处《科技资讯》 2019年第32期10-10,12,共2页 Science & Technology Information

关键词网络爬虫技术天猫网站爬取数据采集

分类号 TP391.1 [自动化与计算机技术—计算机应用技术] TP393.092 [自动化与计算机技术—计算机应用技术]

引文网络
相关文献

参考文献4

1陈方,谭爱平,成亚玲,文益民.主题爬虫技术研究综述[J].湖南工业职业技术学院学报,2008,8(5):13-16. 被引量：6
2杨帆,董俊,唐宏亮,张昊.基于Python的淘宝评论爬取技术研究[J].中国管理信息化,2019,22(4):162-163. 被引量：3
3廖勇毅,丁怡心.基于Python的股票定向爬虫实现[J].电脑编程技巧与维护,2019(5):45-46. 被引量：4
4裴丽丽.基于Python对豆瓣电影数据爬虫的设计与实现[J].电子技术与软件工程,2019(13):176-177. 被引量：10

二级参考文献23

1凌妍妍,刘伟,王仲远,艾静,孟小峰.Deep Web数据集成中的实体识别方法[J].计算机研究与发展,2006,43(Z3):46-53.
2郑冬冬,赵朋朋,崔志明.Deep Web爬虫研究与设计[J].清华大学学报（自然科学版）,2005,45(S1):1896-1902. 被引量：28
3黄晓冬.Invisible Web研究综述[J].情报科学,2004,22(9):1144-1148. 被引量：19
4汪涛,樊孝忠,顾益军,刘林.基于概念分析的主题爬虫设计[J].北京理工大学学报,2004,24(10):890-893. 被引量：11
5汪涛,樊孝忠.链接分析对主题爬虫的改进[J].计算机应用,2004,24(B12):174-176. 被引量：12
6毛军,王永成,刘凯.基于关联矩阵的主题概念选择算法研究[J].计算机仿真,2005,22(5):90-91. 被引量：1
7周立柱,林玲.聚焦爬虫技术研究综述[J].计算机应用,2005,25(9):1965-1969. 被引量：156
8祝宇,夏诏杰,聂峰光,郭力.支持向量机在化学主题爬虫中的应用[J].计算机与应用化学,2006,23(4):329-332. 被引量：8
9郑健珍,林坤辉,周昌乐,康恺.基于本体语义的定题爬虫[J].山东大学学报（理学版）,2006,41(3):106-110. 被引量：11
10郑冬冬,崔志明.Deep Web查询接口选择[J].计算机应用,2006,26(9):2024-2027. 被引量：6

共引文献19

1郑志高,刘庆圣,陈立彬.基于主题网络爬虫的网络学习资源收集平台的设计[J].中国教育信息化（高教职教）,2010(1):36-38.
2左红霞,包兴昌,李作汉,赵薛旭.急性脑血管病患者血浆、脑脊液生长抑素水平的研究[J].临床神经病学杂志,2000,13(1):34-36. 被引量：5
3江瑾.网络舆情监控系统的设计和实现[J].信息与电脑,2019,0(13):63-65. 被引量：3
4成文莹,李秀敏.基于Python的电影数据爬取与数据可视化分析研究[J].电脑知识与技术,2019,15(11):8-10. 被引量：14
5史媛.针对空气质量指数爬虫的设计与实现[J].信息记录材料,2020,21(4):165-166. 被引量：1
6边倩,王振铎,库赵云.基于Python的招聘岗位数据分析系统的设计与实现[J].微型电脑应用,2020,36(9):18-19. 被引量：5
7石小艳,蒋宗华,李东勤.Python课程分专业教学法的应用研究[J].福建电脑,2021,37(3):119-121. 被引量：4
8张荑阳,毛红霞.基于python的豆瓣电影数据采集与分析可视化[J].电子制作,2021,29(16):47-49. 被引量：5
9胡庆伟.基于Python的网络数据定时自动采集工具的设计[J].电子技术与软件工程,2021(21):147-148. 被引量：2
10封帆.以Python技术为基础的校园网搜索引擎设计与实现[J].电脑编程技巧与维护,2021(12):24-25. 被引量：4

同被引文献25

1李海燕,宓永迪.公共图书馆数字资源故障自动检测系统设计与实现——以浙江图书馆为例[J].内蒙古科技与经济,2015(18):62-63. 被引量：1
2何征强.电子资源使用监测系统实例研究[J].大学图书情报学刊,2017,35(2):105-108. 被引量：2
3花君林.基于Selenium的Python网络爬虫的实现[J].电脑编程技巧与维护,2017(15):30-31. 被引量：17
4刘敏,王向前,李慧宗,张宝隆.基于文本挖掘的网络商品评论情感分析[J].辽宁工业大学学报（自然科学版）,2018,38(5):330-335. 被引量：15
5王思敏,尹伊秋,宣静雯,马冲.基于网络爬虫技术的数字资源检测软件的设计与实现[J].现代电子技术,2019,42(10):132-135. 被引量：13
6裴丽丽.基于Python对豆瓣电影数据爬虫的设计与实现[J].电子技术与软件工程,2019(13):176-177. 被引量：10
7樊涛,赵征,刘敏娟.基于Selenium的网络爬虫分析与实现[J].电脑编程技巧与维护,2019(9):155-156. 被引量：18
8鲁丰玲.基于Scrapy的招聘信息爬虫设计与实现[J].科技资讯,2019,17(20):7-10. 被引量：4
9罗欣,周橙旻.基于数据可视化技术的电商平台家具市场分析[J].家具,2019,40(6):40-44. 被引量：27
10宋永生,黄蓉美,王军.基于Python的数据分析与可视化平台研究[J].现代信息科技,2019,3(21):7-9. 被引量：27

引证文献4

1闵磊.基于网络爬虫机制的文献资源可用性监测技术[J].科技资讯,2020,18(27):5-7.
2王艳,蒋凌迪.基于Python个性化礼物推荐系统的设计与实现[J].信息与电脑,2020,32(22):97-99. 被引量：3
3张文杰,肖茜,张继娟.基于在线评论挖掘的办公椅产品创新设计[J].湖南包装,2022,37(6):121-123. 被引量：2
4古志敏,吴明珠.基于Python网络爬虫设计与实现[J].电脑编程技巧与维护,2023(9):163-166. 被引量：10

二级引证文献15

1陈小云,陈宇.基于WechatApplet的礼品推荐平台的设计与实现[J].电子技术与软件工程,2021(22):30-31.
2陶思敏.基于JSP的礼物推荐系统的设计与实现[J].信息与电脑,2022,34(15):169-171.
3邹士娇,姜道利.基于B/S模式的药学教学案例管理信息系统设计与实现[J].数字技术与应用,2022,40(12):233-235. 被引量：1
4史楠,张帆,赵琨瑀.基于跨境电商评论分析的板式衣柜设计研究[J].家具与室内装饰,2024,31(1):11-17.
5郭瑾.基于Python的招聘数据爬取与数据可视化分析研究[J].轻工科技,2024,40(2):94-96. 被引量：9
6刘沛鹏.网络爬虫技术在继续教育平台系统中的应用研究[J].科技资讯,2024,22(4):198-201.
7宋宇.基于Swing的HTML解析器的实现与应用[J].科技资讯,2024,22(14):43-45.
8彭健.基于Python的抖音“高职教育教学”舆情数据抓取与分析[J].科技资讯,2024,22(15):253-256. 被引量：2
9郭晨灏,柳箐,姜澳,赵美娇,徐子薇,王博.基于Python的全国旅游信息统计网站数据抓取研究[J].电脑与信息技术,2024,32(5):71-74. 被引量：3
10吴任翔.基于万维网爬行器的计量信息系统数据管理程序设计[J].铁道技术监督,2024,52(9):23-27.

1《无机盐工业》编辑部.《无机盐工业》2020年征订启事[J].中国钼业,2019,43(6):32-32.
2泰国利用区块链技术提高有机米信誉[J].世界热带农业信息,2019,0(11):40-40.
3王阿平,杜江涛,田华平.以消费心理为导向的商标翻译原则和方法[J].中国商论,2020,0(2):69-70. 被引量：3
4刘照邦,袁明辉.基于深度神经网络的货架商品识别方法[J].包装工程,2020,41(1):149-155. 被引量：5

科技资讯

2019年第32期

浏览历史

内容加载中请稍等...

基于Python的天猫商品爬虫技术被引量：4

参考文献4

二级参考文献23

共引文献19

同被引文献25

引证文献4

二级引证文献15

相关作者

相关机构

相关主题

浏览历史

基于Python的天猫商品爬虫技术 被引量：4

参考文献4

二级参考文献23

共引文献19

同被引文献25

引证文献4

二级引证文献15

相关作者

相关机构

相关主题

浏览历史

基于Python的天猫商品爬虫技术被引量：4