知行编程网知行编程网  2022-04-28 03:00 知行编程网 隐藏边栏 |   抢沙发  16 
文章评分 0 次,平均分 0.0


不用一行代码,就写了个爬虫!这款谷歌插件已经打包好了!


前言

前几天发现了一个比较有用的谷歌插件,大家看标题也许已经知道它有啥用了。

下面给大家介绍一下这款插件的用法,文末也提供了下载链接。

不用一行代码,就写了个爬虫!这款谷歌插件已经打包好了!

使用

首先简单介绍一下是个啥插件:

不用一行代码,就写了个爬虫!这款谷歌插件已经打包好了!
如图所示

确保安装成功插件后,我们就可以愉快的玩耍了。

不用一行代码,就写了个爬虫!这款谷歌插件已经打包好了!

第一步,打开熟悉的开发者工具。

不用一行代码,就写了个爬虫!这款谷歌插件已经打包好了!

可以看到,最右边多了一个webscrapyer的选项栏。

找到地方后,我们找个网站来爬爬。

不用一行代码,就写了个爬虫!这款谷歌插件已经打包好了!

我这里找的是菜鸟笔记的网站,地址扔给大家,大家可以先拿它练练手。

接下来怎么做呢?

不用一行代码,就写了个爬虫!这款谷歌插件已经打包好了!

点击Create Sitemap创建一个项目。

不用一行代码,就写了个爬虫!这款谷歌插件已经打包好了!

填写相关信息,在开始url那个框里,可能大家注意到后面加了个[1-10:1]这代表着我要爬取前十页的数据。这里也是对url进行了一个简单的分析。

不用一行代码,就写了个爬虫!这款谷歌插件已经打包好了!

创建完成,增加一个选择器。

由于,我这里只是简单的给大家操作一下怎么爬取,所以我这里就爬取前十篇文章中的标题,插件了也有很多的爬取方式,大家可以试一试。

不用一行代码,就写了个爬虫!这款谷歌插件已经打包好了!

首先我们锁定外面的红框

不用一行代码,就写了个爬虫!这款谷歌插件已经打包好了!
不用一行代码,就写了个爬虫!这款谷歌插件已经打包好了!

大家按照我的图片上操作,选择自己要爬取的元素。

不用一行代码,就写了个爬虫!这款谷歌插件已经打包好了!

保存之后

不用一行代码,就写了个爬虫!这款谷歌插件已经打包好了!

点击id,进行下一步选定爬取元素。

不用一行代码,就写了个爬虫!这款谷歌插件已经打包好了!
不用一行代码,就写了个爬虫!这款谷歌插件已经打包好了!

选定标题后,记得选择父节点,保存。

完事之后,我们就可以愉快的运行了!

不用一行代码,就写了个爬虫!这款谷歌插件已经打包好了!

点击爬取。等待它自动爬取。

不用一行代码,就写了个爬虫!这款谷歌插件已经打包好了!

过一小会就可以看到数据了,数据支持导出!

总结

这个插件对于一些简单的静态爬虫还是处理的很不错的。不用写一行代码,可以节省我们的时间,直接点几下鼠标就能写个简单的爬虫,所以推荐给大家。

获取方式

① 可以去谷歌拓展程序商城下载

② 我也给大家打包好了,直接在后台发送插件即可领取。

<section style="font-family: -apple-system-font, system-ui, "Helvetica Neue", "PingFang SC", "Hiragino Sans GB", "Microsoft YaHei UI", "Microsoft YaHei", Arial, sans-serif;letter-spacing: 0.544px;white-space: normal;color: rgb(0, 0, 0);font-size: 16px;text-align: left;background-color: rgb(255, 255, 255);"><section powered-by="xiumi.us"><section><section style="padding-right: 5px;padding-left: 5px;font-size: 15px;"><section style="font-size: 16px;"><section powered-by="xiumi.us"><section><section style="padding-right: 5px;padding-left: 5px;font-size: 15px;line-height: 1.75;"><hr style="letter-spacing: 1px;color: rgb(89, 89, 89);font-family: "Helvetica Neue", Helvetica, "Hiragino Sans GB", "Microsoft YaHei", Arial, sans-serif;word-spacing: 1px;border-style: solid;border-right-width: 0px;border-bottom-width: 0px;border-left-width: 0px;border-color: rgba(0, 0, 0, 0.098);transform-origin: 0px 0px 0px;transform: scale(1, 0.5);"  /><section><section style="line-height: 1.9;word-spacing: 10px;letter-spacing: 2px;"><section style="letter-spacing: 0.544px;font-size: 14px;"><section style="padding: 5px;border-style: solid;border-width: 2px;"><section style="padding: 15px;border-style: dashed;border-width: 1px;"><section><img class="__bg_gif" data-ratio="0.125" data-type="gif" data-w="720" data-width="80%"  style="box-sizing: border-box !important;visibility: visible !important;width: 486.391px !important;" src="https://www.zkxjob.com/wp-content/uploads/2022/04/wxsync-2022-04-20c3ad2cd59629f83b2af846c31f16db.gif"  /></section><p style="margin-top: 10px;margin-bottom: 5px;padding-right: 0em;padding-left: 0em;letter-spacing: 1.5px;line-height: normal;"><span style="color: rgb(136, 136, 136);font-size: 15px;">● 80%的人都不知道,全球Python库下载前10名</span></p><p style="margin-top: 10px;margin-bottom: 5px;padding-right: 0em;padding-left: 0em;letter-spacing: 1.5px;line-height: normal;">● 我珍藏的一些好的Python代码,技巧|上篇</p><p style="margin-top: 10px;margin-bottom: 5px;padding-right: 0em;padding-left: 0em;letter-spacing: 1.5px;line-height: normal;"><span style="color: rgb(136, 136, 136);font-size: 15px;">● 爬取300本Python书籍,用Python告诉你哪家强?</span></p><section style="margin-top: 10px;margin-bottom: 5px;padding-right: 0em;padding-left: 0em;letter-spacing: 1.5px;line-height: normal;"><span style="color: rgb(136, 136, 136);font-size: 15px;">● 简单几步,100行代码用Python画一个蝙蝠侠的logo</span></section><section style="margin-top: 10px;margin-bottom: 5px;padding-right: 0em;padding-left: 0em;letter-spacing: 1.5px;line-height: normal;"><span style="color: rgb(136, 136, 136);font-size: 15px;">● 我用Python分析了《青春有你2》109位漂亮小姐姐,真香!</span></section></section></section></section></section></section></section></section></section></section></section></section></section></section><p style="font-family: -apple-system-font, BlinkMacSystemFont, "Helvetica Neue", "PingFang SC", "Hiragino Sans GB", "Microsoft YaHei UI", "Microsoft YaHei", Arial, sans-serif;letter-spacing: 0.544px;white-space: normal;font-size: 16px;background-color: rgb(255, 255, 255);caret-color: rgb(62, 62, 62);color: rgb(62, 62, 62);word-spacing: 2px;text-size-adjust: auto;text-align: center;"><br  /></p><p style="white-space: normal;background-color: rgb(255, 255, 255);font-family: Optima-Regular, Optima, PingFangTC-Light, PingFangSC-light, PingFangTC-light;letter-spacing: 2px;caret-color: rgb(62, 62, 62);color: rgb(62, 62, 62);font-size: 15px;word-spacing: 2px;text-size-adjust: auto;text-align: center;"><img class="rich_pages" data-cropselx1="0" data-cropselx2="385" data-cropsely1="0" data-cropsely2="446" data-ratio="1.2846975088967971" data-s="300,640" data-type="png" data-w="562"  style="box-sizing: border-box !important;visibility: visible !important;width: 219px !important;" src="https://www.zkxjob.com/wp-content/uploads/2022/04/wxsync-2022-04-b02b2caaed72985e1124dcbc69390d6e.png"  /></p><p style="font-family: -apple-system-font, system-ui, "Helvetica Neue", "PingFang SC", "Hiragino Sans GB", "Microsoft YaHei UI", "Microsoft YaHei", Arial, sans-serif;letter-spacing: 0.544px;white-space: normal;background-color: rgb(255, 255, 255);text-align: right;"><span style="font-variant-numeric: normal;font-variant-east-asian: normal;white-space: pre;word-spacing: 2px;widows: 1;caret-color: rgb(255, 0, 0);letter-spacing: 0.544px;font-weight: 700;font-family: Optima-Regular, PingFangTC-light;font-size: 14px;color: rgb(255, 0, 0);">点赞是最大的支持 </span></p>

本篇文章来源于: 菜鸟学Python

本文为原创文章,版权归所有,欢迎分享本文,转载请保留出处!

知行编程网
知行编程网 关注:1    粉丝:1
这个人很懒,什么都没写

发表评论

表情 格式 链接 私密 签到
扫一扫二维码分享