如何采集马蜂窝景点下的评论内容 | 眉山网络公司
事先声明下,本文纯属学术性探讨,请勿将采集到的内容用作商业用途。
一、工具准备
火车头,免费版本的已经够用
Excel,要开启宏,wps不支持
没事,你爱用wps,我不会说你Low的。
【成都南奇网络】cdnanqi.cn二、操作方法
1、找呀找评论
显然,评论的文字内容源代码中是木有的。
好吧,此刻你需要借助Chrome浏览器,Fn+F12。
打开这个链接,认真观察。
你会发现很有趣的两点:
1)、Url中包含着景点的id;
2)、细细观察,红框所示的部分就是评论,当然,需要把unicode转成汉字。
换句话说,如果你能拿到所有的你需要采集评论的景点的id,你就可以批量把景点对应的评论Url地址拼接出来,然后用火车头进行采集,可以获取到这些unicode。
下一步就是怎样批量的将unicode转成汉字。
2、将unicode转成汉字
哈哈,我伟大的excel可以。
打开excel,按alt+F11,然后插入,模板,粘入如下的代码:
Function ChW(t) If InStr(t, “\u”) Then s = Split(t, “\u”) For i = 0 To UBound(s) If Len(s(i)) > 3 Then ChW = ChW & ChrW(“&H” & Left(s(i), 4)) & Mid(s(i), 5) Else ChW = ChW & s(i) End If Next Else For i = 1 To Len(t) s = AscW(Mid(t, i, 1)) If s > 0 And s < 255 Then ChW = ChW & Mid(t, i, 1) Else ChW = ChW & “\u” & LCase(Hex(s)) End If Next End If End Function
保存,此刻就相当于你人工自定义了一个叫ChW的函数,使用方法类似excel自带的sum等函数。
A1单元格中放入你采集到的unicode,B1单元格中输入=ChW(a1)。
怎么样,是不是大功告成?
来吧,试试看你是不是也可以用火车头去采集百度或淘宝等的下拉框了?
推荐阅读
如何采集马蜂窝景点下的评论内容 | 眉山网络公司 https://www.cdnanqi.cn/meishan/1006.html
- 有哪些方式可以进行免费的网络推广-成都seo优化-成都网站优化
- 微信营销神器 “微赞”引爆营销流量-微信营销朋友圈推广
- 为什么要查看网站历史快照?如何查看网站历史快照?_宜宾seo优化
- 【百度seo优化】介绍百度熊掌号的具体功能及多元化营销推广优势-成都seo优化-成都网站优化
- 网站优化不引流南奇seo顾问带你一起查明网站无流量原因-隆昌SEO优化
- 深挖大型网站SEO优化技术与流量平衡利器-成都seo优化-成都网站优化
- SEO引擎优化包年费用
- 电商网站SEO优化存在过期页面要如何处理?_宜宾seo优化
- 搜索引擎优化的核心是什么-成都seo优化-成都网站优化
- 网站建设经验总结:提供便捷的用户注册和登录方式_成都做网站