建议使用以下浏览器,以获得最佳体验。 IE 9.0+以上版本 Chrome 31+ 谷歌浏览器 Firefox 30+ 火狐浏览器
请选择 进入手机版 | 继续访问电脑版
设置昵称

在此一键设置昵称,即可参与社区互动!

确定
我再想想
选择版块

德玛西亚之...

发帖: 1粉丝: 0

级别 : 新手上路

Rank: 1

发消息 + 关注

发表于2019-5-28 19:57:39 3279 17 楼主 显示全部楼层
[专家内容专区] 【云享专家•微话题】韦世东邀你讨论爬虫程序对生活带来哪些影响?赢取爬虫书籍

云社区-论坛banner-韦世东-880 350.jpg

微话题 “爬虫程序对生活带来哪些影响?”

希望大家能够畅所欲言。如果大家有其他任何与爬虫程序相关的问题,也可以在本帖回复直接咨询云享专家韦世东。

=======【华为云·微话题】爬虫程序对生活带来哪些影响? =======

十年前 WEB 技术的飞速发展,为我们带来了功能丰富的应用。从静态网页到内容丰富的单页网站;从个人空间到博客再到论坛;

搜索引擎使得我们能够在广袤的互联网世界中找到想要的内容。近几年移动互联网的发展突飞猛进,同样也带来了非常多的应用。

在数据爆炸的时代,爬虫程序犹如蛟龙入水。无论是在生活中还是工作中,我们时时刻刻都享受着爬虫程序给我们带来的便利。

今天我们一起来讨论,爬虫程序给生活带来了什么。期望看到大家精彩的评论:

1、你的手机上有哪些应用是使用到爬虫程序的?

2、爬虫程序在数据分析和人工智能领域起到什么样的作用?

3、都说科技改变生活,聊一聊爬虫程序改变了你的哪些生活习惯?

4、你能感受到爬虫程序的存在吗?在什么时候?

5、我们在享受爬虫程序带来的便利时,是否也应该关注隐私问题?

微话题活动:参与本次微话题讨论,有机会获得优质评论奖,赢取书籍

活动时间2019530-612

参与方式:直接在本帖回复关于以上5个问题中的任意1个或多个问题的理解或评论

获奖方式:活动结束后,将由云享专家 韦世东  选取出2名优质评论奖,各送出《网络爬虫开发实践》书籍1本

评奖标准回复话题数量和内容质量。



本期微话题奖品


图片1.png


回复 举报
分享

分享文章到朋友圈

分享文章到微博

蓝书签

发帖: 56粉丝: 16

级别 : 版主

Rank: 7Rank: 7Rank: 7

发消息 + 关注

发表于2019-5-29 10:07:29 沙发 显示全部楼层

1、手机里必不可少的买车票的软件,比如买火车票出行用的第三方软件——某猪,某铁管家等,从12306爬数据,软件相比12306还是便利了我的出行,虽现在为了盈利搞起了加速包一些东西,但使用体验总体还是比较优秀的。类似的住宿,买东西涉及到多平台的聚合比价的app,通过爬虫采集各平台的价格信息,为剁手党省了“钱”。


2、数据分析和人工智能少不了数据的支持,而爬虫是一个采集并简单处理数据的的一个方式。


3、爬虫程序在生活与学习上还是能帮上不少忙的,我现在到了毕业季,那找到工作就是要租房子了,各个平台都有自己的房源,房屋信息比较分散,爬租房信息并聚合信息,就可以提高找房子的效率。还有就是之前学习过程中,需要到某个平台登录账户在线观看,总觉得不太方便,于是乎把资料都爬下来,再通过批处理文件整理名字后,存到本地以及网盘,随时随地可以想看就看。


4、当然一开始是接触和学习爬虫技术后,就可以很强烈的意识到涉及数据的方方面面可能都会有爬虫的身影,当然不接触爬虫技术,想一想这些数据从何而来也能有所感觉吧。


5、网络爬虫技术是可以获得到个人数据,因为一旦人们个人信息到网上后,当没意识到数据需要“保密”这个问题,爬虫是会导致个人隐私的泄露,爬虫需谨慎考虑这个问题。


点评

顶你: 5.0
顶你: 5
大佬分析很到位  发表于 2019-6-8 14:22
点赞 回复 举报

你好我是明...

发帖: 45粉丝: 5

级别 : 管理员

Rank: 9Rank: 9Rank: 9

发消息 + 关注

发表于2019-5-29 10:30:29 板凳 显示全部楼层
  1. 麻花影视app:抓取电影信息,抓取VIP电影信息(抓取VIP电影需要更深的技术去破解加密规则),免费看电影

  2. 数据分析,股票,招聘网,小姐姐照片,还有租房房源。

  3. 对于测试人员,更加方便测试接口等工作,熟悉爬虫也就对接口很了解,对工作有很大的帮助。

  4. 信息泄露,真的恐怖。关注隐私,比较讨厌那些利用爬虫技术做非法的事情,贼烦,动不动接到陌生推广电话,天天打。


点评

顶你: 5.0
顶你: 5
回答很棒!还有美团、携程、去哪儿这些 APP 也为我们的出行带来了便利呢  发表于 2019-6-8 14:25
点赞 回复 举报

极客潇

发帖: 14粉丝: 6

级别 : 版主

Rank: 7Rank: 7Rank: 7

发消息 + 关注

发表于2019-5-29 15:32:34 地板 显示全部楼层

这些问题仅发表下个人看法,我的手机上除去系统应用少数也有100个左右的APP。我觉得只要涉及到数据汇总的多少都和爬虫有关系。只不过这层关系的程度有多深罢了。


image.png


对爬虫不是很了解,但是对其挺感兴趣。在北京,没逢节假日放假回家的时候抢票的场景就历历在目。这个传统应该是从上学的时候就已经有了。拿手机上的抢票软件来说,如智行火车票,飞猪,通过不断的刷新票证数据,做到抢票这些功能。

各种折扣APP,如聚划算,什么值得买,也是通过各大网站的销售单价,全网比价,筛选出性价比最高的商品


我比较喜欢鬼谷的纵横之道,一切事物具有两面性,必须要找到事物的一个平衡点。爬虫同样是把双刃剑。利用爬虫可以很高效的获取所需要的内容数据。就和剑本身没有伤害性,在于执剑之人。数据也是这样,如果爬虫数据用于非法用途,比如说利用某酒店的漏洞爬取入住数据进行非法售卖,这无论是对于社会还是对于数据本身都是一种破坏,造成不良影响。





点评

顶你: 5.0
顶你: 5
抢票和比价 APP 果然是最常见的  发表于 2019-6-8 14:32
点赞 回复 举报

Spider251

发帖: 0粉丝: 0

级别 : 新手上路

Rank: 1

发消息 + 关注

发表于2019-5-29 18:28:54 5# 显示全部楼层
1. 租房等各种APP 网站 搜索引擎 企业风控 2. 爬虫为AI 数据分析等 提供了确切的数据
点赞 回复 举报

ecstatic

发帖: 9粉丝: 5

级别 : 版主

Rank: 7Rank: 7Rank: 7

发消息 + 关注

发表于2019-5-29 22:36:50 6# 显示全部楼层

1、你的手机上有哪些应用是使用到爬虫程序的?
   智行火车票:过年能够回家就靠它的抢票功能了
   新浪微博:确认过眼神,大V就是对的人,打个篮球,跳个舞,分分钟上热搜
   UC浏览器:为什么我的推荐都是妹子跳舞
   淘宝,京东:妈妈偶然打开过一次后,看我的眼神就变了

2、爬虫程序在数据分析和人工智能领域起到什么样的作用?
   起到数据采集作用,解析和整理后为数据分析和人工智能的相应算法模型提供数据

3、都说科技改变生活,聊一聊爬虫程序改变了你的哪些生活习惯?
   原来看小说,只能追起点,晋江,现在百度搜索,都能看
   原来听歌,四处找喜欢的歌下到电脑,导入MP3,现在打开网易云音乐,自动推荐喜欢的歌曲
   

4、你能感受到爬虫程序的存在吗?在什么时候?
   上课的时候,给学生们讲mybatis中sql转义问题时,打开csdn的一个技术贴,左侧推荐内容,各种淘宝内衣,动漫玩具闪了一张又一张,我在投影幕下好尴尬。

5、我们在享受爬虫程序带来的便利时,是否也应该关注隐私问题?
   技术本无罪,但是要提防滥用爬虫技术随意的爬取,点赞社交平台的数据,肆意窃取商业网站的资源,相信随着法制的健全,以后对爬虫技术的使用应当会更加的合理。

点评

顶你: 5.0
顶你: 5
你的网络浏览信息其实不是爬虫程序记录的,而是广告联盟相互合作的结果。当你在网络中浏览商品信息后,会在各大论坛的广告位看到相似商品  发表于 2019-6-8 14:35
点赞 回复 举报

willstar

发帖: 0粉丝: 1

级别 : 新手上路

Rank: 1

发消息 + 关注

发表于2019-5-30 20:17:59 7# 显示全部楼层

1、爬虫可以做最简单的搜索;

2、爬虫技术结合大数据分析可以做到精准分析;

3、爬虫技术还是要妥善使用,使用不当很可能涉及安全范畴;

4、云端爬虫是不是会导致账号被封呢?

点评

顶你: 5.0
顶你: 5
除了搜索引擎之外,用到爬虫技术的还有抢票应用、比价应用以及文字类媒体平台哦  发表于 2019-6-8 14:38
点赞 回复 举报

我们都是云...

发帖: 31粉丝: 7

级别 : 版主

Rank: 7Rank: 7Rank: 7

发消息 + 关注

发表于2019-5-31 09:43:41 8# 显示全部楼层

感谢韦老师分享,对于爬虫,个人比较关注隐私安全问题:网站根据个人浏览情况,进行数据记录,然后推荐贴合兴趣爱好的广告或商品,应该是爬了个人数据,想想背后被不法分子利用,那后果真很可怕……


点评

顶你: 5.0
顶你: 5
大部分的浏览信息都是广告联盟合作的结果,并不是爬虫爬取浏览器的浏览记录哦。用户隐私问题除了浏览记录之外,个人信息安全问题也应当重视  发表于 2019-6-8 14:39
点赞 回复 举报

陈春龙努力...

发帖: 0粉丝: 1

级别 : 新手上路

Rank: 1

发消息 + 关注

发表于2019-5-31 11:55:13 9# 显示全部楼层
1.手机上基于爬虫的程序,主要是搜索。比如百度,神马,还有各种返券的平台,比如51返。
点赞 回复 举报

陈春龙努力...

发帖: 0粉丝: 1

级别 : 新手上路

Rank: 1

发消息 + 关注

发表于2019-5-31 12:02:07 10# 显示全部楼层
2,数据分析和人工智能,都是基于大的数据量进行统计学分析实现的。统计学里对样本的分析都要求有最小的样本容量。所以,数据量非常重要,它的一种重要获取途径依靠爬虫支持。
点赞 回复 举报

游客

您需要登录后才可以回帖 登录 | 立即注册