资讯首页 新闻资讯 天眼报告 网贷专栏 专题报道 平台动态 投资理财 借款攻略 区块链
网贷天眼 > 网贷资讯  > 网贷专栏 > “爬虫技术”犯了错?

“爬虫技术”犯了错?

发布者: AI财经观察 | 原作者: AI财经观察 来自: AI财经观察 | 发布时间: 2019-9-20 22:05 |浏览量:2026 | 评论: 18

近日,多家通过爬虫技术开展大数据信贷风控的公司被查。短短几天时间,“爬虫”技术被推上了风口浪尖,大数据风控行业也迎来了前所未有的“震荡”。业内人士透露,这些被调查的大数据公司基本都是涉嫌利用网络爬虫技术侵犯个人隐私,并将这些数据信息转卖给其他机构获利。

 

“爬虫”变成了“害虫”?

 

何为爬虫?百度百科给出的定义是,网络爬虫,是一种按照一定的规则,自动地抓取万维网信息的程序或者脚本。

 

据了解,爬虫的发展历史可以追溯到20年前,搜索引擎、聚合导航、数据分析、人工智能等业务都需要基于爬虫技术。随着互联网的发展,网络资源有大量信息的载体,如何更好更有效地提取并利用它,爬虫技术起到关键作用。爬虫技术在信息定位也比较准确,可以根据客户的搜索需求爬取最合适的数据推送出去。而且现在大数据处理方面,爬虫技术可以对爬取的数据进行分析从而得出比较准确的数据。

 

爬虫技术的优势不言而喻。技术是中立的、无罪的,但技术被颇有用心的人乱用就会出现问题。近期暴露出来的事件就是最大的警示。

 

事实上,自2016年开始,大数据风控、智能风控、智能催收逐渐成熟,并且开始应用于互联网金融领域。从金融发展的角度来讲,这是一件好事儿,大大降低了行业成本。而且随着大数据的出现和兴起,第三方大数据风控平台也迎来一波发展高潮。

 

然而,提供信用评估类服务的第三方风控商在解决小额信贷多头借贷、欺诈等风险问题的同时,也在无形中掌握了用户贷前、贷后等各类信息数据。

 

“风险来源于过分地获取用户数据,并且利用这些数据干一些‘见不得人’的事儿。”知名金融科技分析人士毕研广告诉记者。

 

毕研广分析道,其实,很多数据公司从一开始最为基础的业务是“爬虫业务”,后来演变到给金融机构或者互金平台做风控系统,或者帮助平台开发设计“线上放贷系统”。做系统不赚钱,还是卖数据赚钱。但是这一举措也让“爬虫”变成了“害虫”,非法获取、销售个人隐私数据,必定涉及到了违法犯罪。

 

据了解,爬虫技术的数据采集主要包括:公开的第三方数据;抓取用户主动授权的个人基本信息、联系人信息、银行卡信息等数据;授权抓取数据,如设备号、IP地址、运营商/电商等用户授权后合规采集数据;经授权的平台数据,如用户在平台的历史、还款情况等用户已在注册协议或隐私协议中授权业务方进行分析的数据。

 

那爬虫技术在数据采集过程中是否经过用户授权、是否存在过度爬取信息、爬取到的信息用途不明等也成为当下人们关注的焦点。

 

对此,中国社会科学院金融研究所法与金融研究室副主任尹振涛表示,一方面公共数据的爬取是不允许商业利用的,并不是说互联网的数据可以随便爬取。另一方面有些客户提供淘宝号,甚至密码授权爬取,在爬取时就侵入了对方的计算机,这其实也是一种犯罪行为,叫作侵入计算机犯罪。

 

以“爬虫”为主的大数据公司称不上金融科技公司

 

不可否认,当前大数据风控行业对个人隐私缺乏保护,存在广泛的数据滥用问题。对此,业内普遍呼吁监管的加强。

 

近两年,很多互联网金融平台转型,也有一些做数据的平台,他们都强调自己做的是金融科技。是真科技还是假科技?转型助贷、网络小额贷业务,是合规的还是不合规的?

 

在毕研广看来,现在的互联网金融、金融科技还处在一个相对的“混沌期”。相信随着政策的不断清晰化、监管对行业整治的不断深化,也将逐渐清晰起来。以“爬虫”为主的大数据公司称不上金融科技公司。

 

事实上,今年以来,监管逐渐趋严。5月28日,国家互联网信息办公室发布的《数据安全管理办法(征求意见稿)》明确规定,网络运营者通过网站、应用程序等产品收集使用个人信息,应当分别制定并公开收集使用规则;网络运营者以经营为目的收集重要数据或个人敏感信息的,应向所在地网信部门报备收集使用规则、使用目的和保存期限等。

 

日前,浙江发布《中国银保监会浙江监管局办公室关于进一步规范个人消费有关问题的通知》(浙银保监办发〔2019〕213号),明确提出,不得将授信审查、风险控制等核心业务外包。

 

国家发展改革委9月16日发布《关于推送并应用市场主体公共信用综合评价结果的通知》,根据通知,国家发展改革委组织国家公共信用信息中心会同相关大数据机构对全国3300万家市场主体开展了第一期公共信用综合评价,现将评价结果推送,并就充分应用公共信用综合评价结果,推动落实以信用为基础的新型监管机制。

 

“一系列监管政策的下发对行业的长远发展起到了积极作用。”蒋韬说,“当前监管机构并不是采取了所谓一刀切的态度和做法,而且依法对于没有合规经营、侵犯个人隐私的企业进行调查,对于加速清退劣质企业、保护用户权益、促进优质企业发展有重要意义。”

 

蒋韬认为,长久来看,随着金融机构第一方数据积累以及第三方数据源壁垒降低,输出数据分析能力将成为风控公司更好的商业模式,提供标准评分卡产品+数据科学家咨询能力,将成为更有竞争力的商业模式。

 


更多【网贷专栏】相关文章

有话要说

登录并发表

热门评论

全部评论

  • 2019-09-24 06:22
    举报
    爬虫变成了害虫。
  • 2019-09-23 23:30
    举报
    杭州已经成为雷都,杭州的骗子太多了……杭州的平台一律不投……
  • 2019-09-23 17:21
    举报
    爬虫技术的优势不言而喻。技术是中立的、无罪的,但技术被颇有用心的人乱用就会出现问题。近期暴露出来的事件就是最大的警示。
  • 2019-09-23 14:03
    举报
    现在个人信息全都透明了,一点隐私也没有。
  • 2019-09-23 09:18
    举报
    原来爬虫是自动地抓取万维网信息的程序或者脚本。
  • 2019-09-23 06:49
    举报
    随着互联网的发展,网络资源有大量信息的载体,如何更好更有效地提取并利用它,爬虫技术起到关键作用
  • 2019-09-22 22:48
    举报
    百度百科给出的定义是
  • 2019-09-22 22:22
    举报
    追溯到20年前,搜索引擎、聚合导航、数据分析、人工智能等业务都需要基于爬虫技术。随着互联网的发展,网络资源有大量信息的载体,如何更好更有效地提取并利用它,爬虫技术起到关键作用。爬虫
  • 2019-09-22 22:07
    举报
    多家通过爬虫技术开展大数据信贷风控的公司被查
  • 2019-09-22 21:55
    举报
    网络爬虫,是一种按照一定的规则,自动地抓取万维网信息的程序或者脚本。
  • 2019-09-22 19:24
    举报
    网络爬虫,是一种按照一定的规则,自动地抓取万维网信息的程序或者脚本。
  • 2019-09-22 17:28
    举报
    扫黑除恶。某些部门案件不够数,走不好转黄******,因为黄******背后真有伞不敢查啊,只能拿催收公司来凑数了
  • 2019-09-22 14:44
    举报
    努力努力,加油加油,啦啦啦噜噜噜!
  • 2019-09-22 12:33
    举报
    始终把资金安全放在第一位,资金安全放在第一位。
  • 2019-09-22 12:30
    举报
    犯了什么错,通告一下,。
  • 2019-09-22 11:47
    举报
    是的,必须犯错了
  • 2019-09-22 11:14
    举报
    何为爬虫?百度百科给出的定义是,网络爬虫,是一种按照一定的规则,自动地抓取万维网信息的程序或者脚本。
  • 2019-09-22 10:09
    举报
    认真学习了一下帖子的内容!
为您推荐
热门头条
新闻资讯
天眼报告
网贷专栏
投资理财
借款攻略
区块链

为您推荐

被贾跃亭坑了3.5亿的那个男人去放超利贷了
被贾跃亭坑了3.5亿的那个男人去放超利贷了
互联网金融   |  天眼编辑05  |  2019-10-17 21:18
浏览 974
回复 0
珠宝贷网贷业务已全部结清:实现本息100%兑付
珠宝贷网贷业务已全部结清:实现本息100%兑付
互联网金融   |  天眼编辑05  |  2019-10-17 18:41
浏览 1616
回复 7
医美分期平台跑路后,晋商消金、泰安银行亲自干起了...
医美分期平台跑路后,晋商消金、泰安银行亲自干起了催收
互联网金融   |  天眼编辑05  |  2019-10-17 17:53
浏览 1227
回复 4
中原银行43亿元控股邦银金租90%股权:获金融租...
中原银行43亿元控股邦银金租90%股权:获金融租赁牌照
互联网金融   |  天眼编辑05  |  2019-10-17 17:32
浏览 1140
回复 5
点赞!深圳这家P2P平台退出网贷行业 已完成10...
点赞!深圳这家P2P平台退出网贷行业 已完成100%兑付
天眼原创   |  天眼编辑04  |  2019-10-17 11:41
浏览 2186
回复 17
业绩分化 消费金融“开抢”新场景
业绩分化 消费金融“开抢”新场景
互联网金融   |  天眼编辑05  |  2019-10-17 17:22
浏览 1232
回复 1
6成租客使用租金贷背后:青客公寓或涉隐瞒贷款事实
6成租客使用租金贷背后:青客公寓或涉隐瞒贷款事实
互联网金融   |  天眼编辑05  |  2019-10-17 17:08
浏览 1078
回复 2
加载更多>>
被贾跃亭坑了3.5亿的那个男人去放超利贷了
被贾跃亭坑了3.5亿的那个男人去放超利贷了
互金新闻   |  天眼编辑05  |  2019-10-17 21:18
浏览 974
回复 0
珠宝贷网贷业务已全部结清:实现本息100%兑付
珠宝贷网贷业务已全部结清:实现本息100%兑付
互金新闻   |  天眼编辑05  |  2019-10-17 18:41
浏览 1616
回复 7
银行理财产品哪家强?收益5%以上银行理财产品榜单出炉!
银行理财产品哪家强?收益5%以上银行理财产品榜单出炉!
天眼原创   |  天眼编辑04  |  2019-10-17 18:13
浏览 2129
回复 9
医美分期平台跑路后,晋商消金、泰安银行亲自干起了催收
医美分期平台跑路后,晋商消金、泰安银行亲自干起了催收
互金新闻   |  天眼编辑05  |  2019-10-17 17:53
浏览 1227
回复 4
中原银行43亿元控股邦银金租90%股权:获金融租赁牌照
中原银行43亿元控股邦银金租90%股权:获金融租赁牌照
互金新闻   |  天眼编辑05  |  2019-10-17 17:32
浏览 1140
回复 5
北京消协网络消费捆绑搭售调查:途牛旅游等4家涉嫌误导购买保险
北京消协网络消费捆绑搭售调查:途牛旅游等4家涉嫌误导购买保险
互金新闻   |  天眼编辑05  |  2019-10-17 17:26
浏览 1239
回复 2
业绩分化 消费金融“开抢”新场景
业绩分化 消费金融“开抢”新场景
互金新闻   |  天眼编辑05  |  2019-10-17 17:22
浏览 1232
回复 1
6成租客使用租金贷背后:青客公寓或涉隐瞒贷款事实
6成租客使用租金贷背后:青客公寓或涉隐瞒贷款事实
互金新闻   |  天眼编辑05  |  2019-10-17 17:08
浏览 1078
回复 2
丰巢刷脸取件被小学生“破解” 刷脸支付还安全吗?
丰巢刷脸取件被小学生“破解” 刷脸支付还安全吗?
互金新闻   |  天眼编辑05  |  2019-10-17 17:07
浏览 1371
回复 3
加载更多>>
网贷天眼9月P2P余额排行榜:上海地区跌幅领跑
网贷天眼9月P2P余额排行榜:上海地区跌幅领跑
数据报告   |  天眼编辑15  |  2019-10-17 10:01
浏览 1811
回复 5
9月网贷行业报告: 头部平台陷“标荒” 行业成交额暴跌13.84%
9月网贷行业报告: 头部平台陷“标荒” 行业成交额暴跌13.84%
数据报告   |  天眼编辑31  |  2019-10-1 09:48
浏览 3.1W
回复 179
“十一”国庆理财收益走俏 银行理财产品TOP10榜单出炉
“十一”国庆理财收益走俏 银行理财产品TOP10榜单出炉
数据报告   |  天眼编辑15  |  2019-9-30 11:03
浏览 3.4W
回复 176
8月上市系、风投系、国资系平台TOP10排行榜
8月上市系、风投系、国资系平台TOP10排行榜
数据报告   |  天眼编辑31  |  2019-9-27 14:42
浏览 2.9W
回复 55
网贷天眼8月60家网贷平台线上端合规排行榜
网贷天眼8月60家网贷平台线上端合规排行榜
数据报告   |  天眼编辑02  |  2019-9-26 15:27
浏览 3.3W
回复 49
网贷天眼8月上海网贷报告: 头部“三降”增速  撮合金额突降
网贷天眼8月上海网贷报告: 头部“三降”增速 撮合金额突降
数据报告   |  天眼编辑15  |  2019-9-25 12:58
浏览 2.5W
回复 9
网贷天眼8月网贷平台消费金融成交额排行榜
网贷天眼8月网贷平台消费金融成交额排行榜
数据报告   |  天眼编辑15  |  2019-9-25 12:32
浏览 2.8W
回复 18
网贷天眼8月60家网贷平台信息披露排行榜
网贷天眼8月60家网贷平台信息披露排行榜
数据报告   |  天眼编辑15  |  2019-9-23 16:04
浏览 3.7W
回复 115
9月网贷评级综合实力TOP30排行榜
9月网贷评级综合实力TOP30排行榜
数据报告   |  天眼编辑02  |  2019-9-20 14:57
浏览 5.0W
回复 75
加载更多>>
湖南p2p遭“团灭”,平台回应称早已收到清退通知
湖南p2p遭“团灭”,平台回应称早已收到清退通知
网贷专栏   |  新金融深度  |  2019-10-17 19:03
浏览 944
回复 8
租房分期,不仅仅是一笔生意
租房分期,不仅仅是一笔生意
网贷专栏   |  洪言微语  |  2019-10-17 17:29
浏览 859
回复 9
罗辑思维突然要上科创板,什么硬科技都没有的罗胖到底想干啥?
罗辑思维突然要上科创板,什么硬科技都没有的罗胖到底想干啥?
网贷专栏   |  江瀚视野观察  |  2019-10-17 17:24
浏览 779
回复 12
北京搞试点,湖南一刀切,大数据行业也可能归零
北京搞试点,湖南一刀切,大数据行业也可能归零
网贷专栏   |  互金小说汇  |  2019-10-17 17:21
浏览 1405
回复 9
P2P监管试点和湖南团灭
P2P监管试点和湖南团灭
网贷专栏   |  老七玩金融  |  2019-10-17 17:20
浏览 1204
回复 6
根治培训机构泛金融乱象 分期贷款可成医病良药
根治培训机构泛金融乱象 分期贷款可成医病良药
网贷专栏   |  陈文  |  2019-10-17 11:12
浏览 859
回复 5
监管加速,湖南取缔辖内全部P2P网贷业务
监管加速,湖南取缔辖内全部P2P网贷业务
网贷专栏   |  布谷君  |  2019-10-17 10:46
浏览 1202
回复 1
360金融携手上海交大共建AI实验室  开启人才战略新布局
360金融携手上海交大共建AI实验室 开启人才战略新布局
网贷专栏   |  新金融Time  |  2019-10-17 08:00
浏览 977
回复 6
加载更多>>
2019年P2P理财投资前景如何?p2p理财还安全吗?
2019年P2P理财投资前景如何?p2p理财还安全吗?
投资理财   |  天眼编辑13  |  2019-9-30 17:44
浏览 5.3W
回复 2
微信理财通收益怎么提现?微信理财通收益计算公式?
微信理财通收益怎么提现?微信理财通收益计算公式?
投资理财   |  天眼编辑13  |  2019-9-24 18:44
浏览 1.6W
回复 2
什么是低风险理财产品?低风险理财产品有哪些?
什么是低风险理财产品?低风险理财产品有哪些?
互联网理财   |  天眼编辑13  |  2019-9-24 16:49
浏览 2.3W
回复 3
余额宝存多少钱收益最高?2019年余额宝利息多少?
余额宝存多少钱收益最高?2019年余额宝利息多少?
互联网理财   |  天眼编辑13  |  2019-9-23 16:40
浏览 2.3W
回复 0
新手理财怎么做?新手理财适合哪种理财方式?
新手理财怎么做?新手理财适合哪种理财方式?
互联网理财   |  天眼编辑13  |  2019-9-23 16:38
浏览 2.0W
回复 0
猪肉价格持续飙升,“二师兄”概念股能火多久?
猪肉价格持续飙升,“二师兄”概念股能火多久?
投资理财   |  天眼编辑13  |  2019-9-16 15:37
浏览 1.9W
回复 2
上市银行业绩原地踏步 昨日股价喜迎集体上涨
上市银行业绩原地踏步 昨日股价喜迎集体上涨
银行理财   |  编辑007  |  2019-9-10 13:49
浏览 3.2W
回复 0
银行净值型产品发行提速 同业理财“双降”趋势延续
银行净值型产品发行提速 同业理财“双降”趋势延续
银行理财   |  编辑007  |  2019-9-10 13:48
浏览 8.7W
回复 1
建立一个交易系统的步骤有哪些?
建立一个交易系统的步骤有哪些?
投资理财   |  编辑007  |  2019-8-29 18:36
浏览 3.0W
回复 0
康美药业被罚后却多日涨停 资金无视风险提示为哪般
康美药业被罚后却多日涨停 资金无视风险提示为哪般
投资理财   |  编辑007  |  2019-8-29 18:34
浏览 3.7W
回复 2
加载更多>>
【车贷申请条件】申请无息贷款需要满足哪些条件?
【车贷申请条件】申请无息贷款需要满足哪些条件?
车贷   |  编辑007  |  2019-9-23 15:27
浏览 1.5W
回复 0
办理个人住房商业贷款流程是什么?个人住房商业贷款须知
办理个人住房商业贷款流程是什么?个人住房商业贷款须知
房贷   |  编辑007  |  2019-9-10 13:54
浏览 3.3W
回复 0
贷款买房如何知道月供 主要取决什么?
贷款买房如何知道月供 主要取决什么?
房贷   |  编辑007  |  2019-9-10 13:52
浏览 3.5W
回复 1
2019商业贷款买房注意事项?商业贷款买房材料大全
2019商业贷款买房注意事项?商业贷款买房材料大全
房贷   |  编辑007  |  2019-7-9 20:45
浏览 8.8W
回复 0
小额借贷逾期有哪些注意事项?小额借贷逾期怎么避免?
小额借贷逾期有哪些注意事项?小额借贷逾期怎么避免?
车贷   |  编辑007  |  2019-7-9 20:43
浏览 10W+
回复 0
用网贷还信用卡安全吗?用网贷还信用卡注意事项
用网贷还信用卡安全吗?用网贷还信用卡注意事项
信用卡   |  编辑007  |  2019-7-9 20:35
浏览 6.9W
回复 1
2019年房贷利率会上浮吗?房贷利率上浮意味着什么?
2019年房贷利率会上浮吗?房贷利率上浮意味着什么?
房贷   |  天眼编辑13  |  2019-7-9 15:45
浏览 9.9W
回复 0
车贷还清后多久能拿绿本?车贷还清之后需要办理什么手续?
车贷还清后多久能拿绿本?车贷还清之后需要办理什么手续?
车贷   |  天眼编辑13  |  2019-7-9 15:37
浏览 10W+
回复 4
信用卡分期有哪些优势?信用卡分期对征信有影响吗?
信用卡分期有哪些优势?信用卡分期对征信有影响吗?
信用卡   |  编辑007  |  2019-7-2 14:50
浏览 8.8W
回复 0
加载更多>>
AI财经观察
媒体
文章(10)赞(13)

TA的文章

更多>>
下载APP
网贷天眼APP
网贷天眼官方APP
官方微信
联系客服
在线客服
400-6673-500
周一至周日:9:00-21:00
分享
  • QQ好友
  • QQ空间
  • 微信
  • 微博
返回顶部