产品介绍

　　“全国各省市三百多职业数据信息收集”、“python爬虫程序数据收集代写软件，专业界行，定制化服务”……在某二手生意渠道上，有不少供给所谓“大数据”收集信息服务的商家，宣称可进行“专业爬虫”、“各大网站数据收集、数据处理、数据剖析”，还有商家叫卖数据信息收集器，购买软件“无限量”导数据还帮助介绍“客户。

　　南都记者查询发现，数据收集事务“风景无限”的背面，隐藏着一条不合法爬取用户数据的黑色工业链——“专业界行”编写爬虫软件、供给软件订制服务、黑产团伙购买软件批量生成“大数据”信息再易手出售。业界专家指出，不合法爬取数据存在法令危险，未经渠道授权爬取数据信息或许构成侵权、违法乃至犯罪行为。

　　在某二手生意渠道上，以“大数据信息收集”、“数据爬取”、“数据爬虫”等为关键词在渠道上进行查找，有许多供给所谓“大数据”收集信息服务的卖家。这些卖家一般打着“数据爬虫”、“数据收集”、“数据剖析”的招牌，宣称可进行“专业爬虫”、“各大网站数据收集、数据处理”。

　　二手生意渠道上不少商家出售所谓“大数据”信息收集服务，宣称“专业爬虫”、“数据剖析处理”。

　　“全国各省市三百多职业数据信息收集”，二手渠道上一位卖家称。据其在产品介绍处列出的职业类别，数据信息收集规划掩盖美容美发、餐饮美食、文娱休闲、教育训练、亲子护理、各类校园、医疗保健、物流快递、建材装饰、轿车数码等职业，价格为49元/市/职业，拍下后留下邮箱，收集的数据可当晚11点前发送到邮箱。

　　这些所谓的可爬取的“大数据”信息都包含哪些内容？二手渠道上一位卖家告知南都记者，他们可进行数据收集的规划包含各类网页数据、大众号网站、赶集58、链家、饿了么等网站渠道的用户个人信息，还有卖家称可收集“淘宝买家、商家信息”、“WD最新一手实时请求数据”（注：WD为“网贷”拼音缩写）。

　　而依据数据收集的难易程度，价格也不同。前述告知南都记者，数据收集服务“基本版的100，一般版的200，高档版的300，如需制造客户端软件，费用另加”。生意渠道数据显现，该产品近期已被阅读超越3000次，有多名网友在该产品下方留言，问询是否有唯品会、拼多多买家、58同城应聘者电话、小区业主等信息数据，卖家表明可以供给，简历有“420万份，首要是中高端用户”，并称详细事务“私聊”。

　　南都记者发现，这些所谓供给“大数据”信息收集服务的卖家有的个人、有的则是团队化操作的作业室，有卖家称这类数据收集在职业界事务需求量大，是“微商线上微信社群营销必备数据资料”，可用于精准推行、拓宽客户和产品营销。

　　除了爬取各职业用户个人信息外，南都记者还注意到，一些付费网站的内容也相同能被各类“大数据”软件收集到，二手渠道上不少卖家宣称可供给知网、万方、知识库、等文献期刊的数据抓取收集。此外，可揭露查询的裁判文书网判定文书，也被作为产品呈现在二手生意渠道，有卖家称可经过数据爬虫，提取到几百万乃至上千万条裁判文书网判定文书。

　　此前，有不少用户反映裁判文书网网站工作速度慢，毛病频频，经常呈现页面无法显现的问题，本年2月，最高人民法院在其官网答复称，呈现此问题的原因在于，此前有许多技能公司经过爬虫体系无限制并发拜访不合法获取裁判文书数据，形成网站负荷过大。针对此问题，最高法表明自2018年7月起以验证码的方法上线体系软件防爬功用。

　　不久前，智联招聘“内鬼”私卖16万份简历信息一案引发重视。据了解，该案触及的个人简历超越16万份。南都记者近来查询发现，网售个人简历“事务”相同火爆，简历“暗盘”里上万份简历被打包出售，每份仅1.5元。

　　“智联招聘简历，全国各区域都有”、“长时刻售卖58赶集全国简历价格优惠”、“北京全国简历下载，首要下载智联、出息，也可群内沟通简历”……在qq群、贴吧、二手生意渠道上，有不少揭露出售智联招聘、58同城、BOSS直聘等招聘网站上个人简历的帖子。仅以“简历售卖”、“简历下载”为关键词在qq群中查找，就能找到多个出售58同城、智联招聘等闻名招聘网站的简历信息的qq群，最大的群人数有上千人。

　　“全国58简历每天日产5000+，可以挑选年纪挑选重复，还有纯二手简历，可出视频验证，二手0.3元/条”，在一个名叫“58简历全国沟通群”中，南都记者看到，群内不断有人发布出售闻名招聘网站简历实时一手、二手信息的帖子，有的卖家还在群内沟通交换资源。群内信息显现，该群群成员总计超越2千人，高峰期的在线人。

　　南都记者随机增加一位卖家为qq老友，对方称他有全国各职业各区域的简历信息，“一切简历信息都是当天实时更新”，还可以指定求职者年纪、性别、区域，价格2.2元/条，而二手的则更廉价，仅售0.3元/条。

　　二手生意渠道上一卖家自称“专业界行”，可代写各类爬虫软件，供给订制数据订制服务。

　　随后，南都记者再随机联络二手渠道上一位售卖简历的卖家，对方称他手上有上万份简历，“58同城、智联招聘、赶集网的都有”，每份简历价格1.5元，“全国随机，不指定区域”，购买量大价格还可以再优惠。

　　南都记者了解到，这些揭露售卖、明码标价的个人信息，依据地域、职业类别的不同，简历的价格规范也不一样。二手渠道上一位出售智联招聘简历的卖家告知南都记者，“北上广都比较贵”、“北京区域每份简历要卖六七块”。而除出售简历信息外，企业账号也可以被当成产品出售或转卖，有卖家告知记者，购买企业账号可以直接下载招聘网站求职者投递的简历信息，“区域职业你说了算”。

　　当记者问询购买简历的人拿这些个人信息去做什么，卖家提高了警觉，回复称“不论你拿去干什么”，还不耐心地表明“不必跟我说这个”，随后便把记者设拉进了黑名单。

　　网售“大数据”信息如此猖狂，这些所谓的“大数据”信息从何而来？又是怎么被走漏出去的？智联招聘“内鬼”私卖16万份简历信息一案揭开了数据走漏的冰山一角。

　　南都记者查询发现，数据收集事务“风景无限”的背面，隐藏着一条不合法爬取用户数据的黑色工业链——“专业界行”编写爬虫软件、供给软件订制服务、黑产团伙购买软件批量生成数据信息再易手出售。

　　所谓爬虫，是一种常见的数据捕获技能，又被称为网页蜘蛛，网络机器人，其依照必定的规矩，主动从互联网上提取网络信息的程序或脚本。当时信息网络环境下，使用爬虫软件等各种技能手法爬取互联网数据的行为广泛存在。与此同时，为维护本身数据不被爬取，许多企业也都设置了反爬虫战略。

　　“python爬虫程序数据收集代写软件，专业界行，定制化服务”，二手渠道上一位卖家介绍，其供给各类数据收集软件代写订制服务，软件收集数据可包含携程春秋航空等旅游网、美团天猫京东拼多多、微博知乎豆瓣等电商交际渠道。

　　该卖家告知南都记者，软件的开发团队“由一批通晓软件开发的编程高手组成”，按需求可供给各类数据爬取软件订制服务，并可进行“各种加密网站破解登陆”。渠道信息显现，该卖家近期完结多笔生意，用户反应“好评如潮”。

　　“网络数据订制 云端代收集 京东淘宝 车主 金融等一切职业信息收集，拍下发软件”，二手渠道上一位卖家介绍。据该卖家供给的软件演示视频显现，这是一款名叫“智能云”的软件，价格980元，可收集的数据信息掩盖地图商家、查找引擎、企业信息、车主信息等全网大数据，软件有导入微信通讯录、qq群成员提取、微信群发、微信营销、qq营销、论坛营销等多个功用界面。卖家介绍称，该软件可用来为各职业进行大数据引流、完成精准营销。

　　除供给信息定制服务外，南都记者查询发现，网上还有商家出售所谓简历信息收集器，这类软件可主动爬取闻名招聘网站上的用户个人简历信息。

　　在qq群“58赶集简历收集”中，qq网友“无名”称简历收集器可“无限量”导出58同城求职者的个人简历信息，信息“全网实时同步”。“名字、电话、需求的作业、家庭地址都有，兼职全职都有”，还发来软件操作的视频截图。

　　“我今日产了7千，赚了550”，卖家告知南都记者，他便是用这个软件从招聘网站导出个人简历信息，然后在网上售卖，“一手1.5元，二手0.3元”。卖家还向记者打包票，这款软件“能挣钱”、“好用”、“质量嘎嘎的”、“客户天天找我”，并表明假如买了这个软件，他还可帮助介绍“客户”。

　　南都记者注意到，商家出售的上述简历信息收集器首要是针对58同城，而在2017年，也曾爆出过网售58简历收集器形成网站许多用户个人简历走漏。不少供给售卖简历信息收集器的卖家告知南都记者，简历收集器“赶集网和智联招聘比较少”。

　　那么，这类简历信息收集器是怎么批量爬取招聘网站的用户个人简历呢？有业界专家就此剖析过58简历信息收集器的“盗取方法”：黑产团伙使用58同城在移动端的一个接口批量获取用户的简历ID以及加密不谨慎的用户ID信息，再经过另一个接口导致用户包含名字等线的微店程序可以经过用户ID终究获取用户的电话号码。

　　采访过程中，有商家还提示南都记者，网售简历信息收集器也有好坏之分，有商家的软件是用搭建好的数据库，可供提取的数据总共才几千条，并不能实时导出网站有用数据。

　　一位出售58简历信息收集器的qq网友“大神-售58简历收集器”向南都记者表明，他的软件可实时导出58同城、赶集网简历数据，选用的是“双接口”和爬虫技能，软件安装在PC端后，设置好条件便可进行实时数据导出，“上手快好操作”，价格为700元/月。依据卖家发来的视频截图，这种简历收集器设有城市、兼职岗位、性别、年纪和发布时刻等挑选条件，收集到的数据包含名字、手机号码、学历信息、作业年限、等待月薪等个人信息。

　　国家网信办上一年发布的《2017年数字我国建造开展陈述》显现，2014-2017年，我国大数据工业继续高速增加。2017年我国大数据工业规划到达4700亿元，同比增加30％，估计2020年我国大数据商场产量将超万亿。

　　看似风景无限的大数据职业，其背面的大数据杀熟、隐私安全、不合法爬取用户信息等乱象早已露出无疑。有数据运营职业人士指出，经过爬虫等技能盗取用户信息、再加以售卖盈余的现象在职业界很遍及。

　　上一年8月，南都记者报导了浙江绍兴越城警方侦破“史上最大规划数据盗取案”，警方阻挠遭盗取的30亿条公民信息走漏。涉案的瑞智华胜等三家公司经过与网络运营商协作的时机，获取运营商服务器登录答应，并经过技能手法从运营商服务器抓取收集网络用户的登陆cookie数据，从而不合法登陆网络用户的淘宝、微博等账号，获取最前端的公民个人信息，并进行强制加粉、订单爬取等行为，从中牟利，公司年营收超越3000万元。

　　有互联网安全专家指出，从运营商的层面进行流量绑架和清洗，相当于从源头上数据就丢掉了，坐落下流的互联网公司的安全防护才能再强，也无法防备。

　　上一年8月，南都联合阿里安全部发布的《2018网络黑灰产管理研究陈述》显现，2017年我国网络安全工业规划为450多亿元，而黑灰产已达近千亿元规划，用户信息走漏、网络黑客勒索和通讯信息欺诈等问题仍频频呈现。

　　而在网络黑灰产的整条工业链中，使用各种手法爬取、盗取或许经过生意的方法取得个人信息，成为黑灰产获利的首要方法，由此滋生出的电信欺诈、敲诈勒索等下流违法犯罪行为，对公民个人信息安全、工业安全形成严峻威胁，成为腐蚀互联网经济正常工作的毒瘤。据不完全统计，从2015年开端，互联网黑灰工业从业人员就现已超越40万。

　　本年4月，北京警方破获的巧达科技不合法获取计算机信息体系数据案引发重视。这个宣称我国最大的简历大数据公司，专业供给招聘东西软件和大数据剖析服务，具有一系列的人力资源类大数据产品，包含乔大招、好方法网及爱同伴等，还曾取得天使轮、A轮和B轮融资，资方包含李开复的立异工场、中信工业基金等。

　　工商信息显现，巧达科技成立于2014年7月，注册资本为1050万元，其经营规划包含技能开发、技能服务、数据处理等。本年4月22日，北京市海淀区公安分局在官方微信公号上透露了巧达科技不合法获取计算机信息体系数据一案的最新进展。

　　据警方发表，2018年10月，某互联网公司报案称，其公司员工发现有人在互联网上兜销疑似为该公司用户信息的数据。经初查，民警判别该公司的用户信息数据存在被人不合法盗取的或许。经过对该公司服务器日志进行调取、整理、剖析，开始复原了数据被盗取的全过程。

　　警方发现，巧达科技公司在未经授权的情况下，经过使用许多署理IP地址、假造设备标识等技能手法，绕过该公司服务器防护战略，许多歹意盗取存放在服务器上的用户数据。且在盗取过程中，因为传输数据量过大，导致服务器数十次中止服务，影响上千万用户正常拜访，给该公司带来了严峻的经济损失。

　　据新华社报导，这家企业不合法爬取用户数据，数量之大、牟利之巨，令人咋舌。这些简历信息等数据被用在教育训练、稳妥、招聘等职业，为巧达科技带来了许多收入。揭露数据显现，2017年，该公司全年收入4.11亿元，净利润1.86亿元。巧达科技产品合伙人刘博也曾在采访中称公司的商业模式为“获取简历、数据变现”。现在，巧达科技公司法人王某某等36人已被检察机关依法批准逮捕。

　　在对上述所谓“大数据”软件供给信息收集服务的现象进行查询中，南都记者注意到，有卖家在其事务介绍中自证洁白称“违法乱纪的不做”，所供给的软件外包和数据爬取等事务只爬取各种网页、App揭露的“看得见”的数据。

　　那么，依照大数据收集商的观念，假如爬取的是网页等揭露数据，这种行为就真的合理合规？

　　事实上，不合法获取数据存在许多法令危险，尽管使用爬虫软件等各种技能手法爬取互联网数据的行为广泛存在，但为维护本身数据不被爬取，许多企业也都设置了反爬虫战略。当网络爬虫不合法抓取数据信息时，或许构成的侵权、违法乃至犯罪行为首要包含损害计算机信息体系安全类、不合法获取公民个人信息类和侵略知识产权类等。

　　近年来，企业之间经过数据爬取引发的关于数据权益抢夺的各种案子层出不穷。比方，新浪诉脉脉抓取新浪微博用户信息案、淘宝诉美景不正当竞争案等，关于不合法爬取企业数据的行为，法令也更倾向于维护企业经营者的权力。

　　《网络安全法》第27条规则，任何个人和安排不得从事“盗取网络数据”等损害网络安全的活动，不得供给专门用于从事侵入网络、搅扰网络正常功用及防护办法、盗取网络数据等损害网络安全活动的程序、东西。

　　述绍兴警方破获的这起大规划数据盗取案子中，上市黑产公司在运营商服务器内放置歹意程序清洗流量，导致30亿条用户数据被盗取。近来，公司法定代表人周某某等7人因涉嫌不合法获取计算机信息体系数据罪，被检察机关提起公诉。

　　针对裁判文书网数据被爬虫售卖一事，北京市社会安排法令调停中心副理事长张新年律师以为，裁判文书网站上的额内容根据司法揭露意图，是免费的公共资源，未经最高人民法院授权，商家售卖裁判文书网数据则会构成侵权。

上一篇：八爪鱼搜集器产品 下一篇：中级和高档数据收集器