什么是残缺数据:残缺数据的处理方法 残缺数据,顾名思义,就是指不完整的数据,如前文所提,残缺数据的情况可能是整个数据的缺失,也可能是数据中某个字段信息的缺失。可根据前文提到的数据质量评估标准中的“完整...
数据质量的影响因素
数据质量的影响因素 原始数据的数据质量不一,那么究竟有哪些因素会影响数据的质量呢? ● 信息因素:元数据对数据的描述及理解错误、数据源规格不统一等。 ● 技术因素:指由于具体技术处理的异常造成的数据质...
数据质量的评估标准:完整性、一致性、准确性、及时性
数据质量的评估标准:完整性、一致性、准确性、及时性 数据质量是保证数据应用的基础,采集来的原始数据可能存在质量问题,需要通过一定的标准来对数据进行评估。对于未通过评估的数据,将采取一系列的后续方法进行...
数据采集的方法:系统日志与数据库采集
数据采集的方法:系统日志与数据库采集 通过RFID射频、传感器、社交网络、移动互联网等方式可以获得各种类型的数据,包括结构化、半结构化及非结构化的数据。由于这些数据具有数据量大、异构等特点,因此,必须...
大数据的起源:数据的进化,从数据到大数据
大数据的起源:数据的进化,从数据到大数据 数据的出现和人类对数据的利用,可以追溯到三千多年前的古代。在尼罗河两岸的古迹中,我曾看到古埃及法老们在河边石柱上留下的每年测量尼罗河水位的刻度,他们以此来预测...
关于大数据,你知道的都不对
一个概念,无论它可以抽象到多么高深的程度,其形成、演变、推广的过程往往却很实在、具体,充斥着不同社会力量的博弈。这个概念的对错与否、生命力的短长、对社会的影响往往不取决于概念本身,而在于它的社会价值。...
数据挖掘(Data Mining)在理论与实践的差异
数据挖掘(Data Mining)在理论与实践的差异 随着大数据发展的浪潮,越来越多的在校生都开始涉猎这一块的知识,关注度比较高的或许就是大数据挖掘。相对于学生而言,既有数学建模的经历,也有应用数据的...

大数据挖掘从业者综合能力评估
大数据挖掘从业者综合能力评估 不少朋友在学习大数据挖掘时,耗费了不少时间在一些无意义的事上。而且做的大多数事情并不能让自己在应聘时突出自己的核心竞争力,也不能展示出自己与其他应聘者的差异性优势。 度...
如何从0到1转型到大数据圈子:大数据领域涉及岗位与困难
如何从0到1转型到大数据圈子:大数据领域涉及岗位与困难 对于一个陌生的领域,最重要的还是正确的方向,如果有人引导你会更好,把有限的时间花在必要的事上,做一件正确的事。 2017年年初,有一位朋友给我来...
用户画像与模块化思维的关系
用户画像与模块化思维的关系 一套完整的用户标签体系所牵动的开发资源不仅是数据挖掘,还有ETL、数据仓库。虽然整体工作的核心在于标签的业务建模,但是其中的开发和维护工作,如果资源完备,至少还需要两个数据...
用户画像的标签体系:需求分析与标签构建
用户画像的标签体系:需求分析与标签构建 需求分析 对于每个平台来说,考虑到主营业务场景的差异性,不能盲目地将一套用户标签体系用于所有行业。 把电商的用户体系用来做互联网金融行业用户的活动营销,显然是不...
设备指纹在移动端的应用:移动端的数据持久化
设备指纹在移动端的应用:移动端的数据持久化 对于移动端而言,设备指纹也有存在的意义。那就是在极大程度上减少了客户端上报的数据量,增加了用户体验,避免了用户的流量套餐被浪费。 通常的数据上报形式,涉及设...
设备指纹的应用场景
设备指纹的应用场景 设备指纹之所以重要,是因为它在互联网行业中有很多的应用场景。 1.用户行为追踪 在电商行业中,消费网站会收集用户的设备信息,并根据设备指纹信息对用户进行商品推荐,当然也可以为用户提...
设备指纹的底层参数:Android系统与iOS系统
设备指纹的底层参数:Android系统与iOS系统 1.在Android系统中 UUID:区别移动设备的标志,可以结合方法为每个设备产生唯一的标识。 IMEI:国际移动设备身份码的缩写,是由15位数字...
什么是设备指纹:设备指纹的底层原理
什么是设备指纹:设备指纹的底层原理 设备指纹,是用设备的显著性特征,生成该设备的唯一标识,简单来说就是为了对业务分析有所区分。 设计设备指纹一般是采用硬件数据和业务数据的组合方式,在 Web 和 AP...
互联网羊毛党监控平台的意义
互联网羊毛党监控平台的意义 在投资人理财的过程中,如果有可观的利润,自然而然地就会出现某些恶意诈骗团伙。他们靠薅P2P平台“羊毛”谋生,长期以来,对平台的活动运营成本损失很大。因此,监控恶意“羊毛党”...
互联网羊毛党存在的利与弊分析
互联网羊毛党存在的利与弊分析 对于“羊毛党”而言,“薅羊毛”的目的无非就是想多赚一些钱。但是,常在河边走,哪有不湿鞋呢。很多新闻报道“羊毛党”月入过万元,但在当下的大环境下,只是极少数人月入过万元而已...
互联网羊毛党的进化历史
互联网羊毛党的进化历史 “羊毛”产业随着互联网金融的发展不断进行转型,从最初的单打独斗变成现在的团体行动,甚至与广告商、活动推广平台合作,多方获利。 1.“羊毛党”的形成 在初期,P2P未成规模,平台...
互联网羊毛党屡禁不止的原因:羊毛存在的必然性
互联网羊毛党屡禁不止的原因:羊毛存在的必然性 俗话说:“凡是合乎理性的东西都是现实的,凡是现实的东西都是合乎理性的。”这些年,互联网金融的高速发展与“羊毛党”密不可分。 2014—2015 年,“薅羊...

什么是羊毛党:羊毛党的特点特征
什么是羊毛党:羊毛党的特点特征 “羊毛党”是关注与热衷于“薅羊毛”的群体,它起源于互联网金融的P2P平台,指那些专门选择互联网渠道的优惠促销活动,以低成本甚至零成本换取物质上实惠的人,而这些行为被称为...