常用数据方法

1. 数据收集的四种常见方式

数据收集的四种常见的方式包括问卷调查、查阅资料、实地考查、试验，几种方法各有各的又是和缺点，具体分析如下。

四是实验。实验设计数据是四种方法中最耗时间的一种，因为它是通过各种各样的实验来得到一个统一的方向，也就是说，在这个过程中，可能有无数次的失败。但是实验得到的数据是最准确的，而且可能会推动某个行业的进步。所以，实验收集数据的优点是数据的准确性很高，而他的缺点就是未知性很大，不管实验的周期还是实验的结果都是不确定性的。

随着科技的发展和大数据时代的到来，收集数据越来越容易，而大家也应该更注重于保护和利用数据。

2. 常用数据分析处理方法有哪些

1、漏斗分析法

漏斗分析法能够科学反映用户行为状态，以及从起点到终点各阶段用户转化率情况，是一种重要的分析模型。漏斗分析模型已经广泛应用于网站和APP的用户行为分析中，例如流量监控、CRM系统、SEO优化、产品营销和销售等日常数据运营与数据分析工作中。

2、留存分析法

留存分析法是一种用来分析用户参与情况和活跃程度的分析模型，考察进行初始行为的用户中，有多少人会进行后续行为。从用户的角度来说，留存率越高就说明这个产品对用户的核心需求也把握的越好，转化成产品的活跃用户也会更多，最终能帮助公司更好的盈利。

3、分组分析法

分组分析法是根据数据分析对象的特征，按照一定的标志(指标)，把数据分析对象划分为不同的部分和类型来进行研究，以揭示其内在的联系和规律性。

4、矩阵分析法

矩阵分析法是指根据事物(如产品、服务等)的两个重要属性(指标)作为分析的依据，进行分类关联分析，找出解决问题的一种分析方法，也称为矩阵关联分析法，简称矩阵分析法。

3. 最常用的四种大数据分析方法

本文主要讲述数据挖掘分析领域中，最常用的四种数据分析方法：描述型分析、诊断型分析、预测型分析和指令型分析。
当刚涉足数据挖掘分析领域的分析师被问及，数据挖掘分析人员最重要的能力是什么时，他们给出了五花八门的答案。
其实我想告诉他们的是，数据挖掘分析领域最重要的能力是：能够将数据转化为非专业人士也能够清楚理解的有意义的见解。
使用一些工具来帮助大家更好的理解数据分析在挖掘数据价值方面的重要性，是十分有必要的。其中的一个工具，叫做四维分析法。
简单地来说，分析可被划分为4种关键方法。
下面会详细介绍这四种方法。
1. 描述型分析：发生了什么？

这是最常见的分析方法。在业务中，这种方法向数据分析师提供了重要指标和业务的衡量方法。
例如，每月的营收和损失账单。数据分析师可以通过这些账单，获取大量的客户数据。了解客户的地理信息，就是“描述型分析”方法之一。利用可视化工具，能够有效的增强描述型分析所提供的信息。
2. 诊断型分析：为什么会发生？

描述性数据分析的下一步就是诊断型数据分析。通过评估描述型数据，诊断分析工具能够让数据分析师深入地分析数据，钻取到数据的核心。
良好设计的BI dashboard能够整合：按照时间序列进行数据读入、特征过滤和钻取数据等功能，以便更好的分析数据。
3. 预测型分析：可能发生什么？

预测型分析主要用于进行预测。事件未来发生的可能性、预测一个可量化的值，或者是预估事情发生的时间点，这些都可以通过预测模型来完成。
预测模型通常会使用各种可变数据来实现预测。数据成员的多样化与预测结果密切相关。
在充满不确定性的环境下，预测能够帮助做出更好的决定。预测模型也是很多领域正在使用的重要方法。
4. 指令型分析：需要做什么？

数据价值和复杂度分析的下一步就是指令型分析。指令模型基于对“发生了什么”、“为什么会发生”和“可能发生什么”的分析，来帮助用户决定应该采取什么措施。通常情况下，指令型分析不是单独使用的方法，而是前面的所有方法都完成之后，最后需要完成的分析方法。
例如，交通规划分析考量了每条路线的距离、每条线路的行驶速度、以及目前的交通管制等方面因素，来帮助选择最好的回家路线。
结论
最后需要说明，每一种分析方法都对业务分析具有很大的帮助，同时也应用在数据分析的各个方面。
End.

4. 最常用的大数据分析方法有哪些

对比分析法不管是从生活中还是工作中，都会经常用到，对比分析法也称比较分析法，是将两个或两个以上相互联系的指标数据进行比较，分析其变化情况，了解事物的本质特征和发展规律。

在数据分析中，常用到的分3类：时间对比、空间对比以及标准对比。

2、漏斗分析

转化漏斗分析是业务分析的基本模型，最常见的是把最终的转化设置为某种目的的实现，最典型的就是完成交易。

其中，我们往往关注三个要点：

①从开始到结尾，整体的转化效率是多少?

②每一步的转化率是多少?

③哪一步流失最多，原因在什么地方?流失的用户符合哪些特征?

3、用户分析

用户分析是互联网运营的核心，常用的分析方法包括：活跃分析，留存分析，用户分群，用户画像，用户细查等。

可将用户活跃细分为浏览活跃，互动活跃，交易活跃等，通过活跃行为的细分，掌握关键行为指标;通过用户行为事件序列，用户属性进行分群，观察分群用户的访问，浏览，注册，互动，交易等行为，从而真正把握不同用户类型的特点，提供有针对性的产品和服务。

4、指标分析

在实际工作中，这个方法应用的最为广泛，也是在使用其他方法进行分析的同时搭配使用突出问题关键点的方法，指直接运用统计学中的一些基础指标来做数据分析，比如平均数、众数、中位数、最大值、最小值等。在选择具体使用哪个基础指标时，需要考虑结果的取向性。

5、埋点分析

只有采集了足够的基础数据，才能通过各种分析方法得到需要的分析结果。

通过分析用户行为，并细分为：浏览行为，轻度交互，重度交互，交易行为，对于浏览行为和轻度交互行为的点击按钮等事件，因其使用频繁，数据简单，采用无埋点技术实现自助埋点，即可以提高数据分析的实效性，需要的数据可立即提取，又大量减少技术人员的工作量，需要采集更丰富信息的行为。

5. 常见的收集数据的方法有哪些

统计数据收集方法：直接观察法、采访法（又分为面访式、电话式、自填式）、通讯法、网络调查法、卫星遥感法。

1、直接观察法

调查人员到现场对调查对象进行观察、 计量和登记以取得资料的方法。调查人员对所观察的事件或行为不加以控制或干涉，能够在被调查者不察觉的情况下获得资料。

2、采访法

面访式：个别深度访谈。

一次只有一名受访者参加、针对特殊问题的调查。

适合于较隐秘的问题，如个人隐私问题；或较敏感的问题。

面试式

面访式：座谈会

也称集体访谈，将一组被调查者集中在调查现场， 让他们对调查的主题发表意见以获得资料。

参加座谈会的人数不宜过多，一般为6～10人。

电话式

调查人员根据调查提纲（调查表），通过电话问答的形式来获取信息。

时效快、成本低、覆盖面广；但每次调查时间不能过长、拒访率高。

自填式

调查人员把调查表或问卷当面交给被调查者， 填完后当面交回的一种数据收集方法。 回收率高、但耗时费力。

3、通讯法

由调查组织者（例如政府统计部门）把调查表或问卷邮寄或电子传送给被调查者，填写后返回，也称邮寄问卷调查。

调查对象不受空间区域限制、调查成本低；但速度较慢、 回收率较低。

4、网络调查法

通过互联网、计算机通信和数字交互式媒体，了解和掌握信息的方式。

具有自愿性、定向性、及时性、互动性、经济性与匿名性。

常用方法：网上问卷调查法、在线交流调查法、网络观察法、网络实验法等。

5、卫星遥感法

使用卫星高分辨率照片，提供地面农作物绿度资料，来估计农产量的方法。

6. 常见的收集数据的方法有什么

1、调查法

调查方法一般分为普查和抽样调查两大类。

2、观察法

观察法是通过开会、深入现场、参加生产和经营、实地采样、进行现场观察并准确记录(包括测绘、录音、录相、拍照、笔录等)调研情况。主要包括两个方面:一是对人的行为的观察，二是对客观事物的观察。观察法应用很广泛，常和询问法、搜集实物结合使用，以提高所收集信息的可靠性。

3、文献检索

文献检索就是从浩繁的文献中检索出所需的信息的过程。文献检索分为手工检索和计算机检索。

按性质分为：

①定位的，如各种坐标数据；

②定性的，如表示事物属性的数据（居民地、河流、道路等）；

③定量的，反映事物数量特征的数据，如长度、面积、体积等几何量或重量、速度等物理量；

④定时的，反映事物时间特性的数据，如年、月、日、时、分、秒等。

按表现形式分为：

①数字数据，如各种统计或量测数据。数字数据在某个区间内是离散的值。

②模拟数据，由连续函数组成，是指在某个区间连续变化的物理量，又可以分为图形数据（如点、线、面）、符号数据、文字数据和图像数据等，如声音的大小和温度的变化等。

7. 常用的数据处理方法

前面所述的各种放射性测量方法，包括航空γ能谱测量，地面γ能谱测量和氡及其子体的各种测量方法，都已用在石油放射性勘查工作之中。数据处理工作量大的是航空γ能谱测量。

（一）数据的光滑

为了减少测量数据的统计涨落影响及地面偶然因素的影响，对原始测量数据进行光滑处理。消除随机影响。

放射性测量数据光滑，最常用的光滑方法是多项式拟合移动法。在要光滑测量曲线上任取一点，并在该点两边各取m个点，共有2m+1点；用一个以该点为中心的q阶多项式对这一曲线段作最小二乘拟合，则该多项式在中心点的值，即为平滑后该点的值。用此法逐点处理，即得光滑后的曲线，光滑计算公式（公式推导略）为

核辐射场与放射性勘查

式中：y_i+j、为第i点光滑前后的值；为系数；为规范化常数。

五点光滑的二次多项式的具体光滑公式为

核辐射场与放射性勘查

如果一次光滑不够理想，可以重复进行1～2次，但不宜过多重复使用。

光滑方法，还有傅里叶变换法，以及多点平均值法，多点加权平均值法等。

使用那种方法选定之后，一般都通过编程存入计算机，进行自动化处理。

图7-2-1是美国东得克萨斯州一个油田上的航空γ放射性异常中的两条剖面图（A-B和B-C）。经过光滑处理后，低值连续，清晰明显，与油田对应的位置较好。说明四个油藏都在铀（w（U））和钾（w（K））的低值位置。

图7-2-1 美国东得克萨斯油田航空γ放射性异常剖面图

（二）趋势面分析方法

趋势分析主要反映测量变量在大范围（区域）连续变化的趋势。在原始数据中常含有许多随机误差和局部点异常，直观反映是测量曲线上下跳动或小范围突变。使用趋势分析处理是为了得到研究区域辐射场的总体分布趋势。

趋势面分析，实质上是利用多元回归分析，进行空间数据拟合。根据计算方法不同，又可分为图解法趋势面分析和数学计算法趋势面分析。图解法趋势面分析的基本思路是对观测数据采用二维方块取平均值法，或滑动平均值法计算趋势值。方块平均值法是对每一方块内的数据取平均值，作为该方块重心点的趋势值。滑动平均值法是设想一个方框，放在测区数据分布的平面图上，把落在方框内的测点数据取平均值，记在方框中心上，最后得到趋势面等值图。一般讲做一次是不够的，需要如此重复3～9次。一般都有专门程序可供使用（不作详述）。如图7-1-14（a）为原始数据等值图，中间有许多呈点状高值或低值分布，经过四次趋势面分析之后可以清楚地看出三个低值异常区。

计算法趋势面分析是选定一个数学函数，对观测数据进行拟合，给出一个曲线。拟合函数常用的有多项式函数，傅里叶级数，三角函数以及指数函数的多项式函数等。目前以二维多项式函数应用最多。

（三）岩性影响及其校正分析

不同岩石、不同土壤中放射性核素含量是有差别，有的相差还比较大，有的相差甚至超过10%～20%。这是油田放射性测量的主要影响因素。

一个测区可能出现不同土壤分布，把不同放射性水平的土壤上测量结果校正到同一水平（叫归一化方法）是非常重要的工作，主要有下面三种方法。

1.确定土壤核素含量的归一化方法

利用γ能谱测量资料，根据测区地质图或土壤分布图，分别统计总道的总计数率和铀、钍、钾含量的平均值。然后进行逐点校正，即逐点减去同类土壤的平均值，其剩余值即为异常值。

核辐射场与放射性勘查

式中：分别为第 i类土壤中测点 j的总计数和铀、钍、钾含量。分别为i类土壤的平均总计数和铀、钍、钾的平均值。分别为扣除各类土壤平均值后的剩余值，即为各测点不同土壤校正后的归一化的油田的放射性异常。根据需要可以用来绘制平面剖面图或等值线图，即为经过不同岩性（土壤）校正后的油田放射性异常图。

这个方法的缺点是计算工作量较大。

2.用钍归一化校正铀、钾含量

对自然界各种岩石中的钍、铀、钾含量的相关性研究（D.F.Saundr，1987），发现它们的含量具有很好的相关性（表7-2-2）；而且随岩性不同含量确有相应的增加或减小，据此可以利用钍的含量计算铀和钾的含量。钍有很好的化学稳定性，钍在地表环境条件下基本不流失。因此，利用钍含量计算出来的铀、钾含量，应当是与油藏存在引起的铀、钾

表7-2-2 几种岩石的钍、铀、钾含量

异常无关的正常值。用每点实测的铀、钾，减去计算的正常值，那么每个测点的铀、钾剩余值（差值）应当是油气藏引起的异常值。这样就校正了岩性（土壤）变化的影响。

对于航空γ能谱测量的总道计数率，也同样可以用钍含量（或计数率）归一化校正总道计数率，效果也非常好。

具体方法如下。

1）对铀、钾的归一化校正。

2）根据航空γ能谱测量或地面γ能谱测量数据，按测线计算铀、钍、钾含量。根据岩石（土壤）中钍与铀，钍与钾的相关关系（表7-2-1），认为铀和钍存在线性关系，钾和钍存在对数线性关系，于是建立相应的拟合关系式。

核辐射场与放射性勘查

式中：A、B、A′、B′为回归系数（对每个测区得到一组常数）；w_i（Th）为测点i实测的钍含量；w_点i（U）、w_点i（K）为i点由钍含量计算的铀、钾含量。

计算每个测点的铀、钾剩余值：

核辐射场与放射性勘查

式中：w_i（U）、w_i（K）为测点i的实测值。剩余值Δw_i（U）和Δw_i（K）为油藏引起的异常值。

南阳-泌阳航空γ能谱测区，测得的钍、铀、钾含量，按钍含量分间隔，计算其平均值，列于表7-2-3。根据此表中数据，由（7-2-7）和（7-2-8）式得：

核辐射场与放射性勘查

表7-2-3 南阳-泌阳航空γ能谱计算的钍、铀、钾

3）对总道γ计数率的归一化校正。钍比较稳定，可以认为与油气藏形成的放射性异常无关。经研究得知，原岩的总道计数率（I_点i）与钍含量的对数值存在近似的线性关系，即

核辐射场与放射性勘查

根据γ能谱实测数据求得实测i点的总道计数率（I_i）与I_点i的差值：

核辐射场与放射性勘查

即为消除岩性影响的，由油气藏引起的γ总计数率异常值。

图7-2-2 钍归一化校正岩性影响的结果

图7-2-2为任丘双河油田，两条测线（1100线和11010线）。用钍归一化法，消除岩性影响的结果。油田边界高值和油田上方低值，除钾11010线外都比较明显清晰。与已知油田边界基本一致。