1、有以下三种、调查法。

2、调查方法一般分为普查和抽样调查两大类。

3、观察法。

4、观察法是通过开会、深入现场、参加生产和经营、实地采样、进行现场观察并准确记录(包括测绘、录音、录相、拍照、笔录等)调研情况。

5、主要包括两个方面、一是对人的行为的观察，二是对客观事物的观察。

6、观察法应用很广泛，常和询问法、搜集实物结合使用，以提高所收集信息的可靠性。

7、文献检索。

8、文献检索就是从浩繁的文献中检索出所需的信息的过程。

9、文献检索分为手工检索和计算机检索。

10、按性质分为、①定位的，如各种坐标数据。

11、②定性的，如表示事物属性的数据(居民地、河流、道路等)。

12、③定量的，反映事物数量特征的数据，如长度、面积、体积等几何量或重量、速度等物理量。

13、④定时的，反映事物时间特性的数据，如年、月、日、时、分、秒等。

1、常见的数据采集方式有问卷调查、查阅资料、实地考查、试验。

2、问卷调查、问卷调查是数据收集常用的一种方式，因为它的成本比较低，而且得到的信息也会比较全面。

3、查阅资料、查阅资料是古老的数据收集的方式，通过查阅书籍，记录等资料来得到自己想要的数据。

4、实地考查、实地考察是到指定的地方去做研究，指为明白一个事物的真相，势态发展流程，而去实地进行直观的，局部进行详细的调查。

5、实验、实验收集数据的优点是数据的准确性很高，而缺点是未知性很大，不管实验的周期还是实验的结果都是不确定性的。

1、离线搜集：工具：ETL在数据仓库的语境下，ETL基本上便是数据搜集的代表，包括数据的提取(Extract)、转换(Transform)和加载(Load)。

2、在转换的过程中，需求针对具体的事务场景对数据进行治理，例如进行不合法数据监测与过滤、格式转换与数据规范化、数据替换、数据完整性等。

3、实时搜集：工具：Flume/Kafka实时搜集首要用在考虑流处理的事务场景，比方，用于记录数据源的履行的各种操作活动，比方网络监控的流量办理、金融运用的股票记账和web服务器记录的用户访问行为。

4、在流处理场景，数据搜集会成为Kafka的顾客，就像一个水坝一般将上游源源不断的数据拦截住，然后依据事务场景做对应的处理(例如去重、去噪、中心核算等)，之后再写入到对应的数据存储中。

5、互联网搜集：工具：Crawler,DPI等Scribe是Facebook开发的数据(日志)搜集体系。

6、又被称为网页蜘蛛，网络机器人，是一种按照一定的规矩，自动地抓取万维网信息的程序或者脚本，它支持图片、音频、视频等文件或附件的搜集。

7、除了网络中包含的内容之外，关于网络流量的搜集能够。

1、硬件设计的基本原则(1)良好的性价比系统硬件设计中，一定要注意在满足性能指标的前提下，尽可能地降低价格，以便得到高的性能价格比，这是硬件设计中优先考虑的一个主要因素。

2、因为系统在设计完成后，主要的成本便集中在硬件方面，当然也成为产品争取市场关键因素之一。

3、(2)安全性和可靠性选购设备要考虑环境的温度、湿度、压力、振动、粉尘等要求，以在规定的工作环境下，系统性能稳定、工作可靠。

4、要有超量程和过载保护，输入、输出通道正常工作。

5、要注意对交流市电以及电火花等的隔离。

6、(3)较强抗干扰能力有完善的抗干扰措施，是系统精度、工作正常和不产生错误的必要条件。

7、例如强电与弱电之间的隔离措施，对电磁干扰的屏蔽，正确接地、高输人阻抗下的防止漏电等。

9、软件设计的基本原则(1)结构合理程序应该采用结构模块化设计。

10、这不仅有利于程序的进一步扩充或完善，而且也有利于程序的后期修改和维护。

11、(2)操作性能好，使用方便，具备良好的人机界面。

12、(3)具有一定的保护措施和容错功能系统应设计一定的检测程序，例如状态检测和诊断程序，以便系统发生故障时，便于查找故障部位。

13、对于重要的参数要定时存储，以防止因掉电而丢失数据。

14、(4)提高程序的执行速度，尽量减小占用系统的内存。

15、(5)给出必要的程序说明，便于后期程序维护。

17、系统设计的一般步骤分析问题和确定任务在进行系统设计之前，必须对要解决的问题进行调查研究、分析论证。

18、如产品的应用场合、面向的客户类型等。

19、在此基础上，根据实际应用中的问题提出具体的要求，确定系统所要完成的数据采集任务和技术指标，确定调试系统和开发软件的手段等。

20、另外，还要对系统设计过程中可能遇到的技术难点做到心中有数，初步定出系统设计的技术路线。

21、确定采样周期Ts采样周期Ts决定了采样数据的质量和数量。

22、利用采样定理和系统设指标来确定采样周期。

24、系统总体设计在系统总体设计阶段，一般应做以下几项工作。

25、(1)进行硬件和软件的功能分配一般来说，多采用硬件，可以简化软件设计工作，并使系统的速度性能得到改良，但成本会增加，同时，也因接点数增加而增加不可靠因素。

26、若用软件代替硬件功能，可以增加系统的灵活性，降低成本，但系统的工作速度也降低。

27、要根据系统的技术要求，在确定系统总体方案时进行合理的功能分配。

29、(2)系统A／D通道方案的确定(1)模拟信号输人范围、被采集信号的分辨率。

30、(2)完成一次转换所需的时间。

31、(3)模拟输入信号的特性是什么，是否经过滤波，信号的高频率是多少。

32、(4)模拟信号传输所需的通道数。

33、(5)多路通道切换率是多少，期望的采样/保持器的采集时间是多少。

34、(6)在保持期间允许的电压下降是多少。

35、(7)通过多路开关及信号源串联电阻的保持器旁路电流引起的偏差是多少。

36、(8)所需精度(包括线性度、相对精度、增益及偏置误差)是多少。

37、(9)当环境温度变化时，各种误差限制在什么范围，在什么条件下允许有漏码。

38、(10)各通道模拟信号的采集是否要求同步。

39、(11)所有的通道是否都使用同样的数据传输速率。

40、(12)数据通道是串行操作还是并行操作。

41、(13)数据通道是随机选择，还是按某种预定的顺序工作。

42、(14)系统电源稳定性的要求是什么，由于电源变化引起的误差是多少。

43、(15)电源切断时是否可能损坏有关芯片(对CMOS的多路开关是安全的，因为当电源切断时，多路开关是打开的。

44、而对结型FET多路开关是接通的，因此有损坏芯片的可能。

46、(3)确定微型计算机的配置方案可以根据具体情况，采用微处理器芯片、单片微型机芯片、单板机、标准功能模板或个人微型计算机等作为数据采集系统的控制处理机。

47、选择何种机型，对整个系统的性能、成本和设计进度等均有重要的影响。

49、(4)操作面板的设计(1)输人和修改源程序。

50、(2)显示和打印各种参数(3)工作方式的选择。

51、(4)启动和停止系统的运行。

52、为了完成上述功能，操作面板一般由数字键、功能键、开关、显示器件以及打印机等组成。

53、(5)系统抗干扰设计对于数据采集系统，其抗干扰能力要求一般都比较高。

54、因此，抗干扰设计应贯穿于系统设计的全过程，要在系统总体设计时统一考虑。

56、硬件和软件的设计(1)硬件设计硬件设计的任务是以所选择的微型机为中心，设计出与其相配套的电路部分，经调试后组成硬件系统。

57、采用单片机的硬件设计过程。

58、(1)明确硬件设计任务为了使以后的工作能顺利进行，不造成大的返工，在硬件正式设计之前，应细致地制定设计的指标和要求，并对硬件系统各组成部分之间的控制关系、时间关系等作出详细的规定。

59、(2)尽可能详细地绘制出逻辑图、电路图当然，在以后的实验和调试中还要不断地对电路图进行修改，逐步达到完善。

60、(3)制作电路和调试电路按所绘制的电路图在实验板上连接出电路并进行调试，通过调试，找出硬件设计中的毛病并予以排除，使硬件设计尽可能达到完善。

61、调试好之后，再设计成正式的印刷电路板。

63、(2)软件设计(1)明确软件设计任务在软件正式设计之前，首先必须要明确设计任务。

64、然后，再把设计任务加以细致化和具体化，即把一个大的设计任务，细分成若干个相对独立的小任务，这就是软件工程学中的“自顶向下细分”的原则。

65、(2)按功能划分程序模块并绘出流程图将程序按小任务组织成若干个模块程序，如初始化程序、自检程序、采集程序、数据处理程序、打印和显示程序、打印报警程序等，这些模块既相互独立又相互联系，低一级模块可以被高一级模块重复调用，这种模块化、结构化相结合的程序设计技术既提高了程序的可扩充性，又便于程序的调试及维护。

66、(3)程序设计语言的选择选用何种语言与硬件选择有关。

67、(4)调试程序首先，对子程序进行调试，不断地修改出现的错误，直到把子程序调好为止，然后再将主程序与子程序连接成一个完整的程序进行调试。

68、其次，调试程序时，在程序中插人断点，分段运行，逐段排除错误。

69、后，将调试好的程序固化到EPRO(系统采用微处理器、单板机、单片机时)或存入磁盘(系统采用个人微机时)，供今后使用。

1、常见的数据采集方式有问卷调查、查阅资料、实地考查、试验。

2、问卷调查、问卷调查是数据收集常用的一种方式，因为它的成本比较低，而且得到的信息也会比较全面。

3、查阅资料、查阅资料是古老的数据收集的方式，通过查阅书籍，记录等资料来得到自己想要的数据。

4、实地考查、实地考察是到指定的地方去做研究，指为明白一个事物的真相，势态发展流程，而去实地进行直观的，局部进行详细的调查。

5、实验、实验收集数据的银旁优点是数据的准确性很高，而缺点是未知性搭雹很大，不管实验的周期还是实验的结果都是不确定性的。

6、锋枝橡。

1、数据采集(DAQ).，是指从传感器和其它待测设备等模拟和数字被测单元中自动采集非电量信号，送到上位机中进行分析，处理，数据采集系统是结合基于计算机或者其他专用测试平台的测量软件产品来实现灵活的、用户自定义的测量系统。

2、数据采集，又.称数据获取，是利用一种装置，从系统外部采集数据并输入到系统内部的个接口。

3、数据采集技术广泛应用在各个领域。

4、比如摄像头，麦克风，都是数据釆集工具。

5、被采集数据是已被转换为电讯号的各种物理量，如温度、水位、风速、压力等，可以模拟量，也可以是数字量。

6、采集一般是采样方式，即隔一定时间(称采样周期)对同一点数据重复采集。

7、釆集的数据大多是瞬时值，也可是某段时间内的一个特征值。

8、准确的数据测量是数据采集的基础。

9、数据量测方法有接触式和非接触式，检测元件多种多样，不论哪种方法和元件，均以不影响被测对象状态…。

1、数据采集根据采集数据的类型可以分为不同的方式，主要方式有、传感器采集、爬虫、录入、导入、接口等。

2、数据采集的基本方法、(1)传感器监测数据、通过传感器，即现在应用比较广的一个词、物联网。

3、通过温湿度传感器、气体传感器、视频传感器等外部硬件设备与系统进行通信，将传感器监测到的数据传至系统中进行采集使用。

4、(2)第二种是新闻资讯类互联网数据，可以通过编写网络爬虫，设置好数据源后进行有目标性的爬取数据。

5、(3)第三种通过使用系统录入页面将已有的数据录入至系统中。

6、(4)第四种方式是针对已有的批量的结构化数据可以开发导入工具将其导入系统中。

7、(5)第五种方式，可以通过API接口将其他系统中的数据采集到本系统中。

1、大数据技术在数据采集方面采用了哪些方法：离线采集：工具：ETL。

2、在数据仓库的语境下，ETL基本上就是数据采集的代表，包括数据的提取（Extract)、转换(Transform)和加载(Load)。

3、在转换的过程中，需要针对具体的业务场景对数据进行治理，例如进行非法数据监测与过滤、格式转换与数据规范化、数据替换、数据完整性等。

4、实时采集：工具：Flume/Kafka。

5、实时采集主要用在考虑流处理的业务场景，比如，用于记录数据源的执行的各种操作活动，比如网络监控的流量管理、金融应用的股票记账和web服务器记录的用户访问行为。

6、在流处理场景，数据采集会成为Kafka的消费者，就像一个水坝一般将上游源源不断的数据拦截住，然后根据业务场景做对应的处理（例如去重、去噪、中间计算等），之后再写入到对应的数据存储中。

7、这个过程类似传统的ETL，但它是流式的处理方式，而非定时的批处理Job，些工具均采用分布式架构，能满足每秒数百MB的日志数据采集和传输需求互联网采集：工具：Crawler,DPI等。

8、Scribe是Facebook开发的数据(日志)收集系统。

9、又被称为网页蜘蛛，网络机器人，是一种按照一定的规则，自动地抓取万维网信息的程序或者脚本，它支持图片、音频、视频等文件或附件的采集。

10、除了网络中包含的内容之外，对于网络流量的采集可以使用DPI或DFI等带宽管理技术进行处理。

11、其他数据采集方法对于企业生产经营数据上的客户数据，财务数据等保密性要求较高的数据，可以通过与数据技术服务商合作，使用特定系统接口等相关方式采集数据。

12、比如八度云计算的数企BDSaaS，无论是数据采集技术、BI数据分析，还是数据的安全性和保密性，都做得很好。

13、数据的采集是挖掘数据价值的第一步，当数据量越来越大时，可提取出来的有用数据必然也就更多。

14、只要善用数据化处理平台，便能够数据分析。

1、大数据技术在数据采集方面采用了哪些方法、离线采集、工具、ETL。