大数据时代下数据质量的挑战与应对策略研究
来源:用户上传
作者:
摘 要：当今各行各业都在注重数据的采集以及数据库的完善，通过大量数据的分析对企业管理、教育教学、经营销售等进行有效指导，提升管理人员的工作效率与工作质量，但大数据时代下，数据的泛滥性以及网络信息安全等给数据质量和数据安全造成了极大的影响，数据管理人员必须及时对各种挑战做出相应的应对措施，以保证自身数据库的数据质量，提高由大数据分析带来的帮助与指导质量。基于此，本文首先简要分析了大数据时代中数据的作用与挑战，随后从四个方面讲述了提升数据库数据质量与安全的措施。以此来供相关人士交流参考。
关键词：大数据;数据采集;数据质量
数据质量包含数据精度、数据范围、数据安全等方面，尤其在精度和范围方面能够影响数据分析的结果与精度，关系着数据分析能否为人们提供高质量的指导内容。数据质量不佳，会使数据分析与真实结果产生巨大的偏离，对管理人员的各种管理和指导工作产生严重影响，甚至使管理人员的管理规划产生错误。尤其是在各大企业当中，可能造成严重的利益损失，严重阻碍企业的正常运转，甚至导致企业破产等严峻事故的发生。
一、大数据时代中数据的作用与挑战
（一）大数据的作用
大数据时代，人人追求数据的采集与分析，甚至在各大互联网企业当中，不惜花费重金采集用户和潜在用户的个人信息，而在大数据时代，市场企业的用户数据就是企业自身利益的所在，能够帮助企业进行更好的规划与分析，使其能够在生产制造与经营销售方面更容易抓住客户的需求，从而使自身的利益得到伸展。而在教育教学当中，对学生的各种信息数据进行处理，能够及时了解学生的学习情况、家庭环境以及心理状态等，帮助学校建立完善的教育教学模式，及时对学生进行良好的沟通交流，排解其自身不良情绪与心理等[1]。
（二）数据精度问题
当前企业在数据收集时，由于客户自身对个人隐私的重视程度较高，难以收集到准确无误的数据，因此在数据精度方面难以保证数据分析的正确性，导致数据分析的结果对于企业的指导意义较低。而对数据精度的分析与调整是企业数据管理人员的一大挑战，只有保证数据的精度符合分析条件，才能确保企业能够根据数据的指导进行有效的发展。
（三）数据全面问题
当前企业数据收集主要来源于自身信息数据的填写以及企业对客户行为习惯的收集分析，而导致企业收集的各种数据十分散乱，在得到大量数据的同时，有效数据占比较少，无效数据占据了大量的数据库存储空间，极大的增加了数据处理的任务量，同时也降低了数据分析的质量。因此在企业数据的管理当中，如何保证有效数据足够全面，且无效数据相对占比较少，降低数据管理和处理难度，提高数据分析准确度，成为数据管理人员需要应对的另一大挑战。
（四）数据安全问题
数据库放置于网络之中，可以不受地域限制的在互联网中访问，但同时也将其暴露在了网络黑客的视野之下，容易受到不法分子的攻击，造成數据丢失、用户隐私泄露等信息安全问题，甚至会导致企业机密流出，使企业遭受巨大的冲击和损失，同时服务器是数据库的基础，服务器的运行和自身设备等都是威胁数据库安全的因素，因此维护数据库的安全也是数据管理人员的核心任务之一[2]。
二、提升数据库数据质量与安全的措施
（一）提高数据采集精度
提高数据质量首先要提高数据采集精度，保证数据库中的信息能够为企业的分析与规划提供准确的指导，而提高数据采集信息的精度可以采用身份验证与错误信息剔除两种方式。第一种信息数据的采集可以根据用户所提供的身份证明，将用户数据与之比对，提高数据录入的严格程度，让用户提供的数据都是真实有效的，一次提高数据库中数据的准确性;而错误信息剔除是通过数据库中的系统，对数据进行规律分析，对严重偏离规律的数据进行标记与剔除，保证数据库内为数据分析提供依据的数据都是真实有效的，以此提高数据精度[3]。
（二）明确数据采集方向
大数据并不是指数据杂乱的大量采集，需要具有一定的采集依据，因此管理人员在进行数据采集时一定要有明确的目标，确定所需采集的内容和方向，防止采集信息数量过大而使大量无效数据占据过多的数据库内存。比如在进行数据采集时，应采集用户的搜索内容以及购买内容，以此来确定用户的兴趣爱好等，而不是对用户的所有浏览信息进行完整的收集，以免难以找到数据分析的重点，增加数据分析的工作量等。
（三）提升数据采集速度
在网络信息时代，数据的更新远超人们的想象，因此企业要对数据进行及时的更新与采集，确保数据库中的信息是企业发展需求的最新信息，以免在进行数据分析时，对过期数据进行分析，使总体的分析结果产生一定的误差，而数据的时效性也是根据各个行业所不同的，因此在一些信息时效性较强的新闻企业等需要对数据进行及时的收集，提高数据采集的速度[4]。
（四）完善数据库自身结构
数据库安全的首要保证是完善数据库自身的逻辑结构，使黑客难以找到数据库的缺陷进行攻击，同时要建立防火墙，对数据的录入与传输进行实时的监控，防止大量数据在短时间内外流，使企业机密以及用户信息泄露等。而对于用户的账户安全，企业要加强用户的登录认证，实行账号密码验证码三位一体的验证方式，确保用户的账户安全，同时为解决用户被盗号的问题，在用户进行资金交易以及异地登录时，要及时根据用户提供的联系方式进行沟通交流，以确保账户为本人操作。
三、结语
在大数据时代下，数据的收集中面临诸多挑战，管理人员要做好相应的工作，不断提升数据质量，保证数据安全，为企业的发展提供完整的规划与分析，从而推动企业的健康发展，提升其市场竞争力。而在学校的教育信息采集中，数据采集的精度和速度都具有良好的保证，但必须维护数据库的信息安全，保护学校的隐私等。
参考文献：
[1]杨玉莹.大数据时代下政府数据开放的挑战与对策研究[J].四川行政学院学报，2017（2）：12-16.
[2]李绥波.大数据时代高校学生管理工作的挑战与对策[J].现代营销，2018（9）：168.
[3]杨道平，简岩，陈佳.大数据时代高等教育统计数据质量保障研究[J].电脑知识与技术，2019，15（09）：17-18.
[4]陈家刚.大数据时代的公共政策评估研究：挑战、反思与应对策略[J].河南社会科学，2019（8）：46-51.
转载注明来源:https://www.xzbu.com/1/view-15146915.htm
