大数据环境中的分析、挑战与应用：一项调查

大数据是指由社交网络网站、生物医学设备、金融公司、互联网和网站、科学传感器、农业工程来源等生成的海量信息和多样性，包括结构化和非结构化形式。这大量的数据无法使用传统的数据处理系统和技术进行处理。大数据分析是一个从庞大的数据中检查信息和模式的过程。因此，该过程需要一个用于数据收集、传输、存储、处理和分析的系统架构，以及可视化机制。本文回顾了大数据的背景和未来的发展方向。我们首先介绍大数据的历史、背景和相关技术。我们重点讨论大数据系统架构、阶段和大数据分析的类别。然后，我们提出一个开源的大数据框架，以应对一些大数据挑战。最后，我们讨论大数据的不同应用及一些示例。