在数据矩阵中使用正则化奇数值分解方法对缺失值进行归算
Sergio Arciniegas-Alarcón1, Marisol García-Peña2, Wojtek J Krzanowski3
1Universidad de La Sabana, Facultad de Ingeniería, Chía, Colombia.
本研究引入了一种规范化单数值分解 (SVD) 归算方法,用于处理统计分析中缺少的数据. 增强方法提供了竞争性性能,在各种场景中提高了数据归算质量.
科学领域:
- 统计 统计 统计 统计
- 数据科学数据科学数据科学
- 生物信息学是一种生物信息学.
背景情况:
- 统计分析通常需要完整的数据矩阵,但缺失的数据是数据库构建的常见挑战.
- 估计和归算缺失的数据是维护数据完整性和实现可靠分析的关键步骤.
研究的目的:
- 提出和评估一种新的归算方法,以提高数据矩阵的完整性.
- 通过将正规化纳入单数值分解 (SVD) 来提高缺失数据归算的质量.
主要方法:
- 一种修改后的归算技术,将回归与低级近似结合起来.
- 实现正规化的SVD,通过交叉验证确定正规化参数.
- 通过使用来自多环境试验的十个现实世界数据集进行评估,数据缺失的百分比不同.
主要成果:
- 规范化的SVD归算方法证明了与经典方法相比具有竞争力的性能.
- 提出的方法在几个经过测试的场景中显示出优异的结果,有效地处理缺失的数据.
- 在计算算法中包含一个处罚标准,使自身向量和自身值平滑,防止过拟合.
结论:
- 正规化的SVD归算方法是解决多变量矩阵中缺失数据的强大而有效的技术.
- 这种方法提供了更好的归算质量和计算稳定性,特别是在处理复杂数据集时.
- 该方法的普遍适用性扩展到需要多变量数据分析的各种领域.
更多相关视频
07:10Untargeted Liquid Chromatography-Mass Spectrometry-Based Metabolomics Analysis of Wheat Grain
Published on: March 13, 2020
10:03Proton Transfer and Protein Conformation Dynamics in Photosensitive Proteins by Time-resolved Step-scan Fourier-transform Infrared Spectroscopy
Published on: June 27, 2014
相关概念视频
Residuals and Least-Squares Property
If the observed data point lies above the line, the residual is positive, and the line underestimates the actual data value for y. If the observed data point lies below the line, the residual is negative, and the line overestimates the actual data value for y.
The process of fitting the best-fit...
Estimating Population Mean with Unknown Standard Deviation
William S. Gosset (1876–1937) of the...
Estimating Population Standard Deviation
One-Compartment Open Model: Wagner-Nelson and Loo Riegelman Method for ka Estimation
On...
Estimating Population Mean with Known Standard Deviation
The confidence interval estimate will have the form as follows:
(point estimate - error bound, point estimate +...
Multiple Regression
Farmers can use multiple regression to determine the crop yield based on more than one factor, such as water availability, fertilizer, soil properties, etc. Here, the crop yield is the response or dependent variable as it depends on the other independent variables. The analysis requires the construction of a scatter plot...
