回归问题中的k近邻加权方法研究

摘要 针对回归问题分析了常用的k近邻加权回归算法的特点，给出一种基于k近邻的改进加权方法.根据每个样本在整个样本空间中所处的位置的不同来计算不同的权重值，更好地描述了样本点的局部性质.理论上，我们给出了改进方法与原始计算权重方法所得的权重值之间的关系，证明了我们的改进方法能够更好的描述离群点和具有重要局部性质的样本点.另外，我们还将这种新的加权方法推广到支持向量回归机和最小二乘支持向量回归机中，实验验证了所提方法的有效性