用于扫描数据异常价格变化检测的协变量相关控制限
统计方法学
2020-02-07 v2
摘要
目前,称为扫描数据的消费品大规模销售数据是通过在零售点扫描单个产品的条形码获得的。许多国家统计机构使用扫描数据构建消费者价格统计。在此过程中,如同其他统计流程一样,检测销售价格中的异常交易是分析中的重要步骤。进行此类离群值检测的常用方法有四分位法、Hidiroglou-Berthelot 法、抗差栅栏法以及 Tukey 算法。这些方法仅基于价格变化的信息,而未利用扫描数据中同样可用的其他协变量(例如销售量或零售店类型)。本文提出一种考虑附加协变量即销售量的异常价格变化检测新方法。我们假设价格变化对数的方差是销售量的平滑函数,并根据先前观测数据估计该函数。我们通过数值实验展示了新方法相对于现有方法的优势。我们还将各方法应用于韩国工商会 2013 至 2014 年间按周收集的实扫描数据,并比较其表现。
引用
@article{arxiv.1912.01832,
title = {Covariate-dependent control limits for the detection of abnormal price changes in scanner data},
author = {Youngrae Kim and Sangkyun Kim and Johan Lim and Sungim Lee and Won Son and Heejin Hwang},
journal= {arXiv preprint arXiv:1912.01832},
year = {2020}
}