Adversarial Validation Approach to Concept Drift Problem in Automated Machine Learning Systems

[raxman0721]

論文

Adversarial Validation Approach to Concept
Drift Problem in Automated Machine Learning
Systems

著者/所属機関

Jing Pan, Vincent Pham, Mohan Dorairaj, Huigang Chen, and Jeong-Yoon LeeUber Technologies, San Francisco, CA, USA{jing.pan, vincent.pham, mohan, huigang, jeong}@uber.com

投稿日付(yyyy/MM/dd)

2020/04/07

1. どんなもの？

train/testで分布が違う際に行うAdversarial Validation Approachにおける3種類の手法を比較した。

1. adversarial feature selection
2. adversarial validation selection
3. adversarial inverse propensity weighting
   を比較した場合にシンプルに1がロバストでtestデータに対する精度がよかったとのこと。

2. 先行研究と比べてどこがすごい？

実務に役立ってとても良い

3. 技術や手法のキモはどこ？

4. どうやって有効だと検証した？

複数のデータセットを比較した。

5. 議論はある？

余計な特徴量を省いてモデルの性能を向上させることよりも、その特徴量が何で分布が違うか等調べることが重要。
また、validationモデルのパラメータ等はどうするのが適切か？

6. 次に読むべき論文は？

7. 実装コード