l'agenda des sorties

Systèmes d'information et gestion des opérations

Intervenant : Will Ma (Columbia GSB)

Salle Bernard Ramanantsoa

Résumé :

Nous étudions la gestion des stocks pilotée par les données, où les demandes sur T périodes sont tirées de distributions indépendantes inconnues, et où nous disposons de N échantillons pour chaque distribution.

Les travaux existants suggèrent que N doit croître (rapidement) avec T pour apprendre une politique quasi optimale.

Nous démontrons que N n'a pas besoin de croître avec T, grâce à une approche d'apprentissage supervisé pour la gestion des stocks pilotée par les données. Cette approche utilise la théorie de la chaîne de valeur tout en exploitant la structure de « stock de base » de la politique de gestion des stocks optimale.

Motivés par notre collaboration avec Alibaba, nous étudions ensuite le même problème dans un contexte où des caractéristiques de grande dimension fournissent des distributions plus précises pour les demandes à venir. Nous adoptons à nouveau une approche d'apprentissage supervisé, en utilisant des données hors ligne et l'apprentissage par renforcement profond (DRL) pour entraîner des réseaux de neurones qui gèrent les stocks en fonction de ces caractéristiques de grande dimension. Là encore, nous exploitons la structure des politiques de gestion des stocks optimales, ce qui, comme nous le démontrons, accélère considérablement l'entraînement de notre modèle d'apprentissage par renforcement profond (DRL) et améliore également la politique finale. Ceci a permis un déploiement complet du DRL pour la gestion des stocks sur la plateforme e-commerce Tmall d'Alibaba, qui gère aujourd'hui plus d'un million d'articles.

Ce travail s'appuie sur deux articles :

- VC Theory for Inventory Policies

- DeepStock: Reinforcement Learning with Policy Regularizations for Inventory Management

réalisés en collaboration avec Yaqi Xie (Chicago Booth) et Linwei Xin (Cornell ORIE) ;

ce dernier est également réalisé en collaboration avec Xinru Hao, Jiaxi Liu, Lei Cao et Yidong Zhang (Alibaba Taobao & Tmall Group).

LIEN VERS LE PREMIER ARTICLE :