Sur le site bêta du campus : conceptions architecturales, expérience opérationnelle et principaux défauts de produit

Tester des produits réseau dans un site bêta pour réduire la possibilité de défauts trouvés par les clients est une phase critique avant la commercialisation. Nous concevons et déployons un site bêta innovant sur le campus de l'Université Nationale Chiao Tung, Hsinchu, Taïwan. Il peut être utilisé par les développeurs pour tester et déboguer des produits, tout en maintenant la qualité du réseau pour les utilisateurs du réseau. Pour satisfaire les besoins des développeurs, nous mettons en place des environnements et des mécanismes, tels qu'une variété de zones de test pour plusieurs types de produits ou systèmes sous test (SUT), le contrôle à distance, les degrés de volume de trafic et le profilage du trafic. Pour les utilisateurs du réseau, nous mettons en place des mécanismes de détection des pannes, de notification et de récupération. Les utilisateurs du réseau du site bêta sont tous des volontaires. Les résultats des tests montrent que le test en site bêta est efficace pour trouver des défauts de stabilité et de compatibilité. La période allant du début d'un test jusqu'à la découverte du prochain défaut est appelée le temps avant défaillance (TTF). Nous l'appelons convergé si le TTF dépasse quatre semaines, et le ratio de convergence est le pourcentage de SUT qui atteignent la convergence. Nous constatons que le TTF augmente avec une durée de test plus longue, ce qui signifie que la qualité du produit s'améliore grâce aux tests en site bêta. Cependant, les ratios de convergence ne sont que de 7 et 20 % pour des durées de test d'un mois et d'un an, respectivement, ce qui signifie que peu de produits fonctionnent parfaitement sur une longue durée. Les ratios de convergence indiquent également qu'il faut beaucoup plus de temps pour améliorer la qualité du produit afin qu'il soit convergé. Par conséquent, si l'on considère à la fois le timing marketing et la qualité du produit, un mois est notre durée minimale suggérée pour des produits bas de gamme et à cycle de vie court. Cependant, nous recommandons un an comme durée minimale pour des produits haut de gamme et à long cycle de vie.