PyconFr

Strasbourg, 26-29 Octobre

PyConFR 2013 - Strasbourg du 26 au 29 octobre 2013

dimanche 14:00:00–14:30:00

Vagrant, packer et un peu de ruby pour automatiser des builds complexes

David Cournapeau

Audience level:
Intermediate

Description

Les outils tel que vagrant et packer sont souvent présentés comme solutions pour la parité "dev/prod", mais j'aimerais ici montrer comment utiliser ces mêmes outils pour des builds reproductibles, prenant l'exemple de la fabrication de 'wheel' pour numpy et scipy.

Abstract

Introduction

Tout le monde n'a pas la chance de ne dépendre que de paquets 100 % python. Python est devenu un outil de choix pour le calcul numérique, mais des paquets tels que numpy, scipy ou scikit-learn dépendent de librairies C, C++ et même Fortran qui dépendent fortement des plateformes.

J'aimerais présenter les outils packer et vagrant comme une solution pour produire des builds 100 % reproductibles. S'appuyant sur la virtualisation, ils permettent d'appliquer les principes de reproduction non seulement pour unix, mais aussi os x et même windows.

Le concept de provisionnement, et son application au problème de "packaging"

Cette section présentera tout d'abord la nécessité de reproduction pour la compilation, et justifiera pourquoi les VM sont les outils les plus adéquats aujourd'hui si l'on veut supporter toutes les plateformes usuelles, en particulier windows:

  • architectures "3-tier" pour le provisionnement

  • outils disponibles pour chacune des 3 couches

  • présentation de vagrant et packer

vagrant, un outil simple pour la réutilisation de VM

Cette section commencera par illustrer les problèmes usuels du partage des VM entre développeurs, et montrera comment vagrant peut résoudre ces problèmes:

  • le provisionnement comme solution au manque de transparence usuel avec les VMs

  • flexibilité et traçabilité grâce à la combinaison chef/puppet/salt + vagrant

packer, un complément à vagrant

Vagrant suppose l'existence de 'base box', qui sont des images d'OS avec juste ce qu'il faut pour "bootstrapper" la suite du provisionnement. Packer est un outil qui permet de créer ses propres images:

  • illustration du fonctionnement de packer

  • cibler plusieurs technologies de virtualisation à partir d' un même template: virtualbox, vmware, mais aussi ec2.

Example pour la compilation de paquets 'wheel' pour numpy/scipy

Cette partie sera plus didactique, et basé sur un exemple réel pour compiler un wheel de numpy et scipy sur windows. L'exemple utilisera à la fois vagrant, packer et chef.

Sponsors