A propos¶

• Je suis Gael « @gawel_ » Pasgrimaud
• Je geek @bearstech

Le choix¶

Photo by Martin Fisch, CC via Flickr

La douleur¶

Photo by Thomas Hawk, CC via Flickr

Le bricolage¶

Photo by (Mick Baker)rooster, CC via Flickr

You see the light¶

Photo by Stuart Williams, CC via Flickr

DIY!¶

• python3
• asyncio
• ssh-agent && ssh

POC¶

• bas niveau (code) mais pas trop
• extensible
• builtin graphs
• testé
• 300 lignes de code

How it works (1/2)¶

• Host
• Task
• coroutines

How it works (1/2)¶

• setup: upload de base de code et récupération d’inventaire
• run
• teardown: nétoyage, rendu de graphs

Hosts¶

• Host
• DockerContainer
• cloud (libcloud / openstack)

A task¶

# -*- coding: utf-8 -*-
from nuka.task import Task


class mytask(Task):

    def do(self):
        res = self.sh(['ls', '/var'])
        return dict(res, changed=1)

    def diff(self):
        res = self.sh(['ls', '/var'])
        diff=self.texts_diff('', res['stdout'])
        return dict(res, diff=diff)

Task¶

• inspection de la stack
• class locale != class distante
• appels shell
• héritage possible
• une tache == une session

Use it (1/2)¶

#!bin/python
import nuka
from nuka.hosts import DockerContainer

from tasks import mytask


async def do_tasks(host):
    res = await mytask()
    print(res.stdout)

nuka.run(do_tasks(DockerContainer('pyconfr')))

Use it (1/2)¶

$ pip install nuka
$ pip install nuka[full]
$ pip install \
  -e git+git@github.com:bearstech/nuka.git#egg=nuka[full]

$ python do_task.py -h

Gantt¶

Use cases¶

• Déploiement initial
• Détection de paquet à mettre à jour (~300 machines)

Pourquoi c’est lent ?¶

Photo by Tintin44, CC via Flickr

Perfs¶

% ./list_hosts | ./benches.py -q -d .01

Got 296 valid results for 296 hosts in 15.19s

                 min       max       avg     count
connect     0.000009  0.000057  0.000012       296
auth_time   0.185978  9.049197  7.170807       296
timeouts    0.000000  0.000000  0.000000       296

Status¶

• taches de bases (apt, file, shell, user)
• support gpg

Known issues¶

• support debian. autres distro incertaines
• flood de ssh-agent. timeout sur un grand nombre de connections (> 150) en fonction du CPU/Net
• docker + systemd

Links¶

• https://pypi.python.org/pypi/nuka
• https://doc.bearstech.com/nuka/