rustploy 0.1.3

Rustploy PaaS daemon — lightweight self-hosted deployment platform
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41
42
43
44
45
46
47
48
49
50
51
52
53
54
55
56
57
58
59
60
61
62
63
64
65
66
67
68
69
70
71
72
73
74
75
76
77
78
79
80
81
82
83
84
85
86
87
88

//! Jobs one-shot (Schedules): execução (`runner`) e agendamento (`scheduler`).

pub mod runner;
pub mod scheduler;
pub(crate) mod source;
pub mod warm;

use crate::store::{self, Db};
use chrono::Utc;
use shared::protocol::LogStream;

/// Fecha, como **interrompidas**, as execuções que ficaram sem fim: um daemon que
/// acabou de subir não tem nenhuma execução viva. Cobre as que rodavam e as que
/// ainda esperavam a vez na fila (a fila é só memória e se perde no restart).
/// Ficam com `success = false`, exit code `-1` e uma linha explicando no log; o
/// agendador dispara o job de novo no horário seguinte. Devolve quantas fechou.
/// Roda no boot, **antes** de o agendador subir.
pub async fn recover_interrupted(db: &Db) -> anyhow::Result<usize> {
    let abertas = store::job_run::list_unfinished(db).await?;
    for run in &abertas {
        let _ = store::job_log::append(
            db,
            &run.id,
            &LogStream::Stderr,
            "==> Execução interrompida: o daemon foi reiniciado antes de ela terminar \
             (ou antes de começar, se ainda esperava a vez na fila)",
            Utc::now(),
        )
        .await;
        store::job_run::finish(db, &run.id, INTERRUPTED_EXIT_CODE).await?;
    }
    Ok(abertas.len())
}

/// Exit code de uma execução interrompida por reinício (o mesmo `-1` que o runner
/// grava quando a execução falha antes de terminar).
pub const INTERRUPTED_EXIT_CODE: i32 = -1;

#[cfg(test)]
mod tests {
    use super::*;
    use ulid::Ulid;

    async fn mem_db() -> Db {
        let dir = std::env::temp_dir().join(format!("rustploy_test_{}", Ulid::new()));
        store::connect(&dir).await.unwrap()
    }

    #[tokio::test]
    async fn execucao_sem_fim_vira_interrompida_com_explicacao_no_log() {
        let db = mem_db().await;
        let esperando = store::job_run::create(&db, "j1").await.unwrap();
        let terminada = store::job_run::create(&db, "j2").await.unwrap();
        store::job_run::finish(&db, &terminada.id, 0).await.unwrap();

        assert_eq!(recover_interrupted(&db).await.unwrap(), 1);

        let r = store::job_run::get(&db, &esperando.id)
            .await
            .unwrap()
            .unwrap();
        assert!(r.finished_at.is_some(), "ganhou um fim");
        assert_eq!(r.exit_code, Some(INTERRUPTED_EXIT_CODE));
        assert_eq!(r.success, Some(false));
        let log = store::job_log::get_for_run(&db, &esperando.id)
            .await
            .unwrap();
        assert_eq!(log.len(), 1);
        assert!(log[0].line.contains("interrompida"), "{}", log[0].line);

        // A que já tinha terminado não é tocada.
        let t = store::job_run::get(&db, &terminada.id)
            .await
            .unwrap()
            .unwrap();
        assert_eq!(t.exit_code, Some(0));
        assert_eq!(t.success, Some(true));
        assert!(
            store::job_log::get_for_run(&db, &terminada.id)
                .await
                .unwrap()
                .is_empty()
        );

        // Idempotente: o segundo boot não acha mais nada.
        assert_eq!(recover_interrupted(&db).await.unwrap(), 0);
    }
}