Merge "jjb: Add dev_review_efficios-www"

Merge "jjb: Add dev_review_lttng-www"

jjb: Add dev_review_efficios-www

Change-Id: I3c73146fafa6a8a898daaeb67f5d5f4c821b1765
Signed-off-by: Kienan Stewart <kstewart@efficios.com>

jjb: Add dev_review_lttng-www

Change-Id: I924fdbb835b7767f62aa25bc1eeea94e3b61746c
Signed-off-by: Kienan Stewart <kstewart@efficios.com>

jjb: Update recent Linux kernel LTS versions

C.f. https://www.kernel.org/category/releases.html accessed on
2023-12-01

Change-Id: I60d6252eaa1b73d3c9e4390d0fb76fecc62cee7b
Signed-off-by: Kienan Stewart <kstewart@efficios.com>

jjb: Add older LTS kernel versions

lttng-modules stable-2.13 supports Linux >= 3.0 at this time. When
`dev_review_` jobs for this branch are run, the version ranges are set
with `kverceil` and `kverfloor`, then filtered according to
`lts-head`. Since only more recent LTS kernels were added to
`lts_kversions`, CI tests weren't running against as wide of a range
of kernels as suggested by the project's support matrix.

Change-Id: Id49eca88732ed2cdd840e717e13c9161b35f2e81
Signed-off-by: Kienan Stewart <kstewart@efficios.com>

Merge "ansible: Add group roles for building ci/dev images"

Merge "ansible: Add role for developer tools"

Merge "ansible: Use 'compilers_legacy_install' to control legacy CC installation"

Merge "ansible: lxd: Disable secureboot on the ci-rootnode profile"

ansible: Add group roles for building ci/dev images

Change-Id: I7c1ac127fd43d7b9507c0f9672f9800604dc48d3

ansible: Add role for developer tools

The idea of the developer tools roles is to provide commonly used by
people working interactively in an environment on LTTng or other
projects.

This first pass is based on https://github.com/jgalar/lttng-dockerfiles

Change-Id: I2b822602dfeb08bf59ab5094cee2f0554845a614

ansible: Remove lttng-scope role

Change-Id: Ied03ebfa715c2e26f688418ba1948d299f69c0d5
Signed-off-by: Kienan Stewart <kstewart@efficios.com>

jjb: Remove coverity build options related to lttng-scope

Change-Id: I9eded456cd58e5ccd55559c01b1060813f01a530
Signed-off-by: Kienan Stewart <kstewart@efficios.com>

ansible: Use 'compilers_legacy_install' to control legacy CC installation

Change-Id: Ib82813759364dd7227206f3dd4e6d8d95b720b2e

ansible: lxd: Disable secureboot on the ci-rootnode profile

The rootnodes are typically VMs (currently managed via libvirt rather
than lxd). However, the profile is still useful when launching VMs
from images for testing, eg.

lxc launch -p default -p ci-rootnode --vm images:debian/10/cloud/amd64

Without disabling secureboot, extra steps are required to load any
built kernel modules.

Change-Id: I65ec94cf6e2891c27e437a3b1a4e8126f81487da

jjb: Stop using jgit for lttng-tools jobs

The CI master and the Debian workers are using a more recent
libcurl3-gnutls which doesn't seem to suffer from the same issues when
fetching tags from some of the gerrit repos.

Refs #1532

Change-Id: I972f17572ae30a2394944b716bebf0b5d5824cc5

jjb: coverity: fix for curl 8.4

We upgraded curl to work around a git clone issue but this new version
doesn't support combining '--form' or '--data' with '--continue-at'.
Remove the resume support that was added when the Coverity download
server was flaky, they seem to have fixed the issue on their side.

Change-Id: I9907a1cba903a73a8221a5ce490c39d82e2d4769
Signed-off-by: Michael Jeanson <mjeanson@efficios.com>

ansible: Install libcurl3-gnutls from bookworm-backports

In the CI builds, we're seeing an issue where certain projects hang
and fail to checkout the gerrit refs.

Eg. ```
git init .
git fetch --tags --force --progress -- \
  https://review.lttng.org/babeltrace \
  +refs/heads/*:refs/remotes/origin/*
git fetch --tags --force --progress -- \
  https://review.lttng.org/babeltrace \
  refs/changes/*:refs/changes/*
```

Not all repositories are affected. There seems to be some type of
content in the gerrit repository that triggers the issue.
After some testing, the version of libcurl3-gnutls available in
bookworm-backports (8.4.0-2~bpo12+1) doesn't seem to be affected
while the version in Debian bookworm (7.88.1-10+deb12u4) fails.

Fetches via SSH are not affected.

Refs #1532

Change-Id: If4b8ca62d5a512c7cccc2225b180b91d3832987d
Signed-off-by: Kienan Stewart <kstewart@efficios.com>

jjb: Cleanup system tests email notification recipients

Change-Id: Ibf861c81fc0a3130f12edb9f52f52858a1d9dd73
Signed-off-by: Kienan Stewart <kstewart@efficios.com>

jjb: babeltrace: Add 'isort' to pylint jobs

Requested by Simon, the script makes sure it doesn't run on stable-15
and stable-2.0 where it's not supported.

Change-Id: Ia4617feff900fe7ca9542c06974f1b45371d011b
Signed-off-by: Michael Jeanson <mjeanson@efficios.com>

jjb: Add jobs for lttng-docs

Change-Id: I92bea15063de5d942a0e095109c4b6a4d5656b9d
Signed-off-by: Kienan Stewart <kstewart@efficios.com>

jjb: Add latest Ubuntu jammy kernel ranges for lttng-modules

Change-Id: I1245ee2f27d3bf6dcb6536d210c4fb6515cd6354

jjb/ansible: Drop support for Ubuntu bionic

Bionic reached it's end of life in June 2023

Change-Id: I1a874090a0360be7d962c1b78c2116716420745d
Signed-off-by: Kienan Stewart <kstewart@efficios.com>

jjb: normand: use virtualenv instead of venv

Virtualenv is installed on the nodes, not venv currently.

Change-Id: I2875888a792d484c8bacb5a1f94aea807c0bd949
Signed-off-by: Michael Jeanson <mjeanson@efficios.com>

jjb: add Normand job

Signed-off-by: Philippe Proulx <eeppeliteloop@gmail.com>

jjb: lttng-modules: Add riscv64 to crossbuilds

Change-Id: I979165f270138f0daae63589a84b784bfa8b71fb
Signed-off-by: Michael Jeanson <mjeanson@efficios.com>

jjb: babeltrace-benchmark: update requirement.txt for deb12

Change-Id: If47ef5d42d34c220e02199bc16953a75ecd85567
Signed-off-by: Michael Jeanson <mjeanson@efficios.com>

jjb: babeltrace-benchmark: fix job for deb12

Change-Id: Ie1623b1c64ea603ecdc8a4a97441b845c4fa4f76
Signed-off-by: Michael Jeanson <mjeanson@efficios.com>

wip: ivc

Change-Id: Ia70ca04036a9ddfc92727a8ea620afe3ccd16f96

jjb: lttng-modules: add floor for ubuntu riscv builds

Change-Id: I1bcb92e8a4f727364d6fc887167b436f2481066b
Signed-off-by: Michael Jeanson <mjeanson@efficios.com>

jjb: lttng-modules: update coverity for deb12

Change-Id: I4194aeb8d37d2211e79d1e36fc26ccf6897cd944
Signed-off-by: Michael Jeanson <mjeanson@efficios.com>

jjb: lttng-modules: refactor triggers

Refactor triggers for lttng-modules kernel buils.

'(cross)build-vanilla':
  - hourly check for lttng-modules commits
  - daily (22:00) check for new kernel tags

'fullbuild-vanilla':
  - friday at midnight check for lttng-modules commits

'build-{UBUNTU}':
  - hourly check for lttng-modules commits
  - saturday at midnight check for new ubuntu kernel tags

'build-rt':
  - hourly check for lttng-modules commits
  - sunday at midnight check for new rt kernel tags

Change-Id: I9b827d926f89c81f49e6689b3c12f9688ae7ede4
Signed-off-by: Michael Jeanson <mjeanson@efficios.com>

jjb: Do not test python2 agents in lttng-tools release builds

The nodes that run lttng-tools release jobs no longer have python2

Change-Id: If86f0ca782633d1b7ea40ddaff3fce8032676955
Signed-off-by: Kienan Stewart <kstewart@efficios.com>

ansible: Portability fixes for reusing modules / Debian trixie

While configuring my workstation with ansible, I needed
to make some adjustments in order to re-use some of the
modules: either by needing to support Debian trixie, to
run the tasks out of the context of the lttng-ci inventory,
or to disable some unwanted configurations.

@see https://git.internal.efficios.com/kstewart/workstation-config

Signed-off-by: Kienan Stewart <kstewart@efficios.com>
Change-Id: I1edbe413176b519e4981369fb18b4b18cdf52f59

jjb: lttng-modules: refine patch version ranges

Change-Id: Ic173f4102d7dfb1dd83cf67ff26eb47ee89e7d5a
Signed-off-by: Michael Jeanson <mjeanson@efficios.com>

jjb: lttng-modules: cleanup and add logging to PARAM builds

Change-Id: Id9e1f44621adcd0c4d6438c5a7ae488f7b7db33d
Signed-off-by: Michael Jeanson <mjeanson@efficios.com>

jjb: babeltrace: add 'ctf2' review jobs

Add review jobs for the temporary 'ctf2' branch.

Change-Id: Idf342678962546a3300d52057c31fb5693beddc1
Signed-off-by: Michael Jeanson <mjeanson@efficios.com>

jjb: lttng-modules: many kernel build fixes

Change-Id: I3f7a0601c543e4f4a37fe29fd538c3299661e7f2
Signed-off-by: Michael Jeanson <mjeanson@efficios.com>

jjb: binutils-gdb: set MAKEINFO=true during make install

Some builds fail because some directories try to invoke makeinfo during
"make install", presumably because we passed MAKEINFO=true during the
make phase, to skip building the doc.  Pass MAKEINFO=true to make
install as well to skip it again.

Change-Id: I1dc0eb9d0a4307a889aa37daaaa6b2afe765cbaf
Signed-off-by: Simon Marchi <simon.marchi@efficios.com>

jjb: lttng-modules: adjust kernel version ranges in param build patches

Change-Id: Ia70e1eedd6435d02095b1c1e898fb4f0665e5949
Signed-off-by: Michael Jeanson <mjeanson@efficios.com>

jjb: Run lttng-tools ust-java-tests by default

Change-Id: If48c48a40a17aac07ebc55b39d866896c8c09588

ansible: Enable grok-pull@x.service to start after reboot

Change-Id: Idb8e3968260443b052d8a6299c4a67d24e72fa80

ansible: Mask networking.service on Debian when starting to manage netplan

Change-Id: I59bb6d399b274bcb7f35ab777d776d7bdef7407d

ansible: Manage network configuration to set static IPs on rootnodes

Change-Id: Ie49353e1ebf33951b751cc733d451e45e666c77a

jjb: Add build fixes for rt kernels

Change-Id: I200198fe51fe65ac46ee0805794245bcfb8a414a

jjb: lttng-modules: update ubuntu crossbuild jobs

Change-Id: Id25a3d69c61572e34b77e006ddb73da4b0cafa0a
Signed-off-by: Michael Jeanson <mjeanson@efficios.com>

jjb: lttng-modules: enable riscv64 configs in ubuntu builds

We now have a riscv64 toolchain on the debian 12 nodes.

Change-Id: I1b53adca4cff5e98a0d9f4f937bc00233531a412
Signed-off-by: Michael Jeanson <mjeanson@efficios.com>

jjb: lttng-modules: Add hwe kernel to jammy

Change-Id: Idf926c175b42113a4a9eb8ace5e776b693674f70
Signed-off-by: Michael Jeanson <mjeanson@efficios.com>

jjb: lttng-modules: add patch for v4.5 to v4.8 with gcc 11 on armhf

Change-Id: Ibc4f42825b7157880606053a6c9b0a08bc7de70e
Signed-off-by: Michael Jeanson <mjeanson@efficios.com>

jjb: lttng-modules: refine range for elfcore.o patch

Change-Id: I200aaf9ea444a4ad7c72ab24c3ca7962c4a7eb12
Signed-off-by: Michael Jeanson <mjeanson@efficios.com>

jjb: lttng-modules: fix for v4.4 to v4.4.256

Change-Id: I2fbcf8655a5f9c970e8ca813c5e3b483d0700854
Signed-off-by: Michael Jeanson <mjeanson@efficios.com>

jjb: lttng-modules: fix shellcheck warnings in param build script

Change-Id: I67a8318465914ebd9553b917d7ebf82b953012e9
Signed-off-by: Michael Jeanson <mjeanson@efficios.com>

jjb: Refine range of patching for duplicate decls of __force_order

Change-Id: I854ab00149c615aaf4d6544281119bc6c8e60aaf

jjb: Disable netronome and micrel phy drivers

These drivers cause build issues on many legacy kernels with modern toolchains

Change-Id: Ib6f41bb694d6357a84b555b2b1408447d738ea56

ansible: Correct git mirror update script initial clone

When '--mirror' isn't set, the remote references aren't always
pulled. To fix an existing repository that is just a bare clone, the
following commands can be run:

```
git remote rm origin
git remote add --mirror=fetch origin URL
git fetch --all
```

Change-Id: I9b713fe2dae523ba70a387adef23e87f98bb059a

jjb: Extend version range of genheaders patch to cover v4.18.16-rt9-rebase

Change-Id: I1d5ea08b1fd3786e21be77e046a548d3bd633b26

jjb: Add workaround for newer pahole versions with focal kernels

Change-Id: I4d5f175cadd27bf06dc4af9351e1cb1b2baa3bb9

jjb: lttng-modules: fix typo 'mark_args' -> 'make_args'

Change-Id: Idb76b5f4fef0177ba2e87d58064747f3cb775803
Signed-off-by: Michael Jeanson <mjeanson@efficios.com>

lava: Update PDU port for cloud08

While the PDU port is 8 when looking from the main apc account, when
connecting as the lava user the port should be '1' since it's the only
visible device.

Eg.

------- Outlet Control/Configuration ------------------------------------------

     1- cloud08                  ON

Change-Id: I2bcdfc329a4d9ae8bb8f1fc797e1c977107b7a35

ansible: Remove host_vars file for cloud06

The node is being decomissioned

Change-Id: I3a5025106201bb0073e180a62cee03e46056fa3f

jjb: Use jgit when cloning lttng-tools for review

This is done to work around hangs/timeouts that are happening with
more recent git versions and the lttng-tools repo on gerrit in
particular.

Refs #1532

Change-Id: Ibd67a4811e7ef2ef1a2d662f7ba7f10b78aeb19c

ansible: Download patched iPXE image to boot VMs for LAVA testing

Change-Id: Ic065ebd15897755a7583c1807c1c0edaaecc38a0

jjb: lttng-modules: add platform axis to param crossbuild job

Change-Id: I5c83fd20013e8396a0fe8d6102b0c5175d3f05d8
Signed-off-by: Michael Jeanson <mjeanson@efficios.com>

jjb: lttng-modules: extract tar with pbzip2

Change-Id: Ie1d1e3b7ed54aa1bb934f51b4f0f27c48304f8e5
Signed-off-by: Michael Jeanson <mjeanson@efficios.com>

jjb: Run system tests on deb12-amd64 nodes

Change-Id: I657902b4ebf7eb7456b0c7e021a17859303955bc

Merge "ansible: Remove unused cloud hosts"

jjb: lttng-modules: remove ubuntu xenial builds

Change-Id: I6ea800dad02d906eb61ff7c508ce8a27ddc3d864
Signed-off-by: Michael Jeanson <mjeanson@efficios.com>

ansible: Remove unused cloud hosts

Change-Id: Idb1c0363e10ff38a81105b9b819dfc0bb140e7af

lava/ansible: Switch VM nodes to ci-host-amd64-2d

Change-Id: Ia5b72defd7ac5963a6731714f16d3412140a3041

jjb: lttng-tools: parametrize buildtype in rootbuild jobs

Change-Id: I68b94670351eed4c97737c9266fc3f11c1221f8e
Signed-off-by: Michael Jeanson <mjeanson@efficios.com>

jjb: Delete remaining bionic-amd64 jobs

Change-Id: Id8b99e5479384df785d8bc6e3935697265490e2b
Signed-off-by: Michael Jeanson <mjeanson@efficios.com>

jjb: Run lltng-modules_PARAM_build on deb12-amd64 nodes

Change-Id: I7541afe79d15464b9ecee06c2a0958142034cf41

jjb: Adjust gcc and flags for building old kernels with gcc-11/12

A number of small tweaks are required for building with gcc 11, 12,
and 4.8 with more recent binutils.

Change-Id: I2c9dc91eb8a9ce9f4e237e82a2590931a2857bda

ansible: Disable multilib for gcc 4.8 powerpc64le

This enables the support for '-m32' which is required when compiling
powerpc64le kernels

Change-Id: I61ec67220aa677e3339f6c10278b905347ea1cf7

ansible: Deploy legacy cross compilers on Debian nodes

Change-Id: Idc7f5910d8b3c0f5fedd20f11e534cce93017d23

ansible: Install additional packages for binutils-gdb runners

Change-Id: I94611ff159f92a3debf484d6afea3888fec8a3f9

ansible: Replace deb12 i386 instances from old cloud

Change-Id: Ib504de8ad45f171faa406f2ce6d3dbb5a67d301c

jjb: lttng-tools: fix ust java tests on deb12

Change-Id: Ib468e32e809130ddfbd98bb484930bd3ce165398
Signed-off-by: Michael Jeanson <mjeanson@efficios.com>

ansible: remove deprecated jammy nodes

Change-Id: I35b970d1fc5cf83a98c172d5d69a086b280bbf21
Signed-off-by: Michael Jeanson <mjeanson@efficios.com>

jjb: babeltrace: disable Werror on release build

Change-Id: I155af675f63b3135e93880f9af0ab16acaf7e883
Signed-off-by: Michael Jeanson <mjeanson@efficios.com>

jjb: integration: move amd64 jobs to deb12

Change-Id: I5f51f0e353725962c9a40680de15cf7f977cd97c
Signed-off-by: Michael Jeanson <mjeanson@efficios.com>

jjb: lttng-ivc: move amd64 jobs to deb12

Change-Id: I8879305043e87517b669f60e2c30b31e5461cdc6
Signed-off-by: Michael Jeanson <mjeanson@efficios.com>

jjb: Add dev lttng-modules master crossbuild job

Change-Id: I2aeef3845b0c976df31ad538269027251b6f3a11

ansible/jjb: Run lttng-tools 2.12 rootbuild on nodes with linux 5.x

The Debian 12 nodes run with Linux 6.1, which is not supported by
lttng-modules stable-2.12. Since the lttng-tools rootbuild jobs build
and test the modules component, those jobs failed.

A new libvirt instance was provisioned and both linux-image-amd64 and
linux-headers-amd64 installed from Debian bullseye and set to held so
there an instance with an appropriately versioned kernel to exercise
the lttng-tools rootbuild with lttng-modules tests.

Change-Id: Ie9234880b2785c5fa8d03dd7297fcc0d926b183c

ansible: remove deprecated rootnodes

Change-Id: Iba6c99c1a1ca2fafd15f4225b20b19f382110a93
Signed-off-by: Michael Jeanson <mjeanson@efficios.com>

ansible: Correct launcher delegate host for i386 rootnode

Change-Id: I57881eda6d01bb70b04efc5ad88a468c230ab36f
Signed-off-by: Michael Jeanson <mjeanson@efficios.com>

wip: lttng-tools

Change-Id: Ida59fe798ec37c17bb3b2c16c9944ad8b90a2097

jjb: liburcu: add atomic builtins conf to linuxbuild master

Change-Id: I749c4edb30dce57c1b9dcd5f92df95a74e42c30b
Signed-off-by: Michael Jeanson <mjeanson@efficios.com>

jjb: babeltrace: ignore pragma warnings on MacOS

Ignore prama warnings from Glib on MacOS

  plugin.c:85:4: warning: Deprecated pre-processor symbol [-W#pragma-messages]
                          PYTHON_PLUGIN_PROVIDER_FILENAME, NULL);
                          ^
  plugin.c:36:79: note: expanded from macro 'PYTHON_PLUGIN_PROVIDER_FILENAME'
  #define PYTHON_PLUGIN_PROVIDER_FILENAME "babeltrace2-python-plugin-provider." G_MODULE_SUFFIX
                                                                                ^
  /opt/local/lib/glib-2.0/include/glibconfig.h:289:30: note: expanded from macro 'G_MODULE_SUFFIX'
  #define G_MODULE_SUFFIX "so" GLIB_DEPRECATED_MACRO_IN_2_76
                               ^
  /opt/local/include/glib-2.0/glib/glib-visibility.h:889:39: note: expanded from macro 'GLIB_DEPRECATED_MACRO_IN_2_76'
  #define GLIB_DEPRECATED_MACRO_IN_2_76 GLIB_DEPRECATED_MACRO
                                        ^
  /opt/local/include/glib-2.0/glib/gmacros.h:1297:31: note: expanded from macro 'GLIB_DEPRECATED_MACRO'
  #define GLIB_DEPRECATED_MACRO _GLIB_GNUC_DO_PRAGMA(GCC warning "Deprecated pre-processor symbol")
                                ^
  /opt/local/include/glib-2.0/glib/gmacros.h:1296:33: note: expanded from macro '_GLIB_GNUC_DO_PRAGMA'
  #define _GLIB_GNUC_DO_PRAGMA(x) _Pragma(G_STRINGIFY (x))
                                  ^
  <scratch space>:11:6: note: expanded from here
   GCC warning "Deprecated pre-processor symbol"
       ^

Change-Id: Iacccd4949caf618e67b94987ab2e9511b33958d1
Signed-off-by: Michael Jeanson <mjeanson@efficios.com>

jjb: lttng-ust-benchmarks: move amd64 jobs to deb12

Change-Id: Ic19f735be9a72226ad1684e297252c41d349d6ba

jjb: lttng-ust: move amd64 jobs to deb12

Change-Id: I7069a42347f87ab9eea4b9d2ade463d1847bc4d0

jjb: liburcu: move amd64 jobs to deb12

Change-Id: I53a3b7ab8e0a8da3f4d823ce73085177435df47a
Signed-off-by: Michael Jeanson <mjeanson@efficios.com>

jjb: librseq: move amd64 jobs to deb12

Change-Id: I701efbe959bdcf369b85654c865f372e357f0d2c
Signed-off-by: Michael Jeanson <mjeanson@efficios.com>

jjb: babeltrace: move amd64 jobs to deb12

Change-Id: I1b62397b3fa458fbb814e17093b915ae45dfbdf7
Signed-off-by: Michael Jeanson <mjeanson@efficios.com>

ansible: Install gcc-11 and gcc-12 cross compilers on Debian

The default packages, eg. gcc-riscv64-linux-gnu, only installed the
most recent vers (eg. 12 on Bookworm).

Change-Id: I632ff54f7eceeb6e373e2026fb2fb828c2953d6d

jjb: Use linuxbuild as jobtype for lttng-tools rootbuilds

When the buildtype is 'build', the artifacts will be looked for in the
the '_build' jobs which aren't valid for the new root node tags

Change-Id: I2e7a28bc2128f94513c302f32aae21a321820ad3

jjb: Run lttng-ust-java-tests when testing lttng-tools

Change-Id: I379ec43d87c4a75be7c38b22aa35c4a13cf2bef1

Merge "ansible: Do not update jenkins node during ci-instances when not set"

jjb: lttng-www: move to deb12 builders

Change-Id: I5e8fe708af25aa568293da6e6b6b9d0e4c87fb4a
Signed-off-by: Michael Jeanson <mjeanson@efficios.com>