Merge pull request #2772 from lucab/ups/bump-msrv

cargo: bump minimum Rust version to 1.63

cargo: bump minimum Rust version to 1.63

This bumps MSRV to 1.63, in order to prepare for the next version
of gtk-rs stack.

Ref: https://gtk-rs.org/blog/2022/10/18/new-release.html

Merge pull request #2774 from cgwalters/ci-fedora-fix

ci: Fix case where cosa != buildroot

Merge pull request #2777 from Razaloc/wip/rafaelgarrui/deletepresent

Idempotent delete operation for  OstreeKernelArgs

ci: Fix case where cosa != buildroot

We can't override host binaries in this case.  We'll need
to watch carefully and verify we're still testing things.

Idempotent delete operation for  OstreeKernelArgs

ostree_kernel_args_delete_if_present checks if an argument is present
in OstreeKernelArgs and delete it.

Signed-off-by: Rafael Garcia Ruiz <rafael.garcia@collabora.com>

Merge pull request #2773 from pwithnall/typo-fix

Improve a help string for ostree-commit

ot-builtin-commit: Don’t mention a C function name in a help string

Instead mention the formal name of the format accepted by
`g_variant_parse()`.

Signed-off-by: Philip Withnall <pwithnall@endlessos.org>

ot-builtin-commit: Fix a typo in a command line help string

Signed-off-by: Philip Withnall <pwithnall@endlessos.org>

Merge pull request #2771 from Razaloc/wip/rafaelgarrui/contains

ostree_kernel_args_contains for OstreeKernelArgs

ostree_kernel_args_contains for OstreeKernelArgs

Check if an argument is present in OstreeKernelArgs. This is a way to
make easier idempotent append and delete operations.
ostree_kernel_args_append_if_missing uses it to avoid inserting a
duplicate key.

Closes #2329

Signed-off-by: Rafael Garcia Ruiz <rafael.garcia@collabora.com>

Merge pull request #2765 from cgwalters/drop-openat

rust: Drop `openat` dependency

Merge pull request #2751 from smcv/memdup2

Replace calls to g_memdup() with g_memdup2()

rust: Drop `openat` dependency

We can use cap-std in our tests.

Merge pull request #2764 from cgwalters/bump-cap-std

rust: Update to cap-std 1.0

Replace calls to g_memdup() with g_memdup2()

g_memdup() is subject to an integer overflow on 64-bit machines if the
object being copied is larger than UINT_MAX bytes. I suspect none of
these objects can actually be that large in practice, but it's easier
to replace all the calls than it is to assess whether we need to
replace them.

A backport in libglnx is used on systems where GLib is older than 2.68.x.

Signed-off-by: Simon McVittie <smcv@collabora.com>

rust: Update to cap-std 1.0

This was one source of our semver bumps; let's switch to 1.0.

Merge pull request #2763 from cgwalters/testiso-more-memory

ci: Bump memory for ISO testing flow

ci: Bump memory for ISO testing flow

It seems likely that we're allocating more RAM here.  What we really
need to do is for cosa to express the necessary RAM
requirements declaratively, then we compute pod requirements
from that.

Merge pull request #2762 from lucab/ups/copr-tags

copr: only use libostree tags

copr: only use libostree tags

This adds a tag filter to the logic which emits version labels for
COPR build, so that it avoids mistakenly picking up tags belonging
to the Rust bindings.

Merge pull request #2760 from cgwalters/offline-deploy-no-bwrap

deploy: Don't rebuild selinux policy on first deployment

Merge pull request #2754 from cgwalters/remove-readdir-rand

Remove readdir-rand

Merge pull request #2759 from oglok/http_500

Enabling retry for HTTP 500 internal server error

deploy: Don't rebuild selinux policy on first deployment

Basically, it should not be necessary - the policy should be
up-to-date.  We don't want to force on continual policy rebuilds.

Even trying to run bwrap when we're *not* in a booted
root can cause failures in nested containerization scenarios.

Closes: https://github.com/ostreedev/ostree/issues/2758

Add tests for cases under random 500s

Signed-off-by: Ricardo Noriega <rnoriega@redhat.com>

Enabling retry for HTTP 500 internal server error

Signed-off-by: Ricardo Noriega <rnoriega@redhat.com>
Use G_IO_ERROR_BUSY to represent 500 error

Signed-off-by: Ricardo Noriega <rnoriega@redhat.com>
Make G_IO_ERROR_BUSY independent from glib version

Signed-off-by: Ricardo Noriega <rnoriega@redhat.com>

Merge pull request #2756 from ostreedev/dependabot/submodules/libglnx-4e44fd9

build(deps): bump libglnx from `e701578` to `4e44fd9`

build(deps): bump libglnx from `e701578` to `4e44fd9`

Bumps libglnx from `e701578` to `4e44fd9`.

---
updated-dependencies:
- dependency-name: libglnx
  dependency-type: direct:production
...

Signed-off-by: dependabot[bot] <support@github.com>

Remove readdir-rand

This was only there to reproduce a bug we hit long ago
with bootloader file ordering.  We're extremely unlikely
to reintroduce such a bug, and it's not worth carrying around
this code.

Merge pull request #2752 from smcv/copy-dirent

readdir-rand: Copy full size of struct dirent

readdir-rand: Copy full size of struct dirent

As noted in readdir(3), in the presence of long filenames it is
possible for a directory entry to be larger than `sizeof (struct dirent)`.
Copy the full length instead.

Signed-off-by: Simon McVittie <smcv@collabora.com>

Merge pull request #2749 from lucab/ups/cargo-releases

cargo: prepare ostree 0.16.0 and ostree-sys 0.11.0

cargo: prepare ostree 0.16.0 and ostree-sys 0.11.0

This prepares for a new release of both crates, now using the
gtk-rs 0.15 stack.

Merge pull request #2748 from lucab/ups/ci-rust-bump-libostree-git

ci/rust: test from git using latest feature

ci/rust: test from git using latest feature

Merge pull request #2743 from lucab/ups/gtk-rs-0.15

rust-bindings: regenerate for gtk-rs 0.15

rust/ostree: regenerate for gtk-rs 0.15

rust/ostree-sys: regenerate for gtk-rs 0.15

rust: update pinned gir tool to 0.15

Merge pull request #2742 from lucab/ups/rust-regenerate-2022.6

rust: regenerate bindings after latest release (2022.6)

Merge pull request #2745 from lucab/ups/ci-bump-rust-linting

ci/rust: bump linting toolchain to latest stable (1.64)

Merge pull request #2746 from lucab/ups/lib-repo-refs-error

lib/repo-refs: properly return an error value

lib/repo-refs: properly return an error value

This tweaks a logic check in order to return a proper error value
when the related condition is not satisfied.

Merge pull request #2740 from lucab/ups/lib-sign-ed25519-assertions

lib/sign-ed25519: convert invariant checks to assertions

ci/rust: bump linting toolchain to latest stable (1.64)

This bumps the Rust toolchain for clippy/rustfmt to 1.64.

rust: update manual helpers

ostree: manually patch generated files

This manually adds a missing `ToGlibPtr` import, which seems to be result
of some bugs in `gir` code-generation.

rust: regenerate bindings after latest release (2022.6)

lib/sign-ed25519: convert invariant checks to assertions

This converts several invariant checks to asserts. Most of the
functions in this file were already using assertions, so this aligns
the remaining few outliers to the rest.

Merge pull request #2744 from lucab/ups/ci-memory-bump

ci: bump cosaPod memory requirement to 5Gi

ci: bump cosaPod memory requirement to 5Gi

We're hitting memory limits when running the reprovisioning tests. We
should investigate why we need 1Gi of overhead, but for now to get
unblocked let's just bump it.

Merge pull request #2663 from mstuehn/test-static-delta-file

lib/static-delta: document and check parameters format

rust/tests: fix static delta generation testcase

lib/static-delta: document and check parameters format

This enhances the logic handling GVariant parameters within
`ostree_repo_static_delta_generate()`.
Several of those entries are expected to be zero-terminated values,
and this implicit assumption has been observed to be an hidden trap
in languages where strings and arrays may not carry a terminator value
(e.g. Rust).
In order to improve the situation, this makes the documentation more
explicit and actively tries to catch invalid input parameters.

Add test for generating static delta to file

Merge pull request #2733 from ostreedev/dependabot/submodules/libglnx-e701578

build(deps): bump libglnx from `26375b5` to `e701578`

Merge pull request #2738 from lucab/ups/lib-zipl-check-open-errors

ci: Use new names for custom kola steps

The old `fcos*` versions are deprecated now:
https://github.com/coreos/coreos-ci-lib/pull/111

ci: Drop unnecessary outer stage

We define stages inside of this stage, so get rid of the outer `FCOS`
stage. This should help rendering the pipeline in BlueOcean more
clearly.

ci: Bump memory request, use fcosKolaTestIso

More fallout from https://github.com/coreos/coreos-ci-lib/pull/116. We
need to be more honest about how much memory we need.

While we're here, switch the `kola testiso` invocation to use
`fcosKolaTestIso` instead. This will add coverage for UEFI and UEFI
SecureBoot testing.

Merge pull request #2737 from lucab/ups/repo-checkout-fix-uid-typo

lib/repo-checkout: fix typo in error message

lib/bootloader-zipl: check for errors when opening initrd

This adds a missing error check when opening an initrd in s390x
Secure Execution (SE) logic.
It was detected by RH internal static checks.

lib/repo-checkout: fix typo in error message

This fixes a typo in an error message, resulting in a GID vs UID
mixup. It was detected by RH internal static checks.

build(deps): bump libglnx from `26375b5` to `e701578`

Bumps libglnx from `26375b5` to `e701578`.

---
updated-dependencies:
- dependency-name: libglnx
  dependency-type: direct:production
...

Signed-off-by: dependabot[bot] <support@github.com>

Merge pull request #2730 from ostreedev/release-2022.6

Release 2022.6

configure: post-release version bump

Release 2022.6

Merge pull request #2721 from cgwalters/link-otto

README.md: Link otto

Merge pull request #2717 from mangelajo/support-whiteouts

Support overlayfs whiteouts on checkout

README.md: Link otto

Another project in the ostree/container space.

Support overlayfs whiteouts on checkout

Introduces an intermediate format for overlayfs storage, where
.wh-ostree. prefixed files will be converted into char 0:0
whiteout devices used by overlayfs to mark deletions across layers.

The CI scripts now uses a volume for the scratch directories
previously in /var/tmp otherwise we cannot create whiteout
devices into an overlayfs mounted filesystem.

Related-Issue: #2712

Merge pull request #2720 from lucab/ups/lib-deploy-ignore-result

lib/sysroot-deploy: explicitly handle `g_variant_lookup` results

lib/sysroot-deploy: explicitly handle `g_variant_lookup` results

This explicitly ignores the results of two optional variant lookups,
in order to pacify a RHT internal static analyzer.

Merge pull request #2718 from lucab/ups/repo-initialize-valid-bootloader

lib/repo: properly initialize boolean variable

lib/repo: properly initialize boolean variable

This initializes a boolean variable that was previously left
uninitialized. It was detected by a RHT internal static analyzer.

Merge pull request #2716 from dbnicholson/max-metadata-size-doc

lib/pull: Fix max-metadata-size documentation

lib/pull: Fix max-metadata-size documentation

The documented option is incorrect and has been since it's introduction
in 2c55bc6997.

Merge pull request #2714 from andreamtp/patch-1

Fix recursive git archive reference

Fix recursive git archive reference

Broken link for "recursive git archive" example

Merge pull request #2711 from lucab/ups/sign-assertions

lib/sign: convert invariant checks to assertions

lib/sign: convert invariant checks to assertions

This converts several invariant checks to asserts. Most of the
functions in this file were already using assertions, so this aligns
the remaining few outliers to the rest.

Merge pull request #2709 from lucab/ups/otutils-variant-builder-error

otutil: add error handling to variant builders

otutil: add error handling to variant builders

This enhances a bunch of helpers related to GVariant building, in
order to properly handle errors and avoid some potential cases of
unexpected NULL results.

Merge pull request #2708 from nikita-dubrovskii/sh_to_c

s390x: drop shell code for `initrd` modification in SE case

s390x: use 'libarchive' to modify initrd in SE case

Merge pull request #2710 from lucab/ups/lib-mtree-redundant-validation

lib/mtree: drop redundant name checks

lib/mtree: drop redundant name checks

This drops several NULL checks against filename input argument.
Those checks are both redundant (as filename validation already
checks for that) and dangerous (as they return early without
setting an error value).

Merge pull request #2707 from lucab/ups/libostree-bootloader-asserts

lib/bootloader: assert invariants

s390x: simplify 's390x-se-luks-gencpio' script

Merge pull request #2706 from git-bruh/main

ostree-fetcher-curl: check for HTTP2 support before trying to use it

lib/bootloader: assert invariants

This tweaks some invariants checks into full assertions, in order
to avoid returning to the caller in case of known invalid states.

s390x: ensure both 'root' and 'boot' luks keys exist

ostree-fetcher-curl: check for HTTP2 support before trying to use it

Merge pull request #2704 from cgwalters/finalize-no-sigterm

finalize-staged: Don't listen to `SIGTERM`, just let kernel exit us

finalize-staged: Don't listen to `SIGTERM`, just let kernel exit us

Followup from discussion in
https://github.com/ostreedev/ostree/pull/2544#discussion_r958840936

This is more efficient; no need to have the kernel context switch
us in at shutdown time just so we can turn around and call
`exit()`.

Merge pull request #2544 from dbnicholson/finalize-block

finalize-staged: Ensure /boot and /sysroot automounts don't expire

finalize-staged: Ensure /boot automount doesn't expire

If `/boot` is an automount, then the unit will be stopped as soon as the
automount expires. That's would defeat the purpose of using systemd to
delay finalizing the deployment until shutdown. This is not uncommon as
`systemd-gpt-auto-generator` will create an automount unit for `/boot`
when it's the EFI System Partition and there's no fstab entry.

To ensure that systemd doesn't stop the service early when the `/boot`
automount expires, introduce a new unit that holds `/boot` open until
it's sent `SIGTERM`. This uses a new `--hold` option for
`finalize-staged` that loads but doesn't lock the sysroot. A separate
unit is used since we want the process to remain active throughout the
finalization run in `ExecStop`. That wouldn't work if it was specified
in `ExecStart` in the same unit since it would be killed before the
`ExecStop` action was run.

Fixes: #2543

main: Factor out sysroot loading

It can be useful to parse the options and initialize the sysroot without
actually loading it until later. Factor out the sysroot loading to a new
`ostree_admin_sysroot_load` and add a new
`OSTREE_ADMIN_BUILTIN_FLAG_NO_LOAD` flag to accommodate this.

Merge pull request #2695 from HuijingHei/kargs-stage

Fix `ostree admin kargs edit-in-place` assertion when deployments are pending