使用kcov进行防锈覆盖似乎不正确

问题描述 投票:5回答:1

当我使用codecov.io记录我的Rust项目的代码覆盖率时,覆盖范围似乎不正确。

  1. unwrap()函数和结束括号不包括在内 unwrap and end bracket not covered
  2. 函数声明不包括在内 function declaration not covered

这很奇怪。


我无法提供完整的复制项目。

我正在使用Rust的标准TravisCI配置。这是我的.travis.yml:

language: rust
cache: cargo
dist: trusty
sudo: required

rust:
  - stable
  - beta
  - nightly

matrix:
  allow_failures:
    - rust: nightly

script:
  - cargo build --verbose --all
  - cargo test --verbose --all

after_success: |
  wget https://github.com/SimonKagstrom/kcov/archive/master.tar.gz &&
  tar xzf master.tar.gz &&
  cd kcov-master &&
  mkdir build &&
  cd build &&
  cmake .. &&
  make &&
  make install DESTDIR=../../kcov-build &&
  cd ../.. &&
  rm -rf kcov-master &&
  for file in target/debug/myproject-*[^\.d]; do mkdir -p "target/cov/$(basename $file)"; ./kcov-build/usr/local/bin/kcov --exclude-pattern=/.cargo,/usr/lib --verify "target/cov/$(basename $file)" "$file"; done &&
  bash <(curl -s https://codecov.io/bash)
  echo "Uploaded code coverage"
rust codecov kcov
1个回答
0
投票

假设Cargo's和Travis的行为在发布此问题后没有发生重大变化,这里有几件事情在起作用。

  • 每当构建配置发生更改时,构建的指纹都会更改,从而导致完整或部分重建以及target中生成的二进制文件的新文件名。不可否认,我不知道究竟何时或为何发生这种情况的复杂性,我只是知道它发生了。事实上,对于我正在研究的项目,Cargo似乎对其中一个依赖项非常困惑,它几乎每次都会强制重建。
  • 特拉维斯的cache: cargo默认是相当愚蠢的;它无需例外地缓存所有$CARGO_HOMEtarget。请注意,这与前者结合也意味着这些缓存无限制地增长,因此您需要偶尔抛弃它们或使用更智能的缓存方案。
  • for file in target/debug/myproject-*[^\.d]myproject的所有版本运行kcov,无论它是新建的还是来自Travis的构建缓存。较旧的版本当然可以具有不同的行号,因为它们是从不同的(较旧的)源构建的,并且覆盖范围可能不同。
  • 如果覆盖结果包含在任何报告中,则coverage.io会将覆盖结果合并为红色,除非它被任何(其他)报告覆盖。如果来自不同报告的行号不匹配,或者即使其中一个报告包含超过EOF的行号,它也不会显示任何迹象。事实上,据我所知,它甚至没有显示哪些二进制文件覆盖/没有覆盖行号,即使它有这些信息。您必须下载XML报告并手动解释它们才能看到它。

因此,那些未被覆盖的行可能不会(全部?)由于Rust编译其二进制文件的方式,因为对问题的评论建议,但实际上可能完全指向不同的(较旧的)源文件。经过一段时间后,我们的项目变得非常明显......

borked coverage results

如果不是这么明显,那么验证这就是最简单的方法就是抛弃Travis的构建缓存并强制重建。

由于增量构建无论如何都不适用于我们的项目,我们使用的解决方案是没有Travis缓存目标目录,如here建议的那样。根据您的CI构建时间取决于增量构建的程度,您可能会被迫做更聪明的事情。

© www.soinside.com 2019 - 2024. All rights reserved.