<div dir="ltr"><div><div>Ryan asked (when he had this same issue about six months ago) why our cmake PortGroup sets it ON when it breaks all the in-tree tests, and whether we should change the PG to turn it OFF all the time. (The default is OFF I believe.)<br><br></div>In fact, we probably should. I'm not sure why we set it like it was. <br><br></div>Ken<br></div><br><div class="gmail_quote"><div class="gmail_attr" dir="ltr">On Tue, Sep 28, 2021 at 1:49 PM Daniel J. Luke <<a href="mailto:dluke@geeklair.net">dluke@geeklair.net</a>> wrote:<br></div><blockquote style="margin:0px 0px 0px 0.8ex;border-left:1px solid rgb(204,204,204);padding-left:1ex" class="gmail_quote">Thanks Ken and Jason!<br>
<br>
This is helpful (now I just need to figure out why a couple of tests fail when run this way vs. when run against the installed libraries).<br>
<br>
I was worried that the installed rpath would be different with CMAKE_BUILD_WITH_INSTALL_RPATH:BOOL=OFF, but it looks like it gets set to $prefix in destroot, so the installed binaries are fine.<br>
<br>
> On Sep 28, 2021, at 11:38 AM, Jason Liu <<a target="_blank" href="mailto:jasonliu@umich.edu">jasonliu@umich.edu</a>> wrote:<br>
> <br>
> In addition to the code Ken just provided, he and others have helped me with some test-related "protection" code, so that in addition to a +tests variant, there is the following section of code (I usually place it after any build-related sections, and before any destroot-related sections, in order to keep my portfiles laid out in the same order as the port phases):<br>
> <br>
> pre-test {<br>
>     if {![variant_isset tests]} {<br>
>         ui_error "'tests' variant must be activated to enable test support"<br>
>         error "Please enable the 'tests' variant and try again"<br>
>     }<br>
> }<br>
> <br>
> -- <br>
> Jason Liu<br>
> <br>
> <br>
> On Tue, Sep 28, 2021 at 11:13 AM Ken Cunningham <<a target="_blank" href="mailto:ken.cunningham.webuse@gmail.com">ken.cunningham.webuse@gmail.com</a>> wrote:<br>
> <br>
> On 2021-09-28 7:44 a.m., Daniel J. Luke wrote:<br>
> > On Sep 20, 2021, at 10:20 AM, Daniel J. Luke <<a target="_blank" href="mailto:dluke@geeklair.net">dluke@geeklair.net</a>> wrote:<br>
> >> On Sep 20, 2021, at 8:15 AM, Frank Dean <<a target="_blank" href="mailto:frank@fdsd.co.uk">frank@fdsd.co.uk</a>> wrote:<br>
> >>> Daniel J. Luke <<a target="_blank" href="mailto:dluke@geeklair.net">dluke@geeklair.net</a>> writes:<br>
> >>>> The newest version of clamav uses cmake for builds. In the 'configure' stage, I have it disabling tests because otherwise it won't build without the test dependencies installed (check and pytest).<br>
> >>>><br>
> >>>> Do we have a template or example of a canonical way to handle this? I don't see an obvious hook for when someone is running `port test` to change configure.args (I could, of course, add a post-extract/pre-configure and do some non-declaritive test to see if `port test` is being run and use that to branch - but that feels like a bad design choice).<br>
> >>> The rapidjson port implements a 'tests' variant to handle a similar<br>
> >>> situation.  I used the same pattern for the libosmium port.  The tests<br>
> >>> can then be run with `sudo port -d test current +tests`.<br>
> >> That works, I guess.<br>
> >><br>
> >> Is there interest in having base auto-add +tests if `port test` is called? (I haven't looked at base/ code in a while, but it seems possible). I like to imagine a future where we have enough infrastructure that we would run `port test` for any ports that have test.run set.<br>
> > On this same train of thought - clamav tests run against the installed libraries (like some other ports tend to do) - in long-ago times I'd solve this by setting DYLD_LIBRARY_PATH - but since SIP started removing these that no longer works normally. I think trace mode has a(n elaborate) workaround where it copies binaries and executes the copies, but that doesn't seem like something I should implement in a portfile ;-) [This is another instance where if trace mode were the default, things would 'just work']<br>
> ><br>
> > Has anyone else already solved this?<br>
> <br>
> <br>
> The way our cmake PortGroup sets things up, running tests is harder. You <br>
> can configure cmake to allow testing to find the libraries in the build <br>
> tree. See for example what I did in libcbor:<br>
> <br>
> <br>
> variant tests description {enable tests} {<br>
>      depends_test-append         port:cmocka<br>
>      configure.args-append       -DWITH_TESTS=ON<br>
>      configure.pre_args-replace -DCMAKE_BUILD_WITH_INSTALL_RPATH:BOOL=ON \<br>
> -DCMAKE_BUILD_WITH_INSTALL_RPATH:BOOL=OFF<br>
>      test.run            yes<br>
>      test.target         test<br>
> }<br>
> <br>
> Ken<br>
<br>
-- <br>
Daniel J. Luke<br>
<br>
</blockquote></div>