当前位置: 首页 > 面试题库 >

构建期间的模块依赖项缓存问题

华星驰
2023-03-14
问题内容

最近换用了Go
1.11版本,并正在尝试将我们的项目转换为使用新的模块系统。但是,我在缓存系统方面遇到了一个令人沮丧的问题(到目前为止,GOCACHE=off由于过去不相关的问题,我一直在使用它,但是模块不可以这样做)。

下面的命令日志基于使用我的系统使用Homebrew进行的全新升级到1.11(我通常使用gvm来安装和管理Go版本,但是为此交换到系统构建中以查看是否是gvm)。我将我的GOPATH设置为一个临时目录,并将源代码移出了默认的GOPATH(当前位于~/gotemp/statsbot)。

对于此命令日志,我首先对高速缓存进行操作,以使其处于全新状态。然后,我在进行构建(以提取所有缺少的依赖项,这也应重新缓存deps),然后对其中一个子目录进行测试。

[08:34:48] statsbot (feature/bot-rebuild-gomod) $ rm -rf on

[08:34:49] statsbot (feature/bot-rebuild-gomod) $ go clean --cache

[08:34:50] statsbot (feature/bot-rebuild-gomod) $ go env
GOARCH="amd64"
GOBIN=""
GOCACHE="on"
GOEXE=""
GOFLAGS=""
GOHOSTARCH="amd64"
GOHOSTOS="darwin"
GOOS="darwin"
GOPATH="/var/folders/ck/bf8_n8hn34j7bh7hqqppxrtm0000gn/T/tmp.3ga5Iq09"
GOPROXY=""
GORACE=""
GOROOT="/usr/local/Cellar/go/1.11/libexec"
GOTMPDIR=""
GOTOOLDIR="/usr/local/Cellar/go/1.11/libexec/pkg/tool/darwin_amd64"
GCCGO="gccgo"
CC="clang"
CXX="clang++"
CGO_ENABLED="1"
GOMOD="/Users/kaedys/gotemp/statsbot/go.mod"
CGO_CFLAGS="-g -O2"
CGO_CPPFLAGS=""
CGO_CXXFLAGS="-g -O2"
CGO_FFLAGS="-g -O2"
CGO_LDFLAGS="-g -O2"
PKG_CONFIG="pkg-config"
GOGCCFLAGS="-fPIC -m64 -pthread -fno-caret-diagnostics -Qunused-arguments -fmessage-length=0 -fdebug-prefix-map=/var/folders/ck/bf8_n8hn34j7bh7hqqppxrtm0000gn/T/go-build065167780=/tmp/go-build -gno-record-gcc-switches -fno-common"

[08:34:53] statsbot (feature/bot-rebuild-gomod) $ go build .

[08:35:01] statsbot (feature/bot-rebuild-gomod) $ ginkgo stats
Failed to compile stats:

# golang.org/x/text/runes
/var/folders/ck/bf8_n8hn34j7bh7hqqppxrtm0000gn/T/tmp.3ga5Iq09/pkg/mod/golang.org/x/text@v0.3.0/runes/cond.go:10:2: can't open import: "golang.org/x/text/transform": open on/51/51b9b2cf5a27a7ff06942814ad6ef031de64dc6d773c835916067578ea1ae3a1-d: no such file or directory
# golang.org/x/text/encoding
/var/folders/ck/bf8_n8hn34j7bh7hqqppxrtm0000gn/T/tmp.3ga5Iq09/pkg/mod/golang.org/x/text@v0.3.0/encoding/encoding.go:19:2: can't open import: "golang.org/x/text/encoding/internal/identifier": open on/4c/4c2fad64312f6ec34b38755ccecb96bb31c6995211f39e0eb4112abc2fac560c-d: no such file or directory
# gopkg.in/fsnotify.v1
/var/folders/ck/bf8_n8hn34j7bh7hqqppxrtm0000gn/T/tmp.3ga5Iq09/pkg/mod/gopkg.in/fsnotify.v1@v1.4.7/kqueue.go:18:2: can't open import: "golang.org/x/sys/unix": open on/77/77790588f9aed90a52efdb1dac069953e1ea2bf82db8627a47a9492862b39c6e-d: no such file or directory

Ginkgo ran 1 suite in 4.123499564s
Test Suite Failed

我在许多构建情况下都看到了相同的错误消息。 go build .通常 成功,但有时会失败,类似的消息。运行go clean --cache固定变量可以解决这些问题,但是我真的不想在每次构建之前都运行它,并且在尝试使用Ginkgo进行测试时它 不起作用
,因为这似乎涉及多个连续的编译。

错误本身是令人困惑的,因为这些文件 确实 存在:

[08:40:49] statsbot (feature/bot-rebuild-gomod) $ ll on/4c
total 112
-rw-r--r--  1 kaedys  staff  18346 Sep 14 08:40:19 2018 4c1d5db302dff0381c402160d7fd2bd89a6dafd3edc61b3dbd5e8f1a85108fb7-d
-rw-r--r--  1 kaedys  staff  27980 Sep 14 08:40:45 2018 4c2fad64312f6ec34b38755ccecb96bb31c6995211f39e0eb4112abc2fac560c-d
-rw-r--r--  1 kaedys  staff    175 Sep 14 08:40:20 2018 4cbbc40c46eba0ef41f3ebd23470c3327215fa6e05e269c276c6635da79f2e8e-a
-rw-r--r--  1 kaedys  staff     13 Sep 14 08:40:20 2018 4cffcbd4a7f1255ca3696f5e24e0b1045d14c25f1f90cbbb077b5d6f2d11e68c-d

该文件中的第二个文件ll是第二个错误消息所抱怨的文件丢失,因此,我只能假定它是在仍在生成文件的同时尝试访问该文件,或者是在其他目录中查找(这很困难)告诉您,因为错误消息仅报告文件的相对路径)。

在此处发布以查看是否有人知道如何解决此问题,或者在我的环境设置中这有点时髦,然后再在Go github上创建正式问题。


问题答案:

您的GOCACHE环境变量设置为"on"。的值GOCACHE必须是一个文件夹,特殊"off"值表示不缓存构建和测试结果,并且不使用那些已经缓存的数据。没有特别的价值"on"

您不必设置GOCACHE,因为它具有默认值。从Command Go引用:构建和测试缓存:

go命令缓存构建输出,以在将来的构建中重用。缓存数据的默认位置是当前操作系统的标准用户缓存目录中名为go-
build的子目录。设置GOCACHE环境变量将覆盖此默认值,并且运行“ go env GOCACHE”将打印当前的缓存目录。您可以将变量设置为“
off”以禁用缓存。



 类似资料:
  • 你可以在同一个构建里加入项目之间的依赖, 举个例子, 一个项目的 JAR 文件被用来编译另外一个项目. 在 api 构建文件里我们将加入一个由 shared 项目产生的 JAR 文件的依赖. 由于这个依赖, Gradle 将确保 shared 项目总是在 api 之前被构建. Example 7.13. 多项目构建 - 项目之间的依赖 api/build.gradle dependencies {

  • 请找到下面所有的3个POM。

  • 我正在尝试在 Docker 容器中构建/部署Spring启动。 如您所见,我用第一个mvn命令缓存了所有的依赖项,这样我的代码应用程序中的每一个变化都不会触发新的大量依赖项下载。它适用于大多数依赖项,但仍有一些需要下载(即使缓存)。这是第二个mvn命令(包)的日志: (顺便说一句,(0 B在0 B / s)有点奇怪...只是一张支票? 如果我基于第一个maven命令之后的步骤启动一个容器(mvn依

  • 我现在的问题是,我需要服务一个REST url请求,它要求我acccess、AUrl和BUrl并聚合结果,然后响应请求,我如何实现这一点? 我想写一些如下的东西 但是我不知道如何从第一个“aurl”(这是一个返回json结果的REST服务)获得结果,并对它进行一些处理,将结果的特定值提供给下一个url(即BUrl)以从中获得结果,并对其进行处理,合并结果,然后将其发送回调用服务。 所以当BUrl请

  • 我有一个简单的Quarkus应用程序,我尝试使用以下多级Dockerfile构建它。 还有pom.xml 构建工作正常,它下载maven依赖项,然后它创建. jar并在最终容器中运行. jar。但是如果我更改源代码中的某些内容并保持pom.xml不变,依赖项会再次下载。似乎并没有下载所有依赖项。 有没有办法以这种方式加速docker构建?例如,我对Spring Boot做了同样的事情,那里一切都很

  • 我的Junit示例类是