JGIT-如何过滤大文件克隆

Question

我试图克隆一个包含一个大文件(2GB以上）的存储库，因为本文提到Jgit可以处理的文件的最大大小是2GB。我看到通过pure git命令，我可以使用git克隆--filter=blob:limit=100m过滤大文件，现在我希望在使用Jgit的java代码中实现这个过滤器，这样我就可以避免异常对象太大（2,424,185,920字节），拒绝这个包。最大对象大小限制为2,147,483,639目前我使用Jgit进行克隆，如下所示：

Git  git = Git.cloneRepository()
                        .setURI(gitUrl)
                        .setBranch(branch)
                        .setCloneAllBranches(false)
                        .setCredentialsProvider(credentialsProvider)
                        .setDirectory(directory)
                        .call();

我想知道是否有选项添加过滤器到克隆，这样它就可以避免使用JGIT克隆大文件？

Answer 1

也许您可以使用InMemoryRepository，然后使用RevWalk/Treewalk根据大小进行筛选。

https://github.com/centic9/jgit-cookbook/blob/master/src/main/java/org/dstadler/jgit/chocial/cloneremoterepositoryintomemoryandreadfile.java

下面的示例是jgit-cookbook的副本：

 public static void main(String[] args) throws IOException, GitAPIException {
        DfsRepositoryDescription repoDesc = new DfsRepositoryDescription();
        InMemoryRepository repo = new InMemoryRepository(repoDesc);
        Git git = new Git(repo);
        git.fetch()
                .setRemote(REMOTE_URL)
                .setRefSpecs(new RefSpec("+refs/heads/*:refs/heads/*"))
                .call();
        repo.getObjectDatabase();
        ObjectId lastCommitId = repo.resolve("refs/heads/" + BRANCH);
        RevWalk revWalk = new RevWalk(repo);
        RevCommit commit = revWalk.parseCommit(lastCommitId);
        RevTree tree = commit.getTree();
        TreeWalk treeWalk = new TreeWalk(repo);
        treeWalk.addTree(tree);
        treeWalk.setRecursive(true);
        treeWalk.setFilter(PathFilter.create(FILE_TO_READ));
        if (!treeWalk.next()) {
            return;
        }
        ObjectId objectId = treeWalk.getObjectId(0);
        ObjectLoader loader = repo.open(objectId);
        loader.copyTo(System.out);
    }