告别臃肿!使用 git-filter-repo 优雅清理 Git 历史记录

告别臃肿!使用 git-filter-repo 优雅清理 Git 历史记录

痛点:为什么我们的 .git 文件夹越来越大?

在日常开发中,你是否遇到过这样的情况:项目代码本身没多少,但执行 git clone 时却要下载几个 G 的数据?或者偶尔手抖,把包含密码的配置文件、测试用的 .mp4 视频、甚至是庞大的 .node_modules 目录提交到了 Git 中。

即便你随后立刻执行了 git rm 删除了这些文件,并在最新的 commit 中修复了问题,Git 的核心机制依然会忠实地在历史树中永久保留它们。这些“历史遗留物”会持续占用磁盘空间,拖慢拉取代码的速度。

为了彻底将它们从历史记录中抹除,我们需要重写 Git 历史。

过去,我们常使用 git filter-branchBFG Repo-Cleaner。但今天,我要向大家强烈推荐 Git 官方推荐的替代工具:git-filter-repo。它不仅速度极快,而且功能强大、语法简洁。


神器登场:什么是 git-filter-repo?

git-filter-repo 是一个用于重写 Git 历史记录的通用工具。根据 Git 官方文档的建议,由于 git filter-branch 存在性能和安全性问题,git-filter-repo 已经成为了执行此类任务的首选标准。

1. 安装指南

安装过程非常简单。由于它是基于 Python 编写的,最推荐的安装方式是使用 pip

# 确保你的系统中已安装 Python 3 pip install git-filter-repo 

如果你是 macOS 用户,也可以直接使用 Homebrew:

brew install git-filter-repo 

实战演练:常见场景清理指南

⚠️ 终极警告: 重写历史会改变所有受影响 commit 的 Hash 值。在进行以下任何操作前,请务必备份你的项目,或者在一个全新的 clone 目录中进行测试!

场景一:批量删除特定后缀的媒体文件(如 .png 和 .mp4)

这也是我在实际开发中最常遇到的情况。假设我们需要把项目中所有历史提交里的图片和视频彻底清理掉,只需在项目根目录执行:

git filter-repo --path-glob '*.png' --path-glob '*.mp4' --invert-paths --force 

参数解析:

  • --path-glob: 用于指定匹配模式。
  • --invert-paths: 这是一个非常巧妙的参数,它告诉工具:保留除了匹配路径之外的所有文件。换句话说,就是删除匹配到的文件。
  • --force: 如果你不是在一个 fresh clone(全新克隆)的裸仓库(bare repo)中操作,工具会出于安全考虑阻止你,加上此参数可强制执行。

场景二:删除特定的敏感目录或文件

如果有人不小心把 config/database.yml(包含线上数据库密码)提交了,你可以这样抹除它:

git filter-repo --path config/database.yml --invert-paths --force 

删除整个文件夹(比如不小心提交的 dist 编译产物):

git filter-repo --path dist/ --invert-paths --force 

场景三:将某个子目录提取为独立的新仓库

有时候我们需要把一个巨型单体仓库中的某个模块(如 src/utils/)单独拆分出来。这个工具也能轻松搞定:

# 这会保留 src/utils 下的内容,并将其提升为仓库的根目录,丢弃其他所有文件git filter-repo --subdirectory-filter src/utils/ 

清理后的收尾工作(非常重要!)

由于 git-filter-repo 是具有破坏性的,为了防止意外的误操作覆盖远程分支,工具在执行完毕后会自动移除你的 remote(远程源)配置

因此,当你确认本地仓库清理无误,且 .git 文件夹体积显著减小后,需要重新关联并推送到远程:

# 1. 重新添加远程仓库地址git remote add origin <你的远程仓库URL># 2. 强制推送所有分支到远程服务器git push origin --force --all # 3. 如果你有标签(Tags),也需要强制推送标签git push origin --force --tags 

团队协作注意事项:
由于你重写了公共历史,团队中的其他成员不能再使用简单的 git pull。他们需要重新 clone 仓库,或者使用 git fetch origin && git reset --hard origin/main(假设主分支是 main)来强制同步你清理后的最新历史。


总结

使用 git-filter-repo 可以极其高效地给 .git 目录“减肥”。日常开发中,我们还是应该养成良好的习惯,提前配置好 .gitignore 文件。对于确实需要版本控制的大型二进制文件,建议尽早引入 Git LFS (Large File Storage) 进行管理。

希望这篇文章能帮你解决 Git 历史清理的难题!如果有任何问题,欢迎在评论区留言讨论。

Read more

Java 位运算算法题目练习

Java 位运算算法题目练习

位运算 * 汉明距离 * 比特位计数 * 只出现一次的数字 * 只出现一次的数字||| * 判断字符是否唯一 * 丢失的数字 * 两数之和 * 只出现一次的数字 * 消失的两个数字 汉明距离 题目解析:判断两个数的对应的二进制位不同的个数 直接判断(x>>i)&1 和 (y>>i)&1,先获取对应二进制位,在判断是否相等即可 classSolution{publicinthammingDistance(int x,int y){int count =0;//从后向前依次取出二进制位,进行比较for(int i =0;i <31;i++){if(((x>

By Ne0inhk
机器学习之支持向量机(SVM)算法详解

机器学习之支持向量机(SVM)算法详解

文章目录 * 引言 * 一、 什么是支持向量机(SVM) * 二、 SVM的基本原理 * 三、数学推导 * 1.线性可分情况 * 2. 非线性可分情况 * 3. 核函数 * 四、SVM的优缺点 * 优点: * 缺点: * 五、 应用场景 * 六、 Python实现示例 * 七、 总结 引言 支持向量机(Support Vector Machine, SVM)是一种经典的监督学习算法,广泛应用于分类和回归问题。SVM以其强大的数学基础和优异的性能在机器学习领域占据重要地位。本文将详细介绍SVM的原理、数学推导、应用场景以及Python实现。 一、 什么是支持向量机(SVM) 支持向量机是一种二分类模型,其基本思想是找到一个超平面,将不同类别的数据分隔开,并且使得两类数据点到超平面的距离(即间隔)最大化。SVM不仅可以处理线性可分问题,还可以通过核函数处理非线性可分问题。 二、 SVM的基本原理

By Ne0inhk
【缓存算法】一篇文章带你彻底搞懂面试高频题LRU/LFU

【缓存算法】一篇文章带你彻底搞懂面试高频题LRU/LFU

系列文章目录 文章目录 * 系列文章目录 * 一、LRU缓存算法 * 1.哈希表 + 双向链表 * 二、LFU缓存算法 * 1、哈希表 + 平衡二叉树 * 2、双哈希表 * 三、总结 一、LRU缓存算法 1.哈希表 + 双向链表 1.题目链接:LRU缓存 2.题目描述: 3.算法思路: 1.双向链表 + 哈希表 组合: 双向链表(带哑头 / 哑尾节点):维护缓存节点的访问顺序,最近使用的节点放在链表头部,最少使用的节点放在链表尾部(淘汰时直接删尾部); 哈希表(cache):实现 key 到节点的 O (1) 快速查找,解决链表遍历查找慢的问题; 2.

By Ne0inhk
Leecode热题100:随机链表的复制(链表)

Leecode热题100:随机链表的复制(链表)

目录 题目描述: 拆解本质:什么是“深拷贝”? 核心矛盾点 方案一:利用“映射”打破时空限制 (Hash Map) 思路过程: 方案二:利用“空间拓扑”消除映射 (Interweaving) 思路过程: C++ 代码实现 (基于方案二) 面试回答 第一步:明确本质 第二步:提出矛盾 第三步:从直觉出发 第四步:极致优化(空间换位置) 第五步:总结复杂度 题目描述: 给你一个长度为 n 的链表,每个节点包含一个额外增加的随机指针 random ,该指针可以指向链表中的任何节点或空节点。 构造这个链表的深拷贝。 深拷贝应该正好由 n 个 全新 节点组成,其中每个新节点的值都设为其对应的原节点的值。新节点的 next

By Ne0inhk