- r - 以节省内存的方式增长 data.frame
- ruby-on-rails - phát hiện rò rỉ bộ nhớ Ruby/Ruby on Rails
- android - 无法解析导入android.support.v7.app
- UNIX 域套接字与共享内存(映射文件)
SO 和其他地方的许多问题和答案强调 Git 无法处理大文件或大 repo 。建议使用一些解决方法,例如 git-fatVà git-annex ,但理想情况下,Git 会本地处理大文件/存储库。
如果此限制已存在多年,是否有理由尚未取消该限制?我假设 Git 中存在一些技术或设计挑战,这使得大文件和大型存储库支持变得极其困难。
很多相关问题,但似乎没有一个能解释Tại sao这是一个如此大的障碍:
câu trả lời hay nhất
基本上,它归结为权衡。
你的一个问题有一个 Linus 自己的例子:
...CVS, ie it really ends up being pretty much oriented to a "one file at a time" model.
Which is nice in that you can have a million files, and then only check out a few of them - you'll never even see the impact of the other 999,995 files.
Git fundamentally never really looks at less than the whole repo...So git scales really badly if you force it to look at everything as one huge repository...
And yes, then there's the "big file" issues. I really don't know what to do about huge files. We suck at them, I know.
正如您不会找到具有 O(1) 索引访问和插入的数据结构一样,您也不会找到可以出色完成所有工作的内容跟踪器。
Git 故意选择在某些方面做得更好,而损害其他方面。
磁盘使用情况
由于 Git 是 DVCS(phân phối 版本控制系统),每个人都有整个存储库的副本(除非您使用相对较新的浅克隆)。
这有一些真的很好的优势,这就是像 Git 这样的 DVCS 变得非常流行的原因。
但是,在带有 SVN 或 CVS 的中央服务器上的 4 TB 存储库是可管理的,而如果您使用 Git,每个人都不会对随身携带它感到兴奋。
Git 具有巧妙的机制,可通过跨文件创建增量链(“差异”)来最小化存储库的大小。 Git 在创建它们时不受路径或提交顺序的限制,而且它们确实工作得很好......有点像压缩整个 repo。
Git 将所有这些小差异放入包文件中。 Delta 链和 packfile 使检索对象花费的时间稍长,但这在最大限度地减少磁盘使用方面非常有效。 (又是那些权衡。)
该机制不适用于二进制文件,因为它们往往会有很大差异,即使在“小”更改之后也是如此。
历史
当您 checkin 文件时,您将永远拥有它。您的孙辈的孙辈每次克隆您的存储库时都会下载您的猫 gif。
Git 基于内容的设计(每个对象 ID 都是其内容的 SHA)使得永久删除这些文件变得困难、具有侵入性并且对历史具有破坏性。相比之下,我可以从工件存储库或 S3 存储桶中删除粗糙的二进制文件,而不会影响我的其余内容。
难度
处理非常大的文件需要很多 仔细的工作,以确保最小化您的操作,并且永远不会将整个文件加载到内存中。在创建具有像 git 这样复杂的功能集的程序时,要可靠地做到这一点是极其困难的。
Tóm lại
最终,说“不要将大文件放入 Git”的开发人员有点像那些说“不要将大文件放入数据库”的开发人员。他们不喜欢它,但任何替代方案都有缺点(一种情况下是 Git 集成,另一种情况下是 ACID 合规性和 FK)。实际上,它通常工作正常,特别是如果您有足够的内存。
它不是为此而设计的,所以它不会出类拔萃。
关于git - 为什么 Git 不能处理大文件和大仓库?,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/29393447/
Hôm nay tôi đã thấy một số cách tải tệp khác nhau trong ứng dụng Java. Tệp:/ Tệp: // Tệp: /// Sự khác biệt ở phần đầu của ba URL này là gì? Cách ưa thích để sử dụng chúng là gì? Cảm ơn Stefan rất nhiều vì file trả lời hay nhất
Như hiện tại, câu hỏi này không phù hợp với định dạng Hỏi & Đáp của chúng tôi. Chúng tôi mong đợi câu trả lời sẽ được hỗ trợ bởi các sự kiện, trích dẫn hoặc kiến thức chuyên môn, nhưng câu hỏi có thể gây ra tranh luận, tranh luận, bỏ phiếu hoặc thảo luận mở rộng. Nếu bạn cảm thấy vấn đề này có thể được cải thiện và có thể mở lại, hãy truy cập trang
Tôi có một tệp javascript và trong phương thức đó, tôi có một phương thức "kiểm tra" mà tôi muốn gọi là hàm C#. Hàm c# không nằm trong cùng tệp với tệp javascript. Nó nằm trong tệp .cs. Vậy làm thế nào để tôi quản lý j
Cần kiểm tra quyền của tệp/thư mục tôi đang sử dụng //filePath = đường dẫn truy cập tệp/thư mục bị người dùng từ chối (trong windows) Tệp fil
Tôi có nhiều tệp java trong một thư mục và tôi muốn sử dụng nó trong dự án Intellij của mình. Nhưng tôi không muốn sao chép các tệp java vào dự án của mình mỗi khi tôi bắt đầu một dự án mới. Tôi biết tôi có thể làm điều này trong Visual Studio và
Đã đóng cửa. Câu hỏi này không tuân thủ nguyên tắc Stack Overflow. Câu trả lời không được chấp nhận vào thời điểm này. Câu hỏi này dường như không phải về một vấn đề lập trình cụ thể, một phần mềm
Tôi có tệp Twig với 3 thành phần: Tệp 1: {# content-here #} Tệp 2: {{ title-here }} {# content-here #}
Tôi có tệp mod_ldap.c và mod_authnz_ldap.c. Tôi cần sử dụng các tệp mod_ldap.so và mod_authnz_ldap.so bằng các lệnh Linux. Câu trả lời hay nhất từ c
Tôi muốn sử dụng PIE để sử dụng IE7 trong dự án của mình. Nhưng điều tôi không hiểu là tôi chỉ có thể sử dụng tệp .htc trên máy chủ web phải không? Tôi có thể sử dụng nó trong một trang cục bộ được tải qua trình duyệt mà không cần máy chủ web không? Tôi thấy trong tài liệu của PIE
Tôi đang suy nghĩ về điều này trong quy trình CI của mình, trước tiên tôi nên xây dựng và thử nghiệm ứng dụng của mình và kết quả sẽ là hình ảnh docker. Tôi tự hỏi liệu việc sử dụng môi trường xây dựng để xây dựng trên máy chủ xây dựng rồi chạy thử nghiệm có phổ biến hơn không. Có thể sử dụng tập lệnh xây dựng cho việc này. Cuối cùng chỉ cần thay đổi j
sử dụng không gian tên std; struct WebSites { chuỗi siteName; int rank; chuỗi getSiteName() {
Tôi mới làm quen với Linux và hiện đang cố gắng sử dụng khả năng lập trình API của giao diện ginkgo USB-CAN. Để lập trình API bằng C++, họ cung cấp các tệp thư viện chứa ba tệp có phần mở rộng .
Tôi mới học ngôn ngữ C và gặp phải vấn đề khi triển khai một chương trình sử dụng tệp test.txt làm đầu vào của chương trình. Nội dung của file test.txt là: 1 30 30 40 50 60 2 40 30 50 60 60 3 30 20
Làm cách nào để ghép hai tệp tcpdump để một lưu lượng truy cập lần lượt xuất hiện trong tệp? Cụ thể, tôi muốn "nhân" một tệp tcpdump để tất cả các phiên sẽ được lặp lại nhiều lần theo trình tự, lần lượt từng phiên. câu trả lời hay nhất mergeca
Tôi có một tệp tên là input.MP4 và nó bị hỏng. Nó đến từ camera quan sát. Tôi đã thử mọi cách, chuyển đổi ffmpeg, VLC, không gặp may. Tuy nhiên, tôi đã sử dụng mediainfo và Exiftool và trích xuất các thông tin sau
Tôi muốn làm gì? Tôi muốn giải nén tệp ISO và chỉnh sửa các tệp trong đó rồi đóng gói lại vào tệp ISO. (Như bạn đã đọc) Tại sao tôi nên làm điều này? Tôi muốn bắt đầu sửa đổi PSP ISO, để làm được điều này tôi phải sử dụng nội dung trò chơi, Nội dung
Cho một tệp gzip Z, nếu tôi giải nén nó thành Z', có cách nào để tôi có thể giải nén nó để khôi phục chính xác tệp gzip Z không? Sau khi đọc lướt qua định dạng DEFLATE, tôi đoán là không, vì bất kỳ tệp nào đã cho đều có thể ở dạng DEF
Tôi phải gửi thư có tệp đính kèm từ cơ sở dữ liệu tới id thư của tôi. EXEC msdb.dbo.sp_send_dbmail @profile_name = 'Quản trị viên công trình phiêu lưu
Tôi có tệp M4B lớn và tệp CUE. Tôi muốn chia nó thành nhiều tệp M4B hoặc chia nó thành nhiều tệp MP3 (ưu tiên trước đây). Tôi muốn thực hiện việc này từ dòng lệnh (OS X, nhưng bạn có thể sử dụng Linux nếu muốn) và
Câu hỏi nhanh. Tôi có một dự án với một lớp không có tệp triển khai. Sau đó, trong AppDelegate tôi có: #import "AppDelegate.h" #import "SomeClass.h" @interface A
Tôi là một lập trình viên xuất sắc, rất giỏi!