RT
举报· 1854 次点击
登录 注册 站外分享
17 条回复  
handuo 小成 昨天 19:38
一块 1tb 的硬盘肯定是不够的,看你要干什么了。如果是微调 8b 左右的语言模型,你各种 hf 模型总得下载吧,几个主流的都得占用将近 159gb ,你微调过程中产生的数据很快就会达到 500gb 。再加上数据集,conda 各种包,你得一周就复制和迁移一次数据,很繁琐痛苦。如果是 cv 方向和多模态,那数据集占了大头,但是 1tb 勉强够用。如果是 8b 以上的就不用想了。 我的建议是 c 盘不用太大,但是你要把 hf_home,conda, pip cache 和 docker 默认的 data 文件夹放到别的盘,不然多大都会马上满
Donaldo 小成 昨天 19:39
没必要分区,分文件夹就好了。
kk2syc 初学 昨天 19:40
马上 2025 了,很难想象还有人系统盘和数据盘不分离的。 单独一个盘装系统和各种包,数据集有单独的数据盘。
jiashuaibei 楼主 小成 昨天 19:42
@handuo 或者我干脆不分区了呢?全给 C 盘,默认 C 盘,会有什么坑吗?
jiashuaibei 楼主 小成 昨天 19:43
@Donaldo 好主意
handuo 小成 昨天 19:48
@kk2syc 这位的建议就很好,而且我个人的偏好还是用 linux 大于 win ,首先是 cuda 和 deepseek 之类的库网上 linux 的帖子和 issues 多一些,反正我是不知道 llama-factory 能不能在 win 上完美地跑。再有就是涉及到文件系统的函数和包有小概率跟 linux 不兼容,最后就是 win 更重一些,乱七八糟的服务挺占资源的。
handuo 小成 昨天 19:49
@handuo 抱歉不是 deepseek ,deepspeed 。深度学习硬盘空间是最不值钱的了,数据盘至少 4tb 是我的推荐哈
dcsuibian 小成 昨天 19:51
一款硬盘一个区,无论 macOS 、Linux 还是 Windows 都是这样
jiashuaibei 楼主 小成 昨天 19:57
@handuo 好的,谢谢建议。
12下一页
返回顶部