What is the GPU version and cuda version?

[LemonQC]

No description provided.

[yangli18]

We used RTX 3090 and V100 GPUs with CUDA 11.

[Mr-Bigworth]

We used RTX 3090 and V100 GPUs with CUDA 11.

请问四卡v100训练大概多长时间哇

[Mr-Bigworth]

如果有两卡A100能复现训练过程不

[yangli18]

@Mr-Bigworth

We used RTX 3090 and V100 GPUs with CUDA 11.

请问四卡v100训练大概多长时间哇

这个看你的数据集多大，这个工作的训练都还比较快，训练时间应该不用怎么担心。

如果有两卡A100能复现训练过程不

两卡A100应该显存是够用，可以训练的。

[Mr-Bigworth]

@Mr-Bigworth

We used RTX 3090 and V100 GPUs with CUDA 11.

请问四卡v100训练大概多长时间哇

这个看你的数据集多大，这个工作的训练都还比较快，训练时间应该不用怎么担心。

如果有两卡A100能复现训练过程不

两卡A100应该显存是够用，可以训练的。

谢谢！

[Mr-Bigworth]

@Mr-Bigworth

We used RTX 3090 and V100 GPUs with CUDA 11.

请问四卡v100训练大概多长时间哇

这个看你的数据集多大，这个工作的训练都还比较快，训练时间应该不用怎么担心。

如果有两卡A100能复现训练过程不

两卡A100应该显存是够用，可以训练的。

您好，我在复现过程中发现十个epoch之后会报显存oom错误，请问可能是什么原因哇。好像两卡40GA100也不太够VLTVG_R50_gref.py的配置。

[Mr-Bigworth]

@Mr-Bigworth

We used RTX 3090 and V100 GPUs with CUDA 11.

请问四卡v100训练大概多长时间哇

这个看你的数据集多大，这个工作的训练都还比较快，训练时间应该不用怎么担心。

如果有两卡A100能复现训练过程不

两卡A100应该显存是够用，可以训练的。

嗷，好像是freeze_epochs，10个freeze_epochs后会训练bert对么（想请教下那有没有可能在不修改bs的情况下减少显存占用呢）

[yangli18]

@Mr-Bigworth
可以试试梯度累积，一个大batch分成两份进行梯度求导。

[Mr-Bigworth]

@Mr-Bigworth 可以试试梯度累积，一个大batch分成两份进行梯度求导。

嗯嗯，谢谢！！后来想办法解决了。

[0000000wmz]

师兄们好，请问你们都跑到了论文中的精度了嘛？

[arandinglv]

单张3090可以吗？

[Mr-Bigworth]

单张3090可以吗？

可以的 用bs32跑 r50可以

[beierdada]

你好你好呀 我现在也在学习这篇论文，但是referit数据集下载连接失效了，可以麻烦你发一份给我嘛 邮箱是[email protected]

[beierdada]

单张3090可以吗？

可以的 用bs32跑 r50可以

你好你好呀 我现在也在学习这篇论文，但是referit数据集下载连接失效了，可以麻烦你发一份给我嘛 邮箱是[email protected]