Это не от видюхи зависит, а от системы и того кто и что в фоне работает и использует видеопамять. У меня на десктопе и на ноуте со старта с тремя мониторами HD+FullHD+4K кушает около 1.2Гб и спустя какое-то время поднимается до 1.5-2Гб. Не зависимо от видеокарты, как система настроена, так и будет работать.
К слову, что за видеокарта, в десктопе или в ноутбуке? Тему просто не там создали вообще и нужно переместить в нужный раздел, когда укажите модель/конфигурацию ПК/ноутбука