vllm>=0.9.1
bitsandbytes>=0.46.0
