共有リンクが https://drive.google.com/file/d/${FILE_ID}/view?usp=sharing のとき、

1wget "https://drive.google.com/uc?export=download&id=${FILE_ID}&confirm=t"

で直接ダウンロードできる。