Скачать данные из gDrive (zip файл ) в кэш TensorFlow

@скороход · Регистрация: 10.12.2017

Author24 — интернет-сервис помощи студентам

Доброго времени суток!
У меня такой вопрос.
Пытаюсь в кэш TensorFlow(keras) загрузить данные в виде zip файла. Проблема в том что gDrive не имеет прямой ссылки к файлу и поэтому у меня не получается используя "get_file()" загрузить то что мне нужно.
Я использую CoLab и из gDrive в CoLab сам файлик "выгружается". Но! Для TensorFlow нужна прямая URL, а не путь к файлу.
Подскажите, как объяснить TensorFlow где искать файлик. Спасибо!

Python

1 2	_URL = '/путь до моего файла' zip_dir = tf.keras.utils.get_file('file.zip', origin=_URL, extract=True)

p.s
С прямой ссылкой все работает.
Скорее всего есть аналог get_file(), где можно прописать путь.

@Nick07 · 02.06.2020, 20:51

Сообщение от скороход

TensorFlow(keras) загрузить данные в виде zip файла

Ради интереса запустил в поск Яндекса эту фразу. Как Вы думаете, сколько вышло вариантов?

Добавлено через 6 минут
Это пробовали: tf.data.Dataset.zip

@Mikhaylo · 02.06.2020, 22:11

Не, этот zip к архиваторам не имеет отношения. Это склейка датасетов, вроде.

@скороход · 03.06.2020, 16:13 **[ТС]**

Попробую конечно. Спасибо за ответ. Но вся проблема "get_file()" в том что параметр origin использует только прямые ссылки. А как известно gDrive прямыми ссылками не владеет, есть только путь к файлу. Сам файл выводится в кэш CoLab'a, а дальше "ВСЁ" =) Поэтому приходится строить такую пирамидку.
И Гуглю это я уже 4й день. Нахожу всякого рода решения, но не получается.
Архив - это датасет с картинками животных. Как бы его нужно разархивировать внутри Кераса. Я пробовал с прямыми ссылками на разные датасеты, все работает. Но именно с gDrive не могу=(

@Nick07 533 / 438 / 47 Регистрация: 17.07.2013 Сообщений: 2,236
	02.06.2020, 20:51	2
	Сообщение от скороход TensorFlow(keras) загрузить данные в виде zip файла Ради интереса запустил в поск Яндекса эту фразу. Как Вы думаете, сколько вышло вариантов? Добавлено через 6 минут Это пробовали: tf.data.Dataset.zip 1

@Mikhaylo 672 / 546 / 74 Регистрация: 20.09.2014 Сообщений: 3,550
	02.06.2020, 22:11	3
	Не, этот zip к архиваторам не имеет отношения. Это склейка датасетов, вроде. 0

@скороход 2 / 2 / 0 Регистрация: 10.12.2017 Сообщений: 43
	03.06.2020, 16:13 [ТС]	4
	Попробую конечно. Спасибо за ответ. Но вся проблема "get_file()" в том что параметр origin использует только прямые ссылки. А как известно gDrive прямыми ссылками не владеет, есть только путь к файлу. Сам файл выводится в кэш CoLab'a, а дальше "ВСЁ" =) Поэтому приходится строить такую пирамидку. И Гуглю это я уже 4й день. Нахожу всякого рода решения, но не получается. Архив - это датасет с картинками животных. Как бы его нужно разархивировать внутри Кераса. Я пробовал с прямыми ссылками на разные датасеты, все работает. Но именно с gDrive не могу=( 0