Сохранение двумерного массива и сравнение с уже имеющимися

@suas_hiatus · Регистрация: 14.06.2014

Author24 — интернет-сервис помощи студентам

Есть некий двумерный массив чисел.
Необходимо сохранить этот массив и сравнить его с уже имеющимися массивами.
Подскажите, как лучше реализовать? В данный момент массив сохраняется в csv табличку, но я полагаю сравнение я буду производить очень долго.
Может лучше через базу данных? Подскажите в общем, как лучше сделать)

oldnewyear · 25.04.2017, 11:35

Сообщение от suas_hiatus

Есть некий двумерный массив чисел.
Необходимо сохранить этот массив и сравнить его с уже имеющимися массивами.
Подскажите, как лучше реализовать? В данный момент массив сохраняется в csv табличку, но я полагаю сравнение я буду производить очень долго.
Может лучше через базу данных? Подскажите в общем, как лучше сделать)

можно сохранить его в ram, как вариант

@suas_hiatus · 25.04.2017, 11:46 **[ТС]**

Сообщение от oldnewyear

можно сохранить его в ram

прошу прощения, но каким же образом? не работала в этом направлении, но мне кажется, или это не сработает? у меня кроме одного массива, выполненного "в данный момент" есть еще предположим 10, сохраненных в предыдущие запуски программы. И мне нужно сравнить один массив со всеми 10-ю.

@Kifsif · 25.04.2017, 12:17

Сообщение от suas_hiatus

но я полагаю сравнение я буду производить очень долго.

Может, замерить:

Python    
        
    Скопировано
1
2
3
t1 = time.time()
# do tested stuff
print(time.time() - t1)

Если время удовлетворительное, то все нормально.

Если реально медленно, то попробовать SQLite - и тоже замерить. SQLite - просто как самую простую базку - чтобы огород не городить. Если не подойдет - думать дальше. Может, postgres.

Кстати, csv - не самый подходящий формат, наверное. Может, json какой быстрее будет парситься.

И еще как вариант: сначала с диска прочитать массивы в память. А потом обрабатывать. Т.е. у тебя программа будет долго стартовать, но быстро работать. А при старте малые тормоза могут быть некритичны.

@suas_hiatus · 25.04.2017, 12:55 **[ТС]**

Сообщение от Kifsif

попробовать SQLite

Как раз тестирую.
Посмотрю как что будет работать, спасибо за советы

oldnewyear · 25.04.2017, 13:16

из-за одного массива заводить бд? дикость какая-то

@suas_hiatus · 25.04.2017, 13:31 **[ТС]**

Сообщение от oldnewyear

из-за одного массива заводить бд

Я же написала -

Сообщение от suas_hiatus

есть еще предположим 10

все эти массивы будут храниться, из-за этого бд. И то, я предположила только ее использование, и в принципе другого выхода и не вижу. Если есть предложения - скажите, будьте добры.

@dondublon · 26.04.2017, 19:17

Какого рода сравнение?

Jabbson · 26.04.2017, 20:32

Как насчет сравнений в numpy и хранения в npy или hdf5?

@suas_hiatus · 30.04.2017, 14:30 **[ТС]**

Вопрос был решен(более менее) с сохранением только начальных параметров создания массива, и хранением именно их, а не массивов.

Новые блоги и статьи Все статьи Все блоги /
Простая нейросеть на КуМир: Создание и обучение EggHead 16.03.2025 Искусственные нейронные сети — удивительная технология, позволяющая компьютерам имитировать работу человеческого мозга. Если вы хотя бы немного интересуетесь современными технологиями, то наверняка. . .	Исполнитель Кузнечик в КуМир: Решение задач EggHead 16.03.2025 Среди множества исполнителей в системе КуМир особое место занимает Кузнечик — простой, но невероятно полезный виртуальный персонаж, который перемещается по числовой прямой, выполняя ваши команды. На. . .	Исполнитель Водолей в КуМир: Решение задач EggHead 16.03.2025 Разработка алгоритмического мышления — одна из ключевых задач для начинающих программистов, и система КуМир предлагает отличный способ погрузиться в этот процесс. Среди множества исполнителей в этой. . .	Исполнитель Чертежник в КуМир: Решение задач EggHead 16.03.2025 Представьте, что вы можете рисовать на бесконечной координатной плоскости, перемещая точку, которая оставляет след. По вашей команде она может поднять перо и двигаться, не оставляя следа, или. . .	Исполнитель Робот в КуМир: Решение задач EggHead 16.03.2025 КуМир (Комплект Учебных МИРов) — это учебная среда программирования, разработанная специально для обучения базовым концепциям алгоритмизации. Её главная фишка — использование русскоязычного. . .
Исполнитель Черепаха в КуМир: Решение задач EggHead 16.03.2025 Представьте, что вы впервые учитесь программировать, а перед вами стоит задача заставить маленькую виртуальную черепашку рисовать на экране. Звучит забавно? Эта идея зародилась ещё в 1967 году, когда. . .	Конвейеры данных с Apache Kafka Javaican 16.03.2025 В мире, где данные стали новой нефтью, Apache Kafka зарекомендовал себя как мощный инструмент для построения надежных и масштабируемых конвейеров данных. Созданный изначально командой LinkedIn в 2011. . .	Deno против Node.js: Будущее JavaScript рантайма run.dev 16.03.2025 За последнее десятилетие Node. js стал абсолютным лидером среди JavaScript-рантаймов и фактическим стандартом для серверной разработки на JavaScript. Но в 2018 году тот же разработчик, который создал. . .	SwiftUI или UIKit - что выбрать для нового приложения iOS? mobDevWorks 16.03.2025 Когда Apple представила SwiftUI на WWDC 2019, многим показалось, что дни UIKit сочтены. Новый декларативный фреймворк предлагал радикально иной подход к разработке интерфейсов. Вместо кропотливого. . .	Docker: Руководство для начинающих по созданию первого приложения Mr. Docker 16.03.2025 Docker — это платформа, которая упаковывает ваше приложение и все его зависимости в стандартизированные блоки, называемые контейнерами. Эти контейнеры изолированы друг от друга и от основной системы,. . .

@suas_hiatus 2 / 2 / 0 Регистрация: 14.06.2014 Сообщений: 79
		1
	Сохранение двумерного массива и сравнение с уже имеющимися 25.04.2017, 11:34. Показов 1601. Ответов 9 Метки нет (Все метки) Есть некий двумерный массив чисел. Необходимо сохранить этот массив и сравнить его с уже имеющимися массивами. Подскажите, как лучше реализовать? В данный момент массив сохраняется в csv табличку, но я полагаю сравнение я буду производить очень долго. Может лучше через базу данных? Подскажите в общем, как лучше сделать) 0

oldnewyear 440 / 432 / 159 Регистрация: 21.05.2016 Сообщений: 1,338
	25.04.2017, 11:35	2
	Сообщение от suas_hiatus Есть некий двумерный массив чисел. Необходимо сохранить этот массив и сравнить его с уже имеющимися массивами. Подскажите, как лучше реализовать? В данный момент массив сохраняется в csv табличку, но я полагаю сравнение я буду производить очень долго. Может лучше через базу данных? Подскажите в общем, как лучше сделать) можно сохранить его в ram, как вариант 0

@suas_hiatus 2 / 2 / 0 Регистрация: 14.06.2014 Сообщений: 79
	25.04.2017, 11:46 [ТС]	3
	Сообщение от oldnewyear можно сохранить его в ram прошу прощения, но каким же образом? не работала в этом направлении, но мне кажется, или это не сработает? у меня кроме одного массива, выполненного "в данный момент" есть еще предположим 10, сохраненных в предыдущие запуски программы. И мне нужно сравнить один массив со всеми 10-ю. 0

@suas_hiatus 2 / 2 / 0 Регистрация: 14.06.2014 Сообщений: 79
	25.04.2017, 12:55 [ТС]	5
	Сообщение от Kifsif попробовать SQLite Как раз тестирую. Посмотрю как что будет работать, спасибо за советы 0

oldnewyear 440 / 432 / 159 Регистрация: 21.05.2016 Сообщений: 1,338
	25.04.2017, 13:16	6
	из-за одного массива заводить бд? дикость какая-то 0

@suas_hiatus 2 / 2 / 0 Регистрация: 14.06.2014 Сообщений: 79
	25.04.2017, 13:31 [ТС]	7
	Сообщение от oldnewyear из-за одного массива заводить бд Я же написала - Сообщение от suas_hiatus есть еще предположим 10 все эти массивы будут храниться, из-за этого бд. И то, я предположила только ее использование, и в принципе другого выхода и не вижу. Если есть предложения - скажите, будьте добры. 0

@dondublon 4643 / 2059 / 363 Регистрация: 17.03.2012 Сообщений: 10,139 Записей в блоге: 6
	26.04.2017, 19:17	8
	Какого рода сравнение? 0

Jabbson 5903 / 3356 / 1036 Регистрация: 03.11.2009 Сообщений: 10,008
	26.04.2017, 20:32	9
	Как насчет сравнений в numpy и хранения в npy или hdf5? 0

@suas_hiatus 2 / 2 / 0 Регистрация: 14.06.2014 Сообщений: 79
	30.04.2017, 14:30 [ТС]	10
	Вопрос был решен(более менее) с сохранением только начальных параметров создания массива, и хранением именно их, а не массивов. 0