OpenCV и большие изображения

@Burster · Регистрация: 27.03.2016

Author24 — интернет-сервис помощи студентам

OpenCV и большие изображения

Здравствуйте.

Столкнулся проблемой на opencv. Версия последняя на данный момент. 4.8.1.
Пытаюсь создать и потом сохранить в tiff изображение разрешением 22000х22000 в разрядность. 48 бит. Ну то есть цветное 16 бит на канал.

C++    
        
    Скопировано
1
TIL_CV_Image[Img_IDX].create(Height_In,Width_In,Bit_Depth_In);

Оно создаётся. Но процесс сохранения как бы зависает. И файл не появляется.
Сохраняю так

C++    
        
    Скопировано
1
cv::imwrite(File_Name, TIL_CV_Image[Img_IDX]);

Пишу прослоечную DLL для другого языка. Для этого использую VC++ 2017.
Если работать с изображением размером 15000x15000, то всё нормально и оно создаётся. И сохраняется.
Предполагаю, что эта ерунда происходит если размер файла будет превышать 2Гб.
Но, это не есть хорошо. Как это побороть?

@Burster · 23.10.2023, 12:36 **[ТС]**

Вы попробуйте сохранить без сжатия.
TIL_CV_Set_Pixel_48_Bit_Long_RGB - это моя функция.
Я ей и записываю попиксельно данные в изображение с индексом Img_IDX.
И да у меня 16 бит на канала. То есть изображение 48-битное.

@Worldmaster · 23.10.2023, 12:38

Сообщение от Burster

И да у меня 16 бит на канала.

А зачем лонги передаете?

Сообщение от Burster

Вы попробуйте сохранить без сжатия.

По умолчанию без сжатия и получается. Со сжатием файл 2,5 занимает.

@Burster · 23.10.2023, 12:50 **[ТС]**

Это не верно. Даже без шапки и тэгов мы имеем 32000*32000*6= 6144000000. То есть более 6 Гб.
Лонги передаю на всякий случай. Даже не лонги, а лонг лонги.

Добавлено через 7 минут
И лонги это индексы, а не значения пикселов.

@Worldmaster · 23.10.2023, 13:11

Сообщение от Burster

Лонги передаю на всякий случай.

Очень "замечательный" подход особенно при работе с С++.

В общем представленный код нормально работает. Все программы его понимают, размер также получается более 2гб.

Сообщение от Burster

Даже без шапки и тэгов мы имеем 32000*32000*6= 6144000000. То есть более 6 Гб.

Для работы с файлами более 4гб используйте bigtiff.

@Burster · 23.10.2023, 13:26 **[ТС]**

А что тут такого незамечательного? Если смещение внутри файла будет больше 4 Гб, то передавать просто лонг уже не выйдет. Нужно передавать long long. Или по правильному,- Int64.
Не очень понятно, как вы сохранили через OpenCV tif файл размером 6 Гб да ещё он при этом был читаем?

@Worldmaster · 23.10.2023, 13:28

Сообщение от Burster

как вы сохранили через OpenCV tif файл размером 6 Гб да ещё он при этом был читаем?

Потому что по умолчанию используется какое то сжатие и файл получился меньше 4 гб. Я же на скрине показал размер полученного файла.

@Burster · 23.10.2023, 14:03 **[ТС]**

Так вот сохраните 32000х32000х48 бит файл без сжатия и посмотрите на результат.

@Worldmaster · 23.10.2023, 14:42

Сообщение от Burster

Так вот сохраните 32000х32000х48 бит файл без сжатия и посмотрите на результат.

Вы издеваетесь чтоли? Размер будет явно выше чем 4 гига. Чтобы сделать это нужна либа bigtiff.

@Burster · 23.10.2023, 17:02 **[ТС]**

Да и не думаю издеваться. Сохранить корректно не выйдет. При чём OpenCV даже не предупредит, что превышен лимит для tiff. А, вот в opencv есть поддержка bigtiff, или её там до сих пор нет?

@Worldmaster · 23.10.2023, 20:02

Ну может и баг.. напишите в службу поддержки. В следующем релизе учту.
А про бигтиф почитайте мануалы. Но скорее всего придется пересобрать либу. Но это то ещё удовольствие.

@Burster · 23.10.2023, 20:20 **[ТС]**

Похоже, что удалось побороть лимит в 2 Гб. Объявил все индексные переменные как long long и при экспорте в RAD, как Int64. То есть можно получить tif файл размером до 4 гб. На счёт bigtif поэтому и спросил, может он уже есть в Opencv. Тем более использую самую последнюю версию. Пересобирать это да. То ещё удовольствие. Я как-то помню собирал для х86 версию 3.4.1 opencv. В сборке были готовыми только х64 dll.

Новые блоги и статьи Все статьи Все блоги /
Списки и кортежи в Python: различия, особенности, применение py-thonny 13.04.2025 Python славится своей гибкостью при работе с данными. В арсенале языка есть две основные последовательные структуры данных, которые программисты используют ежедневно — списки и кортежи. Эти структуры. . .	Middleware в ASP.NET Core UnmanagedCoder 13.04.2025 В ASP. NET Core термин "middleware" занимает особое место. Что же это такое? Middleware представляет собой программные компоненты, которые формируют конвейер обработки HTTP-запросов в приложении. . . .	Таблицы лута в Unity с MinMaxCurve и AnimationCurve GameUnited 12.04.2025 Создание сбалансированного лута в играх — задача не из простых. Разработчики постоянно ищут способы настройки систем выпадения предметов, которые будут одновременно справедливыми для игроков и. . .	std::expected в C++: Управление ошибками bytestream 12.04.2025 Обработка ошибок всегда была важной и одновременно сложной задачей в программировании на C++. На протяжении долгого времени разработчики использовали различные подходы: возвращаемые коды ошибок,. . .	Nullable типы и операторы объединения null в C# UnmanagedCoder 12.04.2025 Многие шутят, что null — это миллиардная ошибка в программировании. И в этой шутке только доля шутки. Тони Хоар, создатель null-ссылки, сам назвал её своей "ошибкой на миллиард долларов". Почему?. . .
Аутентификация и авторизация JWT в микросервисах с API Gateway stackOverflow 12.04.2025 В традиционных монолитных приложениях безопасность часто реализуется как единый защитный периметр - пользователь проходит аутентификацию один раз, после чего получает доступ ко всем функциям системы. . . .	TypeScript: Интерфейсы vs Типы run.dev 11.04.2025 Современная разработка на JavaScript сталкивается с множеством проблем при масштабировании проектов. Типизация кода стала хорошим инструментом, помогающим избежать ошибок во время выполнения,. . .	Управление топиками и разделами Kafka Javaican 11.04.2025 Apache Kafka — распределенная платформа потоковой передачи данных, которая стала стандартом для построения высоконагруженных систем обмена сообщениями. В современной архитектуре микросервисов,. . .	Миграция монолита в Event-Driven микросервисную архитектуру на C# stackOverflow 11.04.2025 Монолитная архитектура – классический подход к разработке программного обеспечения. Это приложение, построенное как единое целое, где все компоненты тесно связаны между собой. Большинство проектов. . .	Go в Kubernetes: Управление ресурсами golander 11.04.2025 Разработчики Go-приложений в Kubernetes часто сталкиваются с неожиданными проблемами производительности и даже внезапными отказами контейнеров. Причина этого кроется в особенностях взаимодействия. . .

@Burster 0 / 0 / 0 Регистрация: 27.03.2016 Сообщений: 52
	23.10.2023, 12:36 [ТС]
	Вы попробуйте сохранить без сжатия. TIL_CV_Set_Pixel_48_Bit_Long_RGB - это моя функция. Я ей и записываю попиксельно данные в изображение с индексом Img_IDX. И да у меня 16 бит на канала. То есть изображение 48-битное. 0

@Worldmaster 323 / 190 / 45 Регистрация: 25.08.2011 Сообщений: 1,261
	23.10.2023, 12:38
	Сообщение от Burster И да у меня 16 бит на канала. А зачем лонги передаете? Сообщение от Burster Вы попробуйте сохранить без сжатия. По умолчанию без сжатия и получается. Со сжатием файл 2,5 занимает. 0

@Burster 0 / 0 / 0 Регистрация: 27.03.2016 Сообщений: 52
	23.10.2023, 12:50 [ТС]
	Это не верно. Даже без шапки и тэгов мы имеем 32000320006= 6144000000. То есть более 6 Гб. Лонги передаю на всякий случай. Даже не лонги, а лонг лонги. Добавлено через 7 минут И лонги это индексы, а не значения пикселов. 0

@Worldmaster 323 / 190 / 45 Регистрация: 25.08.2011 Сообщений: 1,261
	23.10.2023, 13:11
	Сообщение от Burster Лонги передаю на всякий случай. Очень "замечательный" подход особенно при работе с С++. В общем представленный код нормально работает. Все программы его понимают, размер также получается более 2гб. Сообщение от Burster Даже без шапки и тэгов мы имеем 32000320006= 6144000000. То есть более 6 Гб. Для работы с файлами более 4гб используйте bigtiff. 0

@Burster 0 / 0 / 0 Регистрация: 27.03.2016 Сообщений: 52
	23.10.2023, 13:26 [ТС]
	А что тут такого незамечательного? Если смещение внутри файла будет больше 4 Гб, то передавать просто лонг уже не выйдет. Нужно передавать long long. Или по правильному,- Int64. Не очень понятно, как вы сохранили через OpenCV tif файл размером 6 Гб да ещё он при этом был читаем? 0

@Worldmaster 323 / 190 / 45 Регистрация: 25.08.2011 Сообщений: 1,261
	23.10.2023, 13:28
	Сообщение от Burster как вы сохранили через OpenCV tif файл размером 6 Гб да ещё он при этом был читаем? Потому что по умолчанию используется какое то сжатие и файл получился меньше 4 гб. Я же на скрине показал размер полученного файла. 0

@Burster 0 / 0 / 0 Регистрация: 27.03.2016 Сообщений: 52
	23.10.2023, 14:03 [ТС]
	Так вот сохраните 32000х32000х48 бит файл без сжатия и посмотрите на результат. 0

@Worldmaster 323 / 190 / 45 Регистрация: 25.08.2011 Сообщений: 1,261
	23.10.2023, 14:42
	Сообщение от Burster Так вот сохраните 32000х32000х48 бит файл без сжатия и посмотрите на результат. Вы издеваетесь чтоли? Размер будет явно выше чем 4 гига. Чтобы сделать это нужна либа bigtiff. 0

@Burster 0 / 0 / 0 Регистрация: 27.03.2016 Сообщений: 52
	23.10.2023, 17:02 [ТС]
	Да и не думаю издеваться. Сохранить корректно не выйдет. При чём OpenCV даже не предупредит, что превышен лимит для tiff. А, вот в opencv есть поддержка bigtiff, или её там до сих пор нет? 0

@Worldmaster 323 / 190 / 45 Регистрация: 25.08.2011 Сообщений: 1,261
	23.10.2023, 20:02
	Ну может и баг.. напишите в службу поддержки. В следующем релизе учту. А про бигтиф почитайте мануалы. Но скорее всего придется пересобрать либу. Но это то ещё удовольствие. 0

@Burster 0 / 0 / 0 Регистрация: 27.03.2016 Сообщений: 52
	23.10.2023, 20:20 [ТС]
	Похоже, что удалось побороть лимит в 2 Гб. Объявил все индексные переменные как long long и при экспорте в RAD, как Int64. То есть можно получить tif файл размером до 4 гб. На счёт bigtif поэтому и спросил, может он уже есть в Opencv. Тем более использую самую последнюю версию. Пересобирать это да. То ещё удовольствие. Я как-то помню собирал для х86 версию 3.4.1 opencv. В сборке были готовыми только х64 dll. 0