Mutabor писал(а): ↑05-09-2026 09:10
Это можно конечно можно замаскировать разными методами - например заполнять младшие разряды рандомом а не константами, но вопрос зачем? Чтобы обмануть юзера? Ну и размер равки от этого только вырастает т.к. придется сохранять этот мусор, когда можно было бы сохранить просто изображение в меньшей разрядности.
Теперь понял о чем речь, спасибо. Да, это видно если младшие биты ничем не заполнены.
Сначала не сориентировался что за "расческа" на гистограмме, о чем вообще речь )
Вопрос "зачем" делать фейковые младшие биты с рандомом - это может быть просто маркетинг. Сталкивался с китайскими камерами в которых так сделано.
Mutabor писал(а): ↑05-09-2026 09:10
Ну вот кстати хроматическую аберрацию то почему-то не поправили, хотя если уж править дисторсию - то можно было бы и её заодно.
Потому что цветом занимается уже нейросеть. И хром.аберрации проще и энергетически более эффективно править нейросетью чем двигатель сабпиксели по таблице преобразований геометрии.
Вот видимо то что получено до нейросетевой обработки и прочей "вычислительной магии" - в мире экшн камер и называют RAWом.
Mutabor писал(а): ↑05-09-2026 09:10
dAIver писал(а): ↑05-09-2026 01:24
В заводской прошивке GoPro 13. Я ее довольно глубоко патчил под свои задачи
Интересно, а детали реализации не подскажите? И неужели там прям программоное попиксельное вычитывание с матрицы, или сама матрица поддерживает такой режим работы? Кстати не поделитесь даташитом на матрицу?
Даташитов у меня к сожалению нет. Это все работа с "черным ящиком".
Детали реализации - реверс бинаря обновления прошивки. Он не шифрован и не защищен сертами, там линукс-подобная файловая система, куски которой неплохо разбирает в автоматизированном режиме связка IDA PRO с плагином GhIDA + IDA MCP server + Cursor.
Еще есть такая штука как gopro labs, там используется распознавание qr-кода для ввода параметров в камеру. Так вот, в этой распознавалке я нашел баг с "переполнение буфера", который позволяет менять произвольные константы в ОЗУ камеры.
У матрицы есть несколько режимов работы. Можно снимать целиком кадр, хотя по факту он собирается при помощи rolling shutter построчно.
Можно вычитывать кроп, кусок - причем координаты центра и наклон (!) этого куска можно быстро двигать по полю матрицы. Этот режим используется в быстрой съемке (240fps), и для работы стабилизации. Внутри камеры есть миниатюрная ИНС (3 ДУСа + 3 акселерометра) - "кроп" двигают непосредственно по сигналу с этой ИНС. Это делает аппаратный сопроцессор, не вынося обработку на уровень ОС камеры.
Попиксельно - наверно можно считать, задав размер кропа 1x1 пиксель и "сканируя" им матрицу. Честно говоря не пробовал так делать, и не очень понимаю зачем это может понадобится. Кадр будет очень медленно собираться.
Не очень понял вопрос "прям программоное попиксельное вычитывание с матрицы" - с ПЗС на уровень обработчика приходит матрица размерностью [i,j], где i это кол-во пикселей в кропе по горизонтали, j - вертикали. Эту матрицу можно получать с единичного отсчета или задав кол-во измерений. Усреднениями и выдачей готового псевдо-кадра занимается проц внутри самой матрицы, как он это делает - "науке неизвестно", прошивок в нем нет, там ASIC.
Это информация про уровень сигнала по пикселям. Де-баеринг и на этом этапе отсутствует, он делается позже.
Mutabor писал(а): ↑05-09-2026 09:10
dAIver писал(а): ↑05-09-2026 01:24
Т.к. она с завода не умеет писать RAW в режиме видео, только GP-LOG, который по факту вообще "псевдо"-лог.
Ну так RAW видео получается совсем неприличных размеров, куда его сохранять то? Вот например от этого DJI 1 raw весит почти 70 МБ, если даже писать в 20 фпс это 1.4 ГБ/сек, куда такое записать? Можно (и нужно) применить безпотерьное сжатие, но всё равно размер будет огромным.
Кстати можете выложить равку с этой ГоПро?
А никуда не пишется. Нет таких быстрых портов в гоупро. Это делалось для того чтобы поиграться с алгоритмами компенсации backscatter (обратного рассеяния света на взвешенных частицах) для любительской подводной съемки. Вся предварительная обработка делается внутри камеры, на флешку пишется либо raw с "кропа", небольшого сегмента матрицы, либо уже обработанный моей математикой и уже пожатый штатным кодеком полный кадр, но с честным "плоским" цветовым профилем (LOG).
Пример RAWа - да, сделаю. Не обещаю что быстро, надо подумать и написать конвертер чтобы Вы смогли в чем-то открыть этот файл. Т.к. у меня в качестве видеоредактора порой используется Матлаб.
Пример алгоритма ради которого все затевалось - вот сравнение до/после (youtube). backscatter компенсируется внутри камеры, потом запись LOG, дальше обработка и "раскрашивание" в Давинчи Resolve + MCP + Opencode, после апскейл используя немного модифицированный Real-ESRGAN.
https://www.youtube.com/watch?v=UhtZX2TioeQ
Вот тут видео которое полностью снято используя эту математику.
https://www.youtube.com/watch?v=5j913AE2X0o
Фактически прозрак в карьере был примерно метр. Кое-какие дайверы, клуб - наткнулись в предложке на это видео и помчались всей толпой нырять на карьер. Потом долго удивлялись, "почему нам так не повезло с прозраком" ))
Сейчас все тоже самое пытаюсь сделать с прошивкой Sony FX3, но с ней сложнее и медленнее все продвигается по некоторым причинам.
Не судите строго, это все просто хобби в свободное время от дайвинга и покатушек на квадрике. Я не профи по фото/видео продакшну, но в ЦОС и сверточных нейросетях кое-что понимаю.
Мой уровень анализа — чтобы на фотке "я и крылатка" можно было примерно разобрать где я, и где крылатка. 