Адрес для входа в РФ: exler.world
Новая технология улучшения изображений от Google
04.09.2021 12:04
12521
Комментарии (161)
Я неоднократно читал о различных технологиях улучшения изображений и вообще за этими разработками стараюсь следить - это очень важно и будет востребовано.
Сейчас корпорация Google объявила о создании новой технологии улучшения изображения, повышающей разрешение картинки аж в 16 раз. Цитирую отсюда.
Разработчики Google представили новую технологию, благодаря которой можно значительно улучшить качество исходного изображения. Искусственный интеллект попиксельно восстанавливает даже сильно сжатую картинку, приближая её к оригиналу.
Команда Brain Team продемонстрировала два алгоритма генерации фотографий. Используя технологию SR3, предусматривающую апскейлинг с помощью повторного уточнения, нейросеть увеличивает разрешение картинки, достраивая недостающие части из гауссовского шума. Обучение этой модели построено на методах искажения изображения и последующем обратном процессе.
Вторая диффузная модель — CDM. Для её обучения специалисты использовали миллионы изображений в высоком разрешении из базы данных ImageNet. Улучшение качества картинки она производит каскадно — в несколько этапов. Так, исходник размером 32х32 пикселя улучшается до 64x64, а затем до 256x256 (в 8 раз), а оригинальное изображение с разрешением 64x64 точки обрабатывается по схожей схеме до 256x256 и 1024x1024 пикселя (масштабирование 16x).
По заверению разработчиков, новая технология превосходит по качеству восстановления фотографий такие современные методы ИИ-масштабирования, как BigGAN-deep и VQ-VAE-2.
На сегодня Google лишь продемонстрировала результаты работы алгоритмов посредством коротких анимаций, но ещё не публиковала подробностей о новой технологии. Когда компания планирует представить коммерческий вариант ИИ-апскейлера, не уточняется.
Выглядит это все очень интересно, но, как обычно, буду ждать, когда предоставят готовый инструмент, с помощью которого я смогу посмотреть, как это работает вживую.
Войдите, чтобы оставить комментарий.
напомнило про супер-архиватор, который архивирует файл несколько раз, чтобы сжимать в несколько раз лучше 😄))
150 комментариев и никто пока-то и не предположил что будет главным приложением этой технологии. Нет, это не улучшение ч/б фото снятых на Свема-15 43 года тому назад.
Главное приложение этой технологии - видеоконференции через (в основном) мобильные приложения. Вы, когда делайте видеозвонки через facetime, WhatsApp, Telegram, Signal, etc - вы видели сколько они данных жрут, особенно в хорошем разрешении? Посмотрите - час видеосвязи через wifi - 1.2 гигабайта. Причем 100% заряженная батарея просядет на 60% или больше.
А с этим - нужно передавать фото/видео высокого разрешения только в начале, чтобы нейронная сеть в телефоне (ага, в телефоне есть свой AI chip) начала train & optimize. Через минуту две, разрешение можно снизить 4 раза, объём передаваемых данных - в 10 раз и вся нагрузка будет на AI чип на принимаемой стороне чтобы восстановить исходное изображение.
Думайте это только гугл в этом замешен? Во Nvidia еще в прошлом году выпустила прес релиз
Maxine's video compression uses a generative adversarial network (GAN) on the receiver side to reconstruct images of human faces from the position information of only a few key points taken from the sender's images. By sending only these points, instead of pixel data, the bandwidth requirements are drastically reduced compared to the H.264 compression standard, by up to 10x. Maxine also provides several other features, including face alignment and animated avatars.
NVIDIA's AI Reduces Video Streaming Bandwidth Consumption by 10x
Главное приложение этой технологии - видеоконференции через (в основном) мобильные приложения. Вы, когда делайте видеозвонки через facetime, WhatsApp, Telegram, Signal, etc - вы видели сколько они данных жрут, особенно в хорошем разрешении? Посмотрите - час видеосвязи через wifi - 1.2 гигабайта. Причем 100% заряженная батарея просядет на 60% или больше.
А с этим - нужно передавать фото/видео высокого разрешения только в начале, чтобы нейронная сеть в телефоне (ага, в телефоне есть свой AI chip) начала train & optimize. Через минуту две, разрешение можно снизить 4 раза, объём передаваемых данных - в 10 раз и вся нагрузка будет на AI чип на принимаемой стороне чтобы восстановить исходное изображение.
Думайте это только гугл в этом замешен? Во Nvidia еще в прошлом году выпустила прес релиз
Maxine's video compression uses a generative adversarial network (GAN) on the receiver side to reconstruct images of human faces from the position information of only a few key points taken from the sender's images. By sending only these points, instead of pixel data, the bandwidth requirements are drastically reduced compared to the H.264 compression standard, by up to 10x. Maxine also provides several other features, including face alignment and animated avatars.
NVIDIA's AI Reduces Video Streaming Bandwidth Consumption by 10x
Через минуту две, разрешение можно снизить 4 раза, объём передаваемых данных - в 10 раз и вся нагрузка будет на AI чип на принимаемой стороне чтобы восстановить исходное изображение.
Во Nvidia еще в прошлом году
Звук - есть. Изображения - есть.
Запахи давно уже симулируются и улучшаются химически.
Вкус? Ну, разные глютаминаты натрия давно уже как. Не говорю про соль с сахаром. Ничего, скоро будет "Официант! Две пилюли с черной икрой, две с красной, а бифштекс мелко измельчить".
Запахи давно уже симулируются и улучшаются химически.
Вкус? Ну, разные глютаминаты натрия давно уже как. Не говорю про соль с сахаром. Ничего, скоро будет "Официант! Две пилюли с черной икрой, две с красной, а бифштекс мелко измельчить".
Вы помните эти лица?
И что за красная штучка над правым ухом у мужика?
Откуда?
Всё, основная проблема японской порнухи решена. Надеюсь гугл не увидит там лица)
Надеюсь гугл не увидит там лица
Топаз шикарен, очень рекомендую!
Но может порой сильно нафантазировать - несколько пятен в темноте он превратил в группу людей. 😄
Но в целом, программа очень хороша и хороша, помимо увеличения изображений, для очистки их от артефактов сжатия.
Но может порой сильно нафантазировать - несколько пятен в темноте он превратил в группу людей. 😄
Но в целом, программа очень хороша и хороша, помимо увеличения изображений, для очистки их от артефактов сжатия.
Топаз - гамно. Бесплатный апскейл на myheritage.com намного лучше того Топаза, за который еще и деньги немаленькие просят.
Не знаю, что такое "гамно," видимо, вы в этом знаток.
А Топаз работает вот так:
А Топаз работает вот так:
Топаз - гамно.
Бесплатный апскейл на myheritage.com
P.S. Возможно, что-то там когда-то там у вас и получилось лучше топазовских программ – но на сегодня они одни из лидеров в этом направлении. Просто объективно.
вроде на хабре лет 7-10 назад была статья про российскую разработку.
программа деблюрила автономера.
программа деблюрила автономера.
А из фото 1х1 px можно сделать 1000х1000? ))
В романе Артура Кларка "Молот господень" в будущем появилась секта, которая свистела, что установила связь с сириусянами, у которых суперцивилизация и вообще райские условия. И те, якобы, согласились принимать к себе людей, зашифрованных в виде пакета данных и посланных по радиолучу. Там их обратно восстановят, оденут, обуют, накормят, напоят. А их суперсовершенный алгоритм обработки позволяет упаковать считанную информацию в 14 байт. 14 байт на всего человека, со всеми его родинками и отвращением к цветной капусте, представляете! Услуга, разумеется, небесплатная.
там один деятель черный квадрат запостил в следующей веткe. По этой технологии и сделано.
А из фото 1х1 px можно сделать 1000х1000? ))
Конечно, можно. Есть невообразимое количество фоток 1000x1000, которые, будучи сжатыми в 1x1, дадут исходный пискел. Выбирайте любое. Так по нескольким пискелам восстанавливают сильно размытый текст или число.
Теперь всех котиков мира можно будет ужать в одну картинку 64000 х 16000
По одному котику на пиксель
По одному котику на пиксель
супер
есть великолепная сцена из фильма с Джоди Фостер.
есть великолепная сцена из фильма с Джоди Фостер.
Выше запостили с оригинальным текстом. Там хорошая игра слов "Looks like our killer is screwed."
Вообще другое. В сигнале со звёзд содержалась вся информация, их задачей было расшифровать кодировку, а не восстановить. Заметили? Они там, наоборот, уменьшают масштаб, потому что сначала с ним ошиблись и глядели на предельно увеличенные пиксели во весь экран. Потом инвертируют картинку, потому что вначале получили негатив.
Винни, кеп ты мой любимый 😄. Контакт снимали по Сагану, там все норм. Саган херни не посоветует, я согласен (зум-аут и пр). Просто, сцена похожая по настроению -- когда все ждут картинку, и она ин риал тайм делается перед тобой.
"Контакт" хорош! 3а исключением того, что когда тетка вернулась, начали долгое нудное разбирательство про ее "религиозный опыт", вместо того чтобы запустить десяток теток и дядек следом, и проверить воспроизводимость. саму книгу не читал. К сожалению, подозреваю, что Саган это тоже написал.
"Контакт" хорош! 3а исключением того, что когда тетка вернулась, начали долгое нудное разбирательство про ее "религиозный опыт", вместо того чтобы запустить десяток теток и дядек следом, и проверить воспроизводимость. саму книгу не читал. К сожалению, подозреваю, что Саган это тоже написал.
Да, но та картинка, на которую вы отвечали, была сарказмом над жгучей сериальной хернёй Холливуда. И у меня возникло стойкое ощущение, что вы поддакиваете, приводя якобы аналогичную сцену, и тем самым вовлекаете в насмешки горячо любимый мною "Контакт". Те ассоциации, что вы сейчас объяснили, слишком глубоко на вторых уровнях, чтобы их сходу считать. А вот поверхностная фальшивая аналогия считывается сходу.
Мне, напротив, это показалось очень правдоподобным. Косные бюрократы чиновники в союзе с косными светилами науки на говно изойдут, доказывая свои догмы и компрометируя ниспровергателей и их опыт, вместо того, чтобы сделать простые и очевидные действия по установлению истины.
Дело в том, что истина для них — дело десятое. Для чиновников — экономия денег налогоплательщиков, да и просто нежелание подрываться на лишние хлопоты. Для научных светил так и вовсе острое неприятие подрывов устоев, которые они всю жизнь возводили, и на которых теперь покоятся. Вспомним погибшего окодемика. Скептицизм, граничащий с ретроградством.
И если так, то именно потому, что во многом в этой кухне был осведомлён. Сам я книгу тоже не читал.
3а исключением того, что когда тетка вернулась, начали долгое нудное разбирательство про ее "религиозный опыт", вместо того чтобы запустить десяток теток и дядек следом, и проверить воспроизводимость.
Дело в том, что истина для них — дело десятое. Для чиновников — экономия денег налогоплательщиков, да и просто нежелание подрываться на лишние хлопоты. Для научных светил так и вовсе острое неприятие подрывов устоев, которые они всю жизнь возводили, и на которых теперь покоятся. Вспомним погибшего окодемика. Скептицизм, граничащий с ретроградством.
К сожалению, подозреваю, что Саган это тоже написал.
Саган херни не посоветует
И у меня возникло стойкое ощущение, что вы поддакиваете, приводя якобы аналогичную сцену, и тем самым вовлекаете в насмешки горячо любимый мною "Контакт".
>>>
ОК.
Надо почитать книгу тогда. Она у меня есть, кстати, только я не могу книг читать, надо достать ПДФ
>>>
ОК.
Надо почитать книгу тогда. Она у меня есть, кстати, только я не могу книг читать, надо достать ПДФ
Она у меня есть, кстати, только я не могу книг читать, надо достать ПДФ
- Нет, просто не могу
- Безпдфовое...
Сори за офтоп.
Вышел Xiaomi Mix 4, первый с подэкранной камерой.
Было бы интересно, если бы вы поизучали и обзорчик ).
В нем много всего интересного.
Вышел Xiaomi Mix 4, первый с подэкранной камерой.
Было бы интересно, если бы вы поизучали и обзорчик ).
В нем много всего интересного.
Этак, выходит, зря Яцутко на чувака гнал:
Молодой человек протягивает мне фотку 9x12cm, сделанную явно “мыльницей”. В середине кадра, “издали похожая на муху”, группа людей. Он показывает на голову одного из группы и спрашивает: “Можете отсканировать так, чтобы только это лицо было, а остальное отрезать?”
– Легко, — говорю, — Только Вы себе представляете, какое это будет качество?
– А Вы, — говорит, — Улучшить не можете? Например, насытить лицо пикселями?
Молодой человек протягивает мне фотку 9x12cm, сделанную явно “мыльницей”. В середине кадра, “издали похожая на муху”, группа людей. Он показывает на голову одного из группы и спрашивает: “Можете отсканировать так, чтобы только это лицо было, а остальное отрезать?”
– Легко, — говорю, — Только Вы себе представляете, какое это будет качество?
– А Вы, — говорит, — Улучшить не можете? Например, насытить лицо пикселями?
Я почему такой злой был, это у меня технологии от Гугл не было...
зря Яцутко на чувака гнал
Не восстанавливает, а дорисовывает, точнее говоря. Не факт, что в итоге получается точнее, чем в оригинале.
Не восстанавливает, а дорисовывает, точнее говоря. Не факт, что в итоге получается точнее, чем в оригинале.
Чисто семантически - нет шанса. Фактически - тем более. Поясню: апскейлим фото Марса и ждем, чтобы было точнее, чем в оригинале...
Жаль они не сравнили реальную фотографию и восстановленную. А так пока не очень верю
Жаль они не сравнили реальную фотографию и восстановленную
Я имею ввиду реальную фотографию в хорошем качестве. Они же не уменьшили, а потом восстановили. Вот ту первую в хорошем качестве с восстановленной.
Да да )))
Смех смехом, но если так начнут работать с фото при полицейских расследованиях...
+100500
>>>Смех смехом, но если так начнут работать с фото при полицейских расследованиях...
хорошо что хоть Обаму отмазали. Не надо будет коленом душить около машины.
>>>Смех смехом, но если так начнут работать с фото при полицейских расследованиях...
хорошо что хоть Обаму отмазали. Не надо будет коленом душить около машины.
Я имею ввиду реальную фотографию в хорошем качестве. Они же не уменьшили, а потом восстановили. Вот ту первую в хорошем качестве с восстановленной.
Проедпоследгий столбец - их алгоритм, последний - оригинал до уменьшения.
Проедпоследгий
А, да вижу.
Слева, - Обама
Справа - Батрудинов, но это не точно.
на этом месте Рекрода хватит рекордный удар. Переживаю за него
я буду скучать по нему
я буду скучать по нему
Никакому гуглу не переплюнуть наши алгоритмы увеличения изображения. В комплект входит художник, который потом рисует обнаруженные на фотографии элементы.
Индипенсию подготавливают
А обнаруженный битый пиксель вскоре признают иностранным агентом!
А обнаруженный битый пиксель вскоре признают иностранным агентом!
Индипенсию подготавливают
А обнаруженный битый пиксель вскоре признают иностранным агентом!
битый пиксель
Или четырёх.
нейросеть
Искусственный интеллект
+++
именно поэтому мне интереснее, когда умные люди идут работать не туда, где больше платят за херню (банковские "прогнозы", трейдинг за наносекунду, фейковые фотки и видео), а туда, где свой мозг можно приложить к решению сложных и важных проблем,.
Kлиматическое моделирование (какие-нить турбулентные потоки), новые аккумы, марсоходы, фьюжн, предсказание белков с "нуля" (пока, по-моему херня до-сих пор, как бы пыжились), и пр -- стопицот мест, где можно себя приложить. Нейросети май эсс: "мы и так ни хера не понимаем, как оно считает, но прикольненько выходит".
именно поэтому мне интереснее, когда умные люди идут работать не туда, где больше платят за херню (банковские "прогнозы", трейдинг за наносекунду, фейковые фотки и видео), а туда, где свой мозг можно приложить к решению сложных и важных проблем,.
Kлиматическое моделирование (какие-нить турбулентные потоки), новые аккумы, марсоходы, фьюжн, предсказание белков с "нуля" (пока, по-моему херня до-сих пор, как бы пыжились), и пр -- стопицот мест, где можно себя приложить. Нейросети май эсс: "мы и так ни хера не понимаем, как оно считает, но прикольненько выходит".
фотках Гьячунг-Канга
мы и так ни хера не понимаем, как оно считает, но прикольненько выходит
(нельзя ж напрограммить то, в чём не разбираешься сам)
отдельные ноуды можно, но как в какую сеть они соединятся, и почему именно такая сеть работает -- насколько я понимаю -- нельзя.
Повторю вновь – вы не можете создать то, о работе чего "вообще ничего не будете знать". Ну вообще никак не можете, ну просто по определению... ?
P.S. Поэтому, в общем-то, те или иные нейросети то и дело "корректируют" в нужную сторону. Как вы считаете, это "волшебство" какое-то – или, всё же, знание самих принципов работы своей сети? Вот и я о том же... ))
Простите, а зачем тогда вообще нужна вся эта возня с нейросетями, их обучением, и т.д. ? Если вы все знаете, что мешает сразу написать алгоритм распознавания тех же лиц и указать ему прямо, на что и с какой силой нужно обращать внимание, на какие признаки?
дети опровергают ваше " определение"
Простите, а зачем тогда вообще нужна вся эта возня с нейросетями, их обучением, и т.д. ? Если вы все знаете, что мешает сразу написать алгоритм распознавания тех же лиц и указать ему прямо, на что и с какой силой нужно обращать внимание, на какие признаки?
Вот для это и нужна "возня с нейросетями" – относительно приемлемый (даже на данных этапах) результат с высокой скоростью. То есть, по соотношению "результат/время" уделывает любого человека просто напрочь.
А что касается вашего вопроса про "указать прямо" – мешает отсутствие у нейросети "полного понимания" того, что именно она делает (потому, собственно, порой на выходе и получается сущая дичь))). Это мы представляем себе всю реальную "объёмность" фото или видео – а для нейросети это всего лишь двухмерный (!) массив пикселей разного цвета.
То есть, нейросеть вообще не оперирует понятиями "глаза", "волосы" или "блик" – для неё это всё в равной степени всего лишь абстрактные участки изображения, она ищет лишь формальную схожесть объектов и потом умело "отрисовывает" найденный результат сугубо технически.
Возможно, так будет понятнее...
(нельзя ж напрограммить то, в чём не разбираешься сам)отдельные ноуды можно, но как в какую сеть они соединятся, и почему именно такая сеть работает -- насколько я понимаю -- нельзя. Пока. Как и соединения нейронов в мозге.
Если вы все знаете, что мешает сразу написать алгоритм распознавания тех же лиц и указать ему прямо, на что и с какой силой нужно обращать внимание, на какие признаки?
Вот вы родились, и ходить не умеете. Зато у вас есть куча датчиков входной информации и penalty function в виде синяков и шишек. Далее нейросеть пытается экспериментировать с теми или иными сигналами, которые она подает на приводящие механизмы в виде мышц, возникает куча многомерных векторов и матриц для описания этих состояний, штрафы от падений, покуда не будет найдено оптимальное решение.
Анализ банковских транзакций помогает находить мошенников и проблемы в организации работы (снижать риски и тп). Трейдинг за доли секунды тоже может занести кучку денег.
Турбулентные потоки? А какой смысл в мельчайших деталях копаться в том, что мы изменить не в силах? Гораздо полезнее "интегральные" данные, чтобы не размещать производства (пром или сх) в тех районах, где это противопоказано климатически. Аккумуляторы? Тогда уж лучше энергосберегающие средства, что и для климата полезнее.
Турбулентные потоки? А какой смысл в мельчайших деталях копаться в том, что мы изменить не в силах? Гораздо полезнее "интегральные" данные, чтобы не размещать производства (пром или сх) в тех районах, где это противопоказано климатически. Аккумуляторы? Тогда уж лучше энергосберегающие средства, что и для климата полезнее.
Повторю вновь – вы не можете создать то, о работе чего "вообще ничего не будете знать". Ну вообще никак не можете, ну просто по определению..
Ну, и традиционный "черный ящик". Не знаем, как устроен, но умеем использовать результаты его работы.
Да что там ящики - просто ребенка сделать, "о работе которого..." (кто-то опередил)
Нейросеть - это же обычный матан
Вообще-то математический анализ исследует непрерывные (в разных смыслах) структуры. Нейросети на 99% - дискретный анализ.
Ну, и традиционный "черный ящик". Не знаем, как устроен, но умеем использовать результаты его работы.
вы заранее знаете как "работают" ваши дети?
Но это уже обычная голая схоластика, пардон.
Детей-то фактически "создаём" не мы, создаёт их природа (хоть мы и активно участвуем в процессе, ага)). А вот нейросети запрограммили именно мы, в них нет совершенно ничего "непонятного". Потому и можем в любой момент изменить любые (!) их настройки, аж вплоть до полной неузнаваемости (чего явно не скажешь о детях))...
Я не знаю, как работает автомобиль. Я его точно не собирал. Но водить иногда приходилось. А уж лифтами так все пользуются, хотя никто их не делал и не знает их устройства.
Конечно же это метафора с ящиком.
Конечно же это метафора с ящиком.
Так мы говорим про "неведому зверушку"? А!
Ну, есть (были) аналоговые вычислительные машины, где никаких конечных разностей не было.
Если что, то у меня в университетском дипломе специальность "вычислительная математика". Матанализ читал академик Скороход, написавший трёхтомник "Теория случайных процессов". Про нейроны и нейронные сети читал спецкурс дважды доктор наук - по математике и по биологии. Было это дохрена лет назад, но кое-что ещё помню.
так как бесконечно малые в фактическом прикладном использовании заменяются на конечные разности/приращения со всеми вытекающими
Если что, то у меня в университетском дипломе специальность "вычислительная математика". Матанализ читал академик Скороход, написавший трёхтомник "Теория случайных процессов". Про нейроны и нейронные сети читал спецкурс дважды доктор наук - по математике и по биологии. Было это дохрена лет назад, но кое-что ещё помню.
Ну, есть (были) аналоговые вычислительные машины, где никаких конечных разностей не было.
Мир экзотики, конечно, полон чудес, да вот только в обычной жизни они не встречаются. А на практике даже адронные процессы в ЦЕРНе считают на решетке. И давайте не будем блохах, мне это неинтересно.
добролюб и кэмэл обсуждают нейросети?!
вы же вирусологи-эпидемиологи! )
вы же вирусологи-эпидемиологи! )
Вся советская ПВО работала на аналоговых вычислителях 50 (40?) лет назад. Я понимаю, что кто-то тогда еще не родился, но это не отменяет факта существования.
В любом смартфоне стоит усилитель звука. Как думаешь, он усиливает цифры? Делает их большими-большими?
да вот только в обычной жизни они не встречаются
Вся советская ПВО работала
Как думаешь, он усиливает цифры?
Я не знаю, как работает автомобиль. Я его точно не собирал. Но водить иногда приходилось. А уж лифтами так все пользуются, хотя никто их не делал и не знает их устройства.
Конечно же это метафора с ящиком.
Конечно же это метафора с ящиком.
То есть, "чёрный ящик" это исключительно с вашей (да и моей отчасти)) "пользовательской" точки зрения. С точки зрения же непосредственных разработчиков (которые, внезапно, обычные люди, а вовсе не какие-то там инопланетяне)) – этот ваш "ящик" практически прозрачный.
Вот и с нейросетями точно так же. Всё ж просто... ?
Если что, то у меня в университетском дипломе специальность "вычислительная математика". Матанализ читал академик Скороход, написавший трёхтомник "Теория случайных процессов". Про нейроны и нейронные сети читал спецкурс дважды доктор наук - по математике и по биологии. Было это дохрена лет назад, но кое-что ещё помню.
Так что именно помните-то, имеющее непосредственное отношение к теме нашей дискуссии и опровергающее мои утверждения? Особенно любопытно с учётом того, что уж "коллега" математик-то точно должен знать, что не бывает на свете никаких формул и законов в виде "чёрного ящика" – бывают максимум без чётких доказательств (что, впрочем, нисколько не мешает применять их в прикладной работе).
Действительно интересно. Поскольку моё "смежное" с вашим образование (из которого, впрочем, тоже всю "непригодившуюся" сугубо математическую часть уже практически забыл через четверть века))) – уже более чем допускало наличие систем, подобных нынешним нейросетям.
То есть, ещё аж в начале девяностых нам прямо говорилось о гипотетическом (тогда ещё) экспоненциальном росте сложности ПО, в котором будет всё труднее и труднее разбираться "непосвящённым" (сложнее сугубо физически в буквальных "человеко-часах", но никак не теоретически, о чём зачем-то упорно говорите вы))...
В любом смартфоне стоит усилитель звука. Как думаешь, он усиливает цифры? Делает их большими-большими?
Метод кодирования звука в цифру прекрасно известен, метод декодирования также прекрасно известен. Аналоговая часть (неизбежная в данном случае) работает лишь на самом последнем, конечном участке всей этой достаточно длинной цифровой цепочки – как, например, тот же самый дисплей, отображающий нам конечные результаты работы нейросети.
То есть, вновь никаких "чудес"... ?
P.S. Не, ну можно, конечно, вспомнить ещё и про "аналоговые" физические процессы непосредственно в самом оборудовании – но это будет совсем уж мелочно... )))
Танец действительно народный, но в обработке профессионального хореографа. И Энтони Куин внес в него свои элементы, он повредил ногу на съемках и не мог выполнять изначальный вариант. Поэтому все происходит гораздо плавнее, чем и в народном "сирто" и в посталенном "сиртаки"
Не в тему. Но стоит упоминания.
Умер композитор который написал "сиртаки". Настолько популярная композиция что многие во всем мире думают что это народная греческа музыка и танец ,но нет. Это продукт гениальности великого Микиса Теодоракиса.
Умер композитор который написал "сиртаки". Настолько популярная композиция что многие во всем мире думают что это народная греческа музыка и танец ,но нет. Это продукт гениальности великого Микиса Теодоракиса.
наконец-то дизайнеры перестанут звереть, когда им приносят картиночки300х300 пикселей и просят из этого напечатать билборд.
напечатать билборд.
наконец-то дизайнеры перестанут звереть, когда им приносят картиночки300х300
у меня было по-другому. У меня на работе -- картинки, в которых жирные пиксели. Eто не баг, а фича (мы по пискелам расчитываем положение обьекта с точностью до 1\10..1\100 пиксела). Картинки, условно говоря, -- звездное небо -- пиксельные точки.
Как-то заказывал проспект у наших лоховских дезигнеров на ставке (непонятно, зачем их держат вообще, лучше бы починили воду в лабе), надо было показать, как из пиксельной картинки получается координата. Oни написали: "чо такая картинка пиксельная, другой нет что ли? И вообще мы, типа, заняты, через 2 недели будет. "
Я им написал вежливое "тогда идите нах, занятые и умные такие", и распечатал в обычной конторе -- вопросов умныx не задают и делают за ночь. Мне легче стольник заплатить, чем с дaрмоедами общаться.
Как-то заказывал проспект у наших лоховских дезигнеров на ставке (непонятно, зачем их держат вообще, лучше бы починили воду в лабе), надо было показать, как из пиксельной картинки получается координата. Oни написали: "чо такая картинка пиксельная, другой нет что ли? И вообще мы, типа, заняты, через 2 недели будет. "
Я им написал вежливое "тогда идите нах, занятые и умные такие", и распечатал в обычной конторе -- вопросов умныx не задают и делают за ночь. Мне легче стольник заплатить, чем с дaрмоедами общаться.
Реальное улучшение картинки должно начинаться с 3D восстановления исходной сцены. Нынешние методы "улучшайзинга" играются с отдельными пикселами, не вникая в физический смысл сцены. Соответсвенно, упуская из вида влияние пикселов друг на друга - отражение, преломление, рассеяние, рефлексию. Посмотрите, что отражается в зеркалах, лужах, глазах на улучшенном снимке - много узнаете о тренировочной базе изображений. К реальному исходному снимку это не будет иметь отношения.
Реальное улучшение картинки должно начинаться с 3D восстановления исходной сцены.
К реальному исходному снимку это не будет иметь отношения.
А если серьёзно – "3D восстановление исходной сцены" просто невозможно в случае с обычным фото. Мы ведь элементарно не знаем, что находится за пределами кадра – и высчитать это совершенно никак невозможно. Соответственно, мы не можем точно установить ни источники освещения объекта, ни источники бликов-отражений.
Мы ведь элементарно не знаем, что находится за пределами кадра – и высчитать это совершенно никак невозможно. Соответственно, мы не можем точно установить ни источники освещения объекта, ни источники бликов-отражений.
С одним снимком сделать можно немного. Но вот стерео - гораздо интереснее. Наш мозг решает задачу 3D восстановления в реальном времени, получая информацию с двух глаз. Смартфоны это делают, используя одну камеру и лидар. Неоднозначные моменты нивелируются внимательным осмотром с нескольких точек или просто наблюдением, если объект не статичен. Нужна еще информация о свойствах поверхностей (матовая, полированная, полупрозрачная) - тут уже без огромной базы похожих объектов не обойтись. Ребенок, взрослея, собирает эту базу несколько лет, отбрасывая редкие/нетипичные наблюдения.
Я уверен, что улучшайзинг будет гораздо лучше через несколько лет. Но одной сетки, помнящей похожие самплы, явно мало. Нужно еще что-то вроде метода трассировки лучей, только наоборот.
Я уверен, что улучшайзинг будет гораздо лучше через несколько лет. Но одной сетки, помнящей похожие самплы, явно мало. Нужно еще что-то вроде метода трассировки лучей, только наоборот.
А если я снимал сам и теперь хочу улучшить снимок - тоже не знаю источников?
Точнее, не знаете всех источников – наша память на многие порядки менее детальна. Плюс в освещении участвуют как первичные (прямые), так и вторичные (отражённые) источники света – высчитать это всё вы тоже не можете. И точно высчитать даже отражение на какой-нибудь выпуклой (или "впуклой")) отражающей поверхности вы тоже не можете.
А если есть ещё двадцать снимков, сделанных с одного места и в одно время - это тоже никак не поможет улучшить качество?
Но хорошо, если даже вытягивать информацию "тупо с фото вокруг" (что, кстати, используется, но в иных целях)). Вы теперь на каждое фото будете делать по несколько десятков снимков ещё и вокруг? "Подожди, дорогая, попозируй ещё на фоне заката, мне надо сделать ещё двадцать фото вокруг тебя!". ))) Или как, или что?
Мне непонятна суть вашего "возражения", серьёзно. ?
Но вот стерео - гораздо интереснее.
Ну простейший ведь факт. Вот вы смотрите нашими "стерео-глазами" на объект. Вы сможете точно и достоверно определить, что именно и откуда именно его освещает, и что именно объект отражает – не видя вообще ничего за пределами определённой "рамки"? Во-о-от, то-то же ж... ?
P.S. Про остальные моменты написал комментарием ранее.
Точнее, не знаете всех источников – наша память на многие порядки менее детальна. Плюс в освещении участвуют как первичные (прямые), так и вторичные (отражённые) источники света
Никак не поможет. Поскольку из 2D-фотоснимков можно лишь крайне условно и крайне грубо вытянуть информацию о реальном "3D-окружении"
ВСЕГО мы не будем знать НИКОГДА. Это, собственно, и суть возражения.
О коде, который сами же написали – и который можем в любой момент изменить??? Или вы тоже забыли, что мы можем крутить-вертеть практически любые параметры нейросети, регулируя конечный результат?
Простите, но, по-моему, вы явно имеете достаточно мало знаний (но достаточно большой багаж мифов) как непосредственно о самом предмете дискуссии, так и об IT-отрасли в целом...
Понимаете, невозможно написать код, который работает "неизвестно как". Если вдруг в ПО (любом!) вообще появляются моменты "неизвестно как" – значит, это либо временный баг, либо программист тупо писал его по бухе и сам забыл собственные решения и "озарения". Третьего тут просто не дано. ?
Как по вашему делают голограммы и томограммы, неким 3D "фотоаппаратом"?
• Голограммы – множество (!!!) самых обычных 2D-проекций (для примера см. хоть знаменитый кинематографический приём Bullet time))).
• Томограф – множество (!!!) самых обычных 2D-снимков, просто на разную глубину действия для их последующего "послойного" объединения.
Повторю, всё просто – чудес не бывает. Из недостаточной информации вы никак не вытащите полную – максимум "дискретно-кусочками"... ?
Есть, конечно, "настоящие" 3D-сканеры (и даже довольно давно) – но там и качество оставляет желать лучшего (даже сегодня, увы), да и с последующим текстурированием полученных моделей тот ещё геморрой. То бишь, пока вариант "просто прикольная приблуда", по большей части. Да и сканировать умеют лишь "внутрь себя" (то есть, габариты сканируемых объектов достаточно ограничены), но никак не наружу (просветите уж, если вы в курсе об обратном))).
Одним словом – рекомендую сначала изучить суть вопроса, а только потом спорить. Мне всегда помогает. Вам тоже поможет, уверен...
Ждём восстановления исходного текста из хэша ?
ответ уже известен:
password
123456
maga2020
password
123456
maga2020
qwerty123 забыли )))
Лет тридцать назад однокурсник диплом защищал по распознаванию образов. Из картинки, выглядевшей белым шумом, извлекали какие-то геологические изображения. Не думал, что так далеко технологии продвинулись с тех пор.
Из картинки, выглядевшей белым шумом, извлекали какие-то геологические изображения
Все интересные "инструменты" перезжают в облака... Вангую дальнейшую монетизацию, по подписке.
Прекрасный новый мир.
Прекрасный новый мир.
Вы хотели, чтобы нахаляву прогеры трудились? Не, я тож конечно хочу ))
- нет жопочуящий!
>>>достраивая недостающие части из гауссовского шума.
Дорисовывает. У стариков будет меньше морщин, а у молодых больше.
Бабло платят, живут в Бей Эрии, красота. Занялись бы чем-то более полезным. Прогнозом погоды или моделированием климата, например.
Дорисовывает. У стариков будет меньше морщин, а у молодых больше.
Бабло платят, живут в Бей Эрии, красота. Занялись бы чем-то более полезным. Прогнозом погоды или моделированием климата, например.
Прогнозом погоды или моделированием климата, например.
Для обсчета прогноза погоды и тем более моделирования климата нужна машинка, коих во всем мире по пальцем одной руки посчитать. И для этих машинок программы другие пишут.
А 30 лет назад один айфон обсчитал бы быстрее, чем все компы в мире. "никто не сказал, что будет легко".
краткосрочные (на сутки)
Занялись бы чем-то более полезным. Прогнозом погоды или моделированием климата, например.
Для обсчета прогноза погоды и тем более моделирования климата нужна машинка, коих во всем мире по пальцем одной руки посчитать.
круто!
А 30 лет назад один айфон обсчитал бы быстрее, чем все компы в мире
Какой такой айфон тридцать лет назад, имя, фамилия, должность?
Тридцать лет назад были разные Креи и прочие супер-пупер компы. Сомневаюсь, что даже сегодняшний афон обгонит Крей тех лет, и что в нем есть плавающая 64-разрядная арифметика.
Длина парусной дистанции?
Длина парусной дистанции?
Вы же вроде про олимпийские игры говорили
Вы же вроде про олимпийские игры говорили
1) Это странный ответ на простой вопрос "какая длина олимпийской парусной дистанции (без поворотов)". Если считать за дистанцию треугольник - длина одной стороны.
2) Подсчет прогноза с точностью в несколько сотен метров для многодневной крейсерской регаты - это замечательно. Для олимпийской регаты? Ну, дождемся уточнений по п.1.
3) "Несколько сотен" - это ужасно звучит для человека со специальностью "вычислительная математика". Патамушта и две, и три, и двадцать три сотни - это все "несколько". Понятна зависимость результата от природных условий и точности измерений показателей, но тогда говорят - "от двухсот до семисот", или еще как.
2) Подсчет прогноза с точностью в несколько сотен метров для многодневной крейсерской регаты - это замечательно. Для олимпийской регаты? Ну, дождемся уточнений по п.1.
3) "Несколько сотен" - это ужасно звучит для человека со специальностью "вычислительная математика". Патамушта и две, и три, и двадцать три сотни - это все "несколько". Понятна зависимость результата от природных условий и точности измерений показателей, но тогда говорят - "от двухсот до семисот", или еще как.
Это странный ответ на простой вопрос "какая длина олимпийской парусной дистанции
это ужасно звучит для человека со специальностью "вычислительная математика"
Скармливаем фотку Марса с Земли из нескольких пикселов и смотрим результат. Плачевный. Если исходный объект не был в тренировочных фотках - нейросетка не "знает", что с ним делать. В ней просто нет такой информации. Кстати, о подобной слабости ИИ писал еще пан Лем в рассказе "137 секунд" (1972). Там шла речь про восстановление текста, но суть та же. Главный герой развлекался, скармливая сетке начало "репортажа" с Марса. Не вышло 😄
Скармливаем фотку Марса с Земли из нескольких пикселов и смотрим результат. Плачевный. Если исходный объект не был в тренировочных фотках - нейросетка не "знает", что с ним делать.
не зная общего контекста фото.
Вообще все эти алгоритмы сжатия по определению - сжатие с потерями. Вся инфа которая "потерялась" - она не восстанавливается никак. Любой самый умный алгоритм будет вносить отсебятину, которая может быть некритичной (восстанавливаем фотки с выпускного) или критичной (по восстановленной фотке ловим преступника).
Так ведь знаем контекст. Это Марс.
Надо объяснять, что научной ценности апскейленное алгоритмом фото не будет нести никакой?
О, как раз запихну туда свою фотку с первого сентября (если бы не этот флешмоб, хрен бы я подключил МФУ для скана древней фотки).
О, как раз запихну туда свою фотку с первого сентября (если бы не этот флешмоб, хрен бы я подключил МФУ для скана древней фотки).
Вот и настали времена, когда кинематографический прием увеличения пиксельного изображения не кажется таким глупым и невозможным. ?
прием увеличения пиксельного изображения
не кажется таким глупым и невозможным.
Казался. А теперь научно доказан. ?
Подобные программы улучшения изображения обычно очень неплохо справляются с искуственно ухудшенными изображениями изначально хорошего качества - повышают разрешение уменьшенных и повышают резкость заблюренных.
Но стоит скормить им действительно малорарзмерное или изначально нечёткое изображение - усё, фиаско.
Но стоит скормить им действительно малорарзмерное или изначально нечёткое изображение - усё, фиаско.
Подобные программы улучшения изображения обычно очень неплохо справляются с искуственно ухудшенными изображениями изначально хорошего качества
Но стоит скормить им действительно малорарзмерное или изначально нечёткое изображение - усё, фиаско.
Тот же упомянутый ранее в теме Gigapixel AI (или Sharpen AI, или JPEG to RAW AI, всё от одного производителя) – достаточно неплохо "вытягивают" большинство скормленных им низкокачественных, и/или запоротых, и/или слишком пережатых изображений (для каждого варианта есть как готовые пресеты, так и тонкая ручная настройка). Бывают, конечно, случаи, когда "медицина бессильна" – но таких примерно не больше четверти, по своему опыту...
Поэкспериментируйте. У них на сайте есть бесплатные триалы на месяц (насколько помню) – времени на "пощупать" хватит... ?
P.S. Я вот как раз замахнулся на "ремастеринг" одного любимого старого фильма. Там качественных исходников в принципе никогда не было, плюс все копии в сети ещё и страшно пережаты кодеками. Но по предварительным экспериментам на отдельных кадрах – вполне себе так недурственно апскейлится вплоть до 1080p...
Есть очень приличная прога Topaz Gigapixel. Увеличивает, правда, только в 6 раз.
ну на лицах почти все AI-апскейлы прилично работают (хотя если исходник плохой, то могут совсем другое лицо нарисовать), а вот с прочими предметами обычно мыло сплошное, с Топазом экспериментировал - фигня, не стоит тех денег которые они за него просят.
не стоит тех денег которые они за него просят.
79 долларов они просят. Деньги серьезные, да )
а зачем сотруднику мака профессионально апскейлить фотки?
-- а зачем
затем, не ваше дело
-- профессионально апскейлить
данная технология вообще не имеет ничего общего со словом профессионально, в коммерческой сфере, где прям важен результат она неприменима
-- сотруднику мака
дайте исчерпывающий список мест работы, где можно заниматься улучшайзингом фото, а где нет, раз уж вы все за всех решили
а в пренебрежительной фразе "79 долларов не деньги".
Извините, но мы говорим про разые страны наверное. 30.000р для бОльшей территории России - нормальные деньги. Для студента в Макдаке - 16.000р - это стартовая позиция. На полный день. Пол дня (ему же еще учииться) - соответственно 8.000. И как вы опять же снисходительно 5.800р обозвали 4000 рублей.
И дело не в этой программе конкретно, и не в этой должности тоже. Просто факт, что соотношение софт-зарплата конкретно для России довольно непропорционально. Неприятно, когда обычных людей называют нищими только потому, что в других странах другие деньги.
Я вам намекну, но вы не поймете, но для жизни и работы в данной реальности "обычной звонилки" недостаточно. Точка входа в работу хоть курьером, хоть грузчиком начинается со смартфона с приложением и андроидом версии от 10 и выше. И если работа на целый день, то и с аккумулятором от 4000 mAH или с пауэрбанком.
Возвращаясь к моему сферическому студенту, просто купить легально весь софт, который так или иначе нужен для учебы и работы - это год бесплатно трудиться.
И дело не в этой программе конкретно, и не в этой должности тоже. Просто факт, что соотношение софт-зарплата конкретно для России довольно непропорционально. Неприятно, когда обычных людей называют нищими только потому, что в других странах другие деньги.
Я вам намекну, но вы не поймете, но для жизни и работы в данной реальности "обычной звонилки" недостаточно. Точка входа в работу хоть курьером, хоть грузчиком начинается со смартфона с приложением и андроидом версии от 10 и выше. И если работа на целый день, то и с аккумулятором от 4000 mAH или с пауэрбанком.
Возвращаясь к моему сферическому студенту, просто купить легально весь софт, который так или иначе нужен для учебы и работы - это год бесплатно трудиться.
Выглядит это все очень интересно, но, как обычно, буду ждать, когда предоставят готовый инструмент, с помощью которого я смогу посмотреть, как это работает вживую.
В гугле есть исходники всех картинок, делов то, по ужатой копии найти и показать оригинал.
За денюшку.
Ладно.
Скажу правду как есть.
Поскольку Гугл собрал исходники "реального мира", им нетрудно получить доступ к любым произвольным данным с требуемой точностью.
"Матрицу" посмотрите, неверящие!
Скажу правду как есть.
Поскольку Гугл собрал исходники "реального мира", им нетрудно получить доступ к любым произвольным данным с требуемой точностью.
"Матрицу" посмотрите, неверящие!
А ещё можно сделать симметричный ответ гуглу - разработать контрсервис, понижающий разрешение, вплоть до одного пикселя. На пару часов работы с учётом регистрации домена и веб-интерфейса.
Вы изобрели фотошоп?
Красивое!
Фигассе у вас производительность труда. Я за пару минут напишу алгоритм, который берет средний цвет всех пикселей в фото и рисует один с требуемым цветом. Собственно вот он (на псевдоязыке):
$color = imagecolorallocate(rand(0, 16777216));
draw(0, 0, 1, 1, $color);
$color = imagecolorallocate(rand(0, 16777216));
draw(0, 0, 1, 1, $color);
Фигассе у вас производительность труда. Я за пару минут напишу алгоритм, который берет средний цвет всех пикселей в фото и рисует один с требуемым цветом
Ну, в кино это уже давно придумано: "Увеличь этот фрагмент!" - и через несколько секунд (или часов, в зависимости от сценария) мешанина пикселей с камеры становится читаемым словом или фото злодея. Пф!
Не, на самом деле круто, конечн.
Не, на самом деле круто, конечн.
С языка снял. Фильм рекрут, кажется, с Аль Пачино и Колином Фарреллом
- Ты же можешь повысить резкость и сделать номер читаемым?
- Мы что, в американском фильме? Я могу лишь с контрастом играть.
Французский фильм "Шесть"
- Мы что, в американском фильме? Я могу лишь с контрастом играть.
Французский фильм "Шесть"
Таким же образом еще в 87 году Кевина Костнера чуть не уличили в фильме Нет выхода
Не, совсем не круто. Нейросеть дорисовывает то чего на самом деле не было. А потом какая нибудь полиция будет предпринимать какие-то действия, или суд судить.
Вы всерьез думаете что можно будет увеличить номер номер, чтобы прочитать?
Или фото если человек не может по плохому определить?
ну скажем XYZQ 77 88
Которых физически нет на исходном фото?
Софт их из головы должен выдумать?
Или фото если человек не может по плохому определить?
ну скажем XYZQ 77 88
Которых физически нет на исходном фото?
Софт их из головы должен выдумать?
Фильм рекрут, кажется,
Софт брутфорсом прогонит все вероятные комбинации и подберет ту, которая дает пиксели ближе всего к исходной картинке. Если ваш номер превратился в 10 пикселей, то это 240 бит информации, с этим можно работать.
Прикол в том, что в распоряжении обычно запись с камер в виде последовательности кадров. Каждый кадр даёт хоть чуть-чуть, но немножко новой инфы.
А вообще есть же полно программ для криминалистики, будет плюс ещё дофига.
А вообще есть же полно программ для криминалистики, будет плюс ещё дофига.
Что простите? Этот софт по увеличению картинки будет определять, что там есть текст, и подбором подгонять под шаблон те пикселы которые на нем есть? да нифига подобного. Будет просто большой белое пятно с произвольными точками если мы про российский номер.
Если определена зона с номером, логично что он там есть. Можно пробовать.
Прикол в том, что в распоряжении обычно запись с камер в виде последовательности кадров. Каждый кадр даёт хоть чуть-чуть, но немножко новой инфы.
Софт их из головы должен выдумать?
Понятно, что пример не ахти,
Теги
Информация
Что ещё почитать
Трогательные супы насиженных подосиновиков
24.05.2024
87
Территория зла
18.07.2024
51
