Какие преимущества имеют OpenGL, SFML и SDL перед программным рендерингом?

24

Я начал смотреть поток Handmade Hero , где Кейси Муратори создает игровой движок без использования фреймворков или чего-то подобного. Вчера я попал в ту часть, где он показал, как изображение выводится на экран. Насколько я понял, он просто выделил немного памяти размером с экран, на котором он хочет нарисовать. А затем он создал растровое изображение, которое он передал в буферную память, которую он выделил, и нарисовал его на экране, используя специальную функцию ОС.

Это кажется довольно прямым. Я использовал GameMaker, сменил на Love2D, немного поработал со Sprite Kit, но мне всегда было интересно, что же на самом деле происходит под этими иногда запутанными слоями.

Учитывая это, зачем вообще беспокоиться об использовании графических библиотек (OpenGL, SFML, SDL,…), когда все, что вам нужно сделать, это просто выделить некоторый буфер, передать растровое изображение и вывести его на экран?

Если вы затем хотите нарисовать на экране разные вещи, вы просто записываете их в растровое изображение, которое затем передается в буфер. Я довольно новичок в программировании, но мне это кажется довольно простым. Пожалуйста, поправьте меня, если я ошибаюсь.

user148013
источник
11
позже в своей серии (около эпизода 220) он будет использовать opengl. Причина, по которой он это делает - скорость.
фрик с трещоткой
5
Хитрость заключается в определении того, что рисовать на экране. Все текстурные / теневые элементы графического процессора, треугольники, проекции камеры и т. Д. Должны быть выполнены в первую очередь, чтобы решить, какой цвет должен быть у каждого пикселя. Выдвинуть цвета пикселей на экран - это самая простая часть.
user14146
2
Для записи, SDL и OpenGL не являются взаимоисключающими. SDL - это «уровень аппаратной абстракции», который также обрабатывает окна, события и ввод, а не просто графическую библиотеку. SDL также имеет поддержку для использования в сочетании с OpenGL, поэтому SDL может выполнять все неграфические операции, пока OpenGL обрабатывает графику. Также обратите внимание, что чаще всего OpenGL работает напрямую с графическим процессором, тогда как SDL может зависеть или не зависеть от версии и системы, для которой выполняется компиляция.
Pharap
SFML использует OpenGL для рендеринга, поэтому на самом деле все SFML предоставляет более простой интерфейс для использования OpenGL.
Кукурузные стебли
2
Techcnailyl, что делает Кейси, все еще использует графическую библиотеку. Библиотека называется GDI , и хотя она является частью основного API операционной системы, технически она все же является графической библиотекой.
Pharap

Ответы:

41

Речь идет не только о скорости выполнения, но и о простоте. Хотя программный рендеринг, используемый в этом примере, будет намного медленнее, чем использование аппаратного ускорения (например, графического процессора), рисование нескольких растровых изображений на экране является такой тривиальной задачей, что вы не заметите падения производительности.

Тем не менее, низкоуровневая активность, такая как растеризация треугольника, сортировка по глубине и тому подобное, являются хорошо понятными концепциями, которые GPU может обрабатывать неявно с помощью нескольких команд. Реализация тех, кто работает в программном режиме, по сути, заново изобретает колесо. Это хорошо, если вы хотите получить низкоуровневое понимание того, как выполняется рендеринг, я сам написал 3D-рендеринг программного обеспечения, просто чтобы немного его изучить, но в большинстве случаев это пустая трата времени, когда OpenGL может сделать это быстрее из коробка.

Пример, который вы привели, звучит очень просто, просто рисуете одно изображение на экране, поэтому его реализация проста. Однако, как только вы начнете разделять по уровням сложности, становится все сложнее правильно отобразить все. Вещи, которые люди должны были делать в дни Quake 3D-рендеринга программного обеспечения, были безумными, хотя я ценю, что вы не продвинетесь так далеко (пока).

Ричард Гринлис
источник
12
OpenGL знает такие термины, как точки, линии и треугольники. Большую часть времени вы будете работать с треугольниками. Чтобы узнать, как работать с OpenGL, я могу порекомендовать opengl-tutorial.org . Чтобы узнать, что OpenGL делает под капотом, загляните в официальную вики: opengl.org/wiki/Rendering_Pipeline_Overview
tkausl
1
Я собирался +1, но мне не нравится немного «изобретать колесо», потому что я чувствую, что это производит неправильное впечатление с точки зрения истории вычислений. Первым был растровый рендеринг, поэтому «изобретатель колеса» был OpenGL. Однако у них было две веские причины: 1) стандартизация и 2) ускорение графического процессора. Изобретать колесо не всегда плохо, если новая версия - это улучшение (то есть колеса с шинами против деревянных колес универсалов). Ключевой момент здесь не должен заключаться в том, что программный рендеринг заново изобретает колесо, а в том, что он хуже графического рендеринга.
Pharap
4
@Pharap за исключением того, что теперь , написание программного рендерера абсолютно заново изобретает колесо, независимо от того, было ли это исторически.
porglezomp
1
Это только половина ответа. Следующий ответ - вторая половина, но полный ответ (включая небольшую часть объяснения разницы между OpenGL и другими вещами, которые он упоминает) будет правильным ответом на этот вопрос.
Джаспер
1
@ user148013 "Знает ли opengl такие термины, как точка, линия, треугольник?" Современный OpenGL имеет дело исключительно с этими примитивами. Вы не можете растеризовать ничего, кроме них.
Накс 'vi-vim-nvim'
25

Мой вопрос: зачем вообще использовать что-то вроде open gl, sfml, sdl, когда все, что вам нужно сделать, это просто выделить некоторый буфер, передать растровое изображение и вывести его на экран?

Коротко: потому что это быстро (OpenGL, DirectX).

Длинная:

Вы можете думать, что можете сделать все это самостоятельно. Нарисуйте пиксели на экране. Вы можете написать небольшую библиотеку для рисования фигур, таких как квадраты или треугольники. Это будет работать, конечно. Есть много библиотек, чтобы сделать именно это. Некоторые из них даже реализуют OpenGL-спецификацию (так что они похожи на программную часть opengl), которая будет делать именно то, что делает Кейси Муратори. Они вычисляют все на стороне программного обеспечения, устанавливают пиксели на стороне программного обеспечения и записывают результат на экран.

Однако это медленно . Процессор, который в конечном итоге выполнит все эти вещи, не был создан для этого сценария. Вот для чего нужны графические процессоры. Что делает OpenGL (если, конечно, это не программная реализация), так это берет все, что вы ему скажете, и помещает все данные, все вызовы на отрисовку, почти все на видеокарту и приказывает GPU выполнить эту работу. Графический процессор сделан специально для такой работы. Умножение чисел с плавающей точкой (То , что вы делаете много при рисовании 3D-сцены) и выполнения шейдеров. И это параллельно. Просто для того, чтобы понять, насколько быстрым является GPU, подумайте о простой трехмерной сцене в полноэкранном режиме с разрешением 1920x1080 пикселей. Это умноженные 2 073 600 пикселей для рисования. Для каждогопиксель, графический процессор будет запускать фрагмент-шейдер по крайней мере один раз , в большинстве случаев более одного раза. Теперь, допустим, мы работаем со скоростью 60 кадров в секунду. Это означает, что графический процессор запускает фрагмент-шейдер 2073 600 * 60 = 124 416 000 раз в секунду . Как вы думаете, вы можете сделать что-то подобное на своем процессоре? (Это довольно упрощенное объяснение, есть еще много вещей, которые нужно учитывать, например, сколько пикселей вы перерисовываете с помощью более близких объектов, сколько MSAA вы используете и т. Д., Однако, 124 416 000 раз в секунду , вероятно, самые низкие, которые вы можете получить, и вы легко получится намного больше, чем 60fps с простой сценой)

Вот что делают OpenGL и Direct3D, для каких движков смотрите ответ @Uri Popovs.

tkausl
источник
8
Он создает 2D-игру, это еще одна тема, касающаяся 3D. И когда я говорю « медленно», это не обязательно означает, что у него меньше 60 кадров в секунду, но это означает, что видеокарта будет выполнять ту же работу в течение доли времени, необходимого для процессора, по крайней мере, когда речь идет о трехмерном пространстве.
tkausl
4
Ну, причина в том, что GPU лучше в этом состоит в том, что они настроены на распараллеливание вызовов шейдеров.
фрик с трещоткой
4
@ user148013 Из того, что я видел от этого парня, я бы сказал, что он полная противоположность "очень мудрому".
Бартек Банахевич
4
Дело не только в том, что он медленнее рендерит (программный рендерер Кейси был на удивление быстрым). Кроме того, большое количество данных необходимо передавать из общего ОЗУ в видео ОЗУ. Вставка гигантского растрового изображения на видеокарту, в зависимости от типа шины, может занять значительную часть времени кадра. Используя графический процессор, вы время от времени толкаете текстуры и используете их кадр за кадром.
Эдриан Маккарти
2
@ user148013 Есть разница между броским и хорошим программированием. Они могут пересекаться, но часто они находятся в конфликте. Я бы поставил «Я могу рендерить в программном обеспечении [точно так же, как MESA может…]» под кричащим и, конечно, не очень хорошим .
11

То, что он делает, называется программным рендерингом , то, что делает OpenGL, называется графическим рендерингом.

Какая разница между ними? Скорость и память.

Растеризация (заполнение треугольников на экране) занимает некоторое время. Если вы делаете это на процессоре, вы, по сути, отводите это время от игровой логики, особенно если она не оптимизирована хорошо.

И не имеет значения, насколько маленьким является изображение, ему нужно выделить для него определенное количество памяти. Для этого у видеокарт есть видеопамять.

Балинт
источник
Возможно ли программное обеспечение рендеринга на OS X тоже? Потому что, похоже, все, что связано с графикой, было сделано сейчас OpenGl Metal.
user148013
2
@ user148013 У вас есть некоторые недоразумения. OpenGL является многоплатформенным API, поэтому он может работать на OS X, фактически он может работать на всем с «современным» (после 2000 года) графическим процессором. Metal - это отдельный API только для устройств Apple. Программный рендеринг - это тоже отдельная вещь от них обоих, и да, это можно сделать и в OS X. Это в основном просто установка пикселей на экране вручную с процессором.
Балинт
Именно поэтому я и спросил, потому что, насколько я знаю, рендеринг программного обеспечения не может быть выполнен в OS X. Какао обращается к OpenGl, Quarz использует OpenGl, Core Framework использует OpenGl. Все они теперь используют Металл как свой путь быстрее. Но я не нашел ни одной функции, которая рисует буфер на экран без использования графического процессора (OpenGl, Metal).
user148013
1
@ user148013 Потому что это не относится ни к ОС, ни к реализациям. Допустим, вы хотите реализовать его в Java, потому что это известный выбор для мультиплатформенной разработки. С помощью Java вы можете сделать это, сначала создав окно (JFrame), затем вместо прямого рисования на нем вы рисуете изображение, а затем помещаете это изображение в рамку. Однако он не будет знать термины «треугольник» или «линия». Только цвета. Вы должны реализовать это самостоятельно с помощью алгоритма растеризации. Вот почему мы предпочитаем OpenGL, он быстрее и немного проще в использовании. Это в основном API растрирования.
Балинт
2
@ user148013 Почему они не могли? Если они могут открыть окно и нарисовать на нем 1 изображение без API, то они могут.
Балинт
8

Хотя ответы других людей являются более правильными, чем любые ответы, которые я мог бы дать, я хочу указать на фундаментальное недоразумение о том, как работает разработка программного обеспечения, которое, как мне кажется, лежит в основе вашего вопроса. Несмотря на то, что всегда можно сделать что-то «без посторонней помощи», и зачастую это дает большую образовательную выгоду, но реальность заключается не в том, как создается современное программное обеспечение.

Кто-то создал аппаратное обеспечение и машинные языки, которые на нем работают. Кто-то еще создает языки и компиляторы более высокого уровня, драйверы и операционные системы, графические библиотеки и так далее. Каждый из нас опирается на работу наших предшественников. Это не только «хорошо», это требование.

Вы рисуете линию того, что «приемлемо» или нет в произвольной точке в наборе инструментов. Вы также можете легко сказать «зачем использовать C ++, если вы можете сделать то же самое в сборке?», Или «зачем полагаться на драйверы клавиатуры, когда вы можете так же легко считывать напряжения с проводов и рассчитывать сами?» Не хватает часов в день или лет в жизни, чтобы каждый мог делать все сам.

Это относится не только к разработке программного обеспечения, но и к современной жизни в целом. Вы когда-нибудь слышали о парне, который сам построил тостер с нуля? http://www.thomasthwaites.com/the-toaster-project/ . Это заняло очень много времени и усилий. Для тостера. Попробуйте собрать все, что требуется для реализации видеоигры из эфира, самостоятельно!

erich8
источник
2
Я думаю, что это хороший ответ, потому что в нем говорится, почему использование фреймворков хорошо, не умаляя идеи изобретать велосипед для образовательных целей.
Pharap
3

Двигатели делают гораздо больше, чем просто рисуют картинку на экране. Они управляют освещением, тенями, входом, обнаружением столкновений. Даже просто часть рендеринга намного сложнее, чем просто поместить буфер на экран. Особенно для трехмерных сцен вам нужно сделать много вычислений на гораздо более сложных данных, чем на растровом изображении. Позвольте мне привести вам аналогию с автомобилем. То, что вы описываете как простой, - это выхлоп автомобиля. Вы просто делаете трубу нужного размера, а затем проталкиваете газ от одного конца к другому. Однако это далеко не единственное, что происходит в механизме автомобиля.

Ури Попов
источник
3

Приведенные выше ответы превосходны, но ни один из них не идет по поводу самой важной причины, почему OpenGL и тому подобное являются предпочтительными. Основная причина заключается в том, чтобы использовать специализированное оборудование, специально предназначенное для работы с такими вещами, как рендеринг миллионов пикселей на экране, графическом процессоре .

При программном рендеринге с использованием ЦП рендерер будет циклично, один за другим, проходить по всем пикселям на растровом изображении и отдавать приказы для отображения каждого на экране. Так что, если вы рендерите изображение размером 1000x1000, то этот цикл увеличится до 1000000 для вашего процессора. Они разработаны с учетом контроля в конце концов; множество условий, переход от одного набора инструкций к другому и строгое направление потока управления. Тем не менее, графический процессор разработан с учетом того, что он будет выполнять много подобных циклов по пикселям на экране.Графический процессор будет использовать цикл for с 1000000 итерациями и разделять работу на огромное количество ядер, чтобы каждое работало ** параллельно и независимо друг от друга **. Таким образом, в отличие от ЦП, каждый раз, когда графический процессор сталкивается с условием if-else, он будет обрабатывать обе ветви кода до двух своих ядер И, ТОГДА, в самом конце, он будет смотреть на то, что условие оценивает, и отбрасывает результат ненужного перехода (вот почему многие условия if-else в шейдерах GPU не одобряются; они всегда несут ответственность за потери).

Так что да, графические процессоры построены вокруг параллелизма . Это делает работу с пикселями для них намного быстрее по сравнению с процессорами.

Айман аль-Эриани
источник
0

См. Мне действительно нужно использовать графический API?

Конечно, вы можете запросить буфер, установить в нем несколько битов и записать его на экран. По сути, это был единственный способ программирования графики на ПК до появления графических ускорителей в середине 90-х от 3DFX. Даже в Windows DirectX был разработан для предоставления прямого доступа к видеопамяти.

Но на оборудовании, отличном от ПК, на специализированных игровых автоматах всегда были методы ускорения графики за счет разгрузки работы с процессора. Даже у Atari 2600 были «аппаратные спрайты», отчасти потому, что у него не было достаточно оперативной памяти для кадрового буфера.

Позднее (середина 80-х) игровые приставки были оптимизированы для платформенных игр. Опять же, нет кадрового буфера; вместо этого программист может указать сетки плиток :

Графическое оборудование Genesis состоит из 2 прокручиваемых плоскостей. Каждый самолет состоит из плиток. Каждый тайл представляет собой квадрат 8х8 пикселей с 4 битами на пиксель. Таким образом, каждый пиксель может иметь 16 цветов. Каждая плитка может использовать 1 из 4 таблиц цветов, поэтому на экране вы можете получить одновременно 64 цвета, но только 16 в любой конкретной плитке. Плитка требует 32 байта. Есть 64К графической памяти. Это позволило бы получить 2048 уникальных плиток, если бы память использовалась ни для чего другого.

pjc50
источник
-2

Современные процессоры достаточно быстры, чтобы делать любую 2-мерную игру в программном обеспечении, поэтому для 2-мерной графики OpenGL / DirectX не даст никаких преимуществ, кроме добавления еще одной зависимости и уровня сложности для вашего проекта, таких как установка матрицы 3D-проекции для рисования связки. спрайтов и загрузка данных в GPU.

OpenGL также заставит вас упаковать все ваши спрайты в текстуры 512x512 (артефакт старых консолей, таких как PSX, упаковывать графику в страницы видеопамяти), требуя от вас написания довольно сложного кода упаковки спрайтов.

С другой стороны, если вы делаете 3d, отрисовывая миллионы треугольников со сложным затенением, то использование графического процессора неизбежно. Давным-давно существовала более простая версия Direct3d, предназначенная только для 2d, называемая DirectDraw, которая ускоряла рисование спрайтов с помощью графического процессора, но теперь Microsoft ее больше не поддерживает, возможно, потому что процессоры достаточно быстры, чтобы выполнять 2D без ускорения, если вам не нужно экономить энергию ,

SmugLispWeenie
источник