SOLUTION
OK, Превращать текст книги в кино, как такое возможно сделать?
Fantasy
Слушая аудиокниги Вы представляете/фантазируете картину, исходя из услышанного, подбирая персонажей и их голоса, места событий, помещения, здания, улицы, пейзаж, фон, музыку, шум, звук и т.д.
Почему такое происходит?
Intellect
Наш мозг получает информацию, ассоциирует со всеми полученными знаниями на данный момент. И чем больше знаний и достаточно изложен рассказ, тем красочнее раскрывается картина происходящего.
В своей книге "Как стать писателем" Стивен Кинг приводит пример передачи мысли, что, читая, мы обмениваемся мыслями, так сказать, через пространство и время.
Отрывок из книги:
"... И вот она - настоящая телепатия в действии. Посмотрите – вот стол, накрытый красной материей. На нем клетка размером с аквариум. В клетке кролик с розовым носом и розовыми веками. В передних лапах у него огрызок морковки, который он с довольным видом жует. На спине у него синими чернилами четко написана цифра 8. Как, одно и то же мы видим? Для верности надо бы сравнить наши записи, но я думаю, что да.
Конечно, есть неизбежные вариации: кто-то увидит скатерть багровую, кто-то алую, будут и другие оттенки. (Для акцепторов с цветовой слепотой скатерть будет серая или темно-серая.) Кто-то увидит бахрому, кто-то – ровные края. Любители красоты добавят кружев – и ради Бога: моя скатерть – ваша скатерть, будьте как дома".
Вы же представили предметы, о которых написал автор.
Произведения. Тексты. Они написаны на естественном языке. Будь то английский, французский, немецкий, любой другой. Всё равно изложение текста структурировано в различной степени. Состоит из параграфов, предложений, слов и т.д. И в итоге книга представляется как построенное здание, небоскреб, дворец. Из слов, «кирпичиков», построивших наше представление. Без структуры это просто груда кирпичей.
Абстрагируемся и представим текст книги как код программы, описывающий сценарий для фильма. Просто программный код написан на естественном языке, а скомпилирует этот код каждый читатель на своем мощном графическом процессоре (у себя в голове). Конечно, учитывая всю мощь своей образованности, базы знаний, накопленных ассоциаций.
Dramaturgy
Если слушатель или читатель является знатоком драматургии или любитель, знает стили и работы режиссеров. Знает, что такое ракурс, план передний/крупный, свет и звук в кадре, плюс видео и звуковые эффекты. И так далее. Очевидно, что анимация подобной фантазии заслуживает просмотра. Этому ремеслу можно научить компьютер.
FinalFantasy
Если может представлять мозг человека, то получится и у компьютера, и можно генерировать сценарии исходя из текста произведения, базы ассоциаций описаний с действиями и расположением объектов, подбора необходимых эффектов, имея обученную базу данных сценариев, режиссерских стилистик, правил драматургии и т.д. Корректировать и улучшать сгенерированный сценарий, выбирать лучших "актеров", музыку, освещение и т.д. Нет предела совершенству.
Technology
На сегодняшний момент компьютерные технологии уже многое позволяют. И это не только компьютерная графика, которая все больше применяется в съёмках фильмов, а Базы Данных и математические алгоритмы. Аналитические и статистические возможности, применяемых для автоматического получения прогноза событий. Сегодняшние поисковые системы настолько сильны и быстры, что могут помочь найти результат по ключевым словам за секунду. Распознать и определить объекты на изображениях. Рисовать картины в стиле знаменитых художников. Обрабатывать голос, изменять речь, спецэффекты в музыке.
NeuralNetwork + DeepLerning + NLP + BigData
Мы создадим базы данных. Загрузим тексты, это художественную литературу и школьный учебный материал. В первую очередь конечно сказки, на радость всем мамам и папам. По которым мы сами росли и изучали окружающий мир.
На основе загруженного контента проведем все необходимые разметки и текстовые анализы. Далее, проведем ассоциирование с классами объектов и их действиями. В том числе опишем правило получения сценария и плана для анимации на основе контента обрабатываемого текста.
Подобная работа, по текстовому анализатору и ассоциации текстовых блоков с классами объектов и их действиями, будет проведена на всех популярных языках мира, на которых написана масса книг, и выделена в отдельные модули. Чтобы в дальнейшем пополнять и развивать эти модули, т.к. все языки "мутируют" и развиваются и это сказывается на контенте и его обработке.
Для последующего создания видео-анимации создадим концепты базы данных описаний "инвентаря" (персонажи, музыка, звуки, картинки, костюмы, аксессуары, цветовые решения, спец.эффекты и т.д.). Предусмотрим интеграцию с существующими базами, порталами, форумами и клубами с соответствующей тематикой.
На каждом этапе обработки информации будет пример машинное обучение и выведено на обратную связь с пользователями. Чтобы каждый мог принять участие в воспитании будущего компьютерного режиссера.
International
Напомню, в мире написано уже 130 миллионов книг и каждая по своему интересна и уникальна сюжетом. Теперь Вы сможете всё прочесть через визуализацию.