Research of hieroglyphic signs using audiovisual digital analysis methods

A study of ancient written texts and signs showed that the hieroglyphs and structure of the archaic sentence have much in common with the modern Chinese language. In the context of the history and evolution of the Chinese language, its characteristic tonality and melody are emphasized. The main focus of the work is on the study of the sound properties of hieroglyphs (keys / Chinese radicals) found simultaneously in ancient inscriptions as well as in modern text messages. The article uses modern digital methods of sound analysis with their simultaneous visualization. To characterize the sound of hieroglyphs (in accordance with the Pinyin phonetic transcription adopted in China), two (FI, FII), three (FI, FII, FIII) or four (FS, FI, FII, FIII) formants are used, which create a characteristic F-pattern. Our proposed model of four formants for typical hieroglyphs is called the basic one “F-model”, it’s new and original. To visualize the formants, digital audio signal processing programs were used. The data obtained were compared with the corresponding spectrograms for Mandarin (standard) Chinese. Their correspondence to each other has been established. When analyzing F-patterns, an original model was used, which made it possible to characterize spectrograms in the frequency and time domains. The formalized description of basic components of basic “F-model” of a pronunciation of hieroglyphs is given. In conclusion, several areas are noted in which the use of various methods of audiovisual research is promising: advanced innovative technologies (artificial intelligence and virtual reality); television, theatrical video production; evaluation of the quality of audiovisual content; educational process. The present study has shown that described promising research methods can be useful in analyzing similar ancient hieroglyphs.

Проведённое исследование античных письменных текстов и знаков показало, что иероглифы и строение архаического предложения имеют много общего с современным китайским языком. В контексте истории и эволюции китайского языка подчёркнуты его характерные тональность и мелодичность. Основное внимание в работе уделено исследованию звуковых свойств иероглифов (ключей), встречающихся одновременно в древнейших надписях, а также в современных текстовых сообщениях. В статье использованы современные цифровые методы анализа звуков с одновременной их визуализацией. Для характеристики звучания иероглифов (в соответствии с принятой в Китае фонетической транскрипцией Пиньинь) использованы две (FI, FII), три (FI, FII, FIII) или четыре форманты (FS, FI, FII, FIII), которые создают характерную F-картину. Предложенная нами модель четырёх формант для типовых иероглифов (ключей) названа базовой «F-моделью», она является новой и оригинальной. Для визуализации формант применены программы цифровой обработки звуковых сигналов. Полученные данные сравнивались с соответствующими спектрограммами для мандаринского (стандартного) диалекта китайского языка. Установлено их соответствие друг другу. При анализе F-картин использовалась оригинальная модель, которая позволила охарактеризовать спектрограммы в частотной и временной областях. Дано формализованное описание основных компонентов базовой «F-модели» произношения иероглифов. В заключение отмечено несколько областей, в которых перспективно использование различных методов аудиовизуального исследования: передовые инновационные технологии (искусственный интеллект и виртуальная реальность); телевидение, театральное видеопроизводство; определение качества аудиовизуального контента; образовательный процесс. Проведённое исследование показало, что описанные перспективные методы исследования могут быть полезны при анализе подобных античных иероглифов.