Теория звука: подробно об аудиотехнологиях в телевизорах Samsung QLED 8K

С появлением телевизоров высокой чёткости пользователи всё чаще обращают внимание на качество звука, которое является заключительным штрихом для создания ярких впечатлений от домашних развлечений.
Samsung Electronics внедрил искусственный интеллект в телевизоры линейки QLED 8K, чтобы их владельцы могли наслаждаться максимально качественным контентом на большом экране. В новых моделях применяются технологии, которые настраивают воспроизведение звуковой дорожки, отслеживая перемещение объектов на экране, и меняют настройки звука в зависимости от окружающих условий и фоновых шумов.
Качество звучания становится ещё выше при подключении саундбара HQ-Q800T, который был удостоен награды CTA1 «За лучшие инновации» (“Best of Innovation”). При этом динамики в QLED телевизоре работают синхронно со звуковой панелью, что превращает её в дополнительный аудиоканал и создаёт более объёмный звуковой ландшафт.

Технология Object Tracking Sound: когда звук следует за объектом на экране

С технологией Object Tracking Sound+ звук перемещается по экрану, следуя за объектом в каждой сцене. Например, если на большом экране QLED 8K телевизора 2020 года транслируется боевик со сценой автомобильной погони, напряжение этой сцены ощущается ещё более реальным, независимо от того, из какой точки комнаты пользователь смотрит фильм.
Реализовать эту технологию удалось за счёт оптимального размещения динамиков. В отличие от обычных телевизоров (которые имеют по два динамика), модели QLED 8K оснащены 6-ю динамиками(2), которые расположены по всему экрану и обеспечивают более полное звучание. Более того, в новых устройствах установлено 2 динамика с левой и правой стороны задней панели устройства для получения объёмного звучания.
В телевизорах с обычным дизайном, в которых динамики располагаются только в нижней части устройства, увеличение размера экрана приводит к большему количеству акустических «слепых зон» между точками излучения звука. Например, когда в фильме вертолёт пролетает в верхней левой части экрана, звук всё-равно будет исходить снизу, что приводит к диссонансу между визуальными элементами контента и его звуковым сопровождением.
В сравнении с двухканальным звуком, где динамики располагаются только с левой и правой сторон телевизора, многоканальный звук, как в кинотеатрах, вызывает ощущение реалистичности.
В новых моделях динамики размещаются сзади экрана – так же, как и в кинотеатрах. Это означает, что при перемещении объекта на экране звук будет воспроизводить тот динамик, который расположен прямо за этим объектом, в результате чего звуковое сопровождение будет соответствовать изображению на экране.
Для воссоздания той же динамической реалистичности, что и на экранах кинотеатров, технология Samsung OTS использует все 6 динамиков со всех сторон QLED 8K телевизора, в результате чего звуковое сопровождение полностью совпадает с тем, что происходит на экране, отслеживая перемещения объектов в режиме реального времени.
В OTS также реализована технология 3D-рендеринга, которая автоматически распознаёт жанр контента и соответствующим образом оптимизирует звуковую дорожку. Любой тип звука, в том числе стерео и многоканальный 5.1, будет оптимизирован как объёмный 3D-звук. Благодаря инновационной технологии пользователям не нужно сидеть непосредственно спереди от экрана, чтобы в полной мере воспринять, например, звук пролетающего вертолёта.

AVA: активный усилитель речи и интеллектуальная система обнаружения шума

Технология Active Voice Amplifier (AVA-Активный усилитель речи) позволяет оптимизировать звук в режиме реального времени.  Она распознаёт внешние источники шума и увеличивает громкость голоса на экране, если окружающие шумы становятся слишком громкими. Например, если во время просмотра фильма пользователь включает пылесос, устройство автоматически поднимает громкость диалоговой звуковой дорожки, чтобы было понятно содержание происходящего на экране.
Эта инновация не только помогает не пропустить важный диалог, но и тщательно анализирует условия окружающего пространства – комнаты, в которой установлен телевизор. Благодаря звуковому датчику в нижней части посередине экрана технология AVA позволяет встроенному Quantum Processor менять регулировки звука на выходе при обнаружении непрерывного шума в окружающем пространстве, если его уровень выше громкости устройства и длится более 3 секунд.
Звуковой сенсор телевизора анализирует сигнал из звуковой дорожки и фоновый звук из окружающего пространства. Затем искусственный интеллект сравнивает уровни громкости этих сигналов. Если внешний звук оказывается громче, чем звуковое сопровождение, то алгоритм избирательно повышает только громкость голоса в звуковой дорожке. При этом он держит громкость остального звука на прежнем уровне, чтобы пользователи могли чётко слышать каждое сказанное слово.
Благодаря технологии AVA пользователям больше не придётся спешно искать пульт, когда уровень окружающего шума по каким-то причинам внезапно возрастает, и требуется повысить громкость телевизора. Поскольку AVA является единственной существующей телевизионной технологией, позволяющей отслеживать и усиливать одну лишь голосовую составляющую звуковой дорожки, пользователям не придется мириться со слишком громким звуком всего трэка, как в обычных телевизорах, когда нужно увеличивать громкость из-за шумного окружения. Кроме того, можно с лёгкостью включить или отключить автоматическую настройку звука AVA в меню настроек.
Все эти аудиоинновации, позволяющие реализовать динамический звук в QLED 8K-моделях 2020 года, избавляют от неудобств, связанных с настройкой звука телевизора. Технологии Samsung OTS и AVA обеспечивают интеллектуальное трёхмерное звучание.

1 Ассоциация потребительских технологий (Consumer Technology Association, CTA)
2 Относится к продуктовым линейкам 2020 года: в 8K QLED реализована технология OTS+, которая использует 6 динамиков, а в 4K QLED моделях (серии Q90, Q80) реализована технология OTS, которая использует в общей сложности 4 динамика сверху и снизу телевизора.


Experience True Audio Immersion with the Innovative Sound Technologies of Samsung’s 2020 QLED 8K Range

With the emergence of high definition and large-screen TVs that offer spectacular visuals, user attention has been turning to the importance of sound quality, the finishing touch to providing the most immersive home entertainment experience possible.
In developing its 2020 QLED 8K TVs, Samsung Electronics implemented artificial intelligence (AI) so that users are able to enjoy a truly powerful large-screen TV experience. The 2020 QLED 8K range features technology that configures content audio to follow the movement of objects on screen and will also change depending on obstructions or distractions it senses around the product. These features further maximize audible immersion sound when paired with the HQ-Q800T soundbar – winner of the CTA’s “Best of Innovation” Award. The QLED TV’s speakers sync with the soundbar, allowing it to serve as an additional audio channel and create a more dynamic soundscape.
In this two-part series, Samsung Newsroom is exploring this innovative technology to learn more about its intelligent functionality. 

Object Tracking Sound: Reading the Room for More Realistic Audio Experiences

Say you are enjoying an action movie with a dynamic car chase. As the car moves from left to right and top to bottom on-screen, with a 2020 QLED 8K TV, the tension of the scene seems even more real, regardless of where in the room you are watching from.
The secret to this dynamic and realistic sound experience is Samsung’s Object Tracking Sound (OTS) technology, realized through the optimized speaker placement of the QLED 8K range. Unlike conventional TVs, which feature two speakers, the QLED 8K has six speakers1 positioned all around the screen for a more vivid audio experience. The QLED 8K even has two speakers on the left- and right-hand side of the back of the device for a surround sound experience that fills up any room.
On TVs with a conventional design, which normally feature speakers only on the bottom of the device, an increase in screen size will lead to more audio blind spots between the points of sound emission. For example, if a helicopter is flying on the upper left-hand side of the screen, the sound would still be being emitted from the bottom of the screen, resulting in a dissonance between the content’s visuals and its audio.
Compared with two-channel sound that features speakers only on the left- and right-hand sides of a TV, multi-channel speakers, as found in movie theaters, deliver a more refined sense of realism. The optimum placement for speakers is on the backside of a screen, just as it is in movie theaters, meaning that when an object on-screen moves, a speaker right behind that object can produce sound to match the visual. In order to recreate this dynamic realism achieved by movie theater screens, Samsung’s OTS technology harnesses all six speakers on all sides of the QLED 8K TV in order to have a video’s audio follow the on-screen action in real time.
OTS also features 3D rendering technology, which automatically recognizes a content’s genre and optimizes the sound tracks accordingly. This means that any type of sound, including stereo and 5.1 channel, will be optimized as 3D multi-channel sound. Whereas with conventional TVs, users would need to sit front-on to the screen to best enjoy the sound of a helicopter in flight in a movie or TV show, with a QLED 8K TV, users can experience the sound of the helicopter moving and rising over the TV even while sitting at a side angle from the screen.

AVA: Intelligent Noise Detection to Enhance Voice Clarity

The living room is the heart of the home, and often, the soundtrack to a movie or TV show is not the only source of noise to be found in this busy family space. However, there is nothing more frustrating than having a crucial scene in a TV show be overpowered by ambient noise.
This is why Samsung’s Active Voice Amplifier (AVA) technology was developed for QLED 8K TVs. AVA technology recognizes exterior noise sources and increases the volume of the voices on-screen if the surrounding conditions become too loud. For example, if there is a vacuum running while the TV is playing, the TV will automatically amplify the audio track to ensure viewers can hear everything that is going on.
Not only does this technology help ensure users never miss a piece of dialogue, it does so intelligently by meticulously analyzing the space within which the TV has been placed. Through a sound sensor on the bottom middle of the TV, AVA technology will allow its quantum processor to adjust the sound output when it detects a continuous noise from the surrounding environment that is louder than the TV and lasts for more than 3 seconds.
The TV’s sound sensor takes in and monitors audio from the content onscreen as well as the ambient audio from its surrounding environment. AI technology then compares the volume levels of the two types of sound, and if external sounds are found to be louder than that of the TV’s content, it will selectively raise just the voice audio track from the content being watched to ensure users can clearly hear every word being said.
Thanks to AVA technology, users no longer need to scramble for the remote when ambient noise suddenly gets too loud to adjust the TV’s volume. Furthermore, as the only existing TV technology to extract and amplify just the voice audio track of a piece of content, users do not have to put up with a boisterous sound experience when looking to increase a TV’s volume due to a loud surrounding environment. Users can also easily toggle the automatic audio adjusting of AVA on or off in the TV’s settings menu.
The sound innovations that come together to make up the 2020 QLED 8K’s dynamic audio experience take the inconvenience of adjusting TV audio out of users’ hands. Users can enjoy intelligent, 3D surround sound thanks to Samsung’s OTS and AVA technologies. Check out the videos below to experience the realistic sound experience of the 2020 QLED 8K range for yourself.

1 As of the 2020 product line-ups, 8K QLED TV implements OTS+ that uses a total of six speakers and 4K QLED TV (Q90, Q80 series) implements OTS that places a total of four speakers on top and bottom.

6 лет эволюции: как развивалась аудиолаборатория Samsung

Samsung Research America Audio Lab занимается разработкой новых аудиотехнологий и улучшением качества звука, меняя парадигмы рынка аудиотехники. Исследовательский центр, занимающий площадь около 1700 кв.м., расположен в Лос-Анджелесе и оснащён современными звукоизмерительными камерами, комнатами для прослушивания и передовым научно-исследовательским оборудованием. Алан Девантье  (Allan Devantier), вице-президент и руководитель аудиолаборатории, рассказал о её ключевых разработках.

Девантье пришёл в Samsung в октябре 2013 года. К январю 2014-го Samsung оборудовал лабораторные помещения и нанял 4-х инженеров, а к октябрю того же года штат сотрудников вырос до 10 человек, и с тех пор аудиолаборатория начала свою полноценную работу. Таким образрм, лаборатория была готова приступить к реализации своей миссии «сделать аудиотехнологии Samsung лучшими в индустрии».
«Первым продуктом, над которым мы работали, была портативная колонка Radiant 360. Фактически, она стала первой портативной системой на массовом рынке, способной распространять звук на 360 градусов, – вспоминает Девантье. – Тогда мы были новаторами в отрасли. Сейчас подобные всенаправленные колонки стали весьма популярными на рынке».

Эволюционные изменения

Сегодня в лаборатории Samsung Audio Lab работает более 20 человек с совокупным опытом работы в области аудиотехнологий более 300 лет. 11 членов команды имеют степень магистра или доктора наук, при этом 8 инженеров являются музыкантами, которые продолжают играть в различных группах. Лаборатория также активно сотрудничает со специалистами аудиотехнологий Samsung в Корее.
«В нашей работе огромная роль отводится изучению того, как люди слушают, – поясняет Девантье. – Кроме этого, мы уделяем внимание среде прослушивания – низкочастотным и высокочастотным динамикам (сабвуферам и твитерам), усилителям и цифровым сигнальным процессорам (DSP)». Из лаборатории налажен регулярный поток важных технологических решений. Некоторые из них получают высокую оценку авторитетных отраслевых изданий. Samsung Audio Lab также вносит значительный вклад в создание качественного звука для телевизоров.
Решение Q-Symphony, анонсированное на январской выставке CES 2020, позволяет телевизору с саундбаром создавать объёмный звук, который точно воспроизводит пространственное ощущение звукового поля в том виде, в котором оно было задумано авторами произведения. По словам Девантье, решение Q-Symphony «использует фронтальные динамики телевизора для улучшения объёмного звучания и создания эффекта погружения».
Стремясь усовершенствовать технологию саундбаров, которые позволяют воспроизводить звук в жёстко заданных направлениях, лаборатория разработала телевизоры, оснащённые динамиками не только снизу и по бокам от экрана, но также в верхнем левом и правом углах. Технология OTS (Object Tracking Sound) опирается на алгоритмы глубокого обучения, способные распознавать тип контента на экране, и воспроизводит соответствующий многоканальный звук. Таким образом, пользователи могут наслаждаться реалистичным объёмным звуком, который специально адаптирован к тому, что происходит в данный момент на экране.

Будущее аудиотехнологий  

Развитие технологий искусственного интеллекта приведёт к трансформации аудиоиндустрии, и Samsung готовится к грядущим изменениям. Рассуждая об этом, Девантье сказал: «Я думаю, мы сможем использовать искусственный интеллект, чтобы сделать наши динамики совершеннее. Они смогут обеспечить ещё более выраженный бас и вность меньше искажений. С помощью технологий искусственного интеллекта мы сможем облагородить звучание старых записей и адаптировать нашу акустику к различным окружениям и условиям прослушивания».
Ещё один сценарий, при котором искусственный интеллект расширяет возможности будущих решений, – это использование таких функций, как адаптивное ускорение видео (Adaptive Video Acceleration, AVA). С функцией Samsung AVA телевизор способен распознавать условия аудиовизуального пространства и воспроизводить звук, оптимизированный не только с учётом контента, который отображается на экране, но и с учётом того пространства, в котором находится устройство. В 2020 году датчики, установленные в QLED телевизорах Samsung, позволят оптимизировать просмотр даже в помещениях с высоким уровнем шума.
Размышляя о будущем, Девантье отмечает – «Возможно, однажды мы разработаем динамик, который не только будет обладать великолепным, мощным звуком, но и будет почти невидим».

Introducing the Samsung Audio Lab with VP Allan Devantier

Samsung Research America’s Audio Lab is dedicated to developing new audio technology and improving sound quality while leading changes in audio market paradigms. Located in Los Angeles, the R&D lab takes up 18,000 square feet and is equipped with multiple anechoic chambers, listening rooms and other state-of-the-art applied research facilities. Allan Devantier, Vice President and Head of Audio lab, spoke about how it started out, its major contributions to date, and what it is targeting going forward.

Devantier started working for Samsung in October of 2013. By January of 2014, Samsung had acquired lab space and recruited four staff members, and by October of that year the staff had grown to number 10 engineers and research scientists and the Audio Lab had been made fully functional. From there, the lab was ready to begin working towards its mandate of ‘taking Samsung’s audio technology to the top of the industry.’
Devantier says that “The first product we worked on was the Radiant 360 loudspeaker – it was actually the first mass-market speaker to feature 360-degree sound. We were the industry leader, and now 360-degree speakers have grown very popular in the market.”

Evolutionary Change

Cut to the present, when Samsung’s LA Audio Lab is staffed by more than 20 people with over 300 collective years of experience in the audio field between them. Eleven members of the team hold Master’s or Ph.D. degrees in audio technology, while eight are both engineers and musicians who continue to play in bands. The lab also collaborates extensively with Samsung’s audio engineering teams in Korea.
“Our focus starts at the ear of the listener,” Devantier explains, “then expands out to the listening environment – the transducers (woofers and tweeters), amplifiers, and digital signal processors (DSPs).” And this emphasis has led to a steady stream of important contributions coming out of the lab. Whereas, in 2014, industry publications awarded Samsung’s Soundbar solutions a rating of three-and-a-half stars out of five, by 2019 the average score for Samsung Soundbars had been lifted to four-and-a-half stars. What’s more, in 2019 the HW-Q90R premium Soundbar model received a perfect five-star rating from a number of industry publications. In addition to improvements in the pure audio sphere, the Samsung Audio Lab has contributed to remarkable advancements in TV sound quality as well.
The Samsung Audio Lab has proven its ability to discern changes in the audio market and act upon them swiftly, as is demonstrated by the nature of its recent innovations. The Q-Symphony solution announced at this year’s CES enables a TV equipped with a Soundbar to provide surround sound that closely reproduces the spatial feeling of original sound fields. Devantier explains that Q-Symphony “uses the top-firing speakers in the TV to improve envelopment and immersion.”
Another example of this cutting-edge innovation is Samsung’s OTS (Object Tracking Sound) technology. To improve upon Soundbar technology that allows sound to be delivered in fixed directions, the lab developed TVs that incorporate speakers not just on the bottom and sides of the screen, but in the top left and right sections as well. This allows OTS technology to make use of deep learning that can recognize what kind of content is being displayed on the screen and deliver multichannel sound accordingly. Thus, users can enjoy actual, physical surround sound that is not only immersive but is specifically tailored to whatever they are watching at the time.
What’s more, in 2020 Samsung’s Q-Symphony and OTS technologies are coming together to truly maximize the potential of both solutions. While OTS delivers multichannel surround sound through the TV speakers, Q-Symphony makes the TV-speaker-Soundbar combination possible, enabling the TV’s speakers to provide rich, lively surround sound while the Soundbar delivers powerful, absorbing bass.

Taking Audio into the Future

The inception of AI is set to reshape the audio industry, and Samsung is working to anticipate the changes it will bring about. Asked to outline what he sees as AI’s role in the audio industry, Devantier says, “I think we can use AI to help our loudspeakers play louder, with more perceived bass and less perceived distortion. AI will also help make old recordings sound better and allow our loudspeakers to adapt to different listening environments.”
Another way in which AI is empowering future solutions is by enabling features like Active Voice Amplifier (AVA). Samsung’s AVA feature makes it possible for the TV to recognize the audiovisual space environment and provide sound that is optimized not only for the content being displayed on the screen, but also for the viewing space that the consumer is in. In 2020, sensors embedded in QLED solutions will make optimized viewing possible, even in rooms with high levels of noise. For instance, if a user is watching something and a member of their family switches a blender on in the adjoining kitchen, the system will adjust to ensure that the dialogue remains audible to the viewer in real-time despite the unexpected peripheral noise.
As far as how his lab will contribute to delivering better audio going forward, Devantier reports that it will continue to meet the needs of customers who are looking for “high quality and portable sound” while improving and expanding its OTS technology. “Maybe one day we will develop a loudspeaker that sounds great, plays very loud and is nearly invisible or exceptionally small and portable,” Devantier concludes, “Until that time, we will continue to produce solutions that make incremental improvements to sound quality.