Международные Центры искусственного интеллекта Samsung представили свои разработки на CVPR 2020

Глобальные научно-исследовательские центры Samsung представили на главном ежегодном мероприятии по компьютерному зрению и распознаванию образов CVPR разработки, относящиеся к новым технологиям компьютерного зрения, глубокого обучения, а также технические наработки, связанные с искусственным интеллектом (AI).
CVPR – крупнейшая в мире конференция по компьютерной инженерии и искусственному интеллекту. В этом году мероприятие проходило в режиме онлайн с 14 по 19 июня. На нём Samsung Research, передовой научно-исследовательский центр Samsung Electronics, и другие исследовательские центры техногиганта, представили в общей сложности 11 диссертационных работ. Исследователи из московского Центра искусственного интеллекта Samsung и Центра искусственного интеллекта Samsung в Торонто выступили с устными докладами.
В презентации московского AI-центра Samsung инженер лаборатории анализа мультимодальных данных – Павел Соловьёв, вместе с соавторами, представил технологию, которая позволяет менять время суток на пейзажной фотографии высокого разрешения, используя данные без доменной метки. Ведущий инженер лаборатории компьютерного зрения Константин Софиюк и его команда выступили с докладом “f-BRS: Переосмысляя уточняющий обратный проход для интерактивной сегментации” – в ней представлена технология, которая позволяет пользователю кликнуть по объекту на фотографии, чтобы точно определить и выделить его.
Исследователь из Центра искусственного интеллекта в Торонто Майкл Браун представил работу под названием «Глубокое редактирование баланса белого». Эта AI-технология исправляет ошибки баланса белого гораздо точнее, чем существующие программы для редактирования фотографий. Разработка также открывает новые возможности точной регулировки цветовой температуры баланса белого на фотографии.
Разработчики из научно-исследовательского центра Samsung Research America представили свои работы: исследование Эрика Луо под названием «Сеть синтеза вейвлетов: действенная архитектура оценки несоответствия для синтеза эффекта DSLR Calibre Bokeh на смартфонах» было посвящено ключевым факторам, позволяющим сократить разрыв между цифровым зеркальным фотоаппаратом и камерой смартфона с точки зрения получения эффекта боке, то есть малой глубины резкости (DoF).
Илин Шен из AI-центра Samsung Research America представил доклад о нераспространённых (OoD) эталонных тестах для исследования глубоких нейросетей. В исследовании Шена, озаглавленном «Обучение нераспространённому обнаружению без данных вне распределения», был предложен ключевой алгоритм машинного обучения, позволяющий существенно повысить скорость обнаружения, что является одной из основных проблем в технологии AI.
Также на CVPR были отмечены исследования, представленные командой по изучению визуальных технологий Samsung Research и научно-исследовательским центром в Индии.

Samsung Research Centers From Around the World Present Their Studies at CVPR 2020

Samsung Electronics’ Global Research & Development (R&D) Centers have presented their studies to the CVPR (Computer Vision and Pattern Recognition) introducing new computer vision, deep learning and AI related technical researches.
CVPR is the world’s biggest conference on computer engineering and AI. At this year’s conference, held online from June 14 to 19, Samsung Research, an advanced R&D hub within Samsung Electronics’ SET Business and its advanced R&D centers gave presentations on a total of 11 thesis papers. Researchers from Samsung Moscow AI center and Samsung Toronto AI center were invited to oral presentations, an opportunity given to only 5% of the entire attendees.
At the oral presentation, Pavel Solovev of Samsung Moscow AI Center introduced ‘High Resolution Daytime Translation without Domain Labels’, which is a technology that changes a high resolution landscape photograph into scenes from various times of the day using data without domain label. Konstantin Sofiiuk also introduced ‘f-BRS: Rethinking Backpropagating Refinement for Interactive Segmentation’, which is a technology that allows a user to simply click an object in a photograph to precisely select and separate it.
Joining from the Toronto AI Center, researcher Michael Brown and his team introduced the paper titled ‘Deep White-Balance Editing’, which was also selected for an oral presentation. This AI technology corrects white-balance mistakes made in a captured photograph much more accurately than existing photo editing programs. This technology also allows users to accurately adjust the photo’s white-balance color temperature.
Researchers from Samsung Research America also presented interesting findings at the conference. Eric Luo’s study titled ‘Wavelet Synthesis Net: An Efficient Architecture for Disparity Estimation to Synthesize DSLR Calibre Bokeh Effect on Smartphones’ focused on key enablers to narrow the gap between DSLR and smartphone camera in terms of bokeh, the narrow depth of field (DoF).
Yilin Shen from Samsung Research America’s AI Center introduced a study on out-of-distribution (OoD) benchmarks for deep neural networks research. Shen’s study titled ‘Generalized ODIN: Detecting Out-Of-Distribution Image Without Learning From Out-Of-Distribution Data’ proposed the key machine learning algorithm of drastically improving the detection rate, one of major challenges in AI technology.
Additionally, the studies proposed by researchers from the Samsung Research’s Visual Technology team and Samsung R&D Institute India-Bangalore were also selected by CVPR.

Директор Samsung AI Center в Кембридже получил награду ACM SIGMOBILE Rockstar 2020

Директор Центра искусственного интеллекта Samsung в Кембридже д-р Николас Лэйн был удостоен награды SIGMOBILE Rockstar Award от Ассоциации вычислительной техники (ACM) в 2020-м году за вклад в процесс оптимизации ограниченных в ресурсах мобильных устройств, которые могут понимать, аргументировать и реагировать на сложные пользовательские запросы с помощью новых парадигм в алгоритмах машинного обучения и системном дизайне.
Международная премия SIGMOBILE Rockstar Award была учреждена в 2013-м году Ассоциацией вычислительной техники (ACM), авторитетной научной организацией, вручающей также престижную премию Тьюринга, а также входящей в АСМ международной группой SIGMOBILE, специализирующейся на мобильных вычислениях, беспроводных сетях и носимых устройствах.
Премия присуждается молодым учёным в возрасте до 40 лет, внесшим выдающийся вклад в исследования или разработки в сфере мобильных вычислений в течение 10 лет после получения университетского образования. Победителя определяет комитет, в который входят лауреаты премии прошлых лет. В 2020-м году SIGMOBILE Rockstar впервые получил учёный из университета, расположенного за пределами США.
Доктор Николас Лэйн – директор Центра искусственного интеллекта Samsung в Кембридже, где он руководит работой в сфере локального и распределённого машинного обучения. В последние годы Николас Лэйн сосредоточился, прежде всего, на развитии глубокого обучения для моделирования человеческой деятельности и контекста, а также над обеспечением эффективной работы современных алгоритмов обработки и моделирования сигналов на встроенном и мобильном оборудовании.
«Я рад получить эту награду. Мне очень повезло работать со многими невероятно талантливыми учёными, и эта награда – плод наших совместных усилий. Я также считаю, что это знак растущей важности встроенного мобильного машинного обучения, и я с нетерпением жду возможности внести свой вклад для того, чтобы Samsung оставался лидером в этой стремительно развивающейся сфере технологий», – прокомментировал награду доктор Лэйн.
На сегодняшний день под руководством Samsung Electronics работают 7 Центров искусственного интеллекта: в Сеуле (Южная Корея), Кремниевой долине (штат Калифорния, США), Нью-Йорке (США), Кембридже (Великобритания), Москве (Россия), Торонто (Канада) и Монреале (Канада). Каждый из 7-ми AI-центров Samsung имеет свои специальные области исследований. Например, Центр Искусственного Интеллекта (AI) в Кембридже сфокусирован на локальном AI и технологиях AI, связанных с новым поколением телекоммуникационных сетей; Московский центр ориентирован на базовые AI-технологии, такие как формирование данных для машинного обучения и прогрессивное глубокое обучение, а ключевое направление Центра в Нью-Йорке – манипуляции с роботами. Сеульский центр работает над пониманием языка, обработкой речи и большими данными, а также координирует работу других центров, способствуя продуктивному сотрудничеству между ними.
Центр искусственного интеллекта Samsung в Москве был открыт 29 мая 2018 года. Он пополнил портфель подразделения Samsung Research и стал 5-м по счёту специализированным центром Samsung для исследований в сфере AI в мире. Центр способствует укреплению лидерства корпорации в области машинного обучения и анализа данных, а также исследованию широких возможностей ориентированного на пользователя AI. Главные сферы изучения – компьютерное зрение и базовые алгоритмы для платформы искусственного интеллекта.
Samsung AI Center Moscow также стал базой для продвижения образовательных инициатив корпорации. Например, летом в рамках AI-центра проходит летняя школа AI Bootcamp и Летняя школа по байесовским методам в глубоком обучении (летняя школа Deep|Bayes). Кроме того, в Центре проводятся презентации лучших проектов выпускников программ «IT ШКОЛА SAMSUNG» и «IT Академия Samsung».
В марте 2019 года при участии Центра стартовала программа Samsung Startup Membership, а в ноябре в её рамках прошло первое мероприятие Samsung Connection Day. Стартапы, включённые в программу, получают знания о развитии технологического рынка и его актуальных трендах, принимают участие в открытых и закрытых мероприятиях с ведущими экспертами Samsung, а также приглашёнными специалистами и разработчиками.

Director at Samsung AI Center Receives 2020 ACM SIGMOBILE Rockstar Award

Samsung AI Center Cambridge Director Dr. Nicholas Lane has been awarded the Association for Computing Machinery (ACM) SIGMOBILE Rockstar Award for 2020. The international award was founded in 2013, and recognizes an individual who has produced outstanding research or product contributions in the area of mobile computing early in their career.
The ACM is the high-profile academic organization that presents the prestigious Turing Award, and SIGMOBILE is ACM’s international special interest group on the topics of mobile computing, wireless networks and wearable computing. SIGMOBILE’s Rockstar Award is awarded to an individual who makes outstanding contributions to the field of mobile computing within 10 years of receiving their highest university degree or at an age younger than 40. Entrants are nominated by their peers, before an award committee that includes past award winners screens nominees and selects that year’s recipient. 2020 marks the first time that a professor from a university outside of the United States has won SIGMOBILE’s Rockstar Award.
Dr. Nicholas Lane is a Director at the Samsung AI Center in Cambridge where he oversees teams that work on on-device and distributed machine learning. In recent years he has focused primarily on developing deep learning for modeling human activity and context, as well as enabling state-of-the-art signal processing and modeling algorithms to work efficiently on embedded and mobile-class hardware. Commenting on why Dr. Lane was chosen to receive the honor, the committee said the award recognized “his contributions to the understanding of how resource-constrained mobile devices can robustly understand, reason and react to complex user behaviors and environments through new paradigms in learning algorithms and system design.”
Speaking about receiving SIGMOBILE’s 2020 Rockstar Award, Dr. Lane said, “I am delighted and honored to have received this award. I feel very fortunate to have worked with many wonderfully talented researchers over the years, and this award is a reflection of these collaborative efforts. I believe it is also a signal of the growing importance of on-device machine learning, and I look forward to doing my part to keep Samsung at the forefront of this rapidly evolving technology.”

Эндрю Блэйк – директор Samsung AI Center в Кэмбридже: Встроенный искусственный интеллект требует междисциплинарного подхода

В последнее время искусственный интеллект (AI) стал одной из самых обсуждаемых тем в контексте влияния как на отрасль, так и на общество. Особенно острую полемику сегодня вызывают вопросы этики и сохранения данных при работе с AI. Точки зрения полярно расходятся в зависимости от того, идёт ли речь о технологии, требующей вычислительных мощностей в облаке, или рассматриваемой в качестве интегрированного AI(1) решения.
О будущем встроенного AI и о том, как инновационные решения на базе этой технологии обогатят жизнь людей, рассказывает основатель Института Алана Тьюринга, а ныне глава Центра искусственного интеллекта Samsung Electronics в Кембридже (Великобритания) доктор Эндрю Блейк.
«Искусственный интеллект – это то, что вдохнёт жизнь в Интернет вещей. Встроенный AI реализует интеллектуальные функции, обрабатывая алгоритмы на самом устройстве, без обязательного подключения к облаку, что безопасно с точки зрения конфиденциальности и защиты личной информации», – говорит доктор Блэйк. – «Одной из ключевых областей применения встроенного AI является сфера здравоохранения и фитнеса – например, трекинг упражнений, питания и психофизических параметров человека. Для того, чтобы интегрировать в эту систему общение и воспоминания (в частности, фото и видео), нужно выйти за пределы академического мира прототипов, работающих на мощных компьютерных системах, и научить AI работать на бытовых устройствах, которые используют люди».
Благодаря своему широкому портфолио устройств, Samsung уникальным образом подготовлен для формирования будущего AI, ориентированного на человека. «Я родился тогда же, когда и искусственный интеллект – в 1956 году, когда на конференции в Дартмуте был создан этот термин. Я изучал концепцию AI в течение 40 лет. Опираясь на этот опыт, и принимая во внимание лидирующие позиции Samsung на рынке самых разнообразных устройств, сейчас самое подходящее время для включения новых аспектов в возможности искусственного интеллекта», – отмечает Блейк. – «Встроенный AI начинается с аппаратного обеспечения, которое позволяет поместить интеллектуальные алгоритмы в карманы и дома каждого. Одной из самых сложных задач, над которой работает AI-Центр Samsung в Кембридже – выход высококачественного встроенного AI за пределы исследовательских лабораторий».
По мнению доктора Блейка, обработка алгоритмов AI на самом устройстве, а не в облаке, даёт значительные преимущества, обеспечивая безопасные и надёжные средства для защиты конфиденциальности пользователей и данных. Что особенно важно в условиях демократизации технологии и её применения для решения потребностей человека.
«Ориентированный на потребности человека AI требует междисциплинарного подхода. Меня не очень радует перспектива будущего, разработанного исключительно инженерами. Для создания технологии будущего, которая действительно поможет людям жить лучше, нам необходимо уделять особое внимание дизайну аппаратных средств, пользовательских интерфейсов и, прежде всего, проектированию систем на базе гуманитарных наук, таких, например, как психология» – говорит Эндрю Блейк.
С помощью такого междисциплинарного подхода специалисты AI-Центра в Кембридже стремятся лучше понять поведение человека, исследуя такие области, как передача эмоций(2).
В британском AI-Центре Samsung работает команда экспертов в различных дисциплинах. Среди них специалисты мирового уровня по невербальному поведению человека и встроенному AI, а также немало высококлассных учёных в области машинного обучения, компьютерного зрения, когнитивных технологий. Кембриджский университет – один из самых сильных в мире, что сочетается с уникальной культурой исследовательских учреждений и целым комплексом стартапов в сферах робототехники, медицины, искусственного интеллекта, автономного вождения и многих других.

1 AI, который обрабатывает информацию на самом устройстве, а не отправляет её в облако. Поскольку AI на устройстве не зависит от внешних сетей, он считается более безопасным и надежным, чем AI на базе облачных решений
2 https://internetofbusiness.com/samsung-uk-to-open-new-ai-centre/

[Hearing from an Samsung AI Expert] On-device AI Breathes Life into IoT

As technology has evolved, it has changed our lives dramatically. It’s truly startling to think just how different life was before the invention of innovations like smartphones, the internet and PCs.
Recently, AI has emerged as a hot topic in this regard based on its potential impact both on technology and on society. Especially with on-device AI1, AI will be embedded in devices that we use in everyday lives without necessarily connecting to processors in the cloud. To learn more about this exciting subject, Samsung Newsroom met with the head of the Samsung AI Center Cambridge, Dr. Andrew Blake.
Dr. Blake was formerly the Director of both the Alan Turing Institute (which he also helped found) and, before that, Microsoft’s Cambridge Research Laboratory. As a pioneer in the development of the theory and algorithms that make it possible for computers to behave as seeing machines, he explained how Samsung’s AI and hardware innovations will enrich people’s lives in fundamental ways.

Taking IoT to the Next Level

“AI is what is going to breathe life into IoT,” begins Blake.
On-device AI realizes AI functions by processing AI algorithms on the device itself, without necessarily connecting to the cloud, and that is advantageous for privacy and personal information protection, as well as for security.
Unlocking AI-powered smart devices’ true potential will require a combination of two factors: seamlessly connected hardware and an approach to AI that is human-centric above all else.
“One key area is health and fitness – for example, linking exercise, food and mental wellbeing. Another is communication and memories – especially via photography and video. For that, we have to move past the academic world of prototypes working on high-powered computer systems, and get AI working in a leaner fashion – on the everyday devices that people are using.”

The Right Tools

As Blake notes, Samsung’s wide-ranging device portfolio makes it uniquely qualified to deliver this human-centric future for AI.
“This is a great time to be adding new dimensions to Samsung’s AI capabilities, given the company’s leading market position in devices of all sorts,” says Blake. “On-device AI begins with hardware, and this is why working for Samsung is such a fabulous opportunity for AI researchers.”
“Hardware is the channel that moves us beyond simply smart algorithms, to put those algorithms in everyone’s pockets and homes. The big challenge that Cambridge is addressing is moving high-quality embedded AI beyond specialists’ research labs, where people with PhDs in machine learning and in systems work for several months to implement a new embedded system. We envisage a world where advanced tools enable the world’s software developers to move their AI models, simply and effectively, onto Samsung devices, and we are working hard on those tools.”
As Blake explains, on-device AI, in which AI algorithms are processed on a device itself, rather than sent to the cloud, offers significant advantages here by providing a safe and reliable means to protect users’ privacy and data. “We also need to do that in a way that holds the data close, to reassure people that their data is being held safely and privately,” he added.

A Multi-Disciplinary Approach

When it comes to AI, what exactly does the Cambridge AI center want to bring to consumers? The answer to that question is what Samsung has described as a human-centric approach to AI innovation, which Blake describes in further detail.
“Human-centric AI is about homing in on the areas of life that people really care about,” says Blake. “I believe this will require a multi-disciplinary approach. I am not so excited about a future designed solely by engineers. Instead, we need to collaborate with other disciplines, especially design – hardware, user interfaces, and above all, system design – and with human disciplines such as psychology, to achieve a technological future that really helps people live better.”
Taking this multi-disciplinary approach, the Cambridge AI center endeavors to better understand human behavior by exploring areas like communication of emotion, and further expand the boundaries of user-centric communication.2

Drawing from a Diverse Team

Samsung AI Center Cambridge employs a team of experts of various disciplines, and emphasizes collaboration between them.
“We work together a lot as a team,” says Blake. “Our two Program Directors, Maja Pantic and Nic Lane, are world-experts in non-verbal human behavior and in embedded AI, respectively. We also have quite a few senior specialists in machine learning, in machine vision, in networks and devices, and in computing and cognition. We now have a team of very talented people, and new ideas are flowing freely!” says Blake.
As Blake notes, what makes the Cambridge AI center unique is not just its team’s wide-ranging expertise, but its location as well.
“Cambridge is a very special place,” begins Blake. “The university is one of the strongest in the world in research, and that is coupled with an extraordinary culture of research ventures, and a whole constellation of startups in robotics, medicine, AI, self-driving, and many other areas.”
“Being in this environment is important to us for several reasons. It is a stimulating ecosystem and an extraordinary network; it is a rich source of expert talent; it is well connected to the ‘Golden Triangle’ with London and Oxford.”
Of course, in addition to taking full advantage of the benefits that come with its location, the Cambridge center draws strength from its connections to other AI centers in Samsung Research’s global network.
“I am especially pleased to be connected with Samsung’s other AI centers around the world, where I know some of their internationally renowned scientists well,” says Blake. “I believe that, as we begin to work together, we can bring something special to consumers.”
Having more than 40 years of experience working in the field of AI, Blake added, “I was born in the same year as AI – 1956 – the year the Dartmouth conference famously coined the term AI – and I have been studying AI vision for 40 years. I have been lucky to have such an extraordinary career.”

1 AI that processes information on a device itself, rather than sending that information to the cloud. Because on-device AI does not rely on outside networks, it is regarded as safer and more reliable than cloud-based AI.
2 https://internetofbusiness.com/samsung-uk-to-open-new-ai-centre/

TOP10 Articles (February 2020) / ТОП10 публикаций (февраль 2020)

По итогам 2019 года продажи аутоиммунных биоаналогов от Samsung Bioepis в Европе достигли рекордного уровня / Samsung Bioepis autoimmune biosimilar sales in Europe hits all-time high in 2019

Samsung заключает партнёрство с BTS для стимулирования маркетинга своих флагманских продуктов / Samsung signs partnership with BTS to boost marketing

Компьютерное зрение – это восприятие мира. Взгляд экспертов Samsung / [Hearing from an AI Expert – 3] Vision is About Understanding the World

Коронавирус подкрался незаметно: что ждёт производителей электроники в ближайшие месяцы? / What awaits electronics manufacturers due to coronavirus outbreak in China?

Samsung лидирует на американском рынке бытовой техники 4-й год подряд / Samsung tops U.S. home appliances market for 4th consecutive year

Samsung провёл европейскую премьеру новейшей линейки QLED-телевизоров 2020 года на Мальте / Samsung announces European launch of new flagship 2020 QLED 8K TV

Samsung: уведомление «1» было разослано владельцам смартфонов Galaxy по ошибке и это никак не повлияет на качество работы Android-устройств / Samsung: notification “1” was sent to owners of Galaxy smartphones by mistake and this will not affect the quality of Android devices

Samsung Galaxy Unpacked 2020: технологично, стильно и дорого / Introducing the Samsung Galaxy S20: Change the Way You Experience the World

Премиальные TIZEN-часы Samsung Galaxy Watch 3 получат 8Гб встроенной памяти / The TIZEN-powered Samsung Galaxy Watch 3 to offer 8GB internal storage

Samsung выпустит свою первую смарт-колонку Galaxy Home Mini через 10 дней / Galaxy Home Mini is finally launching the day after Unpacked 2020

Компьютерное зрение – это восприятие мира. Взгляд экспертов Samsung

Можете ли вы представить себе мир, в котором персональный AI-помощник на вашем смартфоне способен понять столько же, сколько и вы? А общаться с этим виртуальным ассистентом, настолько же естественно и легко, как с другим человеком? Команда Центра искусственного интеллекта Samsung в Торонто занимается созданием именно таких возможностей.

Центр искусственного интеллекта в Торонто расположен в академическом кластере, в непосредственной близости к различным учреждениям мирового уровня, связанным с искусственным интеллектом, включая Университет Торонто, Йоркский университет и Университет Райерсона. Такое расположение даёт огромное преимущество – в университете Торонто располагается факультет компьютерных наук (DCS), который входит в десятку лучших международных учреждений. Более половины сотрудников центра являются преподавателями, выпускниками или нынешними студентами DCS. Глава AI-центра Samsung в Торонто Свэн Дикинсон – эксперт в области компьютерного зрения и бывший заведующий кафедрой компьютерных наук в Университете Торонто, рассказал о перспективах развития этой технологии.

Взгляд на компьютерное зрение

Центр искусственного интеллекта Samsung в Торонто специализируется на разработке технологий визуального понимания. Команда специалистов Центра работает над мультимодальными взаимодействиями формата «пользователь-устройство», которые включают в себя зрение, язык и знания.
«Восприятие мира посредством компьютерного зрения поможет устройствам “визуально обосновать” свой диалог с пользователем и предоставить интегрированный мультимодальный интерфейс, гораздо более естественный, чем основанный исключительно на зрении или диалогах», – рассказал Дикинсон.
«Пользователь не должен читать руководства, чтобы выяснить, какие кнопки и в каком порядке он должен нажимать на смартфоне. Скорее, нужно показать устройству, что я (как пользователь) хочу, и рассказать ему об этом на естественном языке, понятном всем в мире, в котором я живу. Чтобы достичь такой широты понимания, гаджет должен взаимодействовать со мной надежным и естественным образом, а также видеть и понимать тот же мир, что наблюдаю я сам».
По мнению Дикинсона, подобно тому, как отказ от одного из форматов общения (аудио, речь, зрение и т. д.) будет препятствовать взаимодействию между двумя людьми, это в равной степени относится и к гаджетам.

Значение расширенного пользовательского опыта

Samsung ежегодно продаёт 500 миллионов устройств, оснащённых интеллектуальными функциями. Дикинсон подчёркивает, что широкое продуктовое портфолио Samsung поможет в реализации концепции подключённого образа жизни: «Samsung отличается тем, что выпускает множество потребительских устройств, включая цифровую технику, телевизоры и мобильные телефоны. У корпорации есть уникальная возможность объединить эти гаджеты общим интерфейсом, который будет сопровождать пользователя при переключении от одного устройства к другому, и из одной комнаты в другую. Это поможет реализовать весь потенциал каждого устройства для эффективной связи, помочь  человеку выполнять необходимые задачи, изучить его привычки и предпочтения, чтобы последующее общение было простым и полезным».
Дикинсон отмечает, что для массовой реализации решений на базе компьютерного зрения и мультимодального взаимодействия «по-настоящему интеллектуальные AI-системы должны обладать пониманием нашего мира, физики его причинно-следственных связей, геометрии и динамики. Если наши устройства могут видеть трёхмерный мир, в котором мы живём, то есть понимать трёхмерные формы, позиции и идентичность объектов в нашей общей среде, они будут воспринимать мир так, как мы. Этот общий визуальный контекст будет иметь решающее значение для разработки полноценных персональных помощников. Samsung является лидером в разработке взаимодействия между человеком и устройством, которое имитирует взаимодействие между людьми. Мы работаем над обеспечением визуальной базы и поддержки представления знаний для диалоговых сервисов взаимодействия».

Взаимодействие человека и устройства на основе открытого обмена информацией

Дикинсон поясняет, что AI должен быть понятен владельцу смарт-гаджета. Он отмечает, что после невыполнения задачи или предоставления соответствующего ответа «устройство должно быть способно обосновать, почему оно дало этот ответ (или же объяснить его отсутствие). В лучшем случае он должен иметь возможность взаимодействовать с пользователем, задавая вопрос или прося его настроить свою камеру или другие режимы ввода, чтобы у искусственного интеллекта была возможность собрать больше информации и сформулировать соответствующий ответ».
Такой вид обмена информацией называется областью «активного диалога и активного видения». Это будет ключом к дальнейшему совершенствованию взаимодействия человека и устройства. Так как в данном случае система сможет построить ментальную модель того, что понятно пользователю. И открыть эту модель, чтобы человек был в состоянии считать мыслительные процессы устройства.

[Hearing from an AI Expert – 3] Vision is About Understanding the World

Can you imagine a world where the personal AI assistant on your smartphone is able to understand as much about the world as you do? What about a scenario where communicating with that AI assistant is as natural and easy as interacting with another human? Developing those kinds of capabilities is exactly what the team at Samsung’s AI Center in Toronto are putting their minds to.
Samsung Newsroom sat down with Sven Dickinson, Head of Samsung’s Toronto AI Center to learn more about these exciting fields, and what they could mean for the future.

The Vision for Vision

The second Samsung AI center established in North America, Samsung’s Toronto AI Center is led by Dr. Sven Dickinson, an expert in computer vision and former chair of the Department of Computer Science at the University of Toronto.
At the epicenter of AI research and development, Samsung’s Toronto AI Center is mainly focused on developing the visual understanding capabilities that allow a Samsung device to understand the world in which it’s situated. In addition, the team is working on multi-modal interactions, which are user-machine interactions that encapsulate vision, language and knowledge.
“Allowing Samsung devices to ‘see the world’ through computer vision enables them to ‘visually ground’ their dialog with the user, providing an integrated, multimodal experience that’s far more natural than one that’s solely vision or dialog-based” says Dickinson, whose expertise includes exploring problems surrounding shape perception and object recognition.
Touching on the benefits of multimodal technology, Dickinson claims that, “I should not have to read manuals to figure out which buttons to push on my device and in which order. Rather, I should be able to show my device what I want, and tell it what I want, in natural language that is understandable, and situated in the world that I live in.”
Extrapolating on the interplay between computer vision and multimodal inputs, he goes on to say that, “To achieve this breadth of comprehension, the device has to have a model of my understanding of the world, the capacity to communicate robustly and naturally with me, and the ability to see and understand the same world that I see.”
Remarking on applications for this technology, Dickinson identifies the most compelling as being “a personal assistant that you not only speak to, but that sees the world the same way that you do.” Speaking to the importance of multi-modal device interactions, Dickinson points out how much cancelling out one of the modes of communication (audio, speech, sight etc.) would hamper communication between two people, and says that also applies to personal devices.

A Truly Enhanced User Experience is Key

At the 2019 Consumer Electronics Show (CES), Samsung unveiled its vision for Connected Living, which involves connecting the 500 million devices the company sells every year, and making them intelligent. Dickinson highlights that Samsung’s broad product portfolio will be instrumental in fulfilling this vision, saying that, “What differentiates Samsung is that it makes a multitude of devices in the home, including digital appliances, TVs, and mobile phones. Samsung has a unique opportunity to leverage these devices to yield a multi-device experience which follows the user from one device to another, and one room to another. This will help realize the full potential of each device to effectively communicate, to help the user execute device-specific tasks, and to learn the user’s habits and preferences so that subsequent communication is not intrusive but instead ‘always helpful.’”
Speaking about what his center will need to do to truly realize computer vision and multimodal interaction, Dickinson comments that, “Vision is not about understanding images; vision is about understanding the world. Truly capable AI systems must possess an understanding of our world, of its physics and causality, of its geometry and dynamics. They must also be able to model and understand human behavior.” He extrapolates on this by pointing out that, “If our devices can see the 3D world that we live in the same way as we do, i.e., understand the 3D shapes, positions and identities of objects in our shared environment, then our devices can visually experience the world as we do. Such a shared visual context will be crucial in developing fully realized personal assistants.”
Dickinson says that Samsung is leading the charge when it comes to truly intelligent visual understanding, and identifies ‘visual grounding’ as an essential pre-requisite for well-rounded visual understanding capabilities. “Samsung is leading the way when it comes to developing human-device interaction that closely mimics human-human interaction,” Dickinson says, “We aim to provide visual grounding and knowledge representation scaffolding for dialog-based interaction services. Without these components in place, users become disappointed with services, and quickly tune out.”

Human-device Interactions Based on Open Information Sharing

Dickinson goes on to explain that AI also needs to be able to explain itself to the user. He remarks that, after failing to carry out a task or provide an appropriate response, “A device should be able to reflect to the user precisely how and why it came up with that response (or lack thereof). Ideally, it should be able to follow up with the user by asking a question or asking the user to adjust its camera or other input modes so that it can gather more information and formulate an appropriate response.” Dickinson relates that this kind of openness and information sharing will be key to the further sophistication of human-device interactions, noting that “What we call the domain of ‘active dialog and active vision’ is where the system can construct a mental model of what the user understands, and can, in turn, open up its own mental model so that the user can understand the thought processes of the device.”

The Benefits of Being Based in Toronto

Asked about how being based in Toronto affects the AI center, Dickinson remarks that the center enjoys a lot of benefits due to its close proximity to various world-class AI-related institutions, including the University of Toronto, York University and Ryerson University. “Being in Toronto offers us a tremendous regional advantage,” Dickinson comments, “We are across the street from the University of Toronto, home to the Department of Computer Science (DCS), which is one of the top-10 international computer science departments. Over half the members of our AI Center are either active faculty, graduates or current students at DCS.”
On the topic of collaboration between Samsung’s global AI centers, Dickinson relates that, “The seven global AI centers are working to create industry-leading solutions in their respective areas of focus, while coordinating to achieve the common goal that is realizing Samsung’s ultimate AI vision.” Dickinson touches on the topic of the Toronto AI center collaborating with other AI centers further afield, saying that, “We are starting to explore possible research collaborations with other global AI centers, and hope to converge on some use cases of value to Samsung and its products and services.”

Заменит ли искусственный интеллект человека? Взгляд экспертов Samsung

Ни одно обсуждение о будущем искусственного интеллекта (AI) не проходит без вопроса: заменят ли машины людей? О применении AI в реальных условиях и о том, несёт ли эта технология угрозу или пользу для человечества – размышляет исполнительный вице-президент и главный научный сотрудник Samsung Electronics, профессор факультета компьютерных наук Пристонского института нейронауки доктор Себастьян Сэн (Dr. Sebastian Seung).
Себастьян Сэн консультирует Samsung Electronics по передовым исследованиям и участвует в разработке стратегии корпорации в области освоения AI. Сегодня Себастьян Сэн является одним из самых влиятельных учёных в области исследований AI и нейронауки.

Вдохновлённые нейронаукой

Нейросети — это математические модели или смоделированные компьютером алгоритмы, подобные биологическим нейронным сетям в мозге человека. «Свёрточные сети, которые сегодня являются доминирующим подходом для разработки алгоритмов компьютерного зрения, были вдохновлены нейронаукой 1960-х годов, получившей Нобелевскую премию», – говорит Сэн. Его исследования в Пристонском университете сфокусированы на мапировании нейронной «электрической схемы» коры головного мозга. «Я надеюсь, что наши исследования приведут к появлению более мощных искусственных нейронных сетей», – говорит Сэн.

Что является следующей ступенью развития AI?

«В наши дни роботизированные решения уже не редкость: от домашних роботов-пылесосов до промышленных роботов-манипуляторов. Большая часть из них представляет собой результат освоения технологии глубокого машинного обучения. “Однако для того, чтобы создать роботов, которые могут, например, протянуть руку, или что-то поднять и убрать, – говорит Сэн, – мы должны оснастить их компьютерным зрением, чтобы они могли видеть и распознавать объекты и понимали, что они должны с ними делать».
Сэн признаёт, что в прошлом учёные пытались добиться этих возможностей с помощью классического подхода программирования, но это не принесло значимых результатов. «Мы должны каким-то образом позволить роботу учиться самостоятельно выполнять необходимые действия, – говорит Сэн, – и во многом это позволяет сделать технология глубокого обучения».
«В перспективе роботы будут не просто выполнять информационную функцию (например, предоставлять сведения о погоде или изменять температуру), они смогут выполнять гораздо более прикладные задачи в домах пользователей (например, собирать игрушки, мыть посуду или выполнять другую работу по дому)».

AI - угроза для человечества?

Перспектива замены человеческого труда альтернативой на базе роботизированных технологий не такая уж утопия. Однако профессор Сэн считает, что эта проблема сильно преувеличена: «Если проанализировать рынок США и других развитых стран, то за последние 20 лет много людей потеряли работу из-за офшорного аутсорсинга, а не только из-за автоматизации. Или взять пример времён первой промышленной революции: многие рабочие места были сокращены, но это не означало, что работы в целом стало меньше, потому что появились новые виды профессий».
Отвечая на неизбежный вопрос о сценарии конца света, в котором машинный интеллект превосходит человеческий, и роботы захватывают мир, Сэн сказал: «Люди на самом деле не знают, каковы реальные возможности AI. И отчасти это является публичным заблуждением, основанным на научно-фантастических фильмах, которые убеждают людей в том, что роботы могут делать всё что угодно. На самом деле, роботы всё ещё очень неуклюжи. Причина, по которой я не волнуюсь по этому поводу, заключается в том, что из всех возможных угроз для человечества – роботы далеко не в начале списка. Люди считают, что AI может делать больше, чем на самом деле. Приведу вам пример: одна моя знакомая хотела, чтобы AI заменил её доктора. Но в медицине есть много вещей, которые даже ни один врач не может решить или объяснить. И, поскольку нынешний подход к AI включает в себя обучение машин на базе практических знаний людей, если лучшие люди-специалисты не могут решить какую-либо проблему, то AI это не под силу. И в ближайшем будущем вряд ли искусственный интеллект сможет выполнять задачи лучше, чем люди-эксперты».

Что нас ждёт в следующие 50 лет?

AI будет во главе инноваций в следующие 50 лет: «Через 20-30 лет роботы смогут помогать нам делать работу по дому. Это произойдёт так же, как с мобильными телефонами. Теперь у каждого есть мобильный телефон – миллиарды из них продаются каждый год – и то же самое будет с роботами. Оснащённые искусственным интеллектом беспилотные автомобили станут реальностью, AI позволит беречь труд людей. Полная автономия займёт больше времени, чем первоначально описывали СМИ. Потенциальные преимущества от AI грандиозны и разнообразны. Эта технология может применяться для ускорения научных открытий, и в долгосрочной перспективе окажет огромное влияние на такие области, как, например, материаловедение или химия. Допустим, я хочу создать новую молекулу с определёнными свойствами, чтобы затем использовать её для создания какого-то материала, – AI запросто позволит мне сделать это. Это способно произвести революцию. Мне бы хотелось, чтобы Samsung если не возглавлял эту революцию, то, как минимум, участвовал бы в ней».

[Hearing from an AI Expert – 2] How AI Will Change the World

There’s no denying that the age of AI is upon us and that the ways we engage and interact are set to change in big ways. In anticipation of this, Samsung Electronics has opened AI centers across the world to ensure that the company leads the charge on AI. 2019 marks the 50th anniversary of Samsung Electronics, and the company has forecast another 50 years of ingenuity ahead, with AI set to be at the heart of future innovation.
To gain a great insight into what AI means for the future of society, as well as the work being done at the Samsung AI Centers, Samsung Newsroom sat down with Executive Vice President & Chief Research Scientist, Dr. Sebastian Seung.
Seung joined Samsung Electronics in 2018. He is also a professor at the Princeton Neuroscience Institute and Department of Computer Science. Seung is one of the most influential scientists in the world when it comes to AI research based on neuroscience.

Artificial Neural Networks and AI

Based on his extensive experience and insights into the field of artificial neural networks1, Seung is working on developing future growth engines for Samsung Electronics by establishing an AI strategy and providing advice on advanced research.
Artificial neural networks are mathematical models or computer simulations of the biological neural networks in the brain. “Convolutional networks, now the dominant approach to computer vision, were inspired by Nobel Prize-winning neuroscience of the 1960s,” according to Seung. His research at Princeton focuses on mapping the neuronal “wiring diagram” of the cerebral cortex. “I hope that our 21st century studies of the cortex will finally reveal how it learns, and that this new understanding will lead to more powerful artificial neural networks,” says Seung.
In his work for Samsung, Dr. Seung travels back and forth between the U.S. and Korea. His recent work is especially focused on advanced research regarding robots, which is the New York AI Center’s main field of research.

Deep Learning and Robotics

These days, robots are already present in society in the forms of robot vacuum cleaners in our homes and robotic arms being used in factories and by shipping companies. Seung acknowledges that these robots already represent an early stage of this technology, but says that what he is aiming for is something much more sophisticated. “In order to develop robots that can, for instance, reach out to pick something up and put it away,” Seung says, “we have to equip them with computer vision so they can see what’s in front of them, and with brains so that they know what all these objects in your house are and what they should do with them.”
Seung acknowledges that labs have tried in the past to achieve these capabilities through the classical approach of programming, but that that hasn’t really worked out. “We have realized that we have to somehow allow the robot to learn to perform the required actions itself,” says Seung, “and a lot of that involves the deep-learning approach.”
Seung points to the area of home automation as a primary application for their work. “In the future, you can imagine robots that won’t just give you weather information or change the temperature – they’ll perform far more helpful tasks in your home. They’ll pick up the toys, wash the dishes and even take the laundry up and down the stairs.”

AI in Society

No discussion of AI would be complete without addressing the apprehensions some people feel when it comes to the technology and the ways in which it stands to change our way of life. Seung addresses this question first with regards to the prospect of people losing their jobs to automation. “I think this issue of robots taking our jobs is exaggerated,” he relates. “Firstly, in the last 20 years, the U.S. and many other developed countries have lost a lot of jobs to offshoring, not just to automation. As in the first industrial revolution, many jobs were eliminated, but that didn’t mean that there were fewer jobs in total, because new jobs arose from the new circumstances.”
Seung went on to comment on the wider attitudes towards automation of industry, and the fact that the issue needs to be looked at through a different lens. “If robots really could do all of our work, why shouldn’t we be happy about that?” he said.
Asked the inevitable question about doomsday scenarios in which machine intelligence outstrips that of humans and robots take over the world, Seung claimed, “People don’t actually know what the real capabilities of AI are. And part of that is a public misconception based on science fiction movies that convince people that robots can do anything. In reality, robots are still really clumsy.”
Seung went on to point out that AI developments may well end up greatly helping us, instead of dooming us. “Are robots going to do something bad to us?” he said. “Well, the reason that I don’t worry about that is that of all the environmental and political threats to humanity, robots are not very high on the list. And not only that, I think that if humanity is to best equip itself to deal with any and all future threats, we need to be as smart as possible. And that involves having the most sophisticated technology. You could be a science-fiction pessimist and say maybe these robots could turn on us, but you could also argue that maybe we’ll use these robots to save us.”
Speaking to other misconceptions about AI, Seung pointed to the actual capabilities of the technology. “The public thinks that AI can do more than it really can,” he said. “To give you an example, I met someone who wanted AI to replace her doctor. But there are many things that no human doctor can fix. So, because our current approach to AI involves training machines based on the expertise of human practitioners, if the best human experts can’t solve it, then the AI can’t do it either. It’s not like AI will all of a sudden be able to perform tasks better than the human experts.”

The Next 50 Years of AI

Having reached its 50-year anniversary this year, Samsung is now looking to AI to spearhead the next 50 years of innovation. Asked what he expects for this period, Seung said, “In 20~30 years robots will be able to work in the home just as humans can. It will have happened the same way that the mobile phone revolution has happened. Everybody has a mobile phone now – billions of them are sold every year – and the same is going to be true of robots.”
Home automation and self-driving cars based on AI are other hot-button topics right now. Seung says he fully expects AI-equipped cars to become a reality, but that the timeline for their inception is hard to sketch out. “AI is going to lead to a lot of labor-saving things happening in people’s everyday lives, like autonomous cars for instance,” he said. “Are they going to be here next year, or will it take 20 years? Experts are realizing that full autonomy will take longer than the media originally portrayed, but most still believe that it will be achieved. I’d like to see Samsung have some part in that revolution, if not lead that revolution.”
The prospective benefits of AI are enormous in scale and diverse in focus. Outlining some of the applications of AI that the general population may not be aware of, Seung remarked that “The effect AI could have on scientific research is a major one. AI can be applied to accelerate scientific discovery, and in the long term, it will have a huge impact on areas like materials engineering and chemistry. Let’s say I want to design a new molecule with certain properties – AI might allow me to do that more easily. Then, that new molecule could have applications for a drug company, or really any company that creates materials. So AI is not only applied to technology – it’s also used for scientific discovery, which then accelerates the advancement of technology.”

1An artificial neural network is an attempt to simulate the network of neurons that make up a human brain so that the computer will be able to learn things and make decisions in a humanlike manner. (Forbes)

Искусственный интеллект как тенденция будущего. Взгляд экспертов Samsung

Наступает эра AI

В настоящее время искусственный интеллект (AI) стал ведущей мировой технологической тенденцией будущего. AI находится в самом центре современной технологической революции, и ожидается, что он в корне изменит не только индустрию информационных технологий, но и автомобильный, банковский и медицинский секторы.
Samsung Electronics активно инвестирует в сегмент AI. В настоящее время в распоряжении корпорации имеется 7 Центров Искусственного интеллекта в 5-ти разных странах; в Южной Корее (Сеул), США (Силиконовая долина и Нью-Йорк), Великобритании (Кембридж), Канаде (Торонто и Монреаль) и России (Москва).
В этом интервью Гари Гёнбэ Ли, старший вице-президент и глава Исследовательского центра Samsung в Сеуле поделился последними тенденциями в области AI и о том, что ожидает технологию в будущем.

Что AI значит для Samsung?

«Искусственный интеллект — это воплощение человеческих способностей видеть, слушать, принимать решения, двигаться и учиться в компьютерах», – говорит Гари Ли. «Если подумать иначе, AI — это сочетание алгоритмов, больших данных и вычислительной мощности. Это 3 ключевых компонента, которые позволяют нам создавать целостный искусственный интеллект».
AI-центры Samsung по всему миру проводят исследования, охватывающие весь спектр разработки AI, включая компьютерное зрение, понимание языка, анализ данных, робототехнику и машинное обучение. Их исследования нацелены на то, чтобы приблизить возможности AI к человеческому мозгу. «По сравнению со временем, которое потребовалось человечеству, чтобы развиться до его нынешнего состояния, история AI очень коротка – всего около 60-ти лет», – отмечает Ли. «AI ещё не достиг возможности полного выполнения человеческих действий, но я считаю, что технологии и дальше будут стремительно улучшаться».
Каждый из 7-ми Центров AI Samsung имеет свои специальные области исследований. Например, Центр Искусственного Интеллекта в Кембридже сфокусирован на локальном AI и технологиях AI, связанных с новым поколением телекоммуникационных сетей; Московский центр ориентирован на базовые технологии AI, такие как формирование данных для машинного обучения и прогрессивное глубокое обучение, а ключевое направление Центра в Нью-Йорке – манипуляции с роботами. Сеульский центр работает над пониманием языка, обработкой речи и большими данными, а также координирует работу других центров, способствуя продуктивному сотрудничеству между ними.
Когда продукты и услуги на базе AI готовы к запуску, они становятся доступны для потребителей через различные сервисы, например Bixby. Samsung работает над тем, чтобы к концу 2020 года внедрить технологию во все свои продукты.

Как Samsung планирует использовать разработки в области AI?

«Samsung Electronics ежегодно продаёт 500 миллионов единиц продукции. Мы стремимся разрабатывать новые сервисы и функции для наших устройств, чтобы соответствовать образу жизни наших клиентов», – отметил Ли. Глава Исследовательского центра Samsung в Сеуле подчеркнул дополнительные преимущества, которые Samsung приносит пользователям, внедряя широкий спектр возможностей AI в свои устройства, которые уже стали товарами первой необходимости в жизни пользователей. AI-центры Samsung по всему миру сосредоточены на разработке оригинальных технологий, таких как естественная обработка языка для Bixby и робототехника. А исследовательские группы в каждом подразделении работают над объединением и внедрением разработанных инноваций в продукты.

Заменит ли AI человека?

Несмотря на своё недавнее появление, технология AI уже получила широкое распространение. В первую очередь это происходит в направлениях распознавания речи, движений, текстов и т.п. На отдельных примерах мы наблюдаем большую эффективность и «продвинутость» AI по сравнению с возможностями человека. Однако, несмотря на то, что сегодня с помощью AI мы уже способны создавать решения или машины, которые могут понимать разговорный язык, до того, как технология станет полностью обрабатывать слова в их контексте так, как это делает человек, ещё далеко. Другими словами, AI нужно развивать понимание гипотетических рассуждений, умение читать между строк команды или высказывания пользователя. Также ещё совсем не изучена область использования искусственным интеллектом разных подходов к решению проблем, основанных на индивидуальных или непредсказуемых ситуациях и ежедневных сценариях.

Этично ли использование AI и продуктов на его платформе?

AI может обеспечить существенное конкурентное преимущество для бизнеса, но в случае злоупотребления или неправильного применения, может спровоцировать социальную проблему. По мере развития технологии соблюдение этических норм приобретает решающее значение. Samsung подходит к этому со всей ответственностью и непрерывно разрабатывает способы улучшения своей практики в области освоения искусственного интеллекта.
«Samsung придерживается 3-х этических принципов в отношении AI» – подчеркнул Ли. «Это справедливость, ответственность и прозрачность. Разработка или использование AI не должно приводить к дискриминации, и корпорация берёт на себя полную ответственность за обеспечение прозрачности в процессе сбора и управления данными. Для реализации этих целей в прошлом году Samsung стал членом Партнёрства по искусственному интеллекту (PAI). Конфиденциальность является важной частью политики Samsung в области AI. Чем больше данных может использовать AI, тем полезнее он может быть. Поэтому все используемые данные должны обрабатываться открыто, чтобы потребители чувствовали себя в безопасности, если они приобретают наши продукты и услуги. Мы придерживаемся всех соответствующих законов и положений о защите данных, включая GDPR1 в Европе. В то же время, мы включаем AI в наше ПО и системы безопасности для обнаружения и идентификации уязвимостей».

Какова цель Samsung в реализации будущего с поддержкой AI?

«Для меня суть AI заключается в том, чтобы делать жизнь потребителей лучше благодаря интеграции искусственного интеллекта в продукты и услуги, которыми они пользуются ежедневно. Принимая это во внимание, Samsung Research убеждён, что потребительский AI должен быть полезен, безопасен, ориентирован на пользователя и, наконец, и способен к постоянному самообучению. Все наши продукты и услуги на основе AI со временем становятся умнее, повышая производительность и удобство использования. Кроме того, Samsung стремится разрабатывать решения, которые обеспечивают уверенность и спокойствие потребителей. Наша цель – с помощью AI разрабатывать максимально полезные и персонализированные продукты и сервисы».

[Hearing from an AI Expert – 1] The Age of AI is Coming

Nowadays, artificial intelligence (AI) has emerged as a leading global future technology trend. AI is so much at the center of the current technological revolution that it is expected to fundamentally alter not only the IT industry, but also the automobile, banking, and medical sectors. As a result, companies are making efforts to hire AI experts and are investing in research and other related business fields to ensure that they are fully prepared to integrate AI into products and services that can benefit people’s lives.
Samsung Electronics has long recognized the significance of AI and has been actively investing in the area. The company currently maintains seven AI centers in five different countries; South Korea (Seoul), the U.S. (Silicon Valley and New York), the U.K. (Cambridge), Canada (Toronto and Montreal) and Russia (Moscow). But the question remains – what is behind AI’s rapid evolution, and what forms is the technology expected to take going forward?
In a series of interviews, Samsung Newsroom sat down with leading experts from each of the AI centers around the world about the latest AI trends and what they believe the future holds for the technology. The first interviewee is Gary Geunbae Lee, Senior Vice President and Head of Samsung Research’s AI Center in Seoul. We asked him for his insights regarding AI development, and enquired about what makes Samsung’s approach to AI distinctive.

What is AI to Samsung?

AI is the realization of implementing the human capabilities of seeing, listening, decision making, moving and learning into computers,” said Gary Lee. “To think about it another way, AI is a combination of A (algorithms), B (big data), and C (computing power). These are the three key components that allow us to construct well-rounded artificial intelligence.”
Lee explained that Samsung Research’s AI Centers around the world conduct research that covers the full gamut of AI development, including computer vision, language understanding, data analytics, robotics and machine learning. Their research aims to bring the capabilities of AI closer to that of the human brain. “Compared to the time it took humanity to evolve to its current state, the history of AI is very short – only about 60 years,” noted Lee. “AI still isn’t quite there as far as fully realizing human actions, but I believe the technology will continue to improve quickly.”
Each of Samsung’s seven AI Centers spread across the world has its own specific fields of research. For example, the Cambridge AI Center is focused on On-Device AI and AI technology related to next-generation telecommunication networks, the Moscow Center is the Moscow Center is focusing on AI core technology such as data generation for machine learning and advanced deep learning, and the New York Center’s focus is centered on advanced research fields such as robotic manipulation. The Seoul Center works on language understanding, speech processing and big data and also coordinates the other centers, fostering collaboration and efficiency between them.
Once AI products and services are ready for release, they are made available to consumers through various services, including Bixby. The majority of recent Samsung products come with Bixby already incorporated into the device, and Samsung is working hard to make all Samsung products AI-ready in the near future. “Once Samsung’s AI speaker is launched, it will enable seamless interconnection between smart devices,” affirmed Lee. “This will enable us to achieve our goal of implementing AI on all of our products to the goal of fostering environments led by connectivity.”
In 2018 the company revealed a software development kit (SDK) for Bixby and currently Bixby supports voice commands and translations in English, Chinese (Mandarin), German, Italian and Spanish. The diversity and global versatility of Samsung’s product portfolio is one of its key strengths, and Bixby will enable users around the world to connect their devices seamlessly.

When Samsung Products and AI Meet

“Samsung Electronics sells 500 million products every year. We strive each and every day to provide new services and features that are a fit for our devices in order to closely match our customers’ lifestyles,” noted Lee. One of the greatest strengths of the Samsung AI offering is the device integration; Lee highlighted the added value Samsung brings to users by assimilating a wide range of AI capabilities into the devices that have already become staples in users’ lives.
“For example, AI can recognize the ingredients in your refrigerator and automatically recommend recipes which it then displays on the refrigerator’s screen,” said Lee. “After you put the food in the oven, the AI-powered software sets the temperature and cooking time intelligently, according to the recipe.”
Samsung’s AI centers around the world focus on developing original technology such as natural language processing for Bixby and advanced research areas such as robotics; R&D teams at each business unit then work on merging and applying the new innovations to the products.

Teaching AI to Think for Itself

Despite its recent origin date, AI recognition technology has evolved considerably over time; in some areas, even, AI has proven to be more advanced when compared with the abilities of humans. Nevertheless, there are still some areas that AI needs to improve to become the ultimate assistance tool: performance and accuracy.
While current AI technology is capable of understanding spoken languages, there is still a long way to go until AI is able to fully process words within their context as a human does. In other words, what AI needs to develop is the comprehension of hypothetical reasoning, or the ability to read between the lines, of a user’s command or statement. There is also a need for more development regarding AI’s capability to taking different approaches to solve problems based on individual, or unpredictable, situations and daily scenarios. Future AI development currently rests on how fast improvements are made in these areas.

Samsung’s AI Philosophy

AI can provide a significant competitive edge for businesses – but if abused or mishandled, it can cause a social problem when not kept under control. Therefore, sustained ethical compliance is critical when conducting AI research. Samsung takes this responsibility very seriously and is constantly formulating ways to improve its practices and increase accountability.
“Although AI is meant to improve people’ lives, the possibility of its abuse cannot be ignored, so ethical compliance is very important,” stressed Lee. “There are three ethics that Samsung follows in regards to AI.” These are fairness, accountability and transparency. The development or use of AI must not lead to discrimination or prejudice, and the company assumes total responsibility for the technology and maintains transparency in its data collection and management process. In order to ensure that it keeps developing AI products and services that are worthy of consumers’ trust, Samsung became a member of the Partnership on AI (PAI) last year.
Privacy is another important part of Samsung’s AI policy. Since the more data an AI service is able to utilize, the more helpful it can be, all data harnessed must be processed transparently so that consumers feel safe when using Samsung products and services. “Samsung Electronics greatly prioritizes data security and privacy,” noted Lee. “We adhere to all the related laws and regulations on data security, including the GDPR1 in Europe. We are working towards implementing technology that detects security vulnerabilities in our AI codes to ensure our customers can use AI-enabled products and services safely. At the same time, we are incorporating AI into our security software to develop identification capabilities that will provide further peace of mind for users.”
So, what is the final goal Samsung has in mind when pursuing an AI-enabled future? From Lee’s perspective, it is totally consumer centric. “For me, AI is about adding value to consumers’ lives thanks to the integration of AI into their everyday products and services. Which this in mind, Samsung Research operates, and will continue to operate, under the conviction that user-based AI is always there, must be helpful, must be safe, must be user-centric, and, finally, must always be learning.”
“At Samsung, we always keep our AI principles front of mind,” Lee emphasized. “Firstly, all of our AI-based products and services continuously learn by themselves and become smarter over time, improving performance and usability while interacting with consumers. Secondly, Samsung AI is always there across a range of devices for whenever a customer needs it. Thirdly, Samsung is committed to developing AI technologies that are always safe and offer consumers peace of mind. Finally, Samsung’s AI always pursues user-centric customization to provide as helpful and as personalized service as possible.”
“These principles are the fundamental technological base for all the AI products and services of Samsung,” added Lee. “They enable Samsung to provide meaningful and tangible user-oriented experience and values with our AI offering.”

1 The EU General Data Protection Regulation

Виктор Лемпицкий возглавил московский Центр искусственного интеллекта Samsung

Samsung Electronics объявляет о новом назначении в руководстве корпорации. Директором Центра искусственного интеллекта Samsung в Москве (SAIC-M) стал Виктор Лемпицкий.
Виктор присоединился к команде Samsung Electronics в 2018 году, заняв пост руководителя лаборатории в московском AI-Центре. Он стал самым высокоцитируемым автором статей в своей предметной категории в России в 2018 году и обладает наградой Scopus Awards Russia 2018. На счету Виктора Лемпицкого более 120 научных публикаций.
Виктор обладает богатым и разносторонним опытом работы в сфере AI (искусственного интеллекта) и компьютерного зрения. В 2006-2009 годах он работал в исследовательском подразделении Microsoft Cambridge. В 2007 защитил кандидатскую диссертацию в МГУ им М.В. Ломоносова, а в 2009 получил награду за лучшую работу на международном симпозиуме по функциональной визуализации и моделированию сердца (FIMH). В 2009-2011 годах Виктор Лемпицкий работал исследователем в Visual Geometry Group на факультете инженерных наук Оксфордского университета в Великобритании и, одновременно, консультантом в Microsoft Research Russia, а в 2011-2012 годах он занимал позицию эксперта по компьютерному зрению в компании «Яндекс». С 2012 года Виктор работает в Сколковском Институте Науки и Технологий (Сколтехе).
«За прошедшие полтора года в центре сложилась молодая, талантливая и амбициозная команда специалистов, уже достигшая нескольких интересных результатов. Значительная часть этих результатов относится к области генеративных нейросетей и создания визуального контента при помощи искусственного интеллекта. Для меня большая честь возглавить эту команду и продолжить строительство исследовательского центра мирового уровня в важной и высококонкурентной области AI», – прокомментировал своё назначение на пост директора московского Центра искусственного интеллекта учёный.
Московский Центр искусственного интеллекта Samsung был открыт 29 мая 2018 года. Он пополнил большую команду Samsung Research – научно-исследовательского подразделения по направлению потребительских продуктов Samsung Electronics. Деятельность московского AI-Центра Samsung направлена на укрепление лидерства техногиганта в области машинного обучения и анализа данных, а также исследование широких возможностей, ориентированных на пользователя AI. Главные сферы изучения – компьютерное зрение и базовые алгоритмы для платформы искусственного интеллекта. На сегодняшний день под руководством транснациональной корпорации работают 7 Центров искусственного интеллекта Samsung: в Сеуле, Кремниевой долине, Нью-Йорке, Кембридже, Москве, Торонто и Монреале.
Сегодня официальный англоязычный ресурс Samsung Electronics опубликовал материал о деятельности профессора Лемпицкого и его команды, оригинал которого мы приводим ниже.

[Hearing from an AI Expert – 7] From Russia, With Vision: The Future is Telepresent

They say the world is getting smaller. But with more and more family and friends living far apart and business being done across long distances, it can still feel very big. What a personal and professional boost then for people to have the ability to project their realistic presences into a place thousands of miles away.
This lesser-known application of AI, known as ‘telepresence’1, is one of the focuses of the Samsung AI Center in Moscow. Samsung Newsroom spoke to Dr. Victor Lempitsky, who leads Samsung’s Moscow AI Center, to find out more about what his center is working on and what he sees for the future of AI.

AI and Telepresence

The overarching research area that Samsung’s Moscow AI Center works on is that of ‘machine learning’, which is a core AI capability that encompasses the areas of language understanding, computer vision and data analysis. Specifically, the center works on next-generation core technology for machine learning, as well as the solutions that will allow them to apply this technology to image and video creation.
“We work on vision learning and telepresence,” Lempitsky relates, “which means developing new experiences that make users who are far apart feel as much like they’re physically together as possible.” It may not initially be clear how exactly AI is pertinent to the area of ‘telepresence’, but Lempitsky explains. “We use computer vision and machine learning to recognize and learn human motions. Then, we use those learned motions to complete a realistic simulation of a person.”
“The ‘Neural Network Rendering’ project has been one of the Moscow AI Center’s major achievements,” Lempitsky continues, “It involved using neural networks to render humans as so-called ‘neural avatars’.”
Asked about other applications for this technology, Lempitsky explains that, “It has made it possible for us to create a 3D digital version of a person’s head from just a single image,” and that “It can also be utilized for a wide range of telepresence applications.”

Awards Success

Russia is globally prominent when it comes to foundational subject areas such as mathematics, physics and source technology. As such, the Moscow AI Center is expected to be a driving force when it comes to leading the AI developments of the future.
Due to the groundbreaking work done by its expert personnel, the Moscow AI Center has accrued an impressive list of awards and nominations.
In 2018, the Moscow AI Center won a competition initiated by NeurIPS (Neural Information Processing Systems), the world’s biggest AI conference. The center also achieved meaningful results at the ECCV (European Conference on Computer Vision) and ICCV (International Conference on Computer Vision).
Lempitsky himself was also awarded a Scopus Award in 2018 for his contributions to the industry. Scopus is the world’s largest global base of peer-reviewed scientific literature, and the award is given to highly cited Russian researchers.

Samsung Devices to Optimize Computer Vision

Samsung has announced that it plans to connect the more than 500 million devices it sells each year and make them intelligent. Asked how the Moscow AI Center is contributing to this vision, Lempitsky remarks that Samsung has broad expertise when it comes to hardware. He points out that an increasing number of devices now incorporate in-device cameras and visual sensors, illustrating that computer vision technology is only set to become more and more instrumental to the industry going forward.
“Our center’s mission is to provide state-of-the-art computer vision software to underpin Samsung’s top-of-the-line hardware and service. I think that’s how we fit in to the wider vision and provide convenience to consumers.”

The Future of AI

Asked what he expects to see over the next 50 years of AI development, Lempitsky notes that 50 years ago people wouldn’t have come close to accurately guessing where we’d be now, but issues some predictions regardless. He says, “I think AI technology will most likely plateau and become the kind of very commonplace technology that people just take for granted. Computers will be able to scan and process visual information just like humans do, and that too will no longer be something that people marvel at.”
Speaking about short-term goals, Lempitsky explains that the Moscow AI Center wants to develop outstanding telepresence capabilities that can create value for people and provide them with new experiences. He outlines how he expects these capabilities will change people’s lives, saying that, “People won’t have to fly, say, from Seoul to Moscow, because they will instead put on devices equipped with AR or VR and be transported to a common environment where the feeling of being present is as strong as being physically together.” Lempitsky is confident that ‘telepresence as real as physical presence’ won’t exist only in sci-fi scenarios for much longer either, saying, “I’m optimistic that this can become a reality.”
Speaking about the business applications of the technology, Lempitsky says, “We anticipate that telepresence developments will transform our behaviors quite significantly.” He also comments that the introduction of telepresence technology will likely lead to an increased uptake in, and different perception of, people working remotely.
Finally, Lempitsky speaks to how developments in this area will help friends and families separated by some distance feel closer to one another, saying that, “Soon, we hope that people will come to see video chats as being as obsolete as sending a message by telegraph seems to us right now.”

1 Telepresence refers to technologies that allow a person to feel as if they were present, to give the appearance of being present, or to otherwise have an effect at a place other than their actual location.