Как работает сенсорный экран: электричество, а не магия

Коротко

• В смартфоне и планшете почти всегда стоит проекционно-ёмкостный экран: палец изменяет электрическое поле, контроллер вычисляет координаты.
• Резистивный экран реагирует на давление двух слоёв, поэтому работает с ручкой, перчаткой и ногтем.
• Настоящий мультитач обеспечивает взаимная ёмкость на сетке электродов, а не «магия стекла».
• Вода, дешёвая плёнка и электромагнитные помехи сбивают сенсор сильнее, чем трещина на стекле.
• Картинка и «тач» — разные слои. Дисплей может светиться, а касания уже не считывать.
• Если экран «сам нажимает», сначала вытрите его насухо и снимите чехол с магнитами.

Сенсорный экран работает так: под стеклом лежит сетка прозрачных электродов, контроллер постоянно измеряет крошечные изменения ёмкости, а палец — это просто проводник, который эту ёмкость смещает. Координаты X и Y появляются ещё до того, как система нарисует иконку или букву. Давление здесь ни при чём. Если вы давите сильнее, будто «лучше нажмётся», вы лишь гнёте стекло. На ёмкостном экране сила нажатия почти не учитывается, если отдельно не стоит датчик силы.

Именно поэтому зимние перчатки «не едят» телефон, мокрые пальцы рисуют хаос, а дешёвый стилус с резиновым наконечником работает, словно палец. И именно поэтому банковский терминал иногда спокойно принимает ключ от квартиры, а смартфон — нет. Это разная физика. Ниже — как устроен каждый тип, где прячется контроллер и что ломается в реальной жизни, а не в рекламной схеме.

На практике я уже несколько раз видел, как человек несёт «мёртвый» телефон в сервис, а проблема сидела в мокрой защитной плёнке. Экран светился, жесты срывались, владелец был уверен, что умер дигитайзер. Сняли плёнку — всё ожило. Поэтому начнём не с брендов, а с того, что измеряет железо.

Что именно измеряет экран, когда вы его касаетесь

Любой тачскрин — это датчик положения плюс прозрачный слой над картинкой. Картинку рисует LCD или OLED. Касания считывает отдельная система: электроды, контроллер и прошивка. Операционная система получает уже готовые события вроде «палец №1 в точке такой-то, палец №2 поехал влево». Жесты pinch и swipe — это уже программная интерпретация, не свойство стекла.

Человеческое тело проводит ток, потому что в тканях много воды с ионами. Палец возле электрода ведёт себя как одна обкладка конденсатора, вторая — сама сетка на стекле. Изменение ёмкости крошечное, его нужно выловить на фоне шумов зарядки, радиомодуля и даже лампы дневного света.

Поэтому в телефоне сидит специализированный чип — touch controller. Он сканирует строки и столбцы, фильтрует мусор, отбрасывает ладонь, иногда пытается игнорировать капли и лишь потом отдаёт координаты процессору.

Есть ещё нюанс, который путают даже в сервисах. Стекло, дигитайзер и матрица — три разные вещи. Трещина на защитном стекле может вообще не затрагивать сенсор. И наоборот: картинка идеальная, а «тач» плавает, потому что отслоился шлейф или сдох контроллер. По опыту, именно эта путаница даёт кучу лишних замен экрана «на всякий случай».

Ёмкостный экран: тот, что стоит в смартфоне

Современные телефоны, планшеты, большинство автомобильных панелей и более новые платёжные терминалы используют проекционно-ёмкостную технологию, сокращённо PCAP. Под покровным стеклом нанесены прозрачные электроды — обычно из оксида индия-олова, ITO. Они образуют сетку: одни линии идут строками, другие столбцами.

На пересечениях возникает электрическое поле. Палец это поле возмущает. Контроллер видит, на каком пересечении «просела» ёмкость, и вычисляет точку касания.

ITO нужен именно потому, что он одновременно проводит ток и почти не мешает свету с матрицы. Слой тонкий, глаз его не видит. На больших мониторах ITO иногда заменяют металлической сеткой или серебряными нанопроводами: так проще протянуть сигнал через большую площадь, хотя под углом сетка иногда заметна.

Поверхностно-ёмкостный экран — старший родственник. Там один проводящий слой, а координату считают по токам с углов. Мультитача почти нет, калибровка сбивается легче. Когда-то такие панели ставили на киоски. В карман их уже не кладут.

Собственная и взаимная ёмкость: почему один палец и десять — разные задачи

В проекционно-ёмкостной панели контроллер умеет измерять двумя способами. И путаница между ними как раз объясняет, почему старые «ёмкостные» киоски видели лишь одно касание.

• Собственная ёмкость (self-capacitance). Каждый электрод измеряют относительно «земли». Палец добавляет ёмкость на конкретную строку и столбец. Сигнал сильный, схема проще, хорошо ловит даже приближение пальца.
• Взаимная ёмкость (mutual capacitance). Конденсатор образуется на каждом пересечении строки и столбца. Контроллер подаёт импульс на линию Tx и слушает Rx. Палец «крадёт» часть поля, взаимная ёмкость падает. Каждое пересечение читается отдельно.
• Гибрид. Многие современные контроллеры держат оба режима: взаимную ёмкость для жестов, собственную — чтобы отсечь воду или поймать щёку во время разговора.

Слабое место собственной ёмкости — «призраки». Два пальца дают две строки и два столбца. Геометрически это четыре возможных пересечения, и контроллер не всегда знает, какие два из них настоящие. Поэтому настоящий мультитач в телефоне держится именно на взаимной ёмкости: там измеряется каждая ячейка сетки, а не только «какая строка сработала».

Замечал такое на старых планшетах с дешёвым контроллером: ставите два пальца, а курсор иногда прыгает в «зеркальную» точку. Это не вирус. Это классическая неоднозначность self-cap, которую прошивка не успела разрулить.

Что делает контроллер после касания

Физика на этом не заканчивается. Сырой сигнал с электродов — это шум плюс крошечный сдвиг.

1. Сканирует матрицу строка за строкой.
2. Вычитает базовый уровень, который сам же постоянно обновляет.
3. Отбрасывает слишком маленькие или слишком большие пятна — ладонь, край ладони, каплю.
4. Интерполирует положение мельче шага сетки, потому что палец накрывает несколько электродов сразу.
5. Отдаёт системе список контактов с идентификаторами, чтобы было понятно: это тот же палец, который уже едет, а не новый.

Вот почему после замены экрана иногда «плавает» калибровка, а после обновления прошивки вдруг лучше работают мокрые пальцы. Алгоритм в контроллере не менее важен, чем само стекло. Дешёвая копия матрицы часто отличается именно более тупым фильтром, а не «худшим ITO».

Резистивный экран: давление, а не поле

Резистивная панель устроена иначе и честнее относительно слова «нажать». Два гибких слоя с проводящим покрытием разделены микроскопическим зазором или точками-спейсерами. Давите — верхний слой прогибается, касается нижнего, в точке контакта появляется электрическая связь. Дальше схема работает как делитель напряжения.

В классической четырёхпроводной панели контроллер сначала подаёт напряжение вдоль одной оси и измеряет его на второй, затем меняет оси местами. Из двух измерений складываются координаты. Пятипроводная схема износостойче: рабочий слой один, верхняя плёнка лишь «щуп», поэтому царапины меньше смещают точку. Такие экраны до сих пор живут в промышленных панелях, кассовых аппаратах, медицинских терминалах и старых навигаторах.

Преимущество очевидно: реагирует любой предмет — ручка, перчатка, ноготь, пластиковый стилус. Недостатки тоже не спрятать: картинка тусклее из-за лишних плёнок, точность падает с износом, мультитач либо отсутствует, либо условный. Сильно давить вредно: микротрещины накапливаются, появляются «мёртвые зоны» и точки, которые «липнут».

По наблюдениям, резистивные экраны в авто и на складах выживают там, где ёмкостный сдался бы из-за грязи и перчаток. Зато для пролистывания ленты такой экран — мука. Он хочет чёткого нажатия, а не лёгкого скольжения подушечкой.

Инфракрасный, ультразвук и камеры: экраны без сетки в стекле

Не все сенсоры живут в самом стекле. Большие панели, некоторые банкоматы, интерактивные доски и промышленные мониторы часто обходятся без ITO вовсе.

• Инфракрасная рамка. По периметру стоят ИК-светодиоды и фотоприёмники. Палец прерывает лучи, контроллер считает, какие погасли. Работает с любым непрозрачным предметом. Стекло можно взять обычное, даже толстое. Боится пыли, прямого солнца и руки, которая лишь зависла над поверхностью.
• Поверхностная акустическая волна (SAW). Вдоль стекла бегут ультразвуковые волны, палец их частично поглощает. Оптика отличная, потому что поверхность — просто стекло. Вода и грязь сбивают волну.
• Оптическая / камерная. В углах сидят датчики изображения, инфракрасная подсветка рисует тень от пальца. Хорошо масштабируется на большие диагонали, для телефона слишком громоздко.

Исторически инфракрасная сетка появилась очень рано. В 1972 году терминал обучающей системы PLATO IV в Университете Иллинойса имел панель 16 на 16 лучей: студенты отвечали, тыкая в экран. Грубо? Да. Но уже тогда стало ясно, что палец может быть указателем без мыши.

Сравнение: поле, давление или луч

Если отбросить маркетинг, разница сводится к трём вопросам. Что считается касанием — поле или давление? Сколько точек можно отследить одновременно, и что случится, когда на стекло сядет вода или перчатка.

Для кармана ёмкостный безальтернативен: скорость, прозрачность, жесты. Для цеха с перчатками я бы не геройствовал с PCAP, даже с режимом «gloves». Резистивный или ИК там честнее.

Откуда взялся тачскрин и почему все вспоминают iPhone

Сенсор не родился вместе со смартфоном, хотя реклама любит именно эту сказку. В 1965 году британский инженер E.A. Johnson из Royal Radar Establishment в Малверне описал ёмкостный «touch display» для авиадиспетчеров. Короткая статья вышла в Electronics Letters. Идея была военная и практическая: оператор тыкает в метку на экране, а не бегает глазами между дисплеем и кнопками.

В начале 1970-х в CERN инженеры Bent Stumpe и Frank Beck сделали прозрачные ёмкостные панели для пультов ускорителя SPS: сначала с собственной ёмкостью, позже — с взаимной. Примерно тогда же Сэм Херст в Университете Кентукки показал резистивный «Elograph», сначала ещё непрозрачный, а впоследствии уже как накладку на дисплей.

Массовым жест сделал карманный устройство. В 2006-м Джефф Хан показывал большой мультитач на TED. В 2007-м Apple выпустила iPhone с проекционно-ёмкостным экраном без физической клавиатуры, и именно жест «ущипнуть фото» сел в мышечную память. Ёмкостные телефоны появлялись и рядом, но именно связка железа, прошивки и интерфейса без стилуса изменила привычку.

Как экран понимает жесты, а не только точку

Стекло не знает, что такое «масштабировать карту». Оно умеет лишь отдавать набор точек во времени. Дальше работает стек.

1. Контроллер держит идентификатор каждого контакта, пока палец не оторвался.
2. Драйвер сглаживает дрожание руки.
3. Система жестов смотрит на количество пальцев, направление, скорость и длительность.
4. Приложение решает, это скролл, лупа, долгое нажатие или случайный зацеп ребром ладони.

Palm rejection — отдельная война. Когда вы пишете стилусом, ребро ладони тоже меняет ёмкость. Контроллер видит большое «пятно» и маленький острый контакт и должен угадать, что пятно — не палец. На дешёвых планшетах это угадывание хромает: текст прыгает, появляются случайные лассо. На нормальных устройствах в игру ещё вступает сам стилус, который по радиоканалу говорит: «это я, игнорируй ладонь».

Приближение без касания тоже не из космоса. Собственная ёмкость растёт ещё до контакта со стеклом, так что некоторые панели ловят палец за несколько миллиметров. Удобно для превью курсора. Раздражает, когда мокрый чехол в дождь болтается в этой зоне, и телефон начинает жить своей жизнью.

Почему не работают перчатки, вода и «сам нажимает»

Ёмкостный экран ждёт проводник, электрически связанный с телом или хотя бы достаточно большой и влажный. Обычная зимняя перчатка — диэлектрик, она экранирует поле. Тонкие сенсорные перчатки имеют в подушечках проводящую нить, которая замыкает цепь «палец — электрод».

Режим gloves в прошивке просто снижает порог срабатывания. Побочный эффект: экран становится легкоуязвимым к щеке, капле и даже ворсу.

Вода проводит ток. Капля для сетки выглядит как размазанный палец. Отсюда два типичных сценария: либо фантомные касания — экран сам открывает программы, либо целая зона глохнет, потому что контроллер видит «огромный контакт» и отключает её как ладонь.

Дождь, конденсат после мороза, мыльные руки на кухне — классика. На практике самые быстрые лекарства такие: вытереть насухо, снять чехол, на минуту выключить экран, чтобы контроллер пересчитал базовый уровень.

«Призраки» без воды имеют другие причины:

• повреждённый шлейф дигитайзера после падения;
• дешёвое защитное стекло с воздушным зазором и толстой клеевой рамкой;
• магниты в чехле и держателе в авто;
• неисправный контроллер или плохой контакт после замены экрана;
• наводки от дешёвой зарядки с грязным питанием.

Здесь отдельная бытовая ошибка. Люди клеят самое толстое стекло «для защиты» и удивляются, что клавиатура мажет. Толстый зазор отодвигает палец от электродов, сигнал слабеет, интерполяция врёт. Лучше тонкое стекло с нормальным клеем по всей площади, чем «танковая броня», через которую телефон думает, что вы тыкаете на полсантиметра левее.

Стилус: резиновая заглушка и полноценный инструмент

Пассивный ёмкостный стилус — это проводящий наконечник, который имитирует площадь подушечки пальца. Он не имеет батареи и не умеет силы нажатия. Наконечник относительно широкий, потому что слишком острый штырь почти не меняет ёмкость: для сетки он «невидимый». Именно поэтому дешёвая «ручка как карандаш» с иглой на конце на телефоне часто не едет.

Активный стилус уже разговаривает с панелью. Apple Pencil, перья Wacom EMR, фирменные ручки Samsung передают координату точнее, чем палец, плюс силу и наклон. EMR от Wacom может питаться от поля самой панели и не требовать батареи. Ёмкостные активные перья наоборот обычно имеют аккумулятор и радиоканал.

Если рисуете много, смотрите не на рекламу «как на бумаге», а на три вещи: задержку, отсечение ладони и то, видит ли перо наклон. Без этого даже дорогой планшет остаётся просто большим телефоном с палочкой.

Где физически живёт сенсор: in-cell, on-cell и отдельное стекло

Раньше тач был отдельной накладкой: стекло, плёнка с электродами, ещё стекло, и лишь потом матрица. Толсто, лишние блики, хуже яркость. Потом производители начали вшивать электроды ближе к картинке.

Именно поэтому в сервисе вам говорят «меняем модулем». В in-cell нет отдельной плёнки, которую можно отклеить феном. Зато телефон тоньше.

Шум от матрицы при этом выше, так что контроллер должен синхронизироваться с развёрткой дисплея. Если синхронизация слетает, появляются полосы глухих зон, которые гуляют вместе с картинкой. Выглядит мистически. Лечится заменой модуля или, реже, прошивкой.

Что проверить самому и когда уже в сервис

Пока картинка жива, люди грешат на «систему» и чистят кэш. Иногда это даже срабатывает — когда зависла служба жестов. Чаще железо. Короткий чеклист без разборки:

1. Выключите телефон, вытрите экран микрофиброй насухо, снимите стекло и чехол, включите снова.
2. Проверьте, не греется ли конкретная зона: локальный перегрев контроллера даёт рои «нажатий».
3. Подключите другой кабель и блок питания. Грязная зарядка сеет помехи в ёмкостную сетку.
4. В безопасном режиме посмотрите, те же ли жесты. Если да — скорее железо, не программа.
5. По экрану проведите пальцем змейкой. Резкие «дыры» по линии шлейфа — повод не тянуть с диагностикой.

Не давите на трещину «чтобы лучше ловило». На ёмкостном стекле это не помогает, а на резистивном добивает слой. И не кладите мокрый телефон на беспроводную зарядку: вода плюс переменное поле — идеальное блюдо для фантомов.

Отдельно про авто. Магнитный держатель иногда подсасывает сенсор. Если экран дурит только в машине — начните с держателя, а не с замены стекла.

Протереть, снять плёнку, сменить зарядку — это ваши первые движения. Если после этого зоны молчат, курсор ползёт сам или после падения появилась полоса, где касания «липнут», сенсор надо смотреть в сервисе. На большинстве современных телефонов это замена всего модуля. Торговаться за «только стекло» имеет смысл лишь там, где покровное стекло ещё отдельное, и то не всегда.

Для перчаток не ищите мифический «суперёмкостный» режим. Возьмите тонкие сенсорные перчатки или стилус, в промышленности — резистивную или ИК-панель. Смартфон заточен под сухую подушечку пальца. Он это умеет хорошо. Требовать от него поведения кнопки станка немного наивно.

Под рисование смотрите на поддержку активного пера, не на дюймы. Под кассу — не страшны ли панели жир и перчатка. Для обычного телефона хватит тонкого защитного стекла, сухих рук и отсутствия магнитов на дисплее. Остальное — работа той сетки под стеклом, которая измеряет вашу ёмкость снова и снова, пока вы ещё даже не подумали, что «просто нажали иконку».