Public:Graphical User Interface

Abstract

→redirect Further information: Public:ARHUDFM Manifesto

Augmented Reality Heald-Up Display Fullface Mask (ARHUDFM) is a complex device that is not easy to understand at a first look, because there are little relevant examples to compare. Therefore, we suggest that you first read the information on the Public:ARHUDFM Manifesto page at the link above.

This page describes the structure and contents of the GUI (Graphical User Interface) used in the ARHUDFM device.

For a brief description of the functions of each application, please see the Public:Applications page.

UI example figure 1.1

Interface description

Appearance

Left		Center		Right
LMMP	Left main menu fading pads	SBP	Status bar fading pads	RSBP	Right submenu fading pads
LQMP	Left quick menu fading pads	CLW	Central left window	RQMP	Right quick menu fading pads
LFSP	Left features sidebar fading pads	CRW	Central right window	RFSP	Right features sidebar fading pads
LUW	Left Upper window	CWJP	Central window joystick pads	RUW	Right Upper window
LTAW	Left Top A window	CWBP	Central window buttons pads	RTAW	Right Top A window
LTBW	Left Top B window			RTBW	Right Top B window
LBAW	Left Bottom A window			RBAW	Right Bottom A window
LBBW	Left Bottom B window			RBBW	Right Bottom B window

Features

The interface is designed for the screen of the ARHUDFM device with FOV 105°h (stereo overlap) and 33°v, has a resolution of 2560px in width.

Normal human stereoscopic binocular vision is 180° horizontally, up 55°, down 60°. If the area of ​​peripheral vision important for situational awareness is excluded, a comfortable field of view, especially if a person wears optic corrective glasses, will be 105-115° horizontally, 20° up and 25° down. Since the airway obturator of the mask from below is an obstacle to vision, the field of view of a person wearing a mask from below is less than usual (however, pilots of combat aircraft have sufficient visibility). Horizontally, the mask user has a complete view of the entire field of view, including the peripheral part, which is important.

The visible field is projected by the LED beams of a DLP projector offering high contrast and better color reproduction with high response.

Unlike the harmful effects of the blue light spectrum (light colors contain a lot of blue) emitted by the LED screen of a monitor or mobile device, which causes fatigue, headaches and sleep problems when exposed for a long time, the reflected light of a DLP projector (and other types of projectors also) does not have such disadvantages. In addition, in the ARHUDFM device, the principle of displaying the interface resembles the night mode (dark background, light graphic symbols). These conditions for the user create the possibility of round-the-clock work without stress.

The constant optical focus is set to an apparent distance of 1900 mm (75 in) from the user's eyes, which prevents conflict of vergence and accommodation so that the user's eyes do not get tired during long-term use. No virtual visual objects have a different image depth, just as if the user were to observe the display screen at a distance of 1900 mm while observing the rest of the environment with the focus oriented to infinity. This statement is based on numerous studies and experiments of different laboratories with a large number of respondents.

The tension of the muscles of the eye due to the close distance to the object in question causes fatigue, including being one of the causes of the development of myopia. Neck muscle tension and stoop due to the need to focus on a fixed part of field of view for a long time is also an unfavorable factor. This applies to all cases of human work with the screens of laptops, mobile devices, reading paper books and documents.

To imagine the actual visible edges (not the focal length) of the screen, sit in front of a 65" or 1440mm (57.3 inches x 32.9 inches) TV screen at a distance of 22" or 550mm from your eyes. You can clearly see the right and left sides of the screen by turning your eyes. You don't need to use the peripheral part of the vision at the edges, it remains completely open due to the wide field of view of the device's visor. Only in the lower part, when using the airway obturator of the device, the field of view of the user is limited to about 20°, as is the case with any respirator or when wearing most models of glasses. Glasses tend to shrink the effective field of view to somewhere between 90 and 115 degrees horizontally and 35-45 degrees vertically, depending on the width and hight of the glasses and their proximity to the eyes.

We've added these comments because most people don't have experience with these kinds of AR devices yet. Microsoft IVAS (Hololens 2) uses holographic optics, thick lenses and FOV 43°h 28°v, Magic Leap has similar technology to Microsoft and FOV 45°h 55°v. Apple Vision Pro is a VR device (opaque LED display) like the Meta (Oculus) Quest - FOV 90°h 98°v, HTC Vive, SONY Playstation, etc. None of these technologies or devices are like ARHUDFM and when used in tactical tasks carry many significant risks. More about it here.

The main feature of Augmented Reality devices is that a person can only see lighter areas on a darker screen background. The nature of vision is that a person sees not objects, but the light reflected from them. Those, can see a high-contrast image in a darkened room (Microsoft uses a tinted visor) or at night, but see almost nothing against a bright sky, on a sunny day, with strong reflections from snow or building walls, when looking at the sun. A person will not be able to see dark areas on a light background in principle, since this contradicts the physics of light (dark areas are the absence of light). The ARHUDFM solves this problem by using "smart windows" - the interface contains 10 large and 56 small fading pads that instantly change their transparency from 0% (opaque black) to 100% (fully transparent) depending on the ambient light or the mode selected by the user.

Principles

Since the user interface of the ARHUDFM device has more functions than is usually used by users of computers and mobile devices, and the device is such that it can be used for a long time in tactical conditions, the following principles are observed:

1. As small screen area as possible should obstruct the view of the actual visual environment at all times
2. The user must maintain the minimum necessary view of the visual environment for orientation in space
3. If any element of the interface is not directly needed by the user at the moment, it should not be displayed on the screen
4. The user should be able to change the interface configuration very quickly
5. The user must be able to simultaneously clearly distinguish between interface elements and the visual environment at any brightness.
6. Interface elements must not be visible from the outside of the device or create light emission to the outside
7. The user's face must not be illuminated by reflected radiation, must not be visible from the outside at the night
8. The audio environment should not have an attenuation greater than 10 dB SPL, except when using the noise reduction features

Interface controls

Right hand hardware controls

• Joystick. Cursor movement, drone and robot control
• Device on/off button
• Headphone mode control button (see Status bar)
• Button "- >". Decrease, right arrow, PgDown.
• Button "< +". Increase, left arrow, PgUp.
• Button C. Click, left control button
• Button D. Context menu, Shift, right control button

• 
• 
• 
• 
• 

Left hand hardware controls

• Headlamp (Spotlight) on / off button
• Headset connector for handheld portable / manpack radio (also ground / vehicular radio headset cable)
• Loudspeaker on / off and control button
• Button "< -". Decrease, left arrow, PgDown
• Button "+ >". Increase, right arrow, PgUp
• Button A. Click, left control button, headset PTT button for radio
• Button B. Context menu, Shift, right control button, Photo, other assigned functions
• Buttons A+B simultaneously start / stop video record

• 
• 
• 
• 
• 

Software controls

• Voice assistant
  • Machine learning (AI) algorithms are used to recognize the meaning of user commands, not necessarily the exact pronunciation of the voice command, including the ability to adapt to the voice and pronunciation of the user
• Gesture control
  • The stereo camera captures the image of the hands and recognizes the user's gestures (more details on the Hand Tracking page)
  • Gesture library constantly updated, Machine Learning allows the user to create custom gestures
  • Gestures can indicate not only the state, but also the dynamics, for example, smoothly change the volume level, brightness, etc.
  • Capturing and recognizing fingers allows to use software interface controls, including scrollbars, buttons (and a virtual keyboard if necessary), swipe sideways and up or down, scale and rotate screens inside a window, hide and move windows

• 
• 

Perception hardware

The advantage of this wearable and inexpensive device for tactical use by almost every military person is the ability to perceive light, sound and radio waves, inaccessible to humans.

1. Cameras
   • Image capture with a three-sensor front stereo camera. One objective lens transmits the image to the separation prisms and then to 3 sensors: DSLR IR-cut 4K/8K/12K UHD, SenSWIR, HDR
   • Separate camera in the range of LWIR (thermal image vision)
   • Separate rear view camera with extended visible light and SWIR
   • Built-in Speed ​​Booster reduces focal length and increases aperture for individual sensors
   • Built-in teleconverter, on the contrary, increases the focal length for other sensors, increasing the image of distant objects
   • Infrared and laser light sources are not used in this device, because this unmasks the user

     

     

2. Microphones
   • Built-in MEMS (Micro-Electro-Mechanical-Systems) mask airway obturator to transmit the user's voice
   • An omnidirectional microphone on the front side of the mask allows to perceive sound waves in a wide range of frequencies, including those inaudible to humans, from very low to very high (used in Computer Audition modes)
   • 1 or 2 ultra-cardioid microphones with a narrow polar pattern on the front of the mask allows to accurately determine the source of the sound wave (used in Computer Audition modes)
   • 2 insulating layers, airway obturator and seal around face make the user's voice almost inaudible from the outside
3. Radio antennas
   • Built-in transmit-receive antennas in the ranges of the near radius of communications (Bluetooth, Wi-Fi, LTE, 5G)
   • Integrated manpack antennas for communications in the VHF, UHF, UHF SAT, MUOS, L/S bands
   • Integrated manpack antennas for analyzing and listening to the frequency ranges 2 MHz - 6 GHz
   • Not every user needs a separate antenna or a set of several antennas with different characteristics, using the P2P network within the group, packets of messages and received data can be exchanged and routed
   • Integrated passive radar antenna with active phased array (installed in NVG mount)
   • Integrated handheld portable short-range active metal re-radiation radar antenna
   • Integrated receiving antenna for radar warning system
   • Integrated antenna for remote control of a drone or robot
   • Integrated antenna for close-range remote control of an active phased array radar (portable or vehicle-mounted)
   • Software-defined (reconfigurable) antenna (installed in NVG mount and the other two via the picatinny rails on the sides of the helmet)
   • The software-defined antenna is capable of combining the functions of most integrated antennas

The specific is that when using a separate optical lens for each sensor on the left and right, there is a problem of parasitic multi-angle, which will have to be constantly leveled by software, which affects the accuracy of binocular stereo vision. If in a smartphone this is not critical, and there may be 4-8 cameras with their own optics, then for tactical tasks this is of great difficulty. In this case, on the left and right, it is necessary to accurately hold the horizontal distance between the lines of sight for each pair of sensors and position them vertically, and then programmatically compensate for the vertical shift in order to reproduce a single optical axis for the left and right channels. In addition, the design of the device should allow this to be done without difficulty, including taking into account the angle of the field of view of the optics and solving the problem of shadowing.

Menu items description

→redirect Further information: Public:Applications, Public:Voice User Interface

Меню имеет 7 функциональных разделов:

• Status bar (SB)
• Left main menu (LMM)
• Right submenu (RSB)
• Left quick menu (LQM)
• Right quick menu (RQM)
• Left features sidebar (LFS)
• Right features sidebar (RFS)

Принцип управления элементами меню некоторых разделов одинаков, а у некоторых отличается.

Status bar (SB)

Меню статусов находится посередине сверху видимой области и содержит всю главную и часто используемую информацию об использовании функций устройства и приложений.

Всего 12 элементов для быстрого выбора и отслеживания имеются в меню статусов, каждый из которых содержит субэлементы, отвечающие за конкретные пресеты функций. Настройки пресетов осуществляются не через меню статусов, а в настройках служб или приложений. Меню статусов отображается всегда и не скрывается. Каждый элемент расположен в отдельном поле (fading pad).

(!) Картинку заменить! Здесь вставить: чёрные буквы и символы на светло-сером фоне - в виде крупных фрагментов!!! (как Kestrel)

Управление субэлементами меню статусов выполняется кликом (джойстик, управление жестами) или голосом (результат соответствует клику). Состояния по умолчанию:

• Hover state: 4 угловых сегмента рамки поля (в вышеуказанном примере в поле "Radio Detection modes" с функцией "IFF")
• Click state: рамка по границе поля (эффект анимации, дважды по 100 ms), при каждом клике в установленной последовательности чередуется отображение элементов списка (пресетов)
• Selected (long click >2 s): вертикально расположенный прямоугольник в левом нижнем углу
• Not selected (long click >2 s): вертикально расположенный прямоугольник в левом нижнем углу отсутствует

Отличия при голосовом управлении:

• Команда голосовому ассистенту содержит описание требуемого действия и состояния, поэтому выполняется быстрее
• Голосовой ассистент понимает разные интерпретации действий и состояний, поэтому не нужно запоминать голосовые команды наизусть

SB indication and change of display

Indication	Designation	Field	Change of display / Short description
	Time / Date	1.	Selected / Not selected: не применимо
	Battery	1.	Not selected: Battery Saver (BSVE) выключено - отображает уровни 40-60-80-100% - цвет лазури, <40% - жёлтый цвет, <10% - красный цвет Selected: BSVE включено - жёлтый или красный цвет
	Water	1.	Not selected: Water Saver (WSVE) выключено - отображает уровни (12 делений) >5/12 - цвет лазури, <5/12 - жёлтый цвет, <2/12 - красный цвет Selected: WSVE включено - жёлтый или красный цвет
	Spotlight	1.	Not selected: выключено - отображает уровень интенсивности при последнем использовании (5 делений: 20-40-60-80-100%) - цвет лазури Selected: включено - отображает текущий уровень интенсивности - жёлтый цвет В режиме мерцания - отображается с мерцанием В режиме стробоскопа - красный цвет
	Brightness modes	2.	Состояния - по умолчанию. Выбор режима изменяет яркость и затемнение полей (fading pads и все окна одновременно, выполняет функцию солнцезащитных очков). Для некоторых приложений настройки затемнения окна приложения настраиваются индивидуально в приложении для большей контрастности, данные настройки имеют преимущество перед настройками по умолчанию
	Windows modes	3.	Состояния - по умолчанию. Пользователь может быстро и гибко управлять конфигурацией окон для каждого окна в отдельности, см. ниже Windows items description
	Camera modes	4.	Состояния - по умолчанию. В зависимости от погодных условий и времени суток, активности пользователя внутри или вне помещений необходим быстрый выбор пресета для эффективного наблюдения, обнаружения и выполнения задач
	Audio modes	5.	Состояния - по умолчанию. Позволяет пользователю быстро включить или выключить громкоговоритель (а также кнопками на левом headphones ear cup наушника). Настроить громкость громкоговорителя и контролировать его состояние. Также позволяет быстро настраивать режим и громкость наушников (а также кнопками на правом headphones ear cup наушника). Как минимум один режим и один уровень громкости наушников включены всегда
	Computer Vision modes	6.	Состояния - по умолчанию. Пользователю доступны пресеты для быстрого выбора в зависимости от тактических задач. Пресеты могут быть включены несколько одновременно и по-отдельности, что даёт возможность оптимизировать используемые вычислительные ресурсы и энергопотребление
	Computer Audition modes	7.	Состояния - по умолчанию. Человек слышит звук как несколько частот одновременно, и разные частоты на разных уровнях громкости. Пользователю доступны пресеты для быстрого выбора в зависимости от тактических задач. Пресеты могут быть включены несколько одновременно и по-отдельности, что даёт возможность оптимизировать используемые вычислительные ресурсы и энергопотребление
	Radio Detection modes	8.	Состояния - по умолчанию. Любая миссия связана с задачами SIGINT, идентификации свой-чужой, обнаружения дронов и роботов, противопехотных и противотанковых мин, мин-ловушек, СВУ, контр-радарной защиты для каждого военнослужащего без исключения. Пользователю доступны пресеты для быстрого выбора в зависимости от тактических задач. Пресеты могут быть включены несколько одновременно
	Firing Assistance modes	9.	Состояния - по умолчанию. Данный режим помогает вести точный прицельный огонь с помощью всех типов прицелов: Red Dot, оптический прицел и цифровой прицел, а также совместим для интеграции с удалённым управлением роботозированной турелью
	Stealth modes	10.	Состояния - по умолчанию. Данный режим необходим для ограничения видимости средствами SIGINT противника
	Vitals Body Tracking modes	11.	Vitals Body Sensors Control (VBS)
	Networks modes	12.	Networks (NET)

SB Presets

Indication	Field name	Preset	Preset name	Actions
	Time / Date, Battery, Water, Spotlights modes	na	Time / Date	при каждом клике чередуется отображение текущего времени и даты, ничего больше
		na	Battery	при каждом клике чередуется отображение индикации батареи и запаса воды питьевой системы при состоянии Selected запускает приложение Battery Saver (BSVE), которое позволяет оптимизировать энергопотребление при уровне <40% приложение BSVE запускается автоматически, при <10% функционируют только минимально необходимые функции и приложения
		na	Water	при каждом клике чередуется отображение индикации батареи и запаса воды питьевой системы при состоянии Selected запускает приложение Water Saver (WSVE), которое позволяет гидратироваться по расписанию (текстовые и голосовые уведомления пользователя) при уровне <5/12 приложение WSVE запускается автоматически, при <2/12 режим гидратации изменяется (увеличивается интервал, включается контроль показателей сенсоров жизнедеятельности, отправляется сообщение в систему)
		na	Spotlight	альтернатива долгому клику - долгое нажатие кнопки на headphones ear cup левого наушника включает, а при повторном долгом клике выключает фонарь при клике (или кнопкой +/- на headphones ear cup левого наушника одновременно с кнопкой управления фонарём) переключает интенсивность света (5 вариантов) при нажатии одной рукой одновременно на кнопку B (на headphones ear cup левого наушника) + кнопку управления фонарём (на headphones ear cup левого наушника) включает режим мерцания (SOS) при нажатии одновременно двумя руками на кнопку D (на headphones ear cup правого наушника) + кнопку управления фонарём (на headphones ear cup левого наушника) включает режим стробоскопа после выключения при повторном включении включает режим постоянного света и интенсивность при последнем использовании при включённом режиме полной невидимости пользователь не сможет включить фонарь в режиме энергосбережения интенсивность будет снижена автоматически либо произойдёт автоматическое выключение тонкие настройки осуществляются в приложении LED Spotlight settings (SPOT)
	Brightness modes Условие OR при выборе пресетов (выбор одного пресета отменяет выбор ранее выбранного пресета).	AUTO	Auto	датчик освещённости определяет уровень окружающей освещённости и использует настройки одного из нижеуказанных режимов fading windows 100% во всех случаях проецирования полноцветного изображения
		CLR	Clear day	fading pads 50%, fading windows 50%, projector beam 100%
		CLD	Cloudy	fading pads 25%, fading windows 25%, projector beam 75%
		TWL	Twilight	fading pads 0%, fading windows 0%, projector beam 75%
		DRK	Dark night	fading pads 0%, fading windows 0%, projector beam 50%
		NLTS	Night lights	fading pads 50%, fading windows 25%, projector beam 75%
		DZLD	Dazzling day	fading pads 75%, fading windows 75%, projector beam 100%
	Windows modes Условие AND / OR при выборе пресетов (выбор одного пресета в одном случае отменяет, а в другом случае не отменяет выбор ранее выбранного пресета).	DFLT	Default	отображает все активные окна согласно настроенным приоритетам приложений и функций; DFLT - отменяет выбор любого ранее выбранного пресета
		OFF	Turn off all windows	выключает отображение всех окон; OFF - отменяет выбор любого ранее выбранного пресета
		CLW	Central left window is On, central right window is Off	если использовались по умолчанию оба центральных окна (левый и правый), отключает центральное правое окно, все функции остаются доступны в центральном левом окне; CLW отменяет CRW, и наоборот
		CRW	Central right window is On, central left window is Off	как в предыдущем случае, наоборот, отключает центральное левое окно, улучшая обзор окружающей среды; CRW отменяет CLW, и наоборот
		BWON	Bottom windows only	выключает слева и справа верхние окна для улучшения обзора ("эффект забрала"), более приоритетные окна переносит в нижнюю область, менее приоритетные окна закрывает, не выключает центральные окна; BWON отменяет LWON и RWON
		LWON	Left windows only	выключает все окна справа ("эффект левого глаза"), более приоритетные окна переносит в левую область, менее приоритетные окна закрывает, не выключает центральные окна; LWON отменяет RWON и BWON
		RWON	Right windows only	выключает все окна слева ("эффект правого глаза"), более приоритетные окна переносит в правую область, менее приоритетные окна закрывает, не выключает центральные окна; RWON отменяет LWON и BWON
	Cameras modes Условие AND / OR при выборе пресетов (выбор одного пресета в одном случае отменяет, а в другом случае не отменяет выбор ранее выбранного пресета).	FHD	Frontal HD cam	использует диапазон видимого света (400-780 nm) и возможности двух сенсоров, высокое разрешение и широкий динамический диапазон при сильном контрастном освещении
		RHD	Rear HD cam	включает и выключает камеру заднего обзора
		SWIR	Night / Sky / Fog / Sea vision mode	использует более широкий коротоковолновой диапазон инфракрасного света (780-1700 nm), который применяется для наблюдения отражения окружающего света этого диапазона объектами, расположенными на поверхности воды, в тумане, в дыму, в облаках, в сумерках и ночью
		LWIR	Thermal image vision mode	использует длинноволновой диапазон невидимого инфракрасного света (7.5-14 µm), излучающего более тёплыми по отношению к окружающей среде объектами, в основном ночью
		SLV	Silhouette vision mode	включает преобразование заполнения в хорошо различимый по отношении к фону режим цветных контуров для контрастных объектов
		MXV1	Mixed vision mode Type 1: FHD + SWIR	позволяет использовать возможности трёх разных сенсоров в разных условиях днём и ночью; 4K UHD + HDR + SWIR
		MXV2	MXV Type 2: SWIR + LWIR	позволяет использовать возможности двух разных сенсоров в разных условиях днём и ночью; SWIR + LWIR
		MXV3	MXV Type 3: FHD + SWIR + LWIR	позволяет использовать возможности четырёх разных сенсоров в разных условиях днём и ночью; 4K UHD + HDR + SWIR + LWIR
		MXV4	MXV Type 4: FHD + SWIR + LWIR (silhouette mode)	позволяет использовать возможности четырёх разных сенсоров в разных условиях днём и ночью; 4K UHD + HDR + SWIR + LWIR (silhouette mode)
	Audio modes Условие AND / OR при выборе пресетов (выбор одного пресета в одном случае отменяет, а в другом случае не отменяет выбор ранее выбранного пресета).	LSPK	Loudspeaker On/Off	альтернатива долгому клику - долгое нажатие кнопки на headphones ear cup левого наушника включает, а при повторном долгом клике выключает громкоговоритель громкость изменяется одной рукой кнопками +/- на headphones ear cup левого наушника одновременно с кнопкой включения громкоговорителя (когда он включён) после выключения при повторном включении устанавливает громкость при последнем использовании в режиме полной невидимости пользователь не сможет включить громкоговоритель
		L	Left On, right Off	альтернатива долгому клику - долгое нажатие кнопки на headphones ear cup правого наушника переключает режимы L, R, LR; L отменяет R, LR звукоизолирующая заслонка в headphones ear cup левого наушника закрыта громкость изменяется выбором пресетов 25, 50, 75, 100 или кнопками +/- на headphones ear cup правого наушника после выключения при повторном включении устанавливает громкость при последнем использовании
		R	Right On, left Off	см. выше; R отменяет L, LR звукоизолирующая заслонка в headphones ear cup правого наушника закрыта
		LR	Left On, right On	см. выше; LR отменяет L, R звукоизолирующие заслонки в обоих headphones ear cups наушников открыты
		25	25% sound level	изменяет громкость наушников; 25 отменяет 50, 75, 100
		50	50% sound level	изменяет громкость наушников; 50 отменяет 25, 75, 100
		75	75% sound level	изменяет громкость наушников; 75 отменяет 25, 50, 100
		100	100% sound level	изменяет громкость наушников; 100 отменяет 25, 50, 75
	Computer Vision modes Условие AND при выборе пресетов (выбор одного пресета в одном случае не отменяет выбор ранее выбранного пресета).	OD	Object detection	OD на основе обученной нейронной сети позволяет с разных ракурсов и на разном удалении обнаруживать людей, технику, дроны, искусственные сооружения, выделяя их на экране, производя измерения дистанции, азимута, возвышения, высоты над землей, скорости, курсового направления и геопозиции, а также отображая их на навигационной сетке по умолчанию запускает приложение CVC в окне CRW одновременно с последним использовавшимся пресетом фронтальной камеры (FHD, SWIR, LWIR, SLV, MXV1-4) при необходимости предлагает пользователю выбрать другой пресет фронтальной камеры, а также запустить пресеты компьютерного прослушивания и радиообнаружения для уточнения результатов обнаружения использует локальную библиотеку паттернов может выполняться одновременно с пресетами MD, FD, FR, OCR, HSTD
		MD	Motion detection	MD помогает обнаруживать движущиеся объекты, людей и техника, игнорируя полёты птиц и насекомых, движение облаков. Режим MD рекомендуется использовать совместно с режимом Radio Frequency Drone Detection (RFDD) and Computer Audition Detect noises of aircraft motor (DAM) может выполняться одновременно с пресетами OD, FD, FR, OCR, HSTD
		FD	Facial detection	FD в т.ч. с помощью LWIR сенсора камеры и обученной нейронной сети помогает обнаруживать лица людей может выполняться одновременно с пресетами OD, MD, FR, OCR, HSTD
		FR	Facial recognition	FR с помощью нейронной сети при наличии обмена с сервером позволяет распознавать лица людей для идентификации (часть базы данных может быть сохранена на локальном накопителе) всегда выполняется одновременно с пресетом FD может выполняться одновременно с пресетами OD, MD, OCR, HSTD
		OCR	Optical character recognition	OCR позволяет распознавать текст и другие графические символы для последующего перевода и документирования может выполняться одновременно с пресетами OD, MD, FD, HSTD
		HSTD	Heat and smoke trace detection	HSTD помогает обнаруживать траектории летательных аппаратов и ракет, артиллерийский и миномётный огонь из закрытых позиций может выполняться одновременно с пресетами OD, MD, FD, FR
	Computer Audition modes Условие AND при выборе пресетов (выбор одного пресета в одном случае не отменяет выбор ранее выбранного пресета).	DAM	Detect noises of aircraft motor	DAM работает в отличие от DHUM только с паттернами аэродинамического, электромеханического и механического шума, с помощью обученной нейросети выделяя и усиливая звуки и шумы, которые наиболее вероятно связаны с работой дронов, вертолётов, турбовинтовых и реактивных самолётов данный пресет позволяет фокусироваться на вероятных угрозах с воздуха и определять направление источника звуковых волн DAM рекомендуется использовать совместно с режимом Radio Frequency Drone Detection (RFDD) and Computer Vision Motion Detect (MD) может выполняться одновременно с пресетами ENAT, ECHO, DHUM, STHR
		ENAT	Exclude sounds of nature	ENAT последовательно в нескольких частотных диапазонах с помощью фильтров выделяет звуки и шумы природы (ветер, шелест листьев, пение птиц, звук воды и др.), чтобы затем с помощью обученной нейронной сети выделить паттерны для финальной фильтрации данный пресет позволяет фокусироваться на звуках и шумах, связанных с деятельностью человека может выполняться одновременно с пресетами DAM, ECHO, DHUM, STHR
		ECHO	Eliminate echo	ECHO с помощью встроенных алгоритмов позволяет выявлять первичные и отражённые звуковые волны, чтобы корректировать направление источника звуковых волн при работе других пресетов подсказывает пользователю, когда необходимо включить данный пресет, если уже включен один из других пресетов может выполняться одновременно с пресетами DAM, ENAT, DHUM, STHR
		DHUM	Detect noises of human activity	DHUM работает в отличие от ENAT в противоположном направлении, с помощью обученной нейросети выделяя и усиливая звуки и шумы, которые наиболее вероятно связаны с деятельностью человека (трение шин, звуки шагов, трение камней, звук динамика радиостанции, звуки двигателей, электромеханический шум, кашель, чихание, речь и др.) данный пресет выделяет данные паттерны звуковых частот, усиливает их, одновременно ослабляя уровень звука окружающей среды данный пресет позволяет фокусироваться на звуках и шумах, связанных с деятельностью человека, и определять направление источника звуковых волн данный пресет использует также метод акустической локации и определения координат батареи противника на основе звука стрельбы ее орудий (или минометов, или ракет) может выполняться одновременно с пресетами DAM, ENAT, ECHO, STHR
		STHR	Limit sound threshold	STHR помогает пользователю в условиях переменного высокого уровня окружающего звукового давления, динамически снижая максимальный уровень на ∆ 80 dB SPL до 15-85 dB SPL STHR синхронизирован с электромеханическими звукооизолирующими заслонками в конструкции наушников может выполняться одновременно с пресетами DAM, ENAT, ECHO, DHUM
	Radio detection modes Условие AND при выборе пресетов (выбор одного пресета в одном случае не отменяет выбор ранее выбранного пресета).	IFF	Identification Friend-or-Foe	IFF использует транспондер (transmitter-responder) системы Identificatiin Friend-or-foe, которая в ответ на зашифрованный сигнал опроса, принимаемый на одной частоте, отправляет зашифрованный пакет сообщения на другой частоте, содержащий подтверждение "Friend", Id, позывной и позицию при одновременном использовании вместе с одним из пресетов режима "Stealth" IFF будет отправлять ответное сообщение на разных частотах, в разных сетях и с разной мощностью (на ограниченную дистанцию) или не будет отправлять сообщение совсем транспондер с указанным интервалом на определённых частотах периодически формирует и отправляет сигналы опроса неопределённому кругу лиц для регистрации и отображения на навигационной сетке одного из экранов позиций пользователей, с подтверждением "Friend" отправляемые сигналы опроса осуществляются посредством всенаправленной антенны или направленной антенны (круговая диаграмма направленности может быть ограничена отражательной решёткой или применяться программно-определяемая антенна)
		RDF	Radio Direction Finding	RDF применяет радиопеленг принимаемых радиочастот, идентифицируемых как потенциально содержащих угрозу (радары, системы EW&SIGINT, ECM) или определяемые как источник несущей радиочастоты (аналоговый или цифровой сигнал) для коммуникации с помощью триангуляции в коллаборации с аналогичным устройством другого пользователя в сети P2P (на короткой дистанции с ним) определяет направление и расстояние к источнику радиосигнала без помощи устройства другого пользователя определяет только направление (курс) к источнику радиосигнала обычно используется после запуска приложения SDR Scan (SDRS), чтобы сначала идентифицировать характеристики радиосигнала и не демаскировать себя без необходимости в соответствии с действующими правилами и ограничениями миссии может инициировать задачу для вышеуказанного приложения IFF, если сигнал опроса не отправляется в условиях искажения или подавления радиосигналов навигационных спутниковых систем используется для радионавигации по наземным радиомаякам, работающим в других диапазонах частот, в том числе в радиовещательных диапазонах FM, TV и мобильной связи
		RFDD	Radio Frequency Drone Detection	RFDD enables the mode of radio frequency detector used to detect the presence of RF waves in physical transmission mediums. the system uses these RF Detectors to detect drones and drone pilots RFDD also uses AI to identify the type of threat by comparing different frequency patterns the system can easily distinguish drones from common RF signals by using learned patterns and can identify almost all types of threats as well as the location of the drone pilot может использовать компактную всенаправленную мобильную антенну, располагаемую за спиной пользователя, направленную программно-определяемую антенну или мобильную переносную антенну большего радиуса действия имеет диапазон 9 kHz - 8 GHz и дистанцию обнаружения до 3 км (conical or dome range) данная функция отображает на навигационной сетке и/или на карте местности экранов интерфейса позиции идентифицированного RPA (UAV) и его оператора режим RFDD - частный случай функции RDF, его рекомендуется использовать совместно с режимом Computer Vision Motion detection (MD) и Computer Audition Detect noises of aircraft motor (DAM)
		EODD	Radio Frequency Explosive Ordnance Disposal Detection	EODD - использует внешнее ручное переносимое устройство Metall Re-radiation Radar (MET3R), через соединение посредством Bluetooth
		RWR	Radar Warning Receiver	RWR - включает режим обнаружения облучения со стороны радаров ЗРК и РЛС контр-батарейной борьбы, отображает на экране в окне с навигационной сеткой и/или картой местоположение данных радаров. RWR mode является незаменимым при выполнении тактических задач миномётного и артиллерийского огня
	Firing assistance modes Условие OR при выборе пресетов (выбор одного пресета отменяет выбор ранее выбранного пресета).	GF	Fire on ground fixed targets	осуществляет захват и отслеживание до 10 целей одновременно для каждой цели рассчитывает баллистическую траекторию на дистанции на основании 19 параметров отображает 16 справочных данных баллистической калькуляции (отображение можно отключить) пользователь видит в интерфейсе и может вносить изменения вручную (input field) в параметры баллистического расчёта отображает прицельную точку с учётом корректирующих поправок на прицельной сетке относительно перекрестия со шкалой в виде цифровых данных (Eunit and Wunit) MOA/MIL (true minute of angle/miliradian) отдельно отображает цифровые значения поправок: Elevation and Windage при использовании Red Dot Sights or Holographic Sights (оба глаза открыты) пользователь визуально сравнивает положение прицельной точки и поправок относительно перекрестия на экране (точка попадания) и контура цели - с контуром в окне прицела и прицельной точкой (обычно 2-5 MOA), таким образом смещая прицельную точку (линию прицеливания), чтобы поразить цель в точке перекрестия как на экране устройства при интеграции с цифровым прицелом сразу отображает на экране в форме ромба линию прицеливания цифрового прицела, которую необходимо совместить с отображаемой точкой прицеливания оценивает неточности баллистического расчёта при промахе и предлагает пользователю корректирующие поправки (учитывает неточности прицеливания только для цифрового прицела)
		GM	Fire on ground moving targets	дополнительно рассчитывает угловую скорость для равномерного движения цели, измерение дистанции до цели, курс движения цели и обозначает корректирующие поправки упреждения
		AM	Fire on aerial moving targets	дополнительно рассчитывает угловую скорость, изменение азимута и возвышения, определяет ближайшую вероятную траекторию с обозначением корректирующих поправок упреждения
		MF	Mountain fire on fixed targets (prospective function)	дополнительно учитывает более сложные параметры расчёта баллистической траектории в горной и пустынной местности на основании оценки ландшафта, температур, оценки восходящих потоков воздуха и эффекта миража, истории выстрелов
		MM	Mountain fire on moving targets (prospective function)	как указано выше плюс дополнительно рассчитывает угловую скорость и обозначает корректирующие поправки упреждения
	Stealth modes Условие OR при выборе пресетов (выбор одного пресета отменяет выбор ранее выбранного пресета).	IFF	IFF visible only	блокируются все радиопередачи (в т.ч. исходящие сигналы опроса IFF) за исключением зашифрованных ответных сообщений транспондера системы Identificatiin Friend-or-foe, в том числе маскируя передачу ответного сообщения в диапазоне частот фонового шума радиовещательного диапазона (FM, TV) и используя более длительные паузы в интервалах ответов на сигналы опроса (возможны другие стратегии радиообмена, чтобы оставаться незамеченным) данный режим включает одноимённый режим IFF в разделе Radio Detection modes, если он не был включён
		SD	Short distance visible only	используются только сети ближнего радиуса действия, например, Bluetooth, Wi-Fi Direct (P2P) и UHF с ограниченной мощностью передачи на короткие расстояния
		FULL	Zero emission	все радиопередачи блокированы, только приём (полностью пассивный режим), режим IFF автоматически отключается (и наоборот, при смене режима Stealth на другой, режим IFF включается снова) в режиме полной невидимости пользователь не сможет включить фонарь и громкоговоритель
		OFF	OFF	не ограничивает радиопередачу
	Vitals body tracking modes Условие OR при выборе пресетов (выбор одного пресета отменяет выбор ранее выбранного пресета).	WRK	Workout mode	Vitals body data-driven monitoring including: HRbpm (ECG) - оценка ритма и частота сердечных сокращений; NIBPmmHg (ART) - кровяное давление: TEMP - температура тела; StO₂ % - неинвазивный метод мониторинга уровня насыщения кислорода (сатурации); ETCO₂ % - (капнометрия) для измерения уровня карбоксигемоглобина (COHb) и метгемоглобина (MetHb); RESPbpm (RR) - Respiratory Rate; HYDRL - определяет количество и частоту гидратации отображает подсказки для пользователя в случае многих нежелательных рисков: брадикардии, тахикардии, аритмии, гипотермии, гипертермии, гипоксемии, гипервентиляции, геморрагического шока и др. при возникновении опасного уровня показателей отображает сообщение пользователю и отправляет сообщение SOS в аналитический центр ведёт журнал состояний мониторинга
		TRN	Training mode	дополнительно учитывает продолжительность сессии тренировочных упражнений и возможность тренировки с живым огнём применяет программно установленный тренировочный режим для использования автоматических турникетов
		TACT	Tactical mode	дополнительно к вышеуказанному при возникновении опасного уровня острой массивной кровопотери в одном из 8-ми участков, защищённых автоматическими турникетами, управляет задачей "Care Under Fire" для кровоостановления и запуска экстренной автоматической инфузионной терапии при опасности фибрилляции желудочков сердца автоматически запускает процедуру дефибрилляции под контролем ЭКГ при необходимости запуск автоматической лёгочной реанимации с помощью пневматического компрессора, встроенного в конструкции воздушных фильтров
		OFF	OFF	не выполняет мониторинг
	Networks modes AND		Network 1	отображает шкалу с уровнем пропускной способности каждой подключённой сети отображает статус приёма и передачи пакетов отображает запрет передачи пакетов при долгом клике запускает приложение NET
			Network 2
			Network 3
			Network 4	Signal levels, upload / download transmission status

Left main menu (LMM) and Right submenu (RSB)

→redirect Further information: Public:Applications, Public:Voice User Interface

Left		Center		Right
LMMP	Left main menu fading pads	SBP	Status bar fading pads	RSBP	Right submenu fading pads
LQMP	Left quick menu fading pads	CLW	Central left window	RQMP	Right quick menu fading pads
LFSP	Left features sidebar fading pads	CRW	Central right window	RFSP	Right features sidebar fading pads
LUW	Left Upper window	CWJP	Central window joystick pads	RUW	Right Upper window
LTAW	Left Top A window	CWBP	Central window buttons pads	RTAW	Right Top A window
LTBW	Left Top B window			RTBW	Right Top B window
LBAW	Left Bottom A window			RBAW	Right Bottom A window
LBBW	Left Bottom B window			RBBW	Right Bottom B window

Главное меню (LMM) находится слева сверху видимой области и содержит список разделов.

Всего 7 элементов для быстрого выбора в одном ряду. Для выбора следующего ряда используются навигационные стрелки справа. Главное меню отображается только при наведении курсора или при голосовом вызове. При неактивности скрывается через 15 сек. Каждый элемент расположен в отдельном поле (fading pad). Показываются только поля, отображающие раздел.

Правое субменю (RSB) находится сверху справа и раскрывает второй более низкий уровень элементов главного меню. Всего 7 элементов в одном ряду. Для навигации используются стрелки слева. Правое субменю отображается только при активном состоянии одного из пунктов главного меню слева (LMM) или при голосовом вызове непосредственно пункта субменю. При неактивности скрывается одновременно с главным меню через 15 сек. Каждый элемент расположен в отдельном поле (fading pad). Показываются только поля, отображающие раздел.

Когда приложение открыто с помощью данного меню, оно показывается на экране. Если пользователь закрывает приложение, оно не прекращает свою работу, а продолжает работать в фоновом режиме, одновременно в поле меню LQM (right quick menu) или RQM (right quick menu) появляется элемент с названием данного приложения для быстрого возврата на экран. Как полностью прекратить работу приложения, см. ниже в разделах Left quick menu (LQM) и Right quick menu (RQM).

(!) Картинки с внешним крупным видом LMM и отдельно крупно RSB вставить здесь:

Управление субэлементами главного меню и субменю выполняется кликом (джойстик, управление жестами) или голосом. Состояния:

• Hover state: 4 угловых сегмента рамки поля
• Click state: рамка по границе поля (эффект анимации, дважды по 100 ms)
• Selected (long click >2 s): горизонтально расположенные два прямоугольника справа и слева от надписи
• Not selected (long click >2 s): горизонтально расположенные два прямоугольника справа и слева от надписи отсутствуют

Отличия при голосовом управлении:

• Команда голосовому ассистенту содержит описание требуемого действия и состояния, поэтому выполняется быстрее
• Голосовой ассистент понимает разные интерпретации действий и состояний, поэтому не нужно запоминать голосовые команды наизусть
• При голосовом вызове показывается не всё меню целиком, а соответствующие пункты главного меню и субменю
• Пользователь может вызвать голосом отображение всего меню целиком

LMM	RSB	Action	Notice
MSG (Messenger)	IMSG (instant messaging system)	отображает приложение IMSG в окне	приложение IMSG обычно не требует использования fading window
	CHAT (multichannel chat)	отображает приложение CHAT в окне отображает в поле RFS (right features sidebar) снизу иконки нескольких последних использовавшихся чатов (один-к-одному и групповых) если есть непросмотренные сообщения, помеченные как важные, иконки чатов в поле RFS отображаются красным (автоматическая сортировка таких чатов) если есть сообщения, требующие ответа, иконки чатов в поле RFS отображаются жёлтым (автоматическая сортировка таких чатов)	LMM для всех каналов, RSB и RFS для соответствующего канала: Сверху отображается счётчик уведомлений о сообщениях, требующих ответа (жёлтый цвет) Снизу отображается число непросмотренных сообщений (цвет лазури)
	MAIL (eMail)	отображает приложение MAIL в отдельном окне
	SDR2 (SDR 2-way)	отображает приложение SDR2 в отдельном окне
	CRPT (cryptologic control)	запускает приложение CRPT в отдельном окне
	PTTH (PTT headset)	использует встроенную функцию гарнитуры для присоединяемой 4-пиновым кабелем переносной портативной радиостанции; для функции PTT ("push-to-talk") используется кнопка A на headphones ear cup левого наушника позволяет использовать программный способ, где вместо нажатия применяется голосовая команда
TSK (Tasks)	OVDU (Overdue) ONGO (Ongoing) ASST (Assisting) SBME (Set by me) FLWG (Following) CMNT (Comments) DONE (Done)	Система управления задачами позволяет планировать и контролировать срок, точность, результаты, эффективность выполнения задач. Содержит описание, чек-лист, дедлайн, фактическое время выполнения и затраченное время (в т.ч. автотрекинг завершения и отсчёт затраченного времени), уведомление о текущем статусе, геопозицию в момент завершения, артефакты подтверждения выполнения задачи, вложения, комментарии	В правом верхнем углу отображается счётчик уведомлений о просроченных задачах и с приближающимся дедлайном В левом нижнем углу отображается число задач на сегодня
CAL (Calendar)	DAY (Day) WEEK (Week) MNTH (Month) YEAR (Year)	Календарь событий позволяет заранее планировать и согласовывать события, требующие определённого регламентов времени: коллективные онлайн и офлайн коммуникации, собрания, учебные семинары, командировки	В правом верхнем углу отображается счётчик уведомлений о приближающихся событиях В левом нижнем углу отображается число событий на сегодня
WGR (Workgroups)	TAC (Tactical) ISR FSUP (Fire support) FAIR (Fast air) MAS (Medical assistance) EVAC (Evacuation) LOG (Logistic)	Субменю содержит фильтры для групп. Можно выбрать участника или группу в соответствующем разделе для коммуникаций, обмена данными, отправки или запроса позиции. Элемент CDI (Cross-Domain Interaction)	В правом верхнем углу отображается количество доступных участников групп В левом нижнем углу отображается число активных рабочих групп, в которых состоит пользователь
MAP (Maps & Navigation)	CMPS (Compass)	отображает приложение CMPS в окне LUW показывает azimuth и elevation в градусах
	NAV (Navigation)	отображает приложение NAV в отдельном окне позволяет с использованием GPS или RDF (триангуляция по радиомаякам) определять местоположение на локальной карте позволяет рассчитывать расстояния, время в пути, выполнять оптимизацию маршрута
	PATH (Path tracking)	отображает приложение PATH в отдельном окне позволяет отслеживать пройденный путь и отмечает точки на карте с указанием времени интегрирован с приложением TSK для автоматического выполнения задач, связанных со сменой позиции
	PLAN (Mission planning)	отображает приложение PLAN в отдельном окне позволяет детально планировать миссию в разрезе задач (маршрут, время, ресурсы, цели, угрозы, коммуникации, задачи разведки, логистики, необходимые отчёты) интегрирован с BMS (Battlefield Management System) и приложением TSK интегрирован с L-STE (Live-Synthetic Training Environment)	значительно оптимизирует время и ресурсы, повышает эффективность выполнения миссии
	ANLS (Mission analysis)	отображает приложение ANLS в отдельном окне позволяет анализировать выполнение миссии в реальном времени с учётом отклонения от плана миссии разными доменами и подразделениями интегрирован с BMS (Battlefield Management System) и приложением TSK интегрирован с L-STE (Live-Synthetic Training Environment)	значительно уменьшает риски и повышает согласованность при выполнении миссии
SINT (SIGINT)	SDRS (SDR Scan)	отображает приложение SDRS в отдельном окне позволяет анализировать спектры радиочастот в диапазоне 2 kHz - 6 GHz с разными модуляциями позволяет прослушивать незашифрованные аналоговые и цифровые радиоэфиры позволяет анализировать паттерны радиочастот, в т.ч. замаскированные в диапазонах, не используемых для коммуникаций позволяет анализировать наиболее безопасные и незагруженные частоты для коммуникации, транспондера (IFF), дистанционного управления (RC)
	RDF (Radio Direction Finding Control)	отображает приложение RDF в отдельном окне позволяет выполнять позиционирование в условиях искажённого сигнала GPS через триангуляцию по радиомаякам позволяет определять направление и дистанцию до источника интересующего радиосигнала, обнаруженного с помощью приложения SDRS
	PCSR (Passive covert radar control)	отображает приложение PCSR в отдельном окне позволяет с помощью пассивной программно-управляемой антенны принимать отражённые радиосигналы в FM диапазоне для обнаружения летательных аппаратов и техники, при этом не обнаруживая себя (без использования излучения радиосигнала собственного радара)
	RWRC (Radar warning receiver control)	отображает приложение RWRC в отдельном окне позволяет с помощью пассивной антенны обнаруживать излучение направленных радаров и определять курс по отношению к ним интегрирован с приложением IMSG и TSK для быстрого реагирования на угрозы
	APAR (Active phased array radar control)	отображает приложение APAR в отдельном окне позволяет дистанционно управлять активным радаром на безопасном расстоянии
	RFDD (RF Drone Detection Control)	отображает приложение RFDD в отдельном окне позволяет с помощью пассивной антенны обнаруживать радиосигнал между дроном и его оператором, определять расстояние
	EODD (RF EOD Detection Control)	отображает приложение EODD в отдельном окне позволяет с помощью портативного носимого metal re-radiation radar обнаруживать противотанковые мины, металлические противопехотные мины (в т.ч. с дистанционным управлением), СВУ и мины-ловушки на растяжках интегрировать с приложением CVC для дополнительного использования компьютерного зрения, в особенности против пластиковых противопехотных мин
RC (Remote Control)	RPAC (Drone RC)	отображает приложение RPAC в отдельном окне позволяет с помощью встроенного контроллера управлять разными моделями дронов позволяет использовать наклон головы в качестве одного из манипуляторов (вместо джойстика) и джойстик на headphones ear cup правого наушника для управления позволяет использовать один джойстик для управления двумя манипуляторами позволяет использовать Hand Tracking для управления программными джойстиками и кнопками позволяет использовать голосового ассистента и технологии искусственного интеллекта для управления без использовани рук позволяет использовать встроенную навигацию без использования отдельной фронтальной неповоротной камеры для навигации
	RBRC (Robot RC)	отображает приложение RBRC в отдельном окне позволяет дистанционно управлять роботом, аналогично управлению дроном
	FTRC (Fire turret RC)	отображает приложение FTRC в отдельном окне позволяет дистанционно управлять турелью стрелкового вооружения
	UVRC (Unmanned vehicle RC)	отображает приложение UVRC в отдельном окне позволяет дистанционно управлять транспортным средством, аналогично управлению дроном и роботом
WIKI (Wiki)	MAN (Manuals) RPT (Reports) ART (Articles) UPD (Updates) TUT (Tutorial)	Вики-системы доказатели свою эффективность для накопления и обмена знаниями, которые необходимы каждому почти ежедневно. Данная система позволяет собирать лучшие практики и улучшать процесс обучения и тренировки, а также время от времени освежать знания даже у опытных пользователей. Всевозможная информация о техническом устройстве и обслуживании оборудования, организации процессов на военных базах, расписания, материалы анализа военных экспертов и т.д. То, что поможет стать эффективнее. Безусловно, распределённые права доступа, защита информации и конфиденциальность в соответствии с действующими протоколами.	Вопросы безопасности, защиты от несанкционированного доступа, конфиденциальности и обеспечения бесперебойного доступа пользователей в сети мы намерены подробно изложить в отдельной статье Вероятнее всего этот процесс будет передан разработчикам одного из агентств DoD (CYBERCOM) и NSA в рамках поэтапного развёртывания системы (уверен, что эти вопросы будут не в нашей компетенции)
MMD (Multimedia)	REC (multimedia recorder) PLAY (multimedia player)	запускает приложение REC / PLAY в отдельном окне
	VM (Virtual mentor incl. video chat)	запускает приложение VM в отдельном окне система видеоконференцсвязи, которая позволяет дистанционно обмениваться потоками данных с видео, голосом, текстом и обменом файлами позволяет дистанционно оказывать менторскую помощь в условиях оказания медицинской помощи, в т.ч. Care Under Fire, ремонта и технического обслуживания техники, опытным наставникам онлайн наблюдать за процессом тренировки и помогать исправлять ошибки
	TRSL (Translater)	запускает приложение TRSL в фоновом режиме без открытия окна позволяет на основе языковой модели искусственного интеллекта выполнять перевод текста с учётом контекста и специализированных терминов интегрирован со сервисами STT (speech-to-text) и системой CV (Computer Vision) для формирования исходного материала для перевода
FILE (File explorer)	FAV (Favorites) FLR (Folders) CLD (Clouds) TAG (Tags)	запускает приложение FILE в отдельном окне указанные фильтры позволяют быстрее и легче находить нужные файлы дополнительно применяется, полнотекстовый поиск, поиск по дате, времени, формату данных, размеру, автору и т.д.
PROC (Processing Control)	CVC (Computer Vision Control)	запускает приложение CVC в отдельном окне позволяет настраивать пресеты и дополнительные виджеты для одновременно использования вместе с другими приложениями в одном окне и использования потоковых данных этих приложений применяет методы AI позволяет гибко настраивать правила использования собственных, облачных и одноранговых (P2P сеть) вычислительных ресурсов позволяет настраивать методы и условия оптимизации нагрузок в разных случаях
	CAC (Computer Audition Control)	запускает приложение CAC в отдельном окне позволяет настраивать пресеты и методы работы алгоритмов AI позволяет оптимизирования нагрузку для разных случаев применения
	IFF (IFF Control)	запускает приложение IFF в отдельном окне позволяет использовать в режиме навигационной сетки данные транспондеров других пользователей и обобщённые данные других систем обнаружения (SDRS, RDF, CV, CA, PCSR, RWRC, APAR, RFDD, спутниковые данные и данные других пользователей) позволяет автоматически и вручную размечать статусы обнаруженных людей и техники применяет методы AI
	STM (Stealth Modes Control)	запускает приложение STM в отдельном окне позволяет настраивать пресеты для разных режимов невидимости для радиоэфира
	FA (Firing Assistance Control)	запускает приложение FA в отдельном окне позволяет в реальном времени рассчитывать баллистические калькуляции для стрелкового и миномётного огня позволяет использовать все виды прицельных устройств позволяет настраивать пресеты и виджет для одновременной работы вместе с другими приложениями в одном окне и использования потоковых данных этих приложений применяет методы AI
	VBS (Vitals Body Sensors Control)	запускает приложение VBS в отдельном окне позволяет настроить пресеты и интеграцию с сенсорами позволяет выполнять точный мониторинг параметров жизнедеятельности в любом положении и в движении на основании алгоритмов машинного обучения и медицинских научных данных оценивает наличие опасных и критических состояний, при возникновении которых отправляет сообщения и самостояетельно управляет изделиями медицинского назначения (автоматические турникеты, дифибриллятор, инфузионная терапия, лёгочная реанимация) применяет методы AI
	ANTC (Antennas Control)	запускает приложение ANTC в отдельном окне на основе встроенного антенного анализатора определяет импеданс (коэффициент волнового сопротивления), КСВ (коэффициент стоячей волны для согласования с фидерным трактом), диаграмму направленности, коэффициент усиления и другие характеристики выдвижных и программно-определяемых антенн для настройки в условиях конкретного сеанса радиосвязи сообщает пользователю рекомендации по настройке антенны или управляет программно-определяемой антенной самостоятельно
DVC (Integrated devices)	SGHT (Digital sights driver settings) DRON (Drones and bots driver settings ) RADR (Radars driver settings) SENS (Other Sensors driver settings)	запускает приложение ANTC в отдельном окне позволяет настраивать интеграцию с внешними устройствами позволяет загружать новые драйверы и проводить тестирование функциональности непосредственно на устройстве для поиска ошибок позволяет осуществлять откат к предыдущему драйверу в конкретных указанных случаях
NET (Networks)	VHF UHF HF 3/4/5G WLAN BT P2P	запускает приложение NET в отдельном окне позволяет выполнять подключение и отключение для беспроводных сетей, анализировать пропускную способности сети, настраивать приоритеты выбора сети для каждого вида данных и для каждого приложения позволяет в реальном времени анализировать обмен данными через сети позволяет настраивать правила для P2P сети, участников, выделение ресурсов для multi-party computing, правила для user view exchange
SYS (System)	CAM (Cameras Control)	запускает приложение CAM в отдельном окне или в нескольких окнах одновременно позволяет настроить пресеты и интеграцию с другими приложениями позволяет выполнять цифровое увеличение, интерполяцию для улучшения качества изображения и определения контуров, использовать фильтры, глубокую обработку изображения и видео в реальном времени, смешивать каналы и сигналы с 4-х разных сенсоров динамически определять контуры и выделять их на экране производить калибровку и настройку стереокамеры для точного измерения дистанции интегрирован с другими приложениями для использования внешних камер, технологий Computer Vision, Fire Assistant
	DISP (Display Control)	запускает приложение DISP в отдельном окне позволяет настраивать пресеты и работу с разными приложениями
	FPAD (Fading Pads Control)	запускает приложение FPAD в отдельном окне позволяет настраивать пресеты и работу с разными приложениями
	MMC (Multimedia Control)	запускает приложение MMC в отдельном окне позволяет настраивать пресеты и работу с разными приложениями для мультимедиа устройств: headphones, embedded microphones (3), handheld radio через встроенную гарнитуру и голосовую программную гарнитуру, loudspeaker
	TESS (Voice assistant)	запускает приложение TESS в отдельном окне для настройки и управления данное приложение представляет собой малую языковую модель с возможностью обучения на датасете конкретного пользователя и многих пользователей данной платформы применяет методы AI
	HT (Hand tracking system)	запускает приложение HT в отдельном окне для настройки и управления данное приложение основано на технологии Computer Vision для распознавания рук пользователя в поле зрения стереокамеры обладает возможностью обучения новым жестам на датасете конкретного пользователя и многих пользователей данной платформы применяет методы AI
	STT (Speech-to-text settings)	запускает приложение STT в отдельном окне настройки и управления обладает способностью адаптироваться к разному произношению интегрирован с приложением TESS для восприятия текста в контекстве смысловых категорий применяет методы AI
	VOVR (Voiceover settings)	запускает приложение VOVR в отдельном окне позволяет озвучивать текст и команды несколькими голосами
	INP (Joystick and buttons settings)	запускает приложение INP в отдельном окне позволяет настраивать и выполнять калибровку физических и программных устройств ввода: кнопок и джойстиков
	GNSS (GNSS)	запускает приложение GNSS в отдельном окне позволяет настраивать связь со спутниками геопространственного позиционирования (GPS, Galileo, QZSS), отслеживать ошибки позиционирования, выдавать сообщения пользователю
	ACC (Accounts & Sync)	запускает приложение ACC в отдельном окне осуществляет управление профилем пользователя и его авторизацию для доступа в сети к облачным данным и внутри одноранговой сети
	SEC (Security)	запускает приложение SEC в отдельном окне позволяет настраивать: password, emergency alert, emergency SOS, lock & unlock должен выполнять требования безопасности, защиты данных, установленных протоколами оборонных агентств и агентств информационной безопасности
	ADM (Admin only)	запускает приложение ADM в отдельном окне предоставляет доступ администраторам, в т.ч. удалённый доступ, для контроля ошибок, исправления и помощи пользователю, а также для обслуживания и обновлений
	SRV (Services)	запускает приложение SRV в отдельном окне позволяет администраторам настраивать работу программных сервисов и встроенных устройств: Time and Date, Notifications, LED Spotlight settings (SPOT), Battery saver (BSVE), Water saver (WSVE), Accelerometer, Gyroscope, Hall sensor, Barometer, Thermometer, Ambient light sensor, Humidity sensor, Gas sensor (CO, NO2), Radiation sensor запускает калибровку по расписанию, автоматически отправляет отчёт в аналитическую систему

Left quick menu (LQM)

Отображает свёрнутые (внутри рамки) и открытые окна приложений левой половины экрана. Чтобы полностью прекратить работу приложения необходимо выполнить долгий клик и нажать подтверждение в окне нотификаций.

Right quick menu (RQM)

Отображает свёрнутые (внутри рамки) и открытые окна приложений правой половины экрана. Чтобы полностью прекратить работу приложения необходимо выполнить долгий клик и нажать подтверждение в окне нотификаций.

Left features sidebar (LFS)

Отображает:

• функциональные кнопки некоторых активных приложений в левой половине экрана, когда их много и нежелательно уменьшать видимую область окна приложения
• список приоритетных задач для приложения TSK
• список последних просмотренных статей для приложения WIKI
• список лидов в одноранговой сети для приложения P2P и их характеристики в реальном времени
• список приоритетных каналов для приложения WGR

Right features sidebar (RFS)

Отображает:

• функциональные кнопки некоторых активных приложений в правой половине экрана, когда их много и нежелательно уменьшать видимую область окна приложения (например, SDRS)
• список диалогов приложения CHAT и фильтры диалогов
• список последних команд через приложение IMSG
• список сделанных фотографий и видеозаписей для приложения PLAY
• список участников видеоконференции для приложения VM

Virtual control tools

Отображает:

• Программные (продублированные с аппаратными) джойстики и кнопки для управления дроном, роботом, турелью, беспилотным транспортом
• Программные кнопки управления камерами дронов, роботов и беспилотного транспорта
• Джойстики и кнопки для управления перемещением позиций на карте и отметки точек маршрута
• Кнопки управления и навигации для мультимедиа

Windows items description

→redirect Further information: Public:Applications

Fading windows and pads

Pads-100

Left		Center		Right
LMMP	Left main menu fading pads	SBP	Status bar fading pads	RSBP	Right submenu fading pads
LQMP	Left quick menu fading pads	CLW	Central left window	RQMP	Right quick menu fading pads
LFSP	Left features sidebar fading pads	CRW	Central right window	RFSP	Right features sidebar fading pads
LUW	Left Upper window	CWJP	Central window joystick pads	RUW	Right Upper window
LTAW	Left Top A window	CWBP	Central window buttons pads	RTAW	Right Top A window
LTBW	Left Top B window			RTBW	Right Top B window
LBAW	Left Bottom A window			RBAW	Right Bottom A window
LBBW	Left Bottom B window			RBBW	Right Bottom B window

Как уже было написано в самом начале описания пользовательского интерфейса, в устройстве для контрастного отображения используются затухающие окна и площадки. Иначе на светлом и ярком фоне окружающей среды пользователю будет сложно видеть изображения контрастным. Затухающие окна и площадки в зависимости от режимов яркости имеют разную степень прозрачности. А в случае яркого света дополнительно выполняют функцию солнцезащитного экрана.

Окна приложений и функций располагаются в большей и наилучшей видимой области. Всего 12 независимых окон (8 больших 1.78:1, 2 больших 1.20:1, 2 малых 19.86:1), каждое из которых содержит субэлементы управления, когда окно выделено с помощью клика или голосом (selected state). Не выделенное окно является пассивным окном, которое отображает только графику приложения, элементы управления окном скрыты, элементы управления приложением скрыты. Окна разных прилоожений имеют разный приоритет отображения, который настраивается в настройках системы для каждого приложения. В зависимости от выбранного пресета в Status bar (SB) конфигурации отображаемых окон могут быть быстро и гибко изменены пользователем.

(!) Вставить галерею с картинками примеров

Управление субэлементами окон выполняется кликом (джойстик, управление жестами) или голосом. Состояния:

• Hover state: частая пунктирная линия вдоль рамки поля
• Click state: рамка по границе поля (эффект анимации, дважды по 100 ms)
• Selected (long click >2 s): редкая пунктирная линия вдоль рамки поля
• Not selected (long click >2 s): пунктирная линия отсутствует

Отличия при голосовом управлении:

• Команда голосовому ассистенту содержит описание требуемого действия и состояния, поэтому выполняется быстрее
• Голосовой ассистент понимает разные интерпретации действий и состояний, поэтому не нужно запоминать голосовые команды наизусть

Пользователь может быстро и гибко управлять конфигурацией окон для каждого окна в отдельности:

• Пользователь может принудительно закрыть любое окно в любое время, выделив нужное окно (selected state), нажав на иконку "закрыть окно" (приложение остаётся в фоновом режиме, для обратного действия кликнуть на иконку в меню быстрого выбора)
• Пользователь может увеличить левое или правое большое центральное окно на всю область центрального окна (объединённое окно 2.40:1), выделив нужное окно (selected state), нажав на иконку "увеличить окно"
• Пользователь может увеличить большое осно слева или справа на всю левую или правую область окна (объединённое окно 1.78:1 x2), выделив нужное окно (selected state), нажав на иконку "увеличить окно"
• При нажатии на иконку "уменьшить окно" окно возвращается в исходное состояние
• Иконка "сместить окно влево" смещает его влево, затем вверх направо, затем влево, меняя расположение других окон
• Иконка "сместить окно вправо" смещает окно вправо, затем вниз налево, затем вправо, меняя расположение других окон
• Иконка "поделиться экраном" позволяет отправить скриншот окна или включить трансляцию данного окна для другого пользователя

Apps priority for windows

LUW		CLW	CRW	RUW
CMPS		CAM (sight view, 2:1 maxi) RPAC (drone view) / RBRC / FTRC / UVRC EODD	CAM + FA + CVC widgets	NOTS (notifications, system messages) TIPS (user tips) + CHAT (new messages)
LTAW	LTBW	CWJP (left)	CWJP (right)	RTAW	RTBW
none TSK (2:1) DVC SYS	none P2P WGR CAL WIKI (1:1, 2x) FILE (1:1, 2x)	RPAC / RBRC / FTRC / UVRC	RPAC / RBRC / FTRC / UVRC SDRS	none CVC (setup) CAC (setup) FA (setup) NET (setup) SDR2 (setup) ANTC (setup) STM (setup) CRPT (setup)	IMSG SDRS CHAT (1:2 maxi) MAIL (1:2 maxi)
LBAW	LBBW	CWBP (left)	CWBP (right)	RBAW	RBBW
CAM (RHD, (another) user view, drone view) MAP (NAV, PATH, PLAN, ANLS)	IFF CA widget RDF RFDD RWRC PCSR	RPAC / RBRC / FTRC / UVRC	RPAC / RBRC / FTRC / UVRC SDRS	RPAC (drone view) / RBRC / FTRC / UVRC CAM (RHD, (another) user view, drone view) MAP (NAV, PATH, PLAN, ANLS) MMD VBS	CHAT (1:1 mini) MAIL (1:1 mini)

Window	Mode	Notice
Left Upper window (LUW)	Обычно используется долговременно
Left top A window (LTAW)	Используется при необходимости, не рекомендуется во время интенсивного боя, чтобы не ограничивать видимость окружающей среды
Left top B window (LTBW)	Обычно используется кратковременно, чтобы не ограничивать видимость окружающей среды
Left bottom A window (LBAW)	Обычно используется долговременно
Left bottom B window (LBBW)	Обычно используется долговременно
Central left window (CLW)	Обычно используется кратковременно, чтобы не ограничивать видимость окружающей среды
Central right window (CRW)	Обычно используется долговременно
Right Upper window (RUW)	Обычно используется долговременно
Right top A window (RTAW)	Обычно используется кратковременно, чтобы не ограничивать видимость окружающей среды
Right top B window (RTBW)	Используется при необходимости, не рекомендуется во время интенсивного боя, чтобы не ограничивать видимость окружающей среды
Right bottom A window (RBAW)	Обычно используется долговременно
Right bottom B window (RBBW)	Обычно используется долговременно

Shifts windows to the left and right

• Общее правило "слева направо, сверху вниз" (список перемещения 10 больших окон):
  • LTAW - left top window A
  • LTBW - left top window B
  • LBAW - left bottom window A
  • LBBW - left bottom window B
  • CLW - central left window
  • CRW - central right window
  • RTAW - left top window A
  • RTBW - left top window B
  • RBAW - left bottom window A
  • RBBW - left bottom window B
• Если активное окно расположено в левой части и он перемещается влево, он перемещается выше по списку
• Если активное окно расположено в левой части и он перемещается вправо, он перемещается ниже по списку, сначала в центр видимой области, затем в правую часть
• Если место, куда перемещается активное окно не занято другим окном, другие окна не меняют своего положения
• Другой отображаемое окно, на место которого смещается активное окно вниз по списку, автоматически перемещается выше по списку и занимает предыдущее место смещаемого активного окна
• Другой отображаемое окно, на место которого смещается активное окно вверх по списку, автоматически перемещается ниже по списку и занимает предыдущее место смещаемого активного окна
• Обычно отображаются менее 10 больших окон, поэтому смещение активного окна не приводит с смещению большинства других окон
• Если отображаются все 10 больших окон, смещение активного окна на несколько позиций в списке вызывает последовательное автоматическое временное смещение соседнего окна, который затем снова возвращается на предыдущее место
• Если окно максимизировано, оно автоматически минимизируется и перемещается по общему правилу, при необходимости его нужно максимизирован снова
• Пользователь может выделить два или более окон одновременно, удерживая клавишу D (рядом с джойстиком) headphones ear cup правого наушника (аналогично правой клавиши мыши)
• Выделив окно и удерживая клавишу C (аналогично левой клавиши мыши) headphones ear cup правого наушника пользователь может переместить окно или несколько окон одновременно одним действием с помощью джойстика - в этом случае, если перемещается группа окон, они будут располагаться последовательно рядом по списку (даже если в предыдущем их местоложении они не были расположены последовательно рядом по списку)
• Малые окна перемещаются только влево или вправо на место аналогичного малого окна
• Если малое окно перемещается вправо, другое окно перемещается влево (меняются местами)
• Если приложение запускает малое окно в то время, когда оба малых окна отображают информацию других приложений, тогда окно с приложением, имеющим наименьший приоритет, скрывается в меню быстрого выбора
• Если одно малое окно закрывается, на его месте ничего не отображается, для отображения на этом месте окна другого приложения необходимо кликнуть на него в меню быстрого выбора или в главном меню
• Если приложение запускает большое окно, которое имеет больший приоритет для уже занятого окна, тогда окно с меньшим приоритетом перемещается в другое место, как предусмотрено правилами приоритета окон и приложений. При закрытии окна с большим приоритетом, конфигурация окон возвращается в предыдущее состояние
• Если приложение запускает большое окно, когда нет свободного места для отображения окон, окно с наименьшим приоритетом скрывается автоматически в меню быстрого выбора. При закрытии одного из окон с большим приоритетом, восстанавливается предыдущее состояние отображения окон. При необходимости отображения окна с меньшим приоритетом, необходимо освободить место для него, свернув один из окон в меню быстрого выбора

Прокрутка окна на (4/5 высоты окна или в строках - настраивается индивидуально) выполняется иконками вверх и вниз или кнопками джойстика "< +" и "- >" снизу headphones ear cup правого или левого наушника (аналогично клавишам мыши PageUp, PageDown). Также плавная прокрутка окна джойстиком, голосовой командой или жестом (в т.ч. виртуальным джойстиком или обособленным жестом).

Элементы управления (иконки управления окном, функциональные программные кнопки интерфейса приложения, расположенные на Sidebar Left or Sidebar Right, виртуальные джойстики) относятся только к активному (selected) окну. Для пассивного окна (not selected) они не отображаются.

Отдельно для иконок управления окном - после того, как окно стало активным (selected), иконки управления окном отображаются в течение 15 с, после чего исчезают. Для их повторного отображение необходимо снова выделить данное окно. Пунктирная рамка выделения активного окна отображается в течение всего времени активного состояния окна.

! Кроме того, принудительное использование некоторых окон может выполнить функцию солнцезащитного козырька тогда, когда солнце находится низко над горизонтом на линии визирования. Пользователь может смещать окно в нужную область и перекрывать ослепляющий вид на солнце, не затемняя всю область визирования.

Interface Animation

Interface Items Motion

• принципиальный вид
• активный вид при работе с меню
• процесс выбора пункта меню (скролл элементов, изменение вида при входе в подменю 1-го уровня / 2-го уровня / 3-го уровня)
• постоянный (продолжительный) вид (статусы, нотификации, активные пункты меню)
• включение и смена затухающих окон (правила, варианты комбинации в одновременном виде)

Modern tools

1. MRTK-Unity is a Microsoft-driven project that provides a set of components and features, used to accelerate cross-platform MR app development in Unity. Here are some of its functions:

• Provides the cross-platform input system and building blocks for spatial interactions and UI.
• Enables rapid prototyping via in-editor simulation that allows you to see changes immediately.
• Operates as an extensible framework that provides developers the ability to swap out core components.
• Supports a wide range of platforms.

2. Unity Mars helps solve the hard problems of AR app creation:

• Overcome the challenges of authoring for dynamic physical environments
• Reduce development time
• Release cross-platform experiences with support for iOS, Android, and HoloLens

See also

Public External Sections:	Public Wiki Sections:	Public Wiki Sections:	Not-Public Wiki Sections:
One-pager pitch	Manifesto	Fire Team	U.S. Defense Programs
7-min pitch	User Cases	Force Recon - ISR	EU&UK Defense Programs
Pitch Deck for Business Angels	Competitive Environment	Light Armored Recon	Collaboration Research
Pitch for Collaboration Partners	FAQ	Scout Sniper	Pitch Deck
Business Processes Flowchart	Traction	Low Altitude Air Defense	Media Development
Calculations	Business Tables	Helicopter - RPA	Mentorship
Production Scheme	Press Release	Artillery - Mortar	Strategy
Furtherium Website	Features Summary	Combat Engineer	Early Stage Fundraising
Furtherium Community	Graphical User Interface	Flight Deck - Hull Unit	Investor Virtual Data Room
YouTube	Applications	Special Ops	Cofounders
LinkedIn	Voice User Interface	SIGINT - EW Ops	Accelerators
X Non-corp	What's new	Medical Services	Patent Research for ARHUDFM
Facebook Non-corp	User Journey Map	Logistics	Synthetic Training Environment

Note: Unless otherwise stated, whenever the masculine gender is used, both men and women are included.

See also product details

Hardware Details:	Functional Apps Details:	Executive Apps Details:	Service Apps Details:
Integrated Circuit	Fading Pads Control	Messenger	Networks
Power Supply	Display Control	Tasks	Accounts & Sync
Cooling System	Cameras Control	Calendar	Security
Computing Module	Multimedia Control	Workgroups	Integrated Devices
Multimedia	Computer Vision Control	Maps and Navigation	Voice Assistant
Graphics Processing	Computer Audition Control	Drone RC	Hand Tracking
Digital Signal Processing	IFF Control	Robot RC	Joystick & Buttons
Software Defined Radio	Radio Direction Finding Control	Fire Turret RC	Speech-to-text
Digital Sights	RF Drone Detection Control	Unmanned Vehicle RC	Voiceover
Passive Radar	RF EOD Detection Control	Passive Covert Radar Control	GNSS
Metal Re-radiation Radar	Antennas Control	APAR RC	P2P & Cloud Computing
Antennas	Radar Warning Receiver Control	SDR Scan	PTT Headset
Transponder	Firing Assistance Control	SDR 2-way	System
Body Sensors	Stealth Modes Control	Cryptologic Control	Services
Other Sensors	Vitals Body Sensors Control	Multimedia Recorder and Player	Admin Only
LED Spotlight	Gunfire locator	Translater
Handheld Radio	Night Vision	Virtual Mentor
First Prototype	Battlefield Management Systems	Wiki
		File Explorer