Abstract
→redirect Further information: Public:ARHUDFM Manifesto
Augmented Reality Heald-Up Display Fullface Mask (ARHUDFM) is a complex device that is not easy to understand at a first look, because there are little relevant examples to compare. Therefore, we suggest that you first read the information on the Public:ARHUDFM Manifesto page at the link above.
This page describes the structure and contents of the GUI (Graphical User Interface) used in the ARHUDFM device.
For a brief description of the functions of each application, please see the Public:Applications page.
Interface description
Appearance
| Left | Center | Right | |||
|---|---|---|---|---|---|
| LMMP | Left main menu fading pads | SBP | Status bar fading pads | RSBP | Right submenu fading pads |
| LQMP | Left quick menu fading pads | CLW | Central left window | RQMP | Right quick menu fading pads |
| LFSP | Left features sidebar fading pads | CRW | Central right window | RFSP | Right features sidebar fading pads |
| LUW | Left Upper window | CWJP | Central window joystick pads | RUW | Right Upper window |
| LTAW | Left Top A window | CWBP | Central window buttons pads | RTAW | Right Top A window |
| LTBW | Left Top B window | RTBW | Right Top B window | ||
| LBAW | Left Bottom A window | RBAW | Right Bottom A window | ||
| LBBW | Left Bottom B window | RBBW | Right Bottom B window | ||
Features
The interface is designed for the screen of the ARHUDFM device with FOV 105°h (stereo overlap) and 33°v, has a resolution of 2560px in width.
Normal human stereoscopic binocular vision is 180° horizontally, up 55°, down 60°.[1] If the area of peripheral vision important for situational awareness is excluded, a comfortable field of view, especially if a person wears optic corrective glasses, will be 105-115° horizontally, 20° up and 25° down. Since the airway obturator of the mask from below is an obstacle to vision, the field of view of a person wearing a mask from below is less than usual (however, pilots of combat aircraft have sufficient visibility). Horizontally, the mask user has a complete view of the entire field of view, including the peripheral part, which is important.
The visible field is projected by the LED beams of a DLP projector offering high contrast and better color reproduction with high response.
Unlike the harmful effects of the blue light spectrum (light colors contain a lot of blue) emitted by the LED screen of a monitor or mobile device, which causes fatigue, headaches and sleep problems when exposed for a long time, the reflected light of a DLP projector (and other types of projectors also) does not have such disadvantages. In addition, in the ARHUDFM device, the principle of displaying the interface resembles the night mode (dark background, light graphic symbols). These conditions for the user create the possibility of round-the-clock work without stress.
The constant optical focus is set to an apparent distance of 1900 mm (75 in) from the user's eyes, which prevents conflict of vergence and accommodation so that the user's eyes do not get tired during long-term use. No virtual visual objects have a different image depth, just as if the user were to observe the display screen at a distance of 1900 mm while observing the rest of the environment with the focus oriented to infinity. This statement is based on numerous studies and experiments of different laboratories with a large number of respondents.
The tension of the muscles of the eye due to the close distance to the object in question causes fatigue, including being one of the causes of the development of myopia. Neck muscle tension and stoop due to the need to focus on a fixed part of field of view for a long time is also an unfavorable factor. This applies to all cases of human work with the screens of laptops, mobile devices, reading paper books and documents.
To imagine the actual visible edges (not the focal length) of the screen, sit in front of a 65" or 1440mm (57.3 inches x 32.9 inches) TV screen at a distance of 22" or 550mm from your eyes. You can clearly see the right and left sides of the screen by turning your eyes. You don't need to use the peripheral part of the vision at the edges, it remains completely open due to the wide field of view of the device's visor. Only in the lower part, when using the airway obturator of the device, the field of view of the user is limited to about 20°, as is the case with any respirator or when wearing most models of glasses. Glasses tend to shrink the effective field of view to somewhere between 90 and 115 degrees horizontally and 35-45 degrees vertically, depending on the width and hight of the glasses and their proximity to the eyes.
We've added these comments because most people don't have experience with these kinds of AR devices yet. Microsoft IVAS (Hololens 2) uses holographic optics, thick lenses and FOV 43°h 28°v, Magic Leap has similar technology to Microsoft and FOV 45°h 55°v. Apple Vision Pro is a VR device (opaque LED display) like the Meta (Oculus) Quest - FOV 90°h 98°v[2], HTC Vive, SONY Playstation, etc. None of these technologies or devices are like ARHUDFM and when used in tactical tasks carry many significant risks. More about it here.
The main feature of Augmented Reality devices is that a person can only see lighter areas on a darker screen background. The nature of vision is that a person sees not objects, but the light reflected from them. Those, can see a high-contrast image in a darkened room (Microsoft uses a tinted visor) or at night, but see almost nothing against a bright sky, on a sunny day, with strong reflections from snow or building walls, when looking at the sun. A person will not be able to see dark areas on a light background in principle, since this contradicts the physics of light (dark areas are the absence of light). The ARHUDFM solves this problem by using "smart windows" - the interface contains 10 large and 56 small fading pads that instantly change their transparency from 0% (opaque black) to 100% (fully transparent) depending on the ambient light or the mode selected by the user.
Principles
Since the user interface of the ARHUDFM device has more functions than is usually used by users of computers and mobile devices, and the device is such that it can be used for a long time in tactical conditions, the following principles are observed:
- As small screen area as possible should obstruct the view of the actual visual environment at all times
- The user must maintain the minimum necessary view of the visual environment for orientation in space
- If any element of the interface is not directly needed by the user at the moment, it should not be displayed on the screen
- The user should be able to change the interface configuration very quickly
- The user must be able to simultaneously clearly distinguish between interface elements and the visual environment at any brightness.
- Interface elements must not be visible from the outside of the device or create light emission to the outside
- The user's face must not be illuminated by reflected radiation, must not be visible from the outside at the night
- The audio environment should not have an attenuation greater than 10 dB SPL, except when using the noise reduction features
Interface controls
Right hand hardware controls
- Joystick. Cursor movement, drone and robot control
- Device on/off button
- Headphone mode control button (see Status bar)
- Button "- >". Decrease, right arrow, PgDown.
- Button "< +". Increase, left arrow, PgUp.
- Button C. Click, left control button
- Button D. Context menu, Shift, right control button
Left hand hardware controls
- Headlamp (Spotlight) on / off button
- Headset connector for handheld portable / manpack radio (also ground / vehicular radio headset cable)
- Loudspeaker on / off and control button
- Button "< -". Decrease, left arrow, PgDown
- Button "+ >". Increase, right arrow, PgUp
- Button A. Click, left control button, headset PTT button for radio
- Button B. Context menu, Shift, right control button, Photo, other assigned functions
- Buttons A+B simultaneously start / stop video record
Software controls
- Voice assistant
- Machine learning (AI) algorithms are used to recognize the meaning of user commands, not necessarily the exact pronunciation of the voice command, including the ability to adapt to the voice and pronunciation of the user
- Gesture control
- The stereo camera captures the image of the hands and recognizes the user's gestures (more details on the Hand Tracking page)
- Gesture library constantly updated, Machine Learning allows the user to create custom gestures
- Gestures can indicate not only the state, but also the dynamics, for example, smoothly change the volume level, brightness, etc.
- Capturing and recognizing fingers allows to use software interface controls, including scrollbars, buttons (and a virtual keyboard if necessary), swipe sideways and up or down, scale and rotate screens inside a window, hide and move windows
Perception hardware
The advantage of this wearable and inexpensive device for tactical use by almost every military person is the ability to perceive light, sound and radio waves, inaccessible to humans.
- Cameras
- Image capture with a three-sensor front stereo camera. One objective lens transmits the image to the separation prisms and then to 3 sensors: DSLR IR-cut 4K/8K/12K UHD, SenSWIR, HDR
- Separate camera in the range of LWIR (thermal image vision)
- Separate rear view camera with extended visible light and SWIR
- Built-in Speed Booster reduces focal length and increases aperture for individual sensors
- Built-in teleconverter, on the contrary, increases the focal length for other sensors, increasing the image of distant objects
- Infrared and laser light sources are not used in this device, because this unmasks the user
- Microphones
- Built-in MEMS (Micro-Electro-Mechanical-Systems) mask airway obturator to transmit the user's voice
- An omnidirectional microphone on the front side of the mask allows to perceive sound waves in a wide range of frequencies, including those inaudible to humans, from very low to very high (used in Computer Audition modes)
- 1 or 2 ultra-cardioid microphones with a narrow polar pattern on the front of the mask allows to accurately determine the source of the sound wave (used in Computer Audition modes)
- 2 insulating layers, airway obturator and seal around face make the user's voice almost inaudible from the outside
- Radio antennas
- Built-in transmit-receive antennas in the ranges of the near radius of communications (Bluetooth, Wi-Fi, LTE, 5G)
- Integrated manpack antennas for communications in the VHF, UHF, UHF SAT, MUOS, L/S bands
- Integrated manpack antennas for analyzing and listening to the frequency ranges 2 MHz - 6 GHz
- Not every user needs a separate antenna or a set of several antennas with different characteristics, using the P2P network within the group, packets of messages and received data can be exchanged and routed
- Integrated passive radar antenna with active phased array (installed in NVG mount)
- Integrated handheld portable short-range active metal re-radiation radar antenna
- Integrated receiving antenna for radar warning system
- Integrated antenna for remote control of a drone or robot
- Integrated antenna for close-range remote control of an active phased array radar (portable or vehicle-mounted)
- Software-defined (reconfigurable) antenna (installed in NVG mount and the other two via the picatinny rails on the sides of the helmet)
- The software-defined antenna is capable of combining the functions of most integrated antennas
The specific is that when using a separate optical lens for each sensor on the left and right, there is a problem of parasitic multi-angle, which will have to be constantly leveled by software, which affects the accuracy of binocular stereo vision. If in a smartphone this is not critical, and there may be 4-8 cameras with their own optics, then for tactical tasks this is of great difficulty. In this case, on the left and right, it is necessary to accurately hold the horizontal distance between the lines of sight for each pair of sensors and position them vertically, and then programmatically compensate for the vertical shift in order to reproduce a single optical axis for the left and right channels. In addition, the design of the device should allow this to be done without difficulty, including taking into account the angle of the field of view of the optics and solving the problem of shadowing.
Menu items description
→redirect Further information: Public:Applications, Public:Voice User Interface
The menu has 7 functional sections:
- Status bar (SB)
- Left main menu (LMM)
- Right submenu (RSB)
- Left quick menu (LQM)
- Right quick menu (RQM)
- Left features sidebar (LFS)
- Right features sidebar (RFS)
The principle of managing menu items of some sections is the same, and some are different.
Status bar (SB)
The status bar is located in the top middle of the visible area and contains all the main and frequently used information about the use of device functions and applications.
A total of 12 items for quick selection and tracking are available in the status bar, each of which contains sub-elements responsible for specific function presets. Preset settings are carried out not through the status bar, but in the settings of services or applications. The status bar is always displayed and is not hidden. Each element is located in a separate field (fading pad).
The sub-elements of the status bar are controlled by clicking (joystick, gesture control) or by voice (the result corresponds to the click). Default states:
- Hover state: 4 corner segments of the field frame (in the above example in the "Radio Detection modes" field with the "IFF" function)
- Click state: frame on the border of the field (animation effect, twice 100 ms), with each click sequenced display of list elements (presets)
- Selected (long click >2 s): vertically positioned rectangle in the lower left corner
- Not selected (long click >2 s): no vertical rectangle in the lower left corner
Differences in voice control:
- The command to the voice assistant contains a description of the desired action and state, so it is faster
- The voice assistant understands different interpretations of actions and states, so there is no need to memorize voice commands
SB indication and change of display
| Indication | Designation | Field | Change of display / Short description |
|---|---|---|---|
 |
Time / Date | 1. |
|
 |
Battery | 1. |
|
 |
Water | 1. |
|
 |
Spotlight | 1. |
|
 |
Brightness modes | 2. | States are the default. Selecting a mode changes the brightness and fading of the fields (fading pads and all windows at the same time, it acts as sunglasses). For some apps, the app window fading settings are adjusted individually in the app for greater contrast, these settings take priority over the default settings |
 |
Windows modes | 3. | States are the default. The user can quickly and flexibly manage the window configuration for each window individually, see below Windows items description |
 |
Camera modes | 4. | States are the default. Depending on weather conditions and time of day, indoor or outdoor user activity, a quick preset selection is needed for effective surveillance, detection, and task execution |
 |
Audio modes | 5. | States are the default. Allows the user to quickly turn the loudspeaker on or off (as well as the buttons on the left headphones ear cup). Adjust the loudspeaker volume and monitor its status
Also allows to quickly adjust the mode and volume of the headphones (as well as the buttons on the right headphones ear cup). At least one mode and one headphone volume level are always on |
 |
Computer Vision modes | 6. | States are the default. Presets are available to the user for quick selection depending on tactical tasks. Presets can be turned on several at the same time and separately, which makes it possible to optimize the used computing resources and power consumption |
 |
Computer Audition modes | 7. | States are the default. A person hears sound as several frequencies (frequency carriers) at the same time and different frequencies at different volume levels. Presets are available to the user for quick selection depending on tactical tasks. Presets can be turned on several at the same time and separately, which makes it possible to optimize the used computing resources and power consumption |
 |
Radio Detection modes | 8. | States are the default. Any mission is associated with the tasks of SIGINT, identification of friend or foe, detection of drones and robots, anti-personnel and anti-tank mines, trip wires, IEDs, and counter-radar protection for each military person without exception. Presets are available to the user for quick selection depending on tactical tasks. Presets can be turned on several at the same time |
 |
Firing Assistance modes | 9. | States are the default. This mode helps to conduct accurately aimed fire using all types of sights: Red Dot, telescopic sight, and digital sight and is also compatible integration with the remote control of the robotic turret |
 |
Stealth modes | 10. | States are the default. This mode is necessary to limit visibility by means of enemy SIGINT |
 |
Vitals Body Tracking modes | 11. | Vitals Body Sensors Control (VBS) |
 |
Networks modes | 12. | Networks (NET) |
SB Presets
| Indication | Field name | Preset | Preset name | Actions |
|---|---|---|---|---|
| |
Time / Date, Battery, Water, Spotlights modes | na | Time / Date |
|
| na | Battery |
| ||
| na | Water |
| ||
| na | Spotlight |
| ||
| |
Brightness modes
OR condition when selecting presets (selecting one preset cancels the selection of the previously selected preset) |
AUTO | Auto |
|
| CLR | Clear day | fading pads 50%, fading windows 50%, projector beam 100% | ||
| CLD | Cloudy | fading pads 25%, fading windows 25%, projector beam 75% | ||
| TWL | Twilight | fading pads 0%, fading windows 0%, projector beam 75% | ||
| DRK | Dark night | fading pads 0%, fading windows 0%, projector beam 50% | ||
| NLTS | Night lights | fading pads 50%, fading windows 25%, projector beam 75% | ||
| DZLD | Dazzling day | fading pads 75%, fading windows 75%, projector beam 100% | ||
| |
Windows modes
AND / OR condition when selecting presets (selecting one preset in one case cancels, and in the other case does not cancel the selection of the previously selected preset) |
DFLT | Default | displays all active windows according to the configured application and feature priorities; DFLT - deselects any previously selected preset |
| OFF | Turn off all windows | turns off the display of all windows; OFF - deselects any previously selected preset | ||
| CLW | Central left window is On, central right window is Off | if both central windows (left and right) were used by default, disables the central right window, all functions remain available in the central left window; CLW cancels CRW and vice versa | ||
| CRW | Central right window is On, central left window is Off | as in the previous case, on the contrary, disables the central left window, improving the view of the environment; CRW cancels CLW and vice versa | ||
| BWON | Bottom windows only | turns off the upper windows (except LUW and RUW) on the left and right to improve the view ("knight's narrow visor effect"), transfers higher priority windows to the lower area, closes lower priority windows, does not turn off the central windows; BWON cancels LWON and RWON | ||
| LWON | Left windows only | turns off all windows on the right (except RUW) ("left eye effect"), transfers higher priority windows to the left area, closes lower priority windows, does not turn off central windows; LWON cancels RWON and BWON | ||
| RWON | Right windows only | turns off all windows on the left (except LUW) ("right eye effect"), transfers higher priority windows to the right area, closes lower priority windows, does not turn off central windows; RWON cancels LWON and BWON | ||
| |
Cameras modes
AND / OR condition when selecting presets (selecting one preset in one case cancels, and in the other case does not cancel the selection of the previously selected preset) |
FHD | Frontal HD cam | uses visible light range (400-780 nm) and dual sensor capabilities, high resolution and wide dynamic range under strong contrast lighting |
| RHD | Rear HD cam | turn the rear view camera on and off | ||
| SWIR | Night / Sky / Fog / Sea vision mode | uses a wider short-wavelength infrared light range (780-1700 nm), which is used to observe the reflection of ambient light in this range by objects located on the surface of the water, in fog, in smoke, in clouds, at dusk and at night | ||
| LWIR | Thermal image vision mode | uses long-wavelength invisible infrared light (7.5-14 µm) emitted by objects warmer in relation to the environment, mainly at night | ||
| SLV | Silhouette vision mode | turns on the transformation of the fill into a color outline mode that is well distinguishable in relation to the background for contrasting objects | ||
| MXV1 | Mixed vision mode Type 1: FHD + SWIR | allows to use the capabilities of three different sensors in different conditions day and night; 4K UHD + HDR + SWIR | ||
| MXV2 | MXV Type 2: SWIR + LWIR | allows to use the capabilities of two different sensors in different conditions day and night; SWIR + LWIR | ||
| MXV3 | MXV Type 3: FHD + SWIR + LWIR | allows to use the capabilities of four different sensors in different conditions day and night; 4K UHD + HDR + SWIR + LWIR | ||
| MXV4 | MXV Type 4: FHD + SWIR + LWIR (silhouette mode) | allows to use the capabilities of four different sensors in different conditions day and night; 4K UHD + HDR + SWIR + LWIR (silhouette mode) | ||
| |
Audio modes
AND / OR condition when selecting presets (selecting one preset in one case cancels, and in the other case does not cancel the selection of the previously selected preset) |
LSPK | Loudspeaker On/Off |
|
| L | Left On, right Off |
| ||
| R | Right On, left Off |
| ||
| LR | Left On, right On |
| ||
| 25 | 25% sound level | changes the headphone volume; 25 cancels 50, 75, 100 | ||
| 50 | 50% sound level | changes the headphone volume; 50 cancels 25, 75, 100 | ||
| 75 | 75% sound level | changes the headphone volume; 75 cancels 25, 50, 100 | ||
| 100 | 100% sound level | changes the headphone volume; 100 cancels 25, 50, 75 | ||
| |
Computer Vision[3][4] modes
AND condition when selecting presets (selecting one preset in one case does not cancel the selection of a previously selected preset) |
OD | Object detection |
|
| MD | Motion detection |
| ||
| FD | Facial detection |
| ||
| FR | Facial recognition |
| ||
| OCR | Optical character recognition |
| ||
| HSTD | Heat and smoke trace detection |
| ||
| |
Computer Audition modes
Условие AND при выборе пресетов (выбор одного пресета в одном случае не отменяет выбор ранее выбранного пресета). |
DAM | Detect noises of aircraft motor |
|
| ENAT | Exclude sounds of nature |
| ||
| ECHO | Eliminate echo |
| ||
| DHUM | Detect noises of human activity |
| ||
| STHR | Limit sound threshold |
| ||
| |
Radio detection modes
Условие AND при выборе пресетов (выбор одного пресета в одном случае не отменяет выбор ранее выбранного пресета). |
IFF | Identification Friend-or-Foe |
|
| RDF | Radio Direction Finding[6] |
| ||
| RFDD | Radio Frequency Drone Detection[7] |
| ||
| EODD | Radio Frequency Explosive Ordnance Disposal Detection |
| ||
| RWR | Radar Warning Receiver[8] |
| ||
| |
Firing assistance modes
Условие OR при выборе пресетов (выбор одного пресета отменяет выбор ранее выбранного пресета). |
GF | Fire on ground fixed targets |
|
| GM | Fire on ground moving targets |
| ||
| AM | Fire on aerial moving targets |
| ||
| MF | Mountain fire on fixed targets (prospective function) |
| ||
| MM | Mountain fire on moving targets (prospective function) |
| ||
| |
Stealth modes
Условие OR при выборе пресетов (выбор одного пресета отменяет выбор ранее выбранного пресета). |
IFF | IFF visible only |
|
| SD | Short distance visible only |
| ||
| FULL | Zero emission |
| ||
| OFF | OFF |
| ||
| |
Vitals body tracking modes
Условие OR при выборе пресетов (выбор одного пресета отменяет выбор ранее выбранного пресета). |
WRK | Workout mode |
|
| TRN | Training mode |
| ||
| TACT | Tactical mode |
| ||
| OFF | OFF |
| ||
| |
Networks modes
AND |
Network 1 |
| |
| Network 2 | ||||
| Network 3 | ||||
| Network 4 | Signal levels, upload / download transmission status |
→redirect Further information: Public:Applications, Public:Voice User Interface
| Left | Center | Right | |||
|---|---|---|---|---|---|
| LMMP | Left main menu fading pads | SBP | Status bar fading pads | RSBP | Right submenu fading pads |
| LQMP | Left quick menu fading pads | CLW | Central left window | RQMP | Right quick menu fading pads |
| LFSP | Left features sidebar fading pads | CRW | Central right window | RFSP | Right features sidebar fading pads |
| LUW | Left Upper window | CWJP | Central window joystick pads | RUW | Right Upper window |
| LTAW | Left Top A window | CWBP | Central window buttons pads | RTAW | Right Top A window |
| LTBW | Left Top B window | RTBW | Right Top B window | ||
| LBAW | Left Bottom A window | RBAW | Right Bottom A window | ||
| LBBW | Left Bottom B window | RBBW | Right Bottom B window | ||
Главное меню (LMM) находится слева сверху видимой области и содержит список разделов.
Всего 7 элементов для быстрого выбора в одном ряду. Для выбора следующего ряда используются навигационные стрелки справа. Главное меню отображается только при наведении курсора или при голосовом вызове. При неактивности скрывается через 15 сек. Каждый элемент расположен в отдельном поле (fading pad). Показываются только поля, отображающие раздел.
Правое субменю (RSB) находится сверху справа и раскрывает второй более низкий уровень элементов главного меню. Всего 7 элементов в одном ряду. Для навигации используются стрелки слева. Правое субменю отображается только при активном состоянии одного из пунктов главного меню слева (LMM) или при голосовом вызове непосредственно пункта субменю. При неактивности скрывается одновременно с главным меню через 15 сек. Каждый элемент расположен в отдельном поле (fading pad). Показываются только поля, отображающие раздел.
Когда приложение открыто с помощью данного меню, оно показывается на экране. Если пользователь закрывает приложение, оно не прекращает свою работу, а продолжает работать в фоновом режиме, одновременно в поле меню LQM (right quick menu) или RQM (right quick menu) появляется элемент с названием данного приложения для быстрого возврата на экран. Как полностью прекратить работу приложения, см. ниже в разделах Left quick menu (LQM) и Right quick menu (RQM).
(!) Картинки с внешним крупным видом LMM и отдельно крупно RSB вставить здесь:
Управление субэлементами главного меню и субменю выполняется кликом (джойстик, управление жестами) или голосом. Состояния:
- Hover state: 4 угловых сегмента рамки поля
- Click state: рамка по границе поля (эффект анимации, дважды по 100 ms)
- Selected (long click >2 s): горизонтально расположенные два прямоугольника справа и слева от надписи
- Not selected (long click >2 s): горизонтально расположенные два прямоугольника справа и слева от надписи отсутствуют
Отличия при голосовом управлении:
- Команда голосовому ассистенту содержит описание требуемого действия и состояния, поэтому выполняется быстрее
- Голосовой ассистент понимает разные интерпретации действий и состояний, поэтому не нужно запоминать голосовые команды наизусть
- При голосовом вызове показывается не всё меню целиком, а соответствующие пункты главного меню и субменю
- Пользователь может вызвать голосом отображение всего меню целиком
| LMM | RSB | Action | Notice |
|---|---|---|---|
| MSG
(Messenger) |
IMSG (instant messaging system) |
|
|
| CHAT (multichannel chat) |
|
LMM для всех каналов, RSB и RFS для соответствующего канала:
| |
| MAIL (eMail) |
|
||
| SDR2 (SDR 2-way) |
|
||
| CRPT (cryptologic control) |
|
||
| PTTH (PTT headset) |
|
||
| TSK (Tasks) |
|
Система управления задачами позволяет планировать и контролировать срок, точность, результаты, эффективность выполнения задач. Содержит описание, чек-лист, дедлайн, фактическое время выполнения и затраченное время (в т.ч. автотрекинг завершения и отсчёт затраченного времени), уведомление о текущем статусе, геопозицию в момент завершения, артефакты подтверждения выполнения задачи, вложения, комментарии |
|
| CAL (Calendar) |
|
Календарь событий позволяет заранее планировать и согласовывать события, требующие определённого регламентов времени: коллективные онлайн и офлайн коммуникации, собрания, учебные семинары, командировки |
|
| WGR (Workgroups) |
|
Субменю содержит фильтры для групп.
Можно выбрать участника или группу в соответствующем разделе для коммуникаций, обмена данными, отправки или запроса позиции. Элемент CDI (Cross-Domain Interaction) |
|
| MAP
(Maps & Navigation) |
CMPS (Compass) |
|
|
| NAV (Navigation) |
|
||
| PATH (Path tracking) |
|
||
| PLAN (Mission planning) |
|
| |
| ANLS (Mission analysis) |
|
| |
| SINT
(SIGINT) |
SDRS (SDR Scan) |
|
|
| RDF (Radio Direction Finding Control) |
|
||
| PCSR (Passive covert radar control) |
|
||
| RWRC (Radar warning receiver control) |
|
||
| APAR (Active phased array radar control) |
|
||
| RFDD (RF Drone Detection Control) |
|
||
| EODD (RF EOD Detection Control) |
|
||
| RC
(Remote Control) |
RPAC (Drone RC) |
|
|
| RBRC (Robot RC) |
|
||
| FTRC (Fire turret RC) |
|
||
| UVRC (Unmanned vehicle RC) |
|
||
| WIKI (Wiki) |
|
Вики-системы доказатели свою эффективность для накопления и обмена знаниями, которые необходимы каждому почти ежедневно. Данная система позволяет собирать лучшие практики и улучшать процесс обучения и тренировки, а также время от времени освежать знания даже у опытных пользователей. Всевозможная информация о техническом устройстве и обслуживании оборудования, организации процессов на военных базах, расписания, материалы анализа военных экспертов и т.д. То, что поможет стать эффективнее. Безусловно, распределённые права доступа, защита информации и конфиденциальность в соответствии с действующими протоколами. |
|
| MMD (Multimedia) | REC (multimedia recorder)
PLAY (multimedia player) |
|
|
| VM (Virtual mentor incl. video chat) |
|
||
| TRSL (Translater) |
|
||
| FILE (File explorer) |
|
|
|
| PROC (Processing Control) | CVC (Computer Vision Control) |
|
|
| CAC (Computer Audition Control) |
|
||
| IFF (IFF Control) |
|
||
| STM (Stealth Modes Control) |
|
||
| FA (Firing Assistance Control) |
|
||
| VBS (Vitals Body Sensors Control) |
|
||
| ANTC (Antennas Control) |
|
||
| DVC (Integrated devices) |
|
|
|
| NET (Networks) |
|
|
|
| SYS (System) | CAM (Cameras Control) |
|
|
| DISP (Display Control) |
|
||
| FPAD (Fading Pads Control) |
|
||
| MMC (Multimedia Control) |
|
||
| TESS (Voice assistant) |
|
||
| HT (Hand tracking system) |
|
||
| STT (Speech-to-text settings) |
|
||
| VOVR (Voiceover settings) |
|
||
| INP (Joystick and buttons settings) |
|
||
| GNSS (GNSS) |
|
||
| ACC (Accounts & Sync) |
|
||
| SEC (Security) |
|
||
| ADM (Admin only) |
|
||
| SRV (Services) |
|
Отображает свёрнутые (внутри рамки) и открытые окна приложений левой половины экрана. Чтобы полностью прекратить работу приложения необходимо выполнить долгий клик и нажать подтверждение в окне нотификаций.
Отображает свёрнутые (внутри рамки) и открытые окна приложений правой половины экрана. Чтобы полностью прекратить работу приложения необходимо выполнить долгий клик и нажать подтверждение в окне нотификаций.
Left features sidebar (LFS)
Отображает:
- функциональные кнопки некоторых активных приложений в левой половине экрана, когда их много и нежелательно уменьшать видимую область окна приложения
- список приоритетных задач для приложения TSK
- список последних просмотренных статей для приложения WIKI
- список лидов в одноранговой сети для приложения P2P и их характеристики в реальном времени
- список приоритетных каналов для приложения WGR
Right features sidebar (RFS)
Отображает:
- функциональные кнопки некоторых активных приложений в правой половине экрана, когда их много и нежелательно уменьшать видимую область окна приложения (например, SDRS)
- список диалогов приложения CHAT и фильтры диалогов
- список последних команд через приложение IMSG
- список сделанных фотографий и видеозаписей для приложения PLAY
- список участников видеоконференции для приложения VM
Virtual control tools
Отображает:
- Программные (продублированные с аппаратными) джойстики и кнопки для управления дроном, роботом, турелью, беспилотным транспортом
- Программные кнопки управления камерами дронов, роботов и беспилотного транспорта
- Джойстики и кнопки для управления перемещением позиций на карте и отметки точек маршрута
- Кнопки управления и навигации для мультимедиа
Windows items description
→redirect Further information: Public:Applications
Fading windows and pads
| Left | Center | Right | |||
|---|---|---|---|---|---|
| LMMP | Left main menu fading pads | SBP | Status bar fading pads | RSBP | Right submenu fading pads |
| LQMP | Left quick menu fading pads | CLW | Central left window | RQMP | Right quick menu fading pads |
| LFSP | Left features sidebar fading pads | CRW | Central right window | RFSP | Right features sidebar fading pads |
| LUW | Left Upper window | CWJP | Central window joystick pads | RUW | Right Upper window |
| LTAW | Left Top A window | CWBP | Central window buttons pads | RTAW | Right Top A window |
| LTBW | Left Top B window | RTBW | Right Top B window | ||
| LBAW | Left Bottom A window | RBAW | Right Bottom A window | ||
| LBBW | Left Bottom B window | RBBW | Right Bottom B window | ||
Как уже было написано в самом начале описания пользовательского интерфейса, в устройстве для контрастного отображения используются затухающие окна и площадки. Иначе на светлом и ярком фоне окружающей среды пользователю будет сложно видеть изображения контрастным. Затухающие окна и площадки в зависимости от режимов яркости имеют разную степень прозрачности. А в случае яркого света дополнительно выполняют функцию солнцезащитного экрана.
Окна приложений и функций располагаются в большей и наилучшей видимой области. Всего 12 независимых окон (8 больших 1.78:1, 2 больших 1.20:1, 2 малых 19.86:1), каждое из которых содержит субэлементы управления, когда окно выделено с помощью клика или голосом (selected state). Не выделенное окно является пассивным окном, которое отображает только графику приложения, элементы управления окном скрыты, элементы управления приложением скрыты. Окна разных прилоожений имеют разный приоритет отображения, который настраивается в настройках системы для каждого приложения. В зависимости от выбранного пресета в Status bar (SB) конфигурации отображаемых окон могут быть быстро и гибко изменены пользователем.
(!) Вставить галерею с картинками примеров
Управление субэлементами окон выполняется кликом (джойстик, управление жестами) или голосом. Состояния:
- Hover state: частая пунктирная линия вдоль рамки поля
- Click state: рамка по границе поля (эффект анимации, дважды по 100 ms)
- Selected (long click >2 s): редкая пунктирная линия вдоль рамки поля
- Not selected (long click >2 s): пунктирная линия отсутствует
Отличия при голосовом управлении:
- Команда голосовому ассистенту содержит описание требуемого действия и состояния, поэтому выполняется быстрее
- Голосовой ассистент понимает разные интерпретации действий и состояний, поэтому не нужно запоминать голосовые команды наизусть
Пользователь может быстро и гибко управлять конфигурацией окон для каждого окна в отдельности:
- Пользователь может принудительно закрыть любое окно в любое время, выделив нужное окно (selected state), нажав на иконку "закрыть окно" (приложение остаётся в фоновом режиме, для обратного действия кликнуть на иконку в меню быстрого выбора)
- Пользователь может увеличить левое или правое большое центральное окно на всю область центрального окна (объединённое окно 2.40:1), выделив нужное окно (selected state), нажав на иконку "увеличить окно"
- Пользователь может увеличить большое осно слева или справа на всю левую или правую область окна (объединённое окно 1.78:1 x2), выделив нужное окно (selected state), нажав на иконку "увеличить окно"
- При нажатии на иконку "уменьшить окно" окно возвращается в исходное состояние
- Иконка "сместить окно влево" смещает его влево, затем вверх направо, затем влево, меняя расположение других окон
- Иконка "сместить окно вправо" смещает окно вправо, затем вниз налево, затем вправо, меняя расположение других окон
- Иконка "поделиться экраном" позволяет отправить скриншот окна или включить трансляцию данного окна для другого пользователя
Apps priority for windows
| LUW | CLW | CRW | RUW | ||
|
|
|
| ||
| LTAW | LTBW | CWJP (left) | CWJP (right) | RTAW | RTBW |
|
|
|
|
|
|
| LBAW | LBBW | CWBP (left) | CWBP (right) | RBAW | RBBW |
|
|
|
|
|
|
| Window | Mode | Notice |
|---|---|---|
| Left Upper window (LUW) | Обычно используется долговременно | |
| Left top A window (LTAW) | Используется при необходимости, не рекомендуется во время интенсивного боя, чтобы не ограничивать видимость окружающей среды | |
| Left top B window (LTBW) | Обычно используется кратковременно, чтобы не ограничивать видимость окружающей среды | |
| Left bottom A window (LBAW) | Обычно используется долговременно | |
| Left bottom B window (LBBW) | Обычно используется долговременно | |
| Central left window (CLW) | Обычно используется кратковременно, чтобы не ограничивать видимость окружающей среды | |
| Central right window (CRW) | Обычно используется долговременно | |
| Right Upper window (RUW) | Обычно используется долговременно | |
| Right top A window (RTAW) | Обычно используется кратковременно, чтобы не ограничивать видимость окружающей среды | |
| Right top B window (RTBW) | Используется при необходимости, не рекомендуется во время интенсивного боя, чтобы не ограничивать видимость окружающей среды | |
| Right bottom A window (RBAW) | Обычно используется долговременно | |
| Right bottom B window (RBBW) | Обычно используется долговременно |
Shifts windows to the left and right
- Общее правило "слева направо, сверху вниз" (список перемещения 10 больших окон):
- LTAW - left top window A
- LTBW - left top window B
- LBAW - left bottom window A
- LBBW - left bottom window B
- CLW - central left window
- CRW - central right window
- RTAW - left top window A
- RTBW - left top window B
- RBAW - left bottom window A
- RBBW - left bottom window B
- Если активное окно расположено в левой части и он перемещается влево, он перемещается выше по списку
- Если активное окно расположено в левой части и он перемещается вправо, он перемещается ниже по списку, сначала в центр видимой области, затем в правую часть
- Если место, куда перемещается активное окно не занято другим окном, другие окна не меняют своего положения
- Другой отображаемое окно, на место которого смещается активное окно вниз по списку, автоматически перемещается выше по списку и занимает предыдущее место смещаемого активного окна
- Другой отображаемое окно, на место которого смещается активное окно вверх по списку, автоматически перемещается ниже по списку и занимает предыдущее место смещаемого активного окна
- Обычно отображаются менее 10 больших окон, поэтому смещение активного окна не приводит с смещению большинства других окон
- Если отображаются все 10 больших окон, смещение активного окна на несколько позиций в списке вызывает последовательное автоматическое временное смещение соседнего окна, который затем снова возвращается на предыдущее место
- Если окно максимизировано, оно автоматически минимизируется и перемещается по общему правилу, при необходимости его нужно максимизирован снова
- Пользователь может выделить два или более окон одновременно, удерживая клавишу D (рядом с джойстиком) headphones ear cup правого наушника (аналогично правой клавиши мыши)
- Выделив окно и удерживая клавишу C (аналогично левой клавиши мыши) headphones ear cup правого наушника пользователь может переместить окно или несколько окон одновременно одним действием с помощью джойстика - в этом случае, если перемещается группа окон, они будут располагаться последовательно рядом по списку (даже если в предыдущем их местоложении они не были расположены последовательно рядом по списку)
- Малые окна перемещаются только влево или вправо на место аналогичного малого окна
- Если малое окно перемещается вправо, другое окно перемещается влево (меняются местами)
- Если приложение запускает малое окно в то время, когда оба малых окна отображают информацию других приложений, тогда окно с приложением, имеющим наименьший приоритет, скрывается в меню быстрого выбора
- Если одно малое окно закрывается, на его месте ничего не отображается, для отображения на этом месте окна другого приложения необходимо кликнуть на него в меню быстрого выбора или в главном меню
- Если приложение запускает большое окно, которое имеет больший приоритет для уже занятого окна, тогда окно с меньшим приоритетом перемещается в другое место, как предусмотрено правилами приоритета окон и приложений. При закрытии окна с большим приоритетом, конфигурация окон возвращается в предыдущее состояние
- Если приложение запускает большое окно, когда нет свободного места для отображения окон, окно с наименьшим приоритетом скрывается автоматически в меню быстрого выбора. При закрытии одного из окон с большим приоритетом, восстанавливается предыдущее состояние отображения окон. При необходимости отображения окна с меньшим приоритетом, необходимо освободить место для него, свернув один из окон в меню быстрого выбора
Прокрутка окна на (4/5 высоты окна или в строках - настраивается индивидуально) выполняется иконками вверх и вниз или кнопками джойстика "< +" и "- >" снизу headphones ear cup правого или левого наушника (аналогично клавишам мыши PageUp, PageDown). Также плавная прокрутка окна джойстиком, голосовой командой или жестом (в т.ч. виртуальным джойстиком или обособленным жестом).
Элементы управления (иконки управления окном, функциональные программные кнопки интерфейса приложения, расположенные на Sidebar Left or Sidebar Right, виртуальные джойстики) относятся только к активному (selected) окну. Для пассивного окна (not selected) они не отображаются.
Отдельно для иконок управления окном - после того, как окно стало активным (selected), иконки управления окном отображаются в течение 15 с, после чего исчезают. Для их повторного отображение необходимо снова выделить данное окно. Пунктирная рамка выделения активного окна отображается в течение всего времени активного состояния окна.
! Кроме того, принудительное использование некоторых окон может выполнить функцию солнцезащитного козырька тогда, когда солнце находится низко над горизонтом на линии визирования. Пользователь может смещать окно в нужную область и перекрывать ослепляющий вид на солнце, не затемняя всю область визирования.
Interface Animation
Interface Items Motion
- принципиальный вид
- активный вид при работе с меню
- процесс выбора пункта меню (скролл элементов, изменение вида при входе в подменю 1-го уровня / 2-го уровня / 3-го уровня)
- постоянный (продолжительный) вид (статусы, нотификации, активные пункты меню)
- включение и смена затухающих окон (правила, варианты комбинации в одновременном виде)
Modern tools
1. MRTK-Unity is a Microsoft-driven project that provides a set of components and features, used to accelerate cross-platform MR app development in Unity. Here are some of its functions:
- Provides the cross-platform input system and building blocks for spatial interactions and UI.
- Enables rapid prototyping via in-editor simulation that allows you to see changes immediately.
- Operates as an extensible framework that provides developers the ability to swap out core components.
- Supports a wide range of platforms.
2. Unity Mars helps solve the hard problems of AR app creation:
- Overcome the challenges of authoring for dynamic physical environments
- Reduce development time
- Release cross-platform experiences with support for iOS, Android, and HoloLens
Manuals
Troubleshooting
Areas of research
Related fields
Future ideas
Further reading
See also
| Public External Sections: | Public Wiki Sections: | Public Wiki Sections: | Not-Public Wiki Sections: |
|---|---|---|---|
Note: Unless otherwise stated, whenever the masculine gender is used, both men and women are included.
See also product details
| Hardware Details: | Functional Apps Details: | Executive Apps Details: | Service Apps Details: |
|---|---|---|---|
References
- ↑ Wikipedia, "Field of view"
- ↑ GitHub, Pimax Forum, "HMD Geometry Database"
- ↑ Wikipedia, "Outline Computer Vision"
- ↑ Wikipedia, "Computer Vision"
- ↑ Wikipedia, Artillery sound ranging
- ↑ Wikipedia, "Radio direction finding"
- ↑ AARTOS, "RF Drone Detection", "Antennas"
- ↑ Wikipedia, "List of radar types", "Counter-battery radar"
- ↑ Wikipedia, "Counter-battery radar"
- ↑ Wikipedia, "Monitoring (medicine)"