Public:Graphical User Interface

From Wiki Furtherium

Dev (temporary)

  1. Write out scenarios
  2. Mockups
  3. Make a storyboard
  4. Animate elements
  5. Panning video animations
  6. Insert a dynamic background (bright day, cloudy day, overcast day, twilight, night, night with bright highlights)

Шаблон страницы приложения:

  • Возможности
  • Примеры интерфейса
  • Требования к ресурсам
  • Примеры
  • Референсы опенсорс

Интро: Мы оцениваем путь разработки полной функциональности в 4-5 лет. Запуск поэтапный, от простого к сложному. Значительная часть - опенсорс. Требования военных - открытая возможность для разработки приложений сторонними командами.


ИИ:

  • Интерпретатор голосовых запросов в команды для приложений
  • Машинное обучение на основе ранее выполненных команд данным пользователем и опытными инструкторами
  • Обзор лучших практик на основе выгрузки на сервер трекшн тысяч пользователей и контактные подсказки пользователю на их основе
  • ИИ на основании цели от пользователя запускает приложение в фоновом экономичном режиме и после выполнения сообщает результат и демонстрирует его на экране, затем сам скрывает окно после реакции пользователя

Цифровой прицел:

  • по аналогичной трёх сенсорной схеме мы сможем разработать прицел с блютуз
  • при значительном расхождении линии прицеливания и линии взгляда пользователя, экран автоматически разделится на два (например при стрельбе из-за углового укрытия). В этом случае CV будет обрабатывать поток с камеры прицела, а не маски.

Группы функций: 1. Ситуационная осведомлённость - Cams (users, drones, bites), CV, CH 2. Многоканальные коммуникации - IMS, Text, Voice, multichannel 3. EW&SIGINT - SDRS, RDF, passive radar, Anti-Radar, active radar 4. RC 5. Fire assist 6. AI - voice assist, apps, FA, RC, tasks 7. Task Management, CDI, BMS 8. Обучение, тренировка, L-STE

Interface description

Интерфейс предназначен для экрана устройства ARHUDFM с FOV 105°h and 33°v, имеет разрешение 2560px по ширине.

Нормальное стереоскопическое бинокулярное зрение человека составляет 180° по горизонтали, вверх 55°, вниз 60°. Если исключить важную для ситуационной осведомлённости зону периферического зрения, комфортным полем зрения, особенно если человек носит офтальмологические корректирующие очки, будет 110° по горизонтали, 25° вверх и 30° вниз. Поскольку обтюратор маски снизу является препятствием для обзора, поле зрение человека в маске снизу меньше обычного (тем не менее пилоты боевых самолётов имеют достаточный обзор). По горизонтали пользователь в маске имеет полный обзор всего поля, включая периферийную часть, что более важно.

Видимое поле проецируется LED лучами DLP проектора, предлагающего высокую контрастность и лучшую цветопередачу, с высоким откликом.

В отличие от вредного влияния синего участка спектра света (светлые цвета содержат много синего), излучаемого LED-экраном монитора или мобильного устройства, которое при длительном воздействии вызывает чувство усталости, головную боль и проблемы со сном, отражённый свет DLP проектора (и других типов проекторов тоже) не имеет таких недостатков. Кроме того в устройстве ARHUDFM принцип отображения интерфейса напоминает ночной режим (тёмный фон, светлые графические символы). Эти условия для пользователя создают возможность круглосуточной работы без напряжения.

Постоянный оптический фокус настроен на мнимое расстояние 1900 мм от глаз пользователя, что предотвращает конфликт вергенции и аккомодации, чтобы глаза пользователя не уставали во время долгого использования. Никакие виртуальные зрительные объекты не имеют другой глубины изображения, точно так же, как если пользователь будет наблюдать экран дисплея на расстоянии 1900 мм одновременно с наблюдением остальной картины окружающей среды с фокусом, ориентированным на бесконечность. Это утверждение основано на многочисленных исследованиях и опытах разных лабораторий с большим числом респондентов.

Напряжение мышц глаза из-за близкого расстояния до рассматриваемого объекта вызывает усталость, в том числе является одной из причин развития близорукости. Напряжение мышц шеи и сутулость из-за необходимости длительное время фокусировать взгляд на неподвижной области обзора тоже является неблагоприятным фактором. Это касается всех случаев работы человека с экранами ноутбуков, мобильных устройств, чтения бумажных книг и документов.

Чтобы представить реальные видимые границы (не фокусное расстояние) экрана, сядьте перед экраном телевизора с диагональю 65"/1440mm (57.3 inches x 32.9 inches) на расстоянии 22"/550мм от глаз. Вы отчётливо видите правые и левые части экрана за счёт поворота глаз. Вам не нужно использовать периферическую часть зрения по краям, она остаётся полностью открыта благодаря широкому обзору визора устройства. Лишь только в нижней части при использовании обтюратора дыхательной системы устройства, поле зрение пользователя ограничено примерно на 20° (как в случае использования любого респиратора или при ношении большинства моделей очков).

Мы добавили эти комментарии, потому что большинство людей пока не имеет опыта использования подобных AR-устройств. Microsoft IVAS (Hololens 2) использует голографическую оптику, толстые линзы и FOV 80°h 28°v, Magic Leap имеет схожую на Micrisoft технологию и FOV 45°h 55°v. Apple Vision Pro является VR-устройством (непрозрачный LED дисплей), как Meta (Oculus) Quest, HTC Vive, SONY Playstation и др. Ни одна из данных технологий или устройств не похожа на ARHUDFM и при использовании в тактических задачах несёт много существенных рисков. More about it here.

Главная особенность устройств дополненной реальности в том, что человек может видеть только более светлые участки на более тёмном фоне экрана. Природа зрения в том, что человек видит не предметы, а отражённый от них свет. Т.е. может видеть контрастное изображение в затемнённом помещении (Microsoft использует тонированный визор) или ночью, но практически ничего не увидит на фоне яркого неба, в солнечный день, при сильном отражении от снега или стен зданий, при взгляде на солнце. Человек не сможет видеть тёмные участки на светлом фоне в принципе, так как это противоречит физике света (тёмные участки - это отсутствие света). В устройстве ARHUDFM эта проблема решена с помощью "умных окон" - интерфейс содержит 10 больших и 24 малых fading pads, которые в зависимости от окружающего освещения или выбранного пользователем режима мгновенно меняют свою прозрачность от 0% (непрозрачный чёрный) до 100% (полностью прозрачный).

Поскольку интерфейс устройства ARHUDFM имеет больше функций, чем обычно используется пользователями компьютеров и мобильных устройств, а особенность устройства такова, чтобы использовать его длительное время в тактических условиях, соблюдаются следующие принципы:

  1. Как можно меньшая площадь экрана должна мешать обзору реальной окружающей среды в любое время
  2. Пользователь должен сохранять минимально необходимую часть обзора окружающей среды для ориентирования в пространстве
  3. Если какой-либо элемент интерфейса непосредственно в данный момент не нужен пользователю, он не должен отображаться
  4. Пользователь очень быстро должен иметь возможность менять конфигурацию интерфейса
  5. Пользователь должен иметь возможность одновременно чётко различать элементы интерфейса и окружающую среду при её любой яркости
  6. Элементы интерфейса не должны быть видны снаружи устройства или создавать эмиссию светового потока
  7. Лицо пользователя не должно быть подсвечено отражённым излучением, видимым снаружи

Органы управления интерфейсом

Аппаратные органы управления правой рукой

  • Джойстик. Перемещение курсора, управление дроном и роботом.
  • Кнопка включения и выключения устройства
  • Кнопка управления режимами наушников (см. Status bar)
  • Кнопка "- >". Уменьшение, стрелка вправо, PgDown.
  • Кнопка "< +". Увеличение, стрелка влево, PgUp.
  • Кнопка C. Click, left control button.
  • Кнопка D. Context menu, Shift, right control button.

Аппаратные органы управления левой рукой

  • Кнопка включения, выключения и управления ярким прожектором
  • Разъём для подключения гарнитуры носимой радиостанции
  • Кнопка включения, выключения и управления громкоговорителем
  • Кнопка "< -". Уменьшение, стрелка влево, PgDown.
  • Кнопка "+ >". Увеличение, стрелка вправо, PgUp.
  • Кнопка A. Click, left control button, headset PTT button for handheld radio.
  • Кнопка B. Context menu, Shift, right control button. Photo. Другие назначенные функции.
  • Кнопка A + B одновременно start/stop video record.

Программные органы управления

  • Голосовой ассистент
    • Используются алгоритмы машинного обучения (ИИ), которые позволяют интерпретировать смысл команд пользователя, а не обязательно точное произношение голосовой команды, в том числе позволяют адаптироваться к голосу и произношению конкретного пользователя.
  • Управление жестами
    • ...
  • Сделать категорию Приложения и страницы для каждого приложения (функции, интерфейс). Сделать шаблон для добавления
  • Сделать категорию Продукт и страницы для каждого функционального модуля

Basic perception hardware

Преимущество данного носимого и недорогого устройства для тактического применения практически каждым военнослужащим - возможности восприятия света, звука и радиоволн, недоступные человеку.

  1. Видеокамеры
    • Захват изображения с помощью трёхсенсорной фронтальной стереокамеры. Один объектив передаёт изображение на разделительные призмы и далее на 3 сенсора.
      • (a) DSLR 64 MP Hawk-eye, diagonal 9.25 mm (7.4 x 5.55 mm), type 1/1.7" (9152 x 6944 px, x16 zoom, manual / autofocus) IR-cut filter removable, view angle 84°
      • (b) SenSWIR SONY IMX990 1.31 MP, diagonal 8.2 mm, type 1/1.2" (1280 x 1024 px), 400-780 + 780-1700 nm, также используется в качестве единственного сенсора для камеры заднего вида
      • (с) SONY STARVIS 2 12.61 MP diagonal 10.04 mm, type 1/1.6" (3536 x 3536 px, HDR)
    • Камера в диапазоне LWIR (thermal image vision)
    • Камера заднего вида в расширенном диапазоне видимого света и SWIR
  2. Микрофоны
    • Встроенный в обтюратор маски MEMS (Micro-Electro-Mechanical-Systems) микрофон для передачи голоса пользователя (2 изолирующих слоя, обтюратора и нижней части корпуса, делают голос пользователя почти неслышимым снаружи)
    • Микрофон с широкой диаграммой направленности на передней стороне маски позволяет воспринимать звуковые волны в широком диапазоне частот, в том числе неслышимых человеком, от очень низких до очень высоких (применяется в режимах Computer Hearing)
    • Суперкардиодный микрофон с узкой диаграммой направленности на передней стороне маски позволяет с высокой точностью определять источник звуковой волны (применяется в режимах Computer Hearing)
  3. Радиоантенны
    • Встроенные приёмо-передающие антенны в диапазонах ближнего радиуса коммуникаций (Bluetooth, Wi-Fi, LTE, 5G)
    • Интегрируемые антенны (ранцевое крепление за спиной) для коммуникаций в диапазонах VHF, UHF, спутниковой связи
    • Интегрируемые приёмные антенны (ранцевое крепление за спиной) для анализа диапазонов частот 2 MHz - 6 GHz
    • Интегрируемая антенна пассивного радара с активной фазированной решеткой (устанавливается в NVG mount)
    • Интегрируемая переносная антенна активного metal re-radiation radar ближнего радиуса действия
    • Интегрируемая приёмная антенна системы предупреждения о радарном облучении
    • Дистанционное управление в ближнем радиусе действия активным радаром с активной фазированной решёткой (переносной или установленный на транспортном средстве)

Особенность в том, что при использовании отдельного оптического объектива для каждого сенсора слева и справа получится проблема паразитной многоракурсности, которую придётся постоянно нивелировать программным способом, что влияет на точность бинокулярного стереозрения. Если в смартфоне это не является критичным, и там может быть 4-8 камер с собственной оптикой, то для тактических задач это представляет большую сложность. В этом случае слева и справа необходимо точно выдержать горизонтальное расстояние между линиями визирования для каждой пары сенсоров и расположить их по вертикали, а затем программно скомпенсировать вертикальное смещение, чтобы воспроизвести единую оптическую ось для левого и правого канала. Кроме того, конструкция устройства должна позволить это сделать без затруднения, в том числе учесть угол поля зрения оптики и решить проблему засветки.

Menu items description

Меню имеет 9 функциональных разделов. Принцип управления элементами меню некоторых разделов одинаков, а у некоторых отличается.

Status bar (STB)

Меню статусов находится посередине сверху видимой области и содержит всю главную и часто используемую информацию об использовании функций устройства и приложений. Всего 12 элементов для быстрого выбора и отслеживания имеются в меню статусов, каждый из которых содержит субэлементы, отвечающие за конкретные пресеты функций. Настройки пресетов осуществляются не через меню статусов, а в настройках устройства, служб или приложений. Меню статусов отображается всегда и не скрывается. Каждый элемент расположен в отдельном поле (fading pad).

Картинку заменить:



Управление субэлементами выполняется кликом (джойстик, управление жестами) или голосом. Состояния:

  • Hover state: 4 угловых сегмента рамки поля
  • Click state: рамка по границе поля (эффект анимации, дважды по 100 ms), при каждом клике в установленной последовательности чередуется отображение элементов списка (пресетов)
  • Selected (long click >2 s): вертикально расположенный прямоугольник в левом нижнем углу
  • Not selected (long click >2 s): вертикально расположенный прямоугольник в левом нижнем углу отсутствует

Отличия при голосовом управлении:

  • Команда голосовому ассистенту содержит описание требуемого действия и состояния, поэтому выполняется быстрее
  • Голосовой ассистент понимает разные интерпретации действий и состояний, поэтому не нужно запоминать голосовые команды наизусть
Field Presets Description Notes
Time / Date,

Battery / Water,
Spotlight modes

  • Time indicator
  • Date indicator
  • Battery level indicator
  • Water level indicator
  • Spotlight level indicator
Поле имеет 3 независимых секции: Time / Date, Battery / Water, Spotlight On (+ level) / Off.
  • Секция "Time / Date" с помощью клика просто переключает отображение для просмотра состояния
  • Секция "Battery / Water" с помощью клика переключает отображение уровня запаса основной батареи и уровня запаса воды в питьевой системе для просмотра состояния
  • Долгий клик на иконку "Battery" включает режим энергосбережения (жёлтый цвет для включённого состояния)
  • Долгий клик на секцию "Spotlight" включает или выключает яркий свет встроенного прожектора. Во включенном режиме прожектора с помощью короткого клика можно изменить уровень яркости: 25%, 50%, 75%, 100%, моргающий режим (SOS). После выключения прожектора запоминается последний использовавшийся режим, который будет использован при повторном включении.
  • Hover state: 4 угловых сегмента рамки всего поля
  • Click state: изменение отображения индикатора
  • Selected / Not selected: для Battery and Spotlight (жёлтый цвет для включённого состояния, цвет лазури для выключённого)
Brightness modes
  • Auto (AUTO)
  • Clear day (CLR)
  • Cloudy (CLD)
  • Twilight (TWL)
  • Dark night (DRK)
  • Night lights (NLTS)
  • Dazzling day (DZLD)
Яркость и затемнение полей (fading pads и все окна одновременно, выполняют функцию солнцезащитных очков). Настраиваемые пресеты, по умолчанию:
  • AUTO - датчик освещённости определяет уровень окружающей освещённости и использует настройки одного из нижеуказанных режимов
  • CLR - fading pads 50%, fading windows 25%, projector beam 100%
  • CLD - fading pads 25%, fading windows 0%, projector beam 75%
  • TWL - fading pads 0%, fading windows 0%, projector beam 75%
  • DRK - fading pads 0%, fading windows 0%, projector beam 50%
  • NLTS - fading pads 50%, fading windows 0%, projector beam 75%
  • DZLD - fading pads 75%, fading windows 75%, projector beam 100%
Условие OR при выборе пресетов (выбор одного пресета отменяет выбор ранее выбранного пресета).
  • Определённые окна приложений будут иметь преимущество при выборе затемнения окна для большей контрастности
Windows modes
  • Default (DFLT)
  • Turn off all windows (OFF)
  • Central left window is On, central right window is Off (CLW)
  • Central right window is On, central left window is Off (CRW)
  • Bottom windows only (BWON)
  • Left windows only (LWON)
  • Right windows only (RWON)
В разных ситуациях необходимо позволить пользователю быстро изменить конфигурацию 10 окон одним действием:
  • DFLT - отображает все активные окна согласно настроенным приоритетам приложений и функций
  • OFF - выключает отображение всех окон
  • CLW - если использовались по умолчанию оба центральных окна (левый и правый), отключает центральное правое окно, все функции остаются доступны в центральном левом окне
  • CRW - как в предыдущем случае, наоборот, отключает центральное левое окно, улучшая обзор окружающей среды
  • BWON - выключает слева и справа верхние окна для улучшения обзора ("эффект забрала"), более приоритетные окна переносит в нижнюю область, менее приоритетные окна закрывает, не выключает центральные окна
  • LWON - выключает все окна справа ("эффект левого глаза"), более приоритетные окна переносит в левую область, менее приоритетные окна закрывает, не выключает центральные окна
  • RWON - выключает все окна слева ("эффект правого глаза"), более приоритетные окна переносит в правую область, менее приоритетные окна закрывает, не выключает центральные окна
Условие AND / OR при выборе пресетов (выбор одного пресета в одном случае отменяет, а в другом случае не отменяет выбор ранее выбранного пресета).
  • Пользователь может быстро и гибко управлять конфигурацией окон для каждого окна в отдельности, см. ниже Windows items description
  • DFLT, OFF - отменяет выбор любого ранее выбранного пресета
  • CLW отменяет CRW и наоборот
  • BWON отменяет LWON и RWON
  • LWON отменяет RWON и BWON
  • RWON отменяет LWON и BWON
Cameras modes
  • Frontal HD cam (FHD)
  • Rear HD cam (RHD)
  • Night / Sky / Fog / Sea vision mode (SWIR)
  • Thermal image vision mode (LWIR)
  • Silhouette vision mode (SLV)
  • Mixed vision mode (MXV) Type 1: FHD + SWIR
  • MXV Type 2: SWIR + LWIR
  • MXV Type 3: FHD + SWIR + LWIR
  • MXV Type 4: FHD + SWIR + LWIR (silhouette mode)
В зависимости от погодных условий и времени суток, активности пользователя внутри или вне помещений необходим быстрый выбор пресета для эффективного наблюдения, обнаружения и выполнения задач.
  • FHD - использует диапазон видимого света (400-780 nm) и возможности двух сенсоров, высокое разрешение и широкий динамический диапазон при сильном контрастном освещении
  • RHD - включает и выключает камеру заднего обзора
  • SWIR - использует более широкий коротоковолновой диапазон инфракрасного света (780-1700 nm), который применяется для наблюдения отражения окружающего света этого диапазона объектами, расположенными на поверхности воды, в тумане, в дыму, в облаках, в сумерках и ночью
  • LWIR - использует длинноволновой диапазон невидимого инфракрасного света (7.5-14 µm), излучающего более тёплыми по отношению к окружающей среде объектами, в основном ночью
  • SLV - включает преобразование заполнения в хорошо различимый по отношении к фону режим цветных контуров для контрастных объектов
  • MXV - в нескольких типах позволяет использовать возможности четырёх разных сенсоров в разных условиях днём и ночью
AND / OR
Audio modes
  • LSPK (loudspeaker On/Off)
  • L (left On, right Off)
  • R (right On, left Off)
  • LR
  • 25
  • 50
  • 75
  • 100
Позволяет пользователю быстро включить или выключить громкоговоритель (а также кнопками на левом амбюшоре наушника). Настроить громкость и контролировать его состояние.

Также позволяет быстро настраивать режим наушников и громкость (а также кнопками на правом амбюшоре наушника).

AND / OR
Computer Vision[1][2] modes
  • Object detection (OD)
  • Motion detection (MD)
  • Facial detection (FD)
  • Facial recognition (FR)
  • Optical character recognition (OCR)
  • Heat and smoke trace detection (HSTD)
Пользователю доступны пресеты для быстрого выбора в зависимости от тактических задач. Пресеты могут быть включены несколько одновременно.
  • OD - на основе обученной нейронной сети позволяет обнаруживать людей, технику, дроны, искусственные сооружения, выделяя их на экране и производя измерения дистанции, высоты над землей, скорости, курсового направления и геопозиции
  • MD - помогает обнаруживать движущиеся объекты, людей и техника, игнорируя полёты птиц и насекомых, движение облаков. Режим MD рекомендуется использовать совместно с режимом Radio Frequency Drone Detection (RFDD) and Computer Hearing Detect noises of aircraft motor (DAM)
  • FD - в т.ч. с помощью LWIR сенсора камеры помогает обнаруживать лица людей
  • FR - с помощью нейронной сети при наличии обмена с сервером позволяет распознавать лица людей для идентификации
  • OCR - позволяет распознавать текст и другие графические символы для последующего перевода и документирования
  • HSTD - позволяет обнаруживать траектории летательных аппаратов и ракет, артиллерийский и миномётный огонь из закрытых позиций
AND
Computer Hearing modes
  • Detect noises of aircraft motor (DAM)
  • Exclude sounds of nature (ENAT)
  • Eliminate echo (ECHO)
  • Detect noises of human activity (DHUM)
  • Limit the sound threshold (STHR)
Пользователю доступны пресеты для быстрого выбора в зависимости от тактических задач. Пресеты могут быть включены несколько одновременно.
  • DAM Режим DAM рекомендуется использовать совместно с режимом Radio Frequency Drone Detection (RFDD) and Computer Vision Motion Detection (MD)
  • ENAT
  • ECHO
  • DHUM
  • STHR
Radio detection modes
  • Identification Friend-or-Foe (IFF)
  • Radio Direction Finding (RDF)[3]
  • Radio Frequency Drone Detection (RFDD)[4]
  • Radio Frequency Explosive Ordnance Disposal Detection (EODD)
  • Radar Warning Receiver (RWR)[5]
Пользователю доступны пресеты для быстрого выбора в зависимости от тактических задач. Пресеты могут быть включены несколько одновременно.
  • IFF - включает транспондер системы Identificatiin Friend-or-foe, которая в ответ на зашифрованный сигнал опроса, принимаемый на одной частоте, отправляет зашифрованный пакет сообщения на другой частоте, содержащий подтверждение "Friend", Id, позывной и позицию. В зависимости от включённого другого режима "Stealth" будет отправлять ответное сообщение на разных частотах, в разных сетях и с разной мощностью (на ограниченную дистанцию) или не будет отправлять сообщение. В другую сторону транспондер с указанным интервалом на определённых частотах формирует и отправляет сигналы опроса посредством всенаправленной антенны или направленной антенны (круговая диаграмма направленности может быть ограничена отражательной решёткой). Данная функция отображает на навигационной сетке одного из экранов позиции пользователей, с подтверждением "Friend"
  • RDF - включает радиопеленг принимаемых радиочастот, идентифицируемых как потенциально содержащих угрозу (радары, системы EW&SIGINT, ECM) или определяемые как источник несущей радиочастоты (аналоговый или цифровой сигнал) для коммуникации. С помощью триангуляции в коллаборации с аналогичным устройством другого пользователя в сети P2P (на короткой дистанции с ним) определяет направление и расстояние. Без помощи другого устройства определяет только направление (курс). В соответствии с установленным алгоритмом может отправлять зашифрованный сигнал опроса для системы IFF. В условиях искажения или подавления радиосигналов навигационных спутниковых систем используется для радионавигации по наземным радиомаякам, работающим в других диапазонах частот, в том числе в радиовещательных диапазонах FM, TV и мобильной связи
  • RFDD - enables the mode of radio frequency detector used to detect the presence of RF waves in physical transmission mediums. The system uses these RF Detectors to detect drones and drone pilots. RFDD also uses AI to identify the type of threat by comparing different frequency patterns. The system can easily distinguish drones from common RF signals by using learned patterns and can identify almost all types of threats as well as the location of the drone pilot. Компактная всенаправленная мобильная антенна располагается за спиной пользователя и имеет диапазон 9 kHz - 8 GHz, и дистанцию обнаружения до 3 км (conical or dome range). Мобильная переносная антенна Данная функция отображает на навигационной сетке и/или на карте местности экранов интерфейса позиции идентифицированного RPA (UAV) и его оператора.
    Режим RFDD - частный случай функции RDF, его рекомендуется использовать совместно с режимом Computer Vision Motion detection (MD) и Computer Hearing Detect noises of aircraft motor (DAM)
  • EOD - использует внешнее устройство Metall Re-radiation Radar (METR), через соединение посредством Bluetooth
  • RWR - включает режим обнаружения облучения со стороны радаров ЗРК и РЛС контр-батарейной борьбы[6], отображает на экране в окне с навигационной сеткой и/или картой местоположение данных радаров
RWR mode является незаменимым при выполнении тактических задач миномётного и артиллерийского огня
Firing assistance modes
  • Fire on ground fixed targets (GF)
  • Fire on ground moving targets (GM)
  • Fire on aerial moving targets (AM)
  • Mountain fire on fixed targets (MF)
  • Mountain fire on moving targets (MM)
Stealth modes
  • IFF visible only (IFF)
  • Short distance visible only (SD)
  • Zero emission (FULL)
  • OFF
Данный режим необходим для ограничения видимости средствами SIGINT противника.
  • IFF - блокируются все радиопередачи (в т.ч. исходящие сигналы опроса IFF) за исключением зашифрованных ответных сообщений транспондера системы Identificatiin Friend-or-foe, в том числе маскируя передачу ответного сообщения в диапазоне частот фонового шума радиовещательного диапазона (FM, TV) и используя более длительные паузы в интервалах ответов на сигналы опроса (возможны другие стратегии радиообмена, чтобы оставаться незамеченным)
  • SD - используются только сети ближнего радиуса действия, например, Bluetooth, Wi-Fi Direct (P2P) и UHF с ограниченной мощностью передачи на короткие расстояния
  • FULL - все радиопередачи блокированы, только приём (полностью пассивный режим), режим IFF автоматически отключается (и наоборот, при смене режима Stealth на другой, режим IFF включается снова)
  • OFF - не ограничивает радиопередачу
Vitals body tracking modes
  • Set 1 (S1)
  • Set 2 (S3)
  • Set 3 (S3)
Networks modes Signal levels, upload / download transmission status

Left main menu (LMM) and Right Submenu (RSB)

Главное меню (LMM) находится слева сверху видимой области и содержит список разделов. Всего 7 элементов для быстрого выбора в одном ряду. Для выбора следующего ряда используются навигационные стрелки справа. Главное меню отображается только при наведении курсора или при голосовом вызове. При неактивности скрывается через 15 сек. Каждый элемент расположен в отдельном поле (fading pad). Показываются только поля, отображающие раздел.

Правое субменю (RSB) находится сверху справа и раскрывает второй более низкий уровень элементов главного меню. Всего 7 элементов в одном ряду. Для навигации используются стрелки слева. Правое субменю отображается только при активном состоянии одного из пунктов главного меню слева (LMM) или при голосовом вызове непосредственно пункта субменю. При неактивности скрывается одновременно с главным меню через 15 сек. Каждый элемент расположен в отдельном поле (fading pad). Показываются только поля, отображающие раздел.

Картинку вставить:


Управление субэлементами выполняется кликом (джойстик, управление жестами) или голосом. Состояния:

  • Hover state: 4 угловых сегмента рамки поля
  • Click state: рамка по границе поля (эффект анимации, дважды по 100 ms)
  • Selected (long click >2 s): горизонтально расположенные два прямоугольника справа и слева от надписи
  • Not selected (long click >2 s): горизонтально расположенные два прямоугольника справа и слева от надписи отсутствуют

Отличия при голосовом управлении:

  • Команда голосовому ассистенту содержит описание требуемого действия и состояния, поэтому выполняется быстрее
  • Голосовой ассистент понимает разные интерпретации действий и состояний, поэтому не нужно запоминать голосовые команды наизусть
  • При голосовом вызове показывается не всё меню целиком, а соответствующие пункты главного меню и субменю
  • Пользователь может вызвать голосом отображение всего меню целиком
LMM RSB Description Notice
Messenger (MSG)
  • Instant messaging system (IMSG)
  • Multichannel chat (CHAT)
  • eMail (MAIL)
Включает окна приложений для коммуникаций. Приложение позволяет принимать и отправлять сообщения (в т.ч. с запросом ответа). Сообщения содержат текст, изображения (в т.ч. скриншот), видео, аудио, файл. Позволяет видеть доступных абонентов, непросмотренные сообщения, исходящие и входящие сообщения без ответа. Позволяет преобразовывать голос в текст и, наоборот, озвучивать текст. Позволяет настраивать каналы и приоритеты.

Instant messaging system распознаёт жесты и голосовые команды для отправки участникам группы или персонально иконографические символы, по примеру дорожных знаков. Чаще всего применяется в тактических задачах штурмовыми подразделениями, разведгруппами и снайперами.

  • В правом верхнем углу отображается счётчик уведомлений о сообщениях, требующих ответа
  • В левом нижнем углу отображается число непросмотренных сообщений
Tasks (TSK)
  • Overdue (OVDU)
  • Ongoing (ONGO)
  • Assisting (ASST)
  • Set by me (SBME)
  • Following (FLWG)
  • Comments (CMNT)
  • Done (DONE)
Система управления задачами позволяет планировать и контролировать срок, точность, результаты, эффективность выполнения задач. Содержит описание, чек-лист, дедлайн, фактическое время выполнения и затраченное время (в т.ч. автотрекинг завершения и отсчёт затраченного времени), уведомление о текущем статусе, геопозицию в момент завершения, артефакты подтверждения выполнения задачи, вложения, комментарии.
  • В правом верхнем углу отображается счётчик уведомлений о просроченных задачах и с приближающимся дедлайном
  • В левом нижнем углу отображается число задач на сегодня
Calendar (CAL)
  • Day (DAY)
  • Week (WEEK)
  • Month (MNTH)
  • Year (YEAR)
Календарь событий позволяет заранее планировать и согласовывать события, требующие определённого регламентов времени: коллективные онлайн и офлайн коммуникации, собрания, учебные семинары, командировки.
  • В правом верхнем углу отображается счётчик уведомлений о просроченных событиях и с приближающимся сроком
  • В левом нижнем углу отображается число событий на сегодня
Workgroups (WGR)
  • Tactical (TAC)
  • ISR
  • Fire support (FSUP)
  • Fast air (FAIR)
  • Medical assist (MAS)
  • Evacuation (EVAC)
  • Logistic (LOG)
Субменю содержит фильтры для групп.

Можно выбрать участника или группу в соответствующем разделе для коммуникаций, обмена данными, отправки или запроса позиции. Элемент CDI (Cross-Domain Interaction).

  • В правом верхнем углу отображается количество доступных участников групп
  • В левом нижнем углу отображается число активных рабочих групп, в которых состоит пользователь
Applications (APP)
  • Drone control (RPAC)
  • Robot control (RBRC)
  • Fire turret remote control (FTRC)
  • Passive covert surveillance radar (PCSR)
  • Active phased array radar remote control (APAR)
  • Metal re-radiation radar (METR)
  • SDR Scan
  • SDR 2-way
  • Cryptologic control
  • Multimedia recorder and player
  • Translator
  • Virtual mentor
Drone control, Robot control, Fire turret control приложения для управления RPA, UAV, cobots в соответствии с протоколом связи и функциями, предоставленными производителем для интеграторов. Включает ручное управление через радиосигнал, автоматические команды данной модели, модель управления с помощью ИИ. Интеграция настраивается в разделе меню Devices.

Passive covert surveillance radar (PCSR) - приложение для внешнего устройства, которое устанавливается на устройство сверху в NMG mount и подключается в разъём USB. Тип радара, не имеющего собственного излучения, который обнаруживает и сопровождает объекты, обрабатывая отражения от не взаимодействующих источников освещения в окружающей среде, таких как сигналы коммерческого вещания и связи. Они позволяют рассчитать местоположение, направление и скорость объекта. В некоторых случаях можно использовать несколько передатчиков и/или приемников для выполнения нескольких независимых измерений бистатической дальности, доплеровского сдвига и пеленга и, следовательно, значительно повысить точность окончательного пути.

Active phased array radar remote control (APAR) - приложение для удалённого управления малозаметным мобильным активным (излучающим) радаром с активной фазированной решёткой и обмена с ним данными. Твердотельные приёмо-передаточные модули радара направлены в разные направления без перемещения антенны. См. Northrop Grumman AN/ZPY-1 STARLite Small Tactical Radar - Lightweight.

Metal re-radiation radar (METR)

SDR Scan - приложение для сканирования, декодирования, анализа, прослушивания (аналоговых и незашифрованных сигналов), ретрансляции радиочастот в диапазоне 1 MHz - 6 GHz, включая диапазоны ТВ и радиовещания, радиолюбительские диапазоны, РЛС, авианавигации, радиомаяки, частоты мобильной связи, беспроводных сетей.

SDR 2-way - приложение для управления коммуникациями в разных частотных диапазонах: HF (2-30 MHz), VHF low (30-66 MHz), VHF high (136-174 MHz), UHF (230-400, 400-470, 790-870, 1200-1260 MHz, incl. HAM, LPD, PMR 446, ISM). (!) Сверить частоты по спецификациям!!

Cryptologic control - приложение для управление ключами и шифрованием.

Multimedia recorder and player - приложение для записи видео (в т.ч. экранного), аудио (в т.ч. с внешних микрофонов и из приложений), фото и для просмотра файлов мультимедиа, в т.ч. быстрый поиск фото. Записывает теги и примечания для каталогизации и поиска.

Translator

Virtual mentor

Devices (DVC)
Maps (MAP)
Networks (NET)
Wiki (WIKI)
File explorer (FILE)
Services (SVC)
Settings (SET)

Left Quick menu (LQM)

Right Quick menu (RQM)

Left Features sidebar (LFSB)

Right Features sidebar (RFSB)

Virtual remote control tools

  • Фото и видео кнопки управления
  • Перелистывание
  • Навигация
  • Управление дроном, роботом, беспилотным транспортом

Window items description

Окна приложений и функций располагаются в большей и наилучшей видимой области. Всего 12 независимых окон (8 больших 1.78:1, 2 больших 1.20:1, 2 малых 19.86:1), каждое из которых содержит субэлементы управления, когда окно выделено с помощью клика или голосом (selected state). Не выделенное окно является пассивным окном, которое отображает только графику приложения, элементы управления окном скрыты, элементы управления приложением скрыты. Окна разных прилоожений имеют разный приоритет отображения, который настраивается в настройках системы для каждого приложения. В зависимости от выбранного пресета в Status bar (STB) конфигурации отображаемых окон могут быть быстро и гибко изменены пользователем.

Картинка


Управление субэлементами выполняется кликом (джойстик, управление жестами) или голосом. Состояния:

  • Hover state: частая пунктирная линия вдоль рамки поля
  • Click state: рамка по границе поля (эффект анимации, дважды по 100 ms)
  • Selected (long click >2 s): редкая пунктирная линия вдоль рамки поля
  • Not selected (long click >2 s): пунктирная линия отсутствует

Отличия при голосовом управлении:

  • Команда голосовому ассистенту содержит описание требуемого действия и состояния, поэтому выполняется быстрее
  • Голосовой ассистент понимает разные интерпретации действий и состояний, поэтому не нужно запоминать голосовые команды наизусть

Пользователь может быстро и гибко управлять конфигурацией окон для каждого окна в отдельности:

  • Пользователь может принудительно закрыть любое окно в любое время, выделив нужное окно (selected state), нажав на иконку "закрыть окно" (приложение остаётся в фоновом режиме, для обратного действия кликнуть на иконку в меню быстрого выбора)
  • Пользователь может увеличить левое или правое большое центральное окно на всю область центрального окна (объединённое окно 2.40:1), выделив нужное окно (selected state), нажав на иконку "увеличить окно"
  • Пользователь может увеличить большое осно слева или справа на всю левую или правую область окна (объединённое окно 1.78:1 x2), выделив нужное окно (selected state), нажав на иконку "увеличить окно"
  • При нажатии на иконку "уменьшить окно" окно возвращается в исходное состояние
  • Иконка "сместить окно влево" смещает его влево, затем вверх направо, затем влево, меняя расположение других окон
  • Иконка "сместить окно вправо" смещает окно вправо, затем вниз налево, затем вправо, меняя расположение других окон
  • Иконка "поделиться экраном" позволяет отправить скриншот окна или включить трансляцию данного окна для другого пользователя

Смещение окон влево и вправо:

  • Общее правило "слева направо, сверху вниз" (список перемещения 10 больших окон):
    • LTAW - left top window A
    • LTBW - left top window B
    • LBAW - left bottom window A
    • LBBW - left bottom window B
    • CLW - central left window
    • CRW - central right window
    • RTAW - left top window A
    • RTBW - left top window B
    • RBAW - left bottom window A
    • RBBW - left bottom window B
  • Если активное окно расположено в левой части и он перемещается влево, он перемещается выше по списку
  • Если активное окно расположено в левой части и он перемещается вправо, он перемещается ниже по списку, сначала в центр видимой области, затем в правую часть
  • Если место, куда перемещается активное окно не занято другим окном, другие окна не меняют своего положения
  • Другой отображаемое окно, на место которого смещается активное окно вниз по списку, автоматически перемещается выше по списку и занимает предыдущее место смещаемого активного окна
  • Другой отображаемое окно, на место которого смещается активное окно вверх по списку, автоматически перемещается ниже по списку и занимает предыдущее место смещаемого активного окна
  • Обычно отображаются менее 10 больших окон, поэтому смещение активного окна не приводит с смещению большинства других окон
  • Если отображаются все 10 больших окон, смещение активного окна на несколько позиций в списке вызывает последовательное автоматическое временное смещение соседнего окна, который затем снова возвращается на предыдущее место
  • Если окно максимизировано, оно автоматически минимизируется и перемещается по общему правилу, при необходимости его нужно максимизирован снова
  • Пользователь может выделить два или более окон одновременно, удерживая клавишу D (рядом с джойстиком) амбюшора правого наушника (аналогично правой клавиши мыши)
  • Выделив окно и удерживая клавишу C (аналогично левой клавиши мыши) амбюшора правого наушника пользователь может переместить окно или несколько окон одновременно одним действием с помощью джойстика - в этом случае, если перемещается группа окон, они будут располагаться последовательно рядом по списку (даже если в предыдущем их местоложении они не были расположены последовательно рядом по списку)
  • Малые окна перемещаются только влево или вправо на место аналогичного малого окна
  • Если малое окно перемещается вправо, другое окно перемещается влево (меняются местами)
  • Если приложение запускает малое окно в то время, когда оба малых окна отображают информацию других приложений, тогда окно с приложением, имеющим наименьший приоритет, скрывается в меню быстрого выбора
  • Если одно малое окно закрывается, на его месте ничего не отображается, для отображения на этом месте окна другого приложения необходимо кликнуть на него в меню быстрого выбора или в главном меню
  • Если приложение запускает большое окно, которое имеет больший приоритет для уже занятого окна, тогда окно с меньшим приоритетом перемещается в другое место, как предусмотрено правилами приоритета окон и приложений. При закрытии окна с большим приоритетом, конфигурация окон возвращается в предыдущее состояние
  • Если приложение запускает большое окно, когда нет свободного места для отображения окон, окно с наименьшим приоритетом скрывается автоматически в меню быстрого выбора. При закрытии одного из окон с большим приоритетом, восстанавливается предыдущее состояние отображения окон. При необходимости отображения окна с меньшим приоритетом, необходимо освободить место для него, свернув один из окон в меню быстрого выбора

Прокрутка окна на (4/5 высоты окна или в строках - настраивается индивидуально) выполняется иконками вверх и вниз или кнопками джойстика "< +" и "- >" снизу амбюшора правого или левого наушника (аналогично клавишам мыши PageUp, PageDown). Также плавная прокрутка окна джойстиком, голосовой командой или жестом (в т.ч. виртуальным джойстиком или обособленным жестом).

Элементы управления (иконки управления окном, функциональные программные кнопки интерфейса приложения, расположенные на Sidebar Left or Sidebar Right, виртуальные джойстики) относятся только к активному (selected) окну. Для пассивного окна (not selected) они не отображаются.

Отдельно для иконок управления окном - после того, как окно стало активным (selected), иконки управления окном отображаются в течение 15 с, после чего исчезают. Для их повторного отображение необходимо снова выделить данное окно. Пунктирная рамка выделения активного окна отображается в течение всего времени активного состояния окна.


! Кроме того, принудительное использование некоторых окон может выполнить функцию солнцезащитного козырька тогда, когда солнце находится низко над горизонтом на линии визирования. Пользователь может смещать окно в нужную область и перекрывать ослепляющий вид на солнце, не затемняя всю область визирования.

Left Position window (LPW)

Обычно используется долговременно.

  1. Компас и азимут (app priority 1)

Left top A window (LTAW)

Используется при необходимости, не рекомендуется во время интенсивного боя, чтобы не ограничивать видимость окружающей среды.

  1. Карта и навигатор вместе (app priority 1, window priority 1)
  2. Навигатор отдельно (app priority 1, window priority 2)
  3. Карта отдельно (app priority 1, window priority 3)

Left top B window (LTBW)

Обычно используется кратковременно, чтобы не ограничивать видимость окружающей среды.

  1. Навигатор отдельно (app priority 1, window priority 1)
  2. Tasks (app priority 1, window priority 2)
  3. Calendar (app priority 1, window priority 3)
  4. Карта отдельно (app priority 1, window priority 2)

Left bottom A window (LBAW)

Обычно используется долговременно.

  1. Камера заднего вида (RHD) (app priority 1, window priority 1)
  2. Карта и навигатор вместе (app priority 2, window priority 2)

Left bottom B window (LBBW)

Обычно используется долговременно.

  1. Навигационная сетка отдельно или вместе IFF (включается только с навигационной сеткой), если включена функция IFF (app priority 1, window priority 1) - на навигационной сетке включить angle view (azimuth line) слева
  2. Radio Detection modes (RD-RDF, RD-DD, RD-EOD, RD-RWR) отдельно или вместе с навигационной сеткой, плюс IFF (app priority 1, window priority 2)
  3. Passive radar (view mode) отдельно или вместе с навигационной сеткой, плюс IFF, RD-RDF, RD-DD, RD-RWR (app priority 1, window priority 3)
  4. Computer Hearing (DHUM, DAM) отдельно или вместе с навигационной сеткой, плюс IFF (app priority 1, window priority 4)

Central left window (CLW)

Обычно используется долговременно.

  1. Фронтальная камера (в зависимости от выбранных функций: FHD, SWIR, LWIR, SLV, MXV Type 1-4)
  2. Fire assist (наложение на вид фронтальной камеры)
  3. Внешняя камера (цифровой прицел, камера дрона или робота, камера другого пользователя)
  4. Drone remote control (камера дрона и виртуальные органы управления: 2 джойстика и 2 группы кнопок)
  5. Fire turret remote control

Central right window (CRW)

Обычно используется долговременно.

То же самое, что CLS. Окна могут быть включены по-отдельности, оба одновременно или объединённый вид. На один вид может быть наложены отображения нескольких функций, например:

  • Mixed Vision Mode (MXV Type 1: FHD + SWIR) + Fire assist
  • Mixed Vision Mode (MXV Type 2: SWIR + LWIR) + Fire assist
  • Mixed Vision Mode (MXV Type 3: FHD + SWIR + LWIR) + Fire assist
  • Mixed Vision Mode (MXV Type 4: FHD + SWIR + CLV (LWIR silhouette mode)) + Fire assist
  • FHD + Computer Vision mode (OD, MD, FD) + Radio Detection mode (Radio Direction Finding - RDF)
  • FHD + Computer Vision mode (OCR, FD, FR)
  • MXV3 + Computer Vision mode (OD, MD) + Fire assist
  • MXV1 + Radio Detection mode (Drone Detection - DD) + Fire assist
  • Drone view + Computer Vision mode (OD, MD, HSTD)

Right System window (RSW)

Обычно используется долговременно.

  1. System and apps messages (приоритет 1)
  2. User tips (приоритет 1)

Right top A window (RTAW)

Обычно используется кратковременно, чтобы не ограничивать видимость окружающей среды.

  1. System or apps settings (app priority 1, window priority 1)
  2. Networks settings (app priority 1, window priority 2)
  3. Devices settings (app priority 1, window priority 3)
  4. Workgroups
  5. SDR 2-way settings
  6. Cryptologic control

Right top B window (RTBW)

Используется при необходимости, не рекомендуется во время интенсивного боя, чтобы не ограничивать видимость окружающей среды.

  1. SDR Scan modes (app priority 1, window priority 1)
  2. Wiki (app priority 1, window priority 2)
  3. File explorer (app priority 1, window priority 3)
  4. Multimedia player (app priority 1, window priority 4)
  5. Translator (app priority 1, window priority 5)
  6. Virtual mentor (video chat) (app priority 1, window priority 6)

Right bottom A window (RBAW)

Обычно используется долговременно.

  1. Icon messaging system (IMS) (app priority 1, window priority 1)
  2. Passive radar control (app priority 1, window priority 2)
  3. Active phased array radar control (app priority 1, window priority 3)

Right bottom B window (RBBW)

Обычно используется долговременно.

  1. Multichannel chat (app priority 1, window priority 1)
  2. Icon messaging system (IMS) (app priority 1, window priority 2)

Screen control

Features description

Таблица приоритетов окон и приложений. Функция (пресет) - окна по приоритетам - Возможности для пользователя

Features presets

Features presets Description Priority and Notice
Time / Date
Battery
Water
Spotlight modes Режимы

Управляется через программный интерфейс (меню статусов) и аппаратными кнопками на амбюшоре левого наушника (? какие кнопки за что отвечают).

Brightness modes
Cameras modes
Audio modes
Computer Vision modes
Computer Hearing modes
Radio detection modes
RFDD AARTOS[4]
Firing assistance modes
Stealth modes
Vitals body tracking modes
Networks modes

Applications

Apps Description Priority and Notice
Instant messaging system (IMSG) Instant messaging system распознаёт жесты и голосовые команды для отправки участникам группы или персонально иконографические символы, по примеру дорожных знаков. Чаще всего применяется в тактических задачах штурмовыми подразделениями, разведгруппами и снайперами.
Multichannel chat (CHAT) Приложение позволяет принимать и отправлять сообщения (в т.ч. с запросом ответа). Сообщения содержат текст, изображения (в т.ч. скриншот), видео, аудио, файл. Позволяет видеть доступных абонентов, непросмотренные сообщения, исходящие и входящие сообщения без ответа. Позволяет преобразовывать голос в текст и, наоборот, озвучивать текст. Позволяет настраивать каналы и приоритеты.
  • В правом верхнем углу отображается счётчик уведомлений о сообщениях, требующих ответа
  • В левом нижнем углу отображается число непросмотренных сообщений
eMail (MAIL)
Tasks (TSK) Фильтры:
  • Overdue (OVDU)
  • Ongoing (ONGO)
  • Assisting (ASST)
  • Set by me (SBME)
  • Following (FLWG)
  • Comments (CMNT)
  • Done (DONE)

Система управления задачами позволяет планировать и контролировать срок, точность, результаты, эффективность выполнения задач. Содержит описание, чек-лист, дедлайн, фактическое время выполнения и затраченное время (в т.ч. автотрекинг завершения и отсчёт затраченного времени), уведомление о текущем статусе, геопозицию в момент завершения, артефакты подтверждения выполнения задачи, вложения, комментарии.

  • В правом верхнем углу отображается счётчик уведомлений о просроченных задачах и с приближающимся дедлайном
  • В левом нижнем углу отображается число задач на сегодня
Calendar (CAL) Фильтры:
  • Day (DAY)
  • Week (WEEK)
  • Month (MNTH)
  • Year (YEAR)

Календарь событий позволяет заранее планировать и согласовывать события, требующие определённого регламентов времени: коллективные онлайн и офлайн коммуникации, собрания, учебные семинары, командировки.

  • В правом верхнем углу отображается счётчик уведомлений о просроченных событиях и с приближающимся сроком
  • В левом нижнем углу отображается число событий на сегодня
Workgroups (WGR)
  • Tactical (TAC)
  • ISR
  • Fire support (FSUP)
  • Fast air (FAIR)
  • Medical assist (MAS)
  • Evacuation (EVAC)
  • Logistic (LOG)Субменю содержит фильтры для групп.

Можно выбрать участника или группу в соответствующем разделе для коммуникаций, обмена данными, отправки или запроса позиции. Элемент CDI (Cross-Domain Interaction).

  • В правом верхнем углу отображается количество доступных участников групп
  • В левом нижнем углу отображается число активных рабочих групп, в которых состоит пользователь
Drone control (FPVC) Drone control - First Personal View Control (FPVC) - приложение для управления RPA, UAV в соответствии с протоколом связи и функциями, предоставленными производителем для интеграторов. Включает ручное управление через радиосигнал, автоматические команды данной модели, модель управления с помощью ИИ. Основные команды: Arm, Disarm, Take, Land, Return, Start mission, Stop mission, Stop, Follow me, Follow target, Circle around me, Circle around target.

Интеграция настраивается в разделе меню Devices.

Open source

FPV R/C

Robot control (RBRC)
Fire turret remote control (FTRC)
Unmanned vehicle remote control (UVRC)
Passive covert surveillance radar (PCSR) Passive covert surveillance radar (PCSR) - приложение для внешнего устройства, которое устанавливается на устройство сверху в NMG mount и подключается в разъём USB. Приложение для типа пассивного (бистатического или мультистатического) радара, не имеющего собственного излучения, который обнаруживает и сопровождает объекты, обрабатывая отражения от не взаимодействующих источников освещения в окружающей среде, таких как сигналы коммерческого вещания и связи, а также эхо сигналов других радаров, положение которых известно. Они позволяют рассчитать местоположение, направление и скорость объекта. В некоторых случаях можно использовать несколько передатчиков и/или приемников для выполнения нескольких независимых измерений бистатической дальности, доплеровского сдвига и пеленга и, следовательно, значительно повысить точность окончательного пути.
Active phased array radar remote control (APAR) Active phased array radar remote control (APAR) - приложение для удалённого управления малозаметным мобильным активным (излучающим) радаром с активной фазированной решёткой и обмена с ним данными. AESA transmit-receive module - TRM (remote control) small tactical radar. Твердотельные приёмо-передаточные модули радара направлены в разные направления без перемещения антенны. См. Northrop Grumman AN/ZPY-1 STARLite Small Tactical Radar - Lightweight.
Metal re-radiation radar (METR) Metal re-radiation radar (METR)
SDR Scan (SDRS) SDR Scan - приложение для сканирования, декодирования, анализа, прослушивания (аналоговых и незашифрованных сигналов), ретрансляции радиочастот в диапазоне 1 MHz - 6 GHz, включая диапазоны ТВ и радиовещания, радиолюбительские диапазоны, РЛС, авианавигации, радиомаяки, частоты мобильной связи, беспроводных сетей. Open source
SDR 2-way (SDR2) SDR 2-way - приложение для управления коммуникациями в разных частотных диапазонах: HF (2-30 MHz), VHF low (30-66 MHz), VHF high (136-174 MHz), UHF (230-400, 400-470, 790-870, 1200-1260 MHz, incl. HAM, LPD, PMR 446, ISM). (!) Сверить частоты по спецификациям!! Open source
Cryptologic control (CRPT) Cryptologic control - приложение для управление ключами и шифрованием.
Multimedia player and recorder (MMPR) Multimedia recorder and player - приложение для записи видео (в т.ч. экранного), аудио (в т.ч. с внешних микрофонов и из приложений), фото и для просмотра файлов мультимедиа, в т.ч. быстрый поиск фото. Записывает теги и примечания для каталогизации и поиска. Open source
Translator (TRSL) Приложение для перевода текстов на основе ИИ. Open source
Virtual mentor (VM) Приложение видеоконференции с двумя и более лицами, включая разные сети. Open source
Maps (MAP)
  • Navigation
  • Path tracking
  • Mission planning
ATAK MIL SDK
Wiki (WIKI)
  • Manuals
  • Reports
  • Articles
  • Updates
  • Tutorial
Open source
File explorer (FILE) Приложение для просмотра, организации в папках, копирования, перемещения и открывания файлов. Open source

Services

Services Description Priority and Notice
Networks (NET)
  • VHF / UHF
  • HF
  • LTE
  • 5G
  • WLAN
  • Bluetooth
  • P2P
IFF
Voice assistant Open source
Speech-to-text Open source
Voiceover Open source
Fading pads and screens
Hand tracking system Open source
Joystick and buttons calibration Open source
Camera control Zoom, filters, modes, mixed, calibration Open source
Stereo camera control Triangulation, distance measurement
Accelerometer (m/s^2) Line and angle acceleration
Gyroscope (rad/s) Incline, position, sightline, horizon
GNSS GPS, Galileo, QZSS
Hall sensor (magnetometr) (µT) Compass
Barometr (hPa) Pressure
Thermometer (°C)
Ambient light sensor (lux)
Humidity sensor (%)
Gas sensor (CO, NO2)
Radiation sensor

Embedded devices

Services Description Priority and Notice
Multimedia
  • Headphones
  • Microphones (3)
  • Loudspeaker
Cameras
  • HD cameras
  • SWIR camera
  • LWIR camera
Transponder
SDR IC

Integrated devices

Services Description Priority and Notice
Handheld radio
Telescopic sights External cameras
Drones
Robots
Fire turrets
Antennas
Radars
  • AESA
  • METR


Нарисовать навигационную сетку в нескольких вариантах:

  • в левом нижнем Б окне
  • в левом нижнем Б окне с прозрачным фоном
  • на всю левую часть
  • на всю левую часть с прозрачным фоном

Features relations

  1. Face recognition включает LWIR
  2. Камеры (в т.ч. Drone View, User View) включают Computer Vision

Fading pads

Resources

Estimating computing power

Task performance Требования к CPU Требования к GPU Требования к RAM и VRAM Notice
High-performance computing (HPC): ОС, основные приложения, камеры, мультимедиа, проектор intel.com/hpc
High-res Computer Vision, обработка потокового видео, фильтры
Computer Hearing, обработка звука, фильтры
Natural language processing, Machine Learning, DL incl. distributed computing via P2P, ai.intel.com
Total Memory Encryption, Crypto Acceleration,

Multi-party compute, Cloud confidentional coputing, Key management

intel.com/sgx

intel.com/cloud

SDR Scan / 2-way, 5G intel.com/networking
Radio Detection
Radar Control

CPUs Comparison

Parameters Raspberry Pi 4B Qualcomm Snapdragon 695 5G Apple M1 Pro (10-CPU 16-GPU) Apple M2 Max (30-GPU) AMD Ryzen 7 7840U Intel Core i5-13600HX AMD Ryzen 9 7845HX Intel Core i7-13850HX Intel Core i9-13900HX
Generation[7] 4. Q2/2019 9. Q2/2020 1. Q3 2021 2. Q1 2023 6. Q2/2023 13. Q1/2023 9. Q1. 2023 13. Q1/2023 13. Q1/2023
Segment Desktop Mobile Mobile Mobile Mobile Mobile Mobile Mobile Mobile
Geekbench 5 Single-core benchmark 202 669 1768 1874 1917 1955 2052 2065 2064
Geekbench 5 Multi-core benchmark 601 1928 12574 15506 9977 16227 16789 18402 20305
Family Broadcom BCM Qualcomm Snapdragon Apple M series Apple M series AMD Ryzen 7 Intel Core i5 AMD Ryzen 9 Intel Core i7 Intel Core i9
CPU group Broadcom BCM2711, more Qualcomm Snapdragon 695 Apple M1 Apple M2 AMD Ryzen 7040 Intel Core i 13000H AMD Ryzen 7045 Intel Core i 13000H Intel Core i 13000H
Architecture AMD Cortex-A72 hybrid (big.LITTLE) hybrid (big.LITTLE) hybrid (big.LITTLE) Phoenix (Zen 4) hybrid (big.LITTLE) Dragon Range (Zen 4) hybrid (big.LITTLE) hybrid (big.LITTLE)
Frequency 1.5 GHz 2x 2.2 / 6x 1.7 GHz 8x3.2 / 2x2.06 GHz 8x3.5 / 4x2.8 GHz 3.3-5.1 GHz 6x 2.6-4.8 / 8x 1.9-3.6 GHz 3.0-5.2 8x 2.1-5.3 / 12x 1.5-3.8 GHz 8x 2.2-5.4 / 16x 1.7-3.6 GHz
Cores 4 8 10 12 8 14 12 20 24
Threads 4 8 10 12 16 20 24 28 32
RAM 8 Gb, LPDDR4-2400, 1ch 6 Gb,

LPDDR4X-2133, 2ch

16-32 Gb, LPDDR5-6400, 2ch 16-96 Gb,

LPDDR5-6400, 4ch

16-256 Gb, DDR5-5600

LPDDR5X-7500, 2ch

16-128 Gb, DDR5-4800, 2ch 16-128 Gb, DDR5-5200, 2ch 16-128 Gb, DDR5-5600, 2ch 16-128 Gb, DDR5-5600, 2ch
L2 cash 1 Mb -- 28 Mb 36 Mb 8 Mb -- 12 Mb 24 Mb 32 Mb
L3 cash -- -- -- -- 16 Mb 24 Mb 64 Mb 30 Mb 36 Mb
PCIe ver -- 4.0 4.0 3.0 5.0 5.0 5.0 5.0
PCIe lanes -- 20 20 28 20 20
GPU Broadcom VideoCore VI Qualcomm Adreno 619 Apple M1 Pro (16 Core) Apple M2 Max (30 Core) AMD Radeon 780M Graphics Intel UHD Graphics 13th Gen (32 EU) AMD Radeon 610M Graphics Intel UHD Graphics 13th Gen (32 EU) Intel UHD Graphics 13th Gen (32 EU)
GPU Freq. 0.50 GHz 0.95 GHz 16x 1.3 GHz 30x 1.40 GHz 1.2-2.7 GHz 0.40-1.5 GHz 0.4-2.2 GHz 0.4-1.6 GHz 0.4-1.65
FP32 32 GFLOPS 536 GFLOPS 5300 GFLOPS 10650 GFLOPS 4860 GFLOPS 768 GFLOPS 443 GFLOPS 819 GFLOPS 845 GFLOPS
Technology 28 nm 6 nm 5 nm 5 nm 4 nm 10 nm 5 nm 10 nm 10 nm
Max displays 2 2 3 2 4 3 3 3
Exec units 4 0 480 12 32 2 32 32
Shader 64 128 2048 3840 768 256 128 256 256
GPU memory 2 Gb (system memory) 4 Gb 16 Gb up 96 Gb up to 32 Gb up to 64 Gb (system memory) up to 8 Gb up to 64 Gb up to 64 Gb
Hw codec h264 / HEVC (8,10bit), VP9, VP8, AVC, VC-1, JPEG h264 / HEVC (8,10bit), VP9, VP8, AVC, VC-1, JPEG h264 / HEVC (8,10bit), VP9, VP8, AVC, VC-1, JPEG h264 / HEVC (8,10bit), VP9, VP8, AVC, VC-1, JPEG h264 / HEVC (8,10bit), VP9, VP8, AV1, AVC, VC-1, JPEG h264 / HEVC (8,10bit), VP9, VP8, AV1, AVC, VC-1, JPEG h264 / HEVC (8,10bit), VP9, VP8, AV1, AVC, VC-1, JPEG h264 / HEVC (8,10bit), VP9, VP8, AV1, AVC, VC-1, JPEG h264 / HEVC (8,10bit), VP9, VP8, AV1, AVC, VC-1, JPEG
TDP PL1 7.5W 30W 45W 28W 55W 55W 55W 55W
TDP PL2 157W 157W 157W
TDP up 40W 86W 75W 86W 86W
TDP down 3W 15W 45W 45W 45W 45W
Tjunction max 100°C 100°C 100°C 100°C 100°C 100°C
ISA ARMv8-A64 (64 bit) ARMv8-A64 (64 bit) ARMv8-A64 (64 bit) ARMv8-A64 (64 bit) x86-64 (64 bit) x86-64 (64 bit) x86-64 (64 bit) x86-64 (64 bit) x86-64 (64 bit)
ISA ext Rosetta 2 x86-Emulation Rosetta 2 x86-Emulation SSE4a, SSE4.1, SSE4.2, FMA3, AVX2, AVX512 SSE4.1, SSE4.2, AVX2, AVX2+ SSE4a, SSE4.1, SSE4.2, FMA3, AVX2, AVX512 SSE4.1, SSE4.2, AVX2, AVX2+ SSE4.1, SSE4.2, AVX2, AVX2+
Socket FP8 BGA 1744 FL1 BGA 1744 BGA 1744
OS Linux, Win10 Android macOS macOS, iPadOS Linux, Win11 Linux, Win11 Linux, Win11 Linux, Win11 Linux, Win11
Price 75€ 250€ 200€ 350€ 412€ 284€ 640€ 433€ 625€
Extra Intel Deep Learning Boost, Intel Gaussian & Neural Accelerator Intel Deep Learning Boost, Intel Gaussian & Neural Accelerator

Планы по использованию CPU:

  • Прототип - Broadcom BCM2711 (Raspberry Pi 4B 8 Gb)
  • MVP - Intel Core i7-13850HX or Intel Core i9-13900HX based, incl.
    • Intel Deep Learning Boost, Intel Gaussian & Neural Accelerator
    • up to 16 lanes of PCIe 5.0
    • DDR5 memory
    • up to four Thunderbolt™ 4 ports
    • Wi-Fi 6/6E (Gig+) unlocks ultra-fast connectivity (nearly 3X faster (Gig+) Wi-Fi speeds)
    • Intel Bluetooth 5.2 technology enhances wireless device connectivity (up to 2X faster than Bluetooth 4.2)
    • Intel Dynamic Power Share intuitively shifts power between the CPU and 3rd party discrete GPUs to maximize performance
    • next-generation AI capabilities, including Intel Gaussian & Neural Accelerator (GNA) and the option for a new discrete VPU AI accelerator, enable seamless video conferencing for today's hybrid work environment
    • available on Iris X Graphics, such as X Super Sampling (XSS) and Arc Control
    • Intel Thread Director intelligently moves workloads across performance cores—or “P-cores”—to optimize responsive, single-threaded performance, and efficient cores—or “E-cores”—to accelerate efficient, scalable, multi-threaded performance
    • With 24 cores and a two-chip platform, the expanded HX series offers the ultimate platform for desktop-class performance on a laptop. The ultraportable 14-core H series powers premium gaming, creating, video-editing, and multi-tasking, even when you’re on the go. The P series delivers enthusiast-level performance in a thin-and-light form factor to enhance your everyday productivity. And the U series 10-core processor is optimized for the performance and portability needs of modern, mobile PC experiences.

Chipset

GPU

RAM

  • 8x DDR4 (Xeon 3Gen) = 64Gb-128Gb

VRAM

  • 16Gb

DSP

SSD

Power supply

  1. 3x4 x Li-Ion 18650 3.7V 4000mah = 177,600wh
  2. 3x4 x Li-Ion 26650 3.7V 5000mah = 222,000wh
  3. 3x4 x Li-Ion 26650 3.6 5500mah = 237,600wh
  4. 3x4 x LiFePO4 18650 3.2V 6000mah = 230,000wh

More

  1. Qualcomm SOC - OS, проектор, камеры, мультимедиа, приложения
  2. NVIDIA SOC - GPU, VPU для обработки видео и Computer Vision
  3. SOC 32-bit DSP - для обработки аудио, фильтров, Computer Hearing
  4. SOC DSP - для SDR scan и 2-way connection
  5. SOC - для ? (radar detection, ...)



Камеры 48 MP sensor IMX586 based (x24 for Full HD 2 MP), Sony SWIR ?


Ранец: 48 элементов питания, 2-3 литра воды с обратным клапаном, 4 антенны штырьевого типа (в т.ч. телескопическая с пневматическим приводом и ручной помпой)

Антенны:

  1. дипольное основание антенны с кабелем RG174 60 см
  2. две коротких сменных телескопических антенны от 5см до 13см
  3. две длинных сменных телескопических антенны от 23 см до 150см
  4. кабель-удлинитель RG174 3 метра
  5. присоска для крепления антенны
  6. мини-штатив для крепления антенны
  7. складывающаяся штырьевая HF антенна 1.5 и 3 м[10]
  8. тактическая портативная HF антенна 50 Ohm 150W 2-30 MHz (подвесная / горизонтальная) NVIS (40-400 km), (1.3 кг)[11]
  9. дипольная HF антенна 50 Ohm 400W 2-30 MHz (горизонтальная / V-образная) 30 м (в сумке 5 кг)[12]
  10. Antenna, L-TAC® Dismount / Vehicular[13]
Frq range Band Waves Wave length Networks Avg range (terrain / city) Antenna types
2-30 MHz HF Dekameter 100-10m Long range comms (2-30), RB, CB (25.6–30) 0-100 km BLOS

100-500 km BLOS

500+ km BLOS

(100-125W)

Ribbon type, 1.5 m

Folding pin, 1.5m

Telescopic pin, 3 m

Broadband (from the end)

Wideband Dipole

30-300 MHz VHF Meter 10-1m Middle range comms (30-88, 118-174, Narrowband: 30-225), TVm, RB (88-108), Aircraft nav (108-118, 225-400), Amateur (144-146), Emergency services (146-200), Train services (151-155), Water transport (156-158, 300-302) 6-8 miles LOS (5W): handheld-to-handheld

10-15 miles LOS (10-25W) vehicle-to-vehicle

15-20 miles LOS (50W) vehicle-to-base

pin 162-714 MHz, 5.3''

pin 150-174 MHz, 9''

pin 150-162 MHz, 5.6''

pin 136-151 MHz, 6.2''

300-3000 MHz UHF

L

Decimeter 1-0.1 m Short range comms of narrowband Line-Of-Sight (LOS) (225-512, Wideband: 225-450, Highband: 512-520 & 762-870), MUOS SATCOM Beyond-Line-Of-Sight (BLOS) (300-320 UL, 360-380 DL), UHF SATCOM Beyond-Line-Of-Sight (BLOS) (291-318.3 UL, 243-270 DL), L/S-band Beyond-Line-Of-Sight (BLOS) (1300-2600), TVdm, RB, Commercial (400-500), Amateur (433-434), LTE (806-825, 851-870, 900, 1800), 5G, GPS, Wi-Fi[14][15] (IEEE 802.11: 2.4, 5.8 GHz), Bluetooth UHF: 3-6 miles LOS (0.25-5W), (20W peak)

UHF SATCOM: BLOS (10-20W)

MUOS SATCOM: BLOS (10-20W)

L/S-Band: BLOS (3.2W)

WiFi: 2-8 miles LOS

LTE: 1-4 miles LOS

5G: 1-4 miles LOS

Bluetooth: 400 m LOS

pin 378-430 MHz, 6.3''

pin 378-403 MHz, 3.0''

pin 403-430 MHz, 2.8''[16]

pin 440-494 MHz, 2.4''

pin 764-870 MHz, 6.7''

pin 764-870 MHz, 3.7''

L-TAC Mainpack / Vehicular

MUOS antenna

Wi-Fi directional antenna

3-30 GHz SHF Centimeter 10-1 cm Sat comms, radars, TV sat
30-300 GHz EHF Millimeter 10-1 mm

Interface Items Motion

  • принципиальный вид
  • активный вид при работе с меню
  • процесс выбора пункта меню (скролл элементов, изменение вида при входе в подменю 1-го уровня / 2-го уровня / 3-го уровня)
  • постоянный (продолжительный) вид (статусы, нотификации, активные пункты меню)
  • включение и смена затухающих окон (правила, варианты комбинации в одновременном виде)

User Interface Scripts

Review

Action Voice command Hand gestures Notices
Включение устройства и самотестирование
окна с затемнением
Статусы: заряд, время, дата,
Настройка: уровни громкости наушников settings, отдельно слева и справа
Настройка параметров экрана settings
Настройка: проверка интеграции с другими устройствами devices
Настройка: проверка доступных сетей networks
Настройка: приложения apps
Настройка: виджеты widgets
Обзор папки с документами folder
Настройка камер и включение режима записи фото и видео, режим передачи camera
Включение громкоговорителя
Включение фронтального света

Situational Awareness (SA)

Action Voice command Hand gestures Notices
Frontal camera view tess frontal view on / off frontal view
Frontal camera zoom tess zoom x8 zoom param
Обзор заднего вида tess rear view on / off rear view
Вид с внешней камеры дрона tess drone alpha view drone param view
Вид с внешней камеры другого пользователя tess user tango four view user param view
Вид с внешней камеры цифрового прицела tess scope view on / off scope view
Ночное зрение tess night view on / auto / off night view
Тепловизионная камера, режим термографии tess thermal view on / off thermal view
Тепловизионная камера, режим контуров tess contour view on / off thermal contour view
Смешанное зрение (set A, set B, set G, etc.) tess mixed alpha view on / auto / off zoom, night vision, thermal image vision, reticle, range

Communication (Comms)

Action Voice command Hand gestures Notices
Выбор каналов связи
Приоритет каналов связи
Проверка доступных абонентов
Сессия: чат chat: дополнительные окна справа снизу
Сессия: голосовой чат voice chat: преобразование в текст
Сессия: icon messages icon chat:
Настройка режимов шифрования и обмена ключами
Управление несколькими активными каналами

Navigation (Nav)

Action Voice command Hand gestures Notices
Включение поля компаса compass
Включение поля линии взгляда
Виды навигационной сетки
Масштабирование навигационной сетки
Режим IFF reticle
Просмотр плана местности, собственные координаты, позиционирование location plan
Планирование и отслеживание маршрута path tracking
Отправка собственных координат другому пользователю

Intelligence, Surveillance, Reconnaissance (ISR)

Action Voice command Hand gestures Notices
Сканирования области радиочастот, waterfall
Сканирование позиции видимого объекта и передача его координат
Детекция объекта и измерение расстояния
Просмотр детекций, сделанных другими пользователями группы
Запрос на обнаружение и детекцию для других пользователей, групп и доменов

Firing Assistance (FA)

Action Voice command Hand gestures Notices
Включение прицельной сетки
Включение баллистических параметров и режимов
Ввод данных для баллистических расчётов
Помощь в совмещении линии прицела и целеуказания
Корректировка выстрела
Быстрый доступ к истории выстрелов
Список целей и приоритеты
Список поражённых целей и подтверждений
Отслеживание боезапаса и запросы других пользователей / от других пользователей

Task Management Tools (TM)

Action Voice command Hand gestures Notices
Уведомления notification
Управление задачами tasks
Управление расписанием calendar
Управление рабочими группами workgroups: настройка прав и правил для обмена данными, коммуникации
Доступ к Вики wiki
Поиск loop
Акцепт задачи
Делегирование задачи другому пользователю
Запрос утверждения задачи
Утверждение задачи для другого пользователя
Мониторинг списка задач другого пользователя
Мониторинг списка задач группы
Автотрекинг выполнения задач и событий расписания, просмотр отчёта

Vitals Body Sensors and First Aid

Action Voice command Hand gestures Notices

User Interface Menu

Status bar

12 elements. Видимы постоянно. Вмещает 6-7 символов.

  • отображение переключается при коротком нажатии или голосовом вызове
  • 1 раз в 5 мин показывает попеременно все активные состояния (автоскролл снизу вверх)
  • пункт меню включается и выключается долгим нажатием или голосовой командой
  • в некоторых элементах в правом нижнем углу иконка (камера, дисплей, мультимедиа и т.д.)
  • функции вкл., выкл. озвучиваются
  1. Time / Date:
    1. Time (type 12:03am) - время показывается постоянно, автоскролл не выполняется
    2. Date (type 05/17we)
  2. Brightness
    • Яркость и затемнение (пэдс и все окна как солнцезащитные очки) - настраиваемые пресеты, по умолчанию:
    1. Ясный день - пэдс 50%, яркость 100%, все окна 25%
    2. Облачность - пэдс 25%, яркость 75%, все окна 0%
    3. Сумерки - пэдс 0%, яркость 75%, все окна 0%
    4. Темная ночь - пэдс 0%, яркость 50%, все окна 0%
    5. Ночные огни - пэдс 50%, яркость 75%, все окна 0%
    6. Ослепляющий день - пэдс 75%, яркость 100%, все окна 75%
  3. Cam mode (abbr)
    • Камеры могут быть совмещены в одном окне или отображаться синхронизированно на соседних окнах (линия зрения одна и та же). Зум может быть синхронизирован или управление зумом может быть по-отдельности (так легче ловить прицельную точку, например).
    1. FRHD (front HD stereo cam) - automatically turns on Central A+B displays (CD-AB), last used state of zoom, zoom control at the bottom right of the screen
    2. RRHD (rear HD cam) - automatically turns on Left Bottom A display, last used state of zoom, zoom control at the bottom right of the screen
    3. SWIR (day and night view) - по умолчанию выводится на центральный дисплей B, в то время, как HD изображение на дисплее A
    4. LWIR (thermal image view) - по умолчанию выводится на центральный дисплей B, в то время, как HD изображение на дисплее A
    5. SLTM (silhouette mode for thermal image view) - по умолчанию выводится на центральный дисплей B, в то время, как HD изображение на дисплее A
    6. MXSL (mixed vision mode: SWIR + LWIR)
    7. MXSS (mixed vision mode: SWIR + SLTM)
    8. PRS (passive radar sensor)
  4. Display modes
    1. DSOFF (turns off all displays) - отключает все активные окна
    2. CDS-A (display A On, display B Off) - при долгом нажатии запрос для выбора режима камеры или отключения
    3. CDS-B (display B On, display A Off) - при долгом нажатии запрос для выбора режима камеры или отключения
    4. LBDS-A (Left Bottom A display On / Off) - включается автоматически, при отключении выключает камеру заднего вида, если она была включена, при повторном включении запрос пользователю о необходимости включить камеру заднего вида
  5. Integrations
    1. HHR (portable handheld radio)
    2. RPA (remotely piloted aircraft controller)
    3. BOT (robot controller)
    4. P2P (p2p network)
  6. Multimedia
    1. LSPK (loudspeaker On / Off)
    2. EARL (Left On, Right Off) - при отключении включает правое ухо автоматически
    3. EARR (Left Off, Right On) - при отключении включает левое ухо автоматически
    4. VOL25
    5. VOL50
    6. VOL75
    7. VOL100
  7. Computer Hearing modes
    1. AUF1 (augio filter)
  8. Computer Vision modes
    1. CVRF (rangefinder On / Off) - при включении FA включается автоматически
    2. CVOR (object recognition mode)
    3. CVFR (face recognition mode)
  9. FA (fire assistance)
    1. FAM - включает перекрестие в главном окне, выводит баллистические параметры в правом субменю
    2. FAS - дополнительно отображает линию цифрового прицела
  10. Headlight (icon)
  11. Stealth modes (icon)
    1. Off
    2. Restricted, IFF off
    3. On
  12. Signal levels (icon)
  13. Battery (icon) - при остатке заряда менее 20% начинает моргать каждую минуту в течение 15 сек.

Questions for mentors and experts:

  • Следует ли некоторые элементы меню показывать внутри поля попеременно автоматически? Например, активные сети, активные интеграции.
  • Нужно ли регулировать уровень громкости спикерфона или всегда включать на полную мощность?

Fading Pads

Управляется микроконтроллером, который подаёт потенциал на каждую площадку по-отдельности. Земля общая (движение тока по пути наименьшего сопротивления). Разный потенциал создаёт разную степень затемнения (25%, 50%, 75%, 100%).

Процесс изготовления затемняемых областей экрана (окон) похож на процесс производства гибкой печатной платы:

  • Прозрачная основа A обезжиривается
  • На внутреннюю сторону основы A наносится полимерный состав электрохромного материала (PDLC, SPD) с помощью шелкографии (пэды и окна)
  • Высушивается и наносится фоторезист
  • УФ-лазером отверждается позитивное изображение
  • Смывается незасвеченный фоторезист
  • Незакрытые области вытравливаются в химическом растворе
  • Смываются остатки фоторезиста
  • На внешнюю сторону основы A через трафарет наносится прозрачный электропроводящий слой - TCF (дорожки)
  • Также на внутреннюю сторону основы B через трафарет наносится прозрачный электропроводящий заземляющий слой (дорожки)
  • Вариант: заземляющий слой на внутреннюю сторону A повсеместно после травления до смывания фоторезиста, а на внутреннюю сторону B сигнальные дорожки, контактные площадки которых закрываются фоторезистом, а остальная поверхность покрывается изолирующим лаком, после смывания фоторезиста со стороны B контактные дорожки дополнительно утолщаются через трафарет. Эта версия позволяет отказаться от переходных отверстий!
  • Готовая основа A + B спрессовывается в вакууме (в изогнутом виде)
  • Делаются переходные отверстия между дорожками ?
  • Готовая основа спрессовывается в вакууме с внутренней стороной внешнего визора
  • Внешний визор имеет напыление для защиты от УФ, т.к. при затемнении всех окон может быть повреждена сетчатка без защиты УФ (надо тестировать)

Modern tools

1. MRTK-Unity is a Microsoft-driven project that provides a set of components and features, used to accelerate cross-platform MR app development in Unity. Here are some of its functions:

  • Provides the cross-platform input system and building blocks for spatial interactions and UI.
  • Enables rapid prototyping via in-editor simulation that allows you to see changes immediately.
  • Operates as an extensible framework that provides developers the ability to swap out core components.
  • Supports a wide range of platforms.

2. Unity Mars helps solve the hard problems of AR app creation:

  • Overcome the challenges of authoring for dynamic physical environments
  • Reduce development time
  • Release cross-platform experiences with support for iOS, Android, and HoloLens

Manuals

''Main article: [[Manual:1]]''

Troubleshooting

Areas of research

Related fields

Future ideas

  • Описание: Action - Visual - Audial - Voice command - Gesture
  • Log In: ввод кодового слова (текст, голосом), далее выбор правильного ответа (2 попытки) из 8 вариантов 10, далее ввод второго кодового слова, далее выбор правильного ответа (2 попытки). При правильном вводе надпись "Welcome Username" При неактивности устройства в течение более 1 часа (настройки), повторная авторизация. Смена кодов задаётся администратором. При неавторизованном входе (неправильный ответ) надпись "Welcome" (без Username) - часть функций заблокирована (нет приёма сообщений, задач, данных; данные на устройстве "замораживаются" до правильной авторизации;), отправлено сообщение о несанкционированном входе, координаты позиции и др. данные передаются администратору с периодичностью 10 мин.
  • Главное меню (неактивные элементы только надпись), наведение курсором (Hover effect, травление кнопки, параллепипед), клик (Hover effect out, рамка "прямоугольник", щелчок клика), после клика при наведенном курсоре снова Hover effect, при смещении курсора в сторону (остаётся рамка, активен/вкл.). Подменю то же самое. 4 состояния: курсор наведён (hover state), клик (click state), активен (selected), не активен (not selected).
  • Курсор в форме стрелки с заливкой
  • Главное меню показывается только при наведении курсора. Надписи без рамок. Анимировать, чтобы стало понятнее. Link1, Link2. Figma 3 files and unlimited coworkers.
  • Окно не активно (уголки, длинный пунктир для границы окна). Окно активно (рамка). Долгий клик - свернуть окно в трей (не показывать). Двойной клик - развернуть на всю область. Снова двойной клик - минимизировать в первоначальный вид. Снова открыть свёрнутое окно через меню Виджеты и имя виджета. Сдвинуть окно стрелками (сначала по горизонтали, затем по вертикали) или перетаскиванием с зажатой кнопкой B (аналог правой клавиши мышки), или кнопкой прокрутки. Кнопка A (аналог левой клавиши мышки) для клика по элементам виджета. Двойной клик кнопкой B по виджету - открыть в том же окне соответствующее приложение с настройками. Снова двойной клик кнопкой B, открыть в том же окне соответствующий виджет.
  • Режим управления дроном, и роботом, нижнее меню параметры дрона
  • Нижнее меню: боезапас по видам
  • Нижнее меню?: активные диалоги + канал (последнее сообщение), сам диалог в вертикальном диалоговом окне

Нижнее меню: задачи по приоритетам

  • Иконки пользователей внутри окружности: звери, птицы, насекомые, пресмыкающиеся, музыкальные инструменты, грибы, герои фильмов и номер (для навигационной сетки)
  • Анимацию интерфейса в Adobe AE
  • Приложения: сканирование радиочастот (SCAN), радио (SDR), RDF, FA и др. - в поле Apps и Widgets
  • На навигационной сетке свои (лазурные окружности и жёлтые треугольники) и чужие (красные круги-точки) без номеров, при команде индентификации появляются сноски с номером или позывным
  • Разделители разделов меню - вместо наклонных линий - знак стрелки (ромба, угол наклона 30°). Скрываются неактивные элементы и линии. Показываются только при вызове.
  • APPS, DVCS, WDGS, NETS, TSKS, CALR, WRGR, WIKI - на линии контура, внутри него иконки загруженных приложений для быстрого перехода
  • Статусы вкл/выкл (tess status bar on / off / auto): TRM, HDL, SPK, CMP, + RDF, RDR, DTC, STS (иконка привидение) ... . Сверху двойное меню статусов (неподвижные элементы, всегда на своём месте) - снизу буквенное обозначение.
  • Сверху меню статусов символьное: время, режим невидимости (нет излучения, только приём) / ограниченной видимости (маячок, передающий свою позицию, зашифрован, с разными интервалами передачи, на разных частотах, маскирующийся в диапазонах ТВ и др. невоенных диапазонах, КВ?) / видимости (маячок на VHF с шифрованием, ответ на запросы RDF), уровни принимаемых сигналов основных каналов, уровень заряда батареи, уровень яркости экрана, уровень звука в левом и правом наушнике
  • Режим ограниченной видимости:
    • Транспондер отвечает на запросы IFF через маршрутизатор внутри сети P2P с ближним радиусом покрытия.
    • Радиообмен через маршрутизатор 1-2 членов группы (например, 1 антенна MOAN SAT), внутри цифровые пакеты через сеть P2P на базе Bluetooth или UHF с малой мощностью передачи с охватом только ближнего радиуса покрытия.
  • Компасс компактнее и мелкие цифры на рисках
  • Контур экрана взять с проекции фронтального вида маски (немного обрезать боковины)
  • Поле в углу рядом с лупой для icon messages
  • Использовать значки: квадрат, вертикальный прямоугольник, треугольник к низу / к верху / вправо / влево, окружность, ромб, трапеция, эллипс
  • Выделения: сплошная линия, редкий пунктир, двойной пунктир, выделение по углам (уголки)
  • Поля с затуханием. Слева: два сверху и два снизу (могут объединяться). Справа: два (может объединятья) справа и два по вертикали слева. Всего 10 окон с затуханием, разная комбинация. Возможно полное и частичное затухание. Частичное (50%) подходит для диалогового окна и для вывода сопроводительного текста
  • Диалоговое окно справа. 50-60 символов, 2 строки с расширением. Пример поля мессенджера из LinkedIn.
    • T.HARRIS 5:23pm > ME (TEAM NF332):
    • ||Thank you Basil, I will work on this information in the
    • ||next week. Sincerely and Semper Fidelis, David
    • B.BOLUK 5:26pm > D.VOGT, L.HERRERA, +
    • ||In the next 2 weeks, we have intentions to apply to
    • ||xTechPrime, ONR Global-X Challenge 2023, Army...
  • Поле диалогового окна выезжает справа одновременно с затуханием поля
  • Области меню - динамически растягиваются и сужаются в зависимости от наполнения элементами
  • Управление дроном. Правый управляется джойстиком, левый управляется наклоном головы, левая (правая) рука свободна. Плюс программные и физические кнопки на наушнике.
  • Для каждой функции статус бара в таблице сделать краткое описание технических особенностей.
  • Fire assist. Mountain mode. Включает более сложный баллистический расчёт, учитывающий эффект миража (для пустыни тоже), восходящие потоки, более крутую линию визирования (sightline hight), боковые потоки воздуха и др.
  • Приложение Задачи (Календарь, Рабочие группы): список задач в окне Left Top B, при выборе задача открывается в этом же окне, чтобы не перекрывать окно левее с навигационной сеткой (если навигация не используется, тогда открывать в левом верхнем окне).
  • Внешняя камера, в т.ч. дрон, робот и вид другого пользователя - в Left Bottom B, A, Right bottom A.
  • Left Top A приоритеты: Nav Grid (в т.ч. совмещённый вид: IFF, Radar, RDF), Task, Workgroup
  • Left Top B: вид фронтальной камеры наблюдения (когда центральное окно не используется или занято управлением дроном, роботом)
  • Left Bottom A приоритеты: Rear Cam, Drone View, User View
  • Left Bottom B: карта
  • Central A / B, A+B: фронтальные камеры ( разделённый вид, совмещённый вид), Fire assist
  • Right Top A: кратковременно (настройки приложений)
  • Right Top B: SDR Scan, Radar
  • Right Bottom A:
  • Right Bottom B приоритеты: Messages, SDR, Radar
  • Расписать приоритеты для приложений в окнах. Куда смещать при открытии более приоритетных приложений, при закрытии этих приложений. Возможно 4-5 приоритетов.
  • Преобразование при передаче: голос - текст - голос. Можно читать или включить озвучание и слушать.
  • Голосовой ассистент. Голосовые команды могут произноситься по-разному с разным акцентом, поэтому однозначные голосовые команды не эффективны (никто не станет заучивать наизусть десятки голосовых команд). Вместо этого используется голосовой ассистент на базе AI/ML. Создать отдельную страницу на эту тему. Поиск материалов "voice control assistant open source". KeenASR SDK
  • Поиск аббревиатур для UI
  • Ориентируемся на сенсоры SONY SWIR, которые включают видимый диапазон. Тогда LWIR в качестве 3-й камеры. Камера заднего вида тоже видимый свет + SWIR. При необходимости дополнительные сенсоры устанавливаются с помощью NVG mount.
  • Кроме ночного видения SWIR mode подходит для дневного использования: сквозь туман, наблюдение за небом, объекты на поверхности воды, видимость людей в камуфляже и замаскированных объектов, мин-ловушек, пластиковых и металлических мин, технического осмотра.
  • Кроме ночного видения LWIR mode подходит для дневного наблюдения за полем боя (горячие стволы, следы, массивные металлические замаскированные объекты, люди в камуфляже, особенно открытые участки кожи, при окружающей температуре ниже 26-29°C, особенно при благоприятной солнечной активности, которая формирует температурные контрасты.
  • PRS (passive radar sensor). В окне отображается объект, излучающий или отражающий радиоволны в диапазоне 1kHz-5GHz. Пассивный означает, что для отражения мобильный облучатель установлен на безопасном расстоянии от пользователя. Позволяет видеть ЛА с включенным радаром, источники радиосвязи, в т.ч. носимые, РЛС и др. Для обнаружения мин-ловушек и металлических мин, др. металлических предметов в походных условиях может применяться облучатель в форме фонарика.
  • GES (gamma ray emission sensor) устанавливается с помощью NVG mount. Позволяет обнаруживать опасные радиоактивные объекты, материалы и следы.
  • Таким образом, почти полный спектр излучения попадает в видимую область и на навигационную сетку.
  • AUF (audio filter). Позволяет не только вырезать некоторые полосы пропускания, но и более тонко динамически фильтровать паттерны. например, исключать шумы: пение птиц, звук ветра, шум воды, срабатывать за мс и ограничивать порог уровня при залпе (чтобы не глушить пользователя). Исключать эхо, т.е. переотраженные звуковые волны, чтобы выделять только первичный шум. И, наоборот, выделять и усиливать отдельные паттерны шумов: двигатели, треск ветвей деревьев, кашель, чихание, голос, металлический стук, трение камней, шаги, трение покрышек, лязг гусениц техники. Динамически закрывать отверстия в наушниках магнитным приводом. Встроенные в переднюю часть микрофоны с широким углом обзора и суперкардиодой позволяют точно обнаруживать источник шума. Возможно обработка на отдельной звуковой карте собственным процессором, в помощь огромные существующие коллекции шумов и звуков для ML (для обработки видео тоже отдельная видеокарта, особенно для Computer Vision, для ML тоже свой SOC соответственно, для SDR тоже свой SOC - всего около 5 SOC, которые интегрированы между собой)
  • Виджеты. При нажатии на Виджеты справа в подменю все доступные, в т.ч. активные ранее использовавшиеся виджеты приложений. При нажатии на них они отображаются в том окне, как во время последнего использования. Их можно сдвинуть (нажать и удерживать при перемещении джойстиком / жестом руки, либо стрелками сбоку левого или правого поля; голосом: tess activ widget to left bottom B, либо имя виджета). Чтобы скрыть в трей (сделать неактивным), нажать и удерживать 2 сек. Чтобы открыть снова, выбрать Виджеты и выбрать виджет одним кликом.
  • Виджет Healthcare. Показатели здоровья и жизнедеятельности организма.
  • Приложения. Выбор приложения справа в подменю. Открытие в одном из окон, как виджет. При необходимости двойным кликом развернуть на всю левую или правую область. Использовать прокрутку как в сенсорном окне жестом или кнопкой прокрутки вниз и вверх. При долгом нажатии окно приложения скрывается в трее, но продолжает работать. Для принудительного закрытия приложения нажать на него в подменю и удерживать более 2 сек. Большинство приложений имеют виджеты для удобного отображения и оперативного использования. Настройки и ввод данных, импорт и пр. осуществляются в окне приложения. Из окна виджета можно открыть окно соответствующего приложения, если кликнуть по неактивной части виджета 3 раза.
  • Уведомления, в т.ч. чатов показываются в подменю главного меню, в момент когда с ним не работает пользователь. В 2-3 строки с цитатой, 2 блока по горизонтали, листать стрелками вверх и вниз. При нажатии на уведомление открывается окно виджета. Например, чаты. Уведомления о задачах и автотрекере задач.
  • Уведомления в подменю справа. Иконка. Дата и время. Текст. Галочка (+ ? крестик закрыть). Можно листать историю уведомдений, если окно активно.
  • Входящее сообщения. Окно справа нижнее Б. Ник. Дата и время. Текст. Галочка (прочитать и свернуть). Ответить. Поделиться. Стрелка вправо (свернуть).
  • Исходящее сообщение. Я. Дата и время. Цитата. Текст. Вложения (позиция, фото, видео, файл). Отправить. Отменить.
  • Отправленное сообщение. Просмотрено кем и когда снизу. Листать стрелка вниз и вверх перемещает на полокна.
  • Виджет Чаты. Включает разные комбинации: один-к-одному, многие-ко-многим. Настройки чатов находятся в приложении и в настройках каналов. Сюда добавляются каналы голосовой связи и текстовые сообщения. Сообщения голосовой связи перед отправкой переводятся в текст, отправляются в виде зашифрованного текстового сообщения, могут озвучиваться получателю. Есть метка, требуется ответ, будет висеть в уведомлениях, пока пользователь не ответит.
  • Сообщения icon messaging system показываются сразу без уведомлений.
  • Истории сообщений. Открыть виджет Чаты, справа выбрать соответствующий чат стрелками, жестами или голосом.
  • Шрифты заглавными буквами. Курсивом в меню и подменю, обычным на меню значений и на виджетах, в окнах приложений.
  • Навигационная сетка при увеличении на прозрачном фоне, при уменьшении на тёмном фоне.
  • После завершения работы над этим разделом включить фрагменты а страницы с кейсами разных групп пользователей для обсуждения с менторами.
  • Пусть не смущает обилие функциональности. Продолжительность работы над проектом не ограничена и мы планируем развивать продукт в зависимости от бюджета, нашей производительности, скорости развития технологий, ускоряющих работу, и наличия уже готовых решений и компонентов. Всё, что включено в описание технически уже реализуемо на существующем уровне развития техники.
  • В качестве идеи. Затухающие окна с разным процентом затемнения могут работать как экраны против ослепляющего солнечного света.

Storylines

Расписать здесь, сделать включаемые вставки в роли. Ситуация. Описание ситуации, интерфейс, действия. Анимация.

  • Настройки камер и окон
  • Настройки мультимедиа
  • Работа с главным меню
  • Использование системы свой-чужой https://en.wikipedia.org/wiki/Identification_friend_or_foe
    • Транспондер с закодированным сигналом, передающий позицию, в режиме радиомаяка на частотах, маскируемых под FM и GSM. Прием запросов на одной частоте, передача на другой частоте, в т.ч. пакет содержит указание на частоту следующей передачи и новый ключ (?). https://en.wikipedia.org/wiki/Secondary_surveillance_radar
    • Запрос после радиопеленга позволяет установить расстояние и в сообщении запроса указать предельную дальность распространения сигнала для ответа (мощность излучения)
    • Ответ транспондера на частоте, с мощностью и протоколом, позволяющие ограничить дальность обнаружения маяка
    • Пакетные ответы, где передачу осуществляет только один из группы, а между собой обмен через Bluetooth например.
    • Ответы только в движении при смещении более 10-50 м. Неподвижные игнорируют, предполагается предыдущая отправленная позиция.
    • Запросы с удалённого передатчика (?)
    • Отраженный сигнал, принимаемый пассивным радаром
    • В системах IFF обычно используются радиолокационные частоты, но могут использоваться и другие электромагнитные частоты, радио или инфракрасные.
    • Пакет сообщения транспондера может включать не только позицию, но данные датчиков жизнедеятельности, запас боеприпасов, технические неисправности устройства.
    • Сервер анализирует регулярность и полноту информации обо всех пользователях.
  • Использование режима невидимости
    • Режимы радиомолчания (при неподвижной позиции запросы IFF игнорируются, отвечать только тем, кто вблизи)
  • Ориентирование и навигация (компас, сетка, идентификация)
  • Текстовые сообщения
  • Голосовые сообщения
  • Символьные сообщения
  • Обнаружение низколетящих ЛА с включенным радаром
    • 8-12 GHz, 12-18, 24-40 и др. https://en.wikipedia.org/wiki/Radar
    • Пассивный радар, использующий эффект освещения цели другими источниками радиосигналов, излучаемых в т.ч. всесторонними антеннами УКВ, УВЧ диапазонов - FM радиостанций, базовые станции мобильной связи
https://en.wikipedia.org/wiki/Passive_radar
  • Обнаружение дронов (SWIR,
  • Обнаружение в горах
  • Обнаружение на водной поверхности
  • Обнаружение источников радиосигнала
    • Определение направления к источнику подозрительного радиосигнала (связь, радар, источник радиопомех, радиомаяк) и характеристик сигнала
    • Определение позиции подозрительного источника сигнала, излучаемого всенаправленной антенной в пределах радиогоризонта (light-of-sight), с помощью RDF (метод триангуляции, радиопеленг), (тактовая частота устройств синхронизирована)
    • Определение скорости движения излучающего или отражённого радиосигнала (эффект Допплера, CW радар непрерывного действия) и отслеживание его азимута
  • Прицельный огонь по дронам
  • Прицельный огонь по наземным целям
  • Управление дроном
    • Вместо левого джойстика - управление наклонами головы или управление виртуальными джойстиками с помощью жестов. Например, аппаратный джойстик на наушнике справа, а правая рука занята, тогда левой рукой жестами управление правым виртуальным джойстиком, а головой - левым виртуальным джойстиком.
    • Возможность не использовать джойстик (обе руки свободны), управление только наклоном головы (вперёд, назад, влево, вправо) и голосом (поворот, вверх, вниз, зависнуть, следовать, кружиться над целью, кружиться по дуге с радиусом, управление высотой).
    • Обработка видеосигнала с помощью Computer Vision. Дрон передает потоковое видео, GPU устройства с включенной функцией "OD" распознает и помечает объекты.
    • Пресет "кружится над целью". Оператор указывает распознанный объект и выбирает команду "кружится над целью" и параметры (радиус, полный круг или сегмент круга, высоту - авто / диапазон / точная высота). Если цель движется, дрон следует за целью. Избегание препятствий (?). Передача координат цели. Уточнение координат (относительные координаты) при нарушении GNSS с помощью RDF с двух или более устройств.
  • Управление роботом
    • Возможность не использовать джойстик, управление только наклоном головы и голосом.
  • SIGINT
  • IMINT

Further reading

Интегрированная схема

  • Интегрированная схема включает 3-5 многослойных печатных плат, на которых размещены сокет с процессором, чипсет, VRM, модули памяти, электронные компоненты обвязки, DSP, элементы схемы SDR, порты
  • МПП собраны на 10-12 резьбовых рейках с промежуточными медными пластинами теплоотведения
  • Видеокамеры собраны на модулях, внутри светоделительные стеклянные призмы, по краям сенсоры, обвязка на интегрированной схеме
  • Гибкие шлейфы для соединения модулей интегрированной схемы, в т.ч. PCIe, шлейфы для видеокамер и мультимедиа, шлейфы для наружных USB и Thunderbolt портов (порты герметизированы компаундом)
  • Все элементы блока питания только в затылочной части маски, там же вентилятор охлаждения
  • Вся внутренняя поверхность камеры маски имеет омеднение, которое защищает от высокочастотных радиопомех
  • Возможно необходимо вынести на внешнюю поверхность интегрированные антенны Wi-Fi, Bluetooth, 5G (исследовать данный вопрос)

Охлаждение

  • Слои заземления 70 мкм меди с выводами на торцевую кромку, к которой припаяны медные листы
  • Между платами медные пластины, соединённые термопастой с радиаторами на чипах
  • Радиаторы на чипах медные с несквозной перфорацией для уменьшения массы
  • Медные теплоотводящие пластины соединены термопастой с холодной стороной элемента Пельтье
  • Внутренняя крышка корпуса имеет перфорацию, окрашена медной краской и имеет гальванический слой меди
  • Внутренняя крышка корпуса имеет рёбра жёсткости снаружи вертикально, изнутри горизонтально, которые улучшают воздушный теплообмен внутри и снаружи
  • Внешний радиатор на горячей стороне элемента Пельтье находится во впадине между маской и шлемом, и заметен в LWIR-диапазоне только сверху (в то же время это наилучшее размещение для воздушного охлаждения)
  • Внутренняя поверхность камеры маски окрашена медной краской и имеет слой гальванической меди, соединённый с теплоотвода и к активному радиатору
  • Итого 2 радиатора, пассивный на внутренней крышке и активный сверху (который включён постоянно и регулируется микроконтроллером в зависимости от температуры внутри внутренней камеры корпуса маски)
  • Внутренняя (или наружная) стенка затылочной части маски тоже может иметь сквозное гальваническое омеднение для теплоотвода от блока питания и аккумуляторов

See also

Public External Sections: Public Wiki Sections: Public Wiki Sections: Not-Public Wiki Sections:

Note: Unless otherwise stated, whenever the masculine gender is used, both men and women are included.


See Also Product Details

Hardware Details: Functional Apps Details: Executive Apps Details: Service Apps Details:


References

External links