fahsq72lan/dsh-guide-tutor

guide-tutor состоит из двух частей: плагина DeepSeek Harness и нативного плавающего слоя Windows. Нажмите на закрепленную плавающую кнопку, чтобы сделать снимок экрана и отправить его в текущий диалог; после анализа изображения модель рисует прямоугольники, круги, стрелки и текст на полноэкранном прозрачном слое, а полупрозрачная панель отображает текущий шаг. Ответы озвучиваются построчно с помощью локального китайского голосового движка и сопровождаются субтитрами, а голосовой ввод распознается локально и офлайн с помощью sherpa-onnx; учебные шаги можно сохранять в локальную базу знаний в формате Markdown или Word для повторного использования в будущем.

guide-tutor состоит из двух частей: плагина DeepSeek Harness и нативного плавающего слоя Windows. Нажмите на закрепленную плавающую кнопку, чтобы сделать снимок экрана и отправить его в текущий диалог; после анализа изображения модель рисует прямоугольники, круги, стрелки и текст на полноэкранном прозрачном слое, а полупрозрачная панель отображает текущий шаг. Ответы озвучиваются построчно с помощью локального китайского голосового движка и сопровождаются субтитрами, а голосовой ввод распознается локально и офлайн с помощью sherpa-onnx; учебные шаги можно сохранять в локальную базу знаний в формате Markdown или Word для повторного использования в будущем.

Почему это важно Превращает «объяснение шагов по скриншоту» в прямую аннотацию на экране с голосовым сопровождением, что делает обучение родственников старшего возраста или новых сотрудников работе с программным обеспечением более наглядным.

Количество звезд 62

Причины

  • Репозиторий был создан только 13 11 месяца, README прочитан, функции и места хранения данных описаны конкретно
  • Озвучивание и распознавание речи выполняются локально, дополнительные ключи API не требуются

Использование

  • В DSH используйте install_bundle из plugin_manager, указав путь к каталогу плагина для установки, затем в панели опишите желаемую операцию; после подтверждения плана моделью начинается аннотирование

Риски

  • Поддерживается только Windows; при захвате экрана весь снимок отправляется выбранной модели, поэтому чувствительные окна необходимо предварительно закрыть
  • Лицензия в репозитории не указана

Открыть

GitHub

Открыть последние новости ИИ