Paddle.js

Paddle.js — это веб-проект Baidu PaddlePaddle, представляющий собой фреймворк глубокого обучения с открытым исходным кодом, работающий в браузере. Paddle.js может загружать предварительно обученную модель или преобразовывать модель из paddle-hub с помощью инструментов преобразования моделей, предоставляемых Paddle.js. Он может работать в любом браузере, поддерживающем WebGL/WebGPU/WebAssembly. Также он может работать на платформах Baidu Smartprogram и WX miniprogram.

Экосистема

Проект	Версия	Описание
paddlejs-core		Механизм логического вывода
paddlejs-backend-webgl		Веб-бэкенд WebGL
paddlejs-backend-wasm		Бэкенд WebAssembly
paddlejs-backend-webgpu		Веб-бэкэнд WebGPU
paddlejsconverter		Конвертер моделей PaddlePaddle
humanseg		Библиотека сегментации человека
ocr		Библиотека оптического распознавания символов
gesture	[![gesture-status]][gesture-package]	Библиотека распознавания жестов
mobilenet		Библиотека классификации изображений
ocr detection		Библиотека обнаружения оптических символов
facedetect		Библиотека обнаружения лиц

[gesture-status]:

Примечание: для корректного отображения некоторых элементов текста может потребоваться доступ к исходному коду. Текст запроса:

https://img.shields.io/npm/v/@paddlejs-models/gesture [gesture-package]: https://npmjs.com/package/@paddlejs-models/gesture

Website

https://paddlejs.baidu.com

Key Features

Module

• paddlejs-core, the core part of the Paddle.js ecosystem, which is responsible for the operation of the inference process of the entire engine.
• paddlejsconverter, model transformation tool for Paddle.js, convert PaddlePaddle models (also known as fluid models) into a browser-friendly format.
• paddlejs-models, model projects, supply flexible low-level APIs for users to implement their AI scenario.
• paddlejs-examples, Paddle.js AI examples
• paddlejs-mediapipe, tools for live and streaming media, support webrtc camera and a lightweight opencv package

Backends

• paddlejs-backend-webgl, webgl backend, the main backend for Paddle.js, ops supported
• paddlejs-backend-webgpu, webgpu backend, an experimental backend, WebGPU draft, ops supported
• paddlejs-backend-wasm, WebAssembly backend, ops supported
• paddlejs-backend-cpu, cpu backend, ops supported
• paddlejs-backend-nodegl, nodegl backend, a backend in Node.js for Paddle.js, using the webgl backend ops. ops supported

Examples

• image classification game image classification game example in wx miniprogram
• gesture gesture recognition example online experience
• humanStream video-streaming human segmentation online experience
• humanseg human segmentation example online experience
• ocr optical character recognition example online experience
• ocr detection optical character detection example online experience
• mobilenet classify images into 1000 object

Перевод текста на русский язык:

В тексте рассказывается о проекте Paddle.js — это фреймворк для машинного обучения и искусственного интеллекта, который позволяет разработчикам создавать приложения с использованием моделей машинного обучения.

Проект состоит из нескольких модулей:

1. paddlejs-core — основной модуль проекта, отвечает за работу всего движка.
2. paddlejsconverter — инструмент для преобразования моделей PaddlePaddle в формат, удобный для использования в браузере.
3. paddlejs-models — набор проектов, которые предоставляют гибкие низкоуровневые API для реализации сценариев ИИ.
4. paddlejs-examples — примеры использования Paddle.js для создания приложений с искусственным интеллектом.
5. paddlejs-mediapipe — инструменты для работы с медиаданными в реальном времени и потоковой передачи данных, поддерживают камеру WebRTC и облегчённую версию OpenCV.

Также проект включает несколько бэкендов:

1. paddlejs-backend-webgl — основной бэкенд для Paddle.js на основе WebGL.
2. paddlejs-backend-webgpu — экспериментальный бэкенд на основе WebGPU.
3. paddlejs-backend-wasm — бэкенд на базе WebAssembly.
4. paddlejs-backend-cpu — бэкенд, работающий на центральном процессоре.
5. paddlejs-backend-nodegl — бэкенд в Node.js для Paddle.js, использующий операции бэкенда webgl.

Кроме того, в тексте приводятся примеры использования Paddle.js:

— игра для классификации изображений; — распознавание жестов; — сегментация видеопотоков; — человеческая сегментация; — оптическое распознавание символов; — обнаружение оптических символов; — классификация изображений с помощью модели Mobilenet.