url: { тип: ключевое слово, ignore_above: 256 }, italic: { тип: текст }, links: { properties: { external: { properties: { label: { тип: текст }, url: { тип: ключевое слово, ignore_above: 256 } } }, internal: { properties: { label: { тип: текст }, url: { тип: ключевое слово, ignore_above: 256 } } } } }, path: { тип: ключевое слово, ignore_above: 256 }, sim_hash: { тип: ключевое слово, ignore_above: 256 }, lang: { тип: ключевое слово, ignore_above: 256 }, screenshot_id: { тип: ключевое слово, ignore_above: 256 }, size: { тип: длинное }, text: { тип: текст }, title: { тип: текст, fields: { keyword: { тип: ключевое слово } } }, version: { тип: длинное } }, task: { properties: { breadth: { тип: длинное }, created: { тип: дата }, depth: { тип: длинное }, id: { тип: ключевое слово, ignore_above: 256 }, original_url: { тип: ключевое слово, ignore_above: 256 }, reference_url: { тип: ключевое слово, ignore_above: 256 }, schema: { тип: ключевое слово, ignore_above: 256 }, status: { тип: целое число }, updated: { тип: дата }, url: { тип: ключевое слово, ignore_above: 256 }, last_screenshot_id: { тип: ключевое слово, ignore_above: 256 } } } }

Note: Elasticsearch version should >= v5.3

• Включите модуль индекса в gopa.yml, обновите настройки elasticsearch:

  - module: index
    enabled: true
    ui:
      enabled: true
    elasticsearch:
      endpoint: http://localhost:9200
      index_prefix: gopa-
      username: elastic
      password: changeme

Запуск

Gopa не требует никаких зависимостей, просто запустите ./gopa, чтобы запустить программу.

Gopa можно запустить как демон (Примечание: доступно только на Linux и Mac):

Пример:

➜  gopa git:(master) ✗ ./bin/gopa --daemon
  ________ ________ __________  _____
 /  _____/ \_____  \\______   \/  _  \
/   \  ___  /   |   \|     ___/  /_\  \
\    \_\  \/    |    \    |  /    |    \
 \______  /\_______  /____|  \____|__  /
        \/         \/                \/
[gopa] 0.10.0_SNAPSHOT
///last commit: 99616a2, Fri Oct 20 14:04:54 2017 +0200, medcl, update version to 0.10.0 ///

[10-21 16:01:09] [INF] [instance.go:23] workspace: data/gopa/nodes/0
[gopa] started.

Также запустите ./gopa -h, чтобы получить полный список параметров командной строки. ### Стоп

Безопасно нажать Ctrl+C, чтобы остановить текущий запущенный процесс Gopa. Gopa обработает остальное, сохранив контрольную точку. Вы можете восстановить работу позже, мир всё ещё в ваших руках.

Если вы запускаете Gopa как демон, вы можете остановить его следующим образом:

 kill -QUIT `pgrep gopa`

Конфигурация

UI

• Панель поиска: http://127.0.0.1:9001/
• Административная панель: http://127.0.0.1:9001/admin/

API

• TBD

Архитектура

Вклад

Мы искренне и тепло приветствуем вас в этом проекте, будь то стиль пользовательского интерфейса или основные функции, или просто часть документации. Добро пожаловать! Давайте сделаем его лучше.

Лицензия

Выпущено под Apache License, Version 2.0.