Настройка сборки и установки HAWQ на Mac## Шаг 1 Установка HDFS

brew install hadoop

touch ~/.bashrc
touch ~/.bash_profile
    
echo "if [ -f ~/.bashrc ]; then
source ~/.bashrc
fi" >> ~/.bash_profile
    
echo "export HADOOP_HOME=/usr/local/Cellar/hadoop/2.8.1/libexec" >> ~/.bashrc
echo "export PATH=\$PATH:\${HADOOP_HOME}/bin:\${HADOOP_HOME}/sbin" >> ~/.bashrc
    
source ~/.bashrc
```### Шаг 1.3 Настройка безпарольной аутентификации SSH
```bash
ssh-keygen -t rsa -P '' -f ~/.ssh/id_rsa
cat ~/.ssh/id_rsa.pub >> ~/.ssh/authorized_keys
chmod 0600 ~/.ssh/authorized_keys

hdfs namenode -format

# запустить/остановить HDFS
start-dfs.sh/stop-dfs.sh

# Выполните базовые тесты, чтобы убедиться в работоспособности HDFS
hdfs dfsadmin -report
hadoop fs -ls /

kern.sysv.shmmax=2147483648
kern.sysv.shmmin=1
kern.sysv.shmmni=64
kern.sysv.shmseg=16
kern.sysv.shmall=524288
kern.maxfiles=65535
kern.maxfilesperproc=65536
kern.corefile=/cores/core.%N.%P

mkdir ~/dev
git clone git@github.com:apache/hawq ~/dev/hawq

sudo mkdir -p /opt
sudo chmod a+w /opt
sudo install -o $USER -d /usr/local/hawq

mkdir /tmp/magma_master
mkdir /tmp/magma_segment

# Перед инициализацией HAWQ вам потребуется установить HDFS и убедиться, что он работает.

source /usr/local/hawq/greenplum_path.sh

# Также вам потребуется настроить безпарольный вход через SSH на всех системах.
# Если вы устанавливаете HAWQ только для локальной разработки, пропустите этот шаг.
# Обмен ключами SSH между хостами host1, host2 и host3:
# hawq ssh-exkeys -h host1 -h host2 -h host3
```# Инициализируйте кластер HAWQ и запустите его по умолчанию
hawq init cluster -a

# Теперь вы можете останавливать/перезапускать/вновь запускать кластер с помощью команд:
# hawq stop/restart/start cluster
# Команда инициализации автоматически вызывает команду запуска.

# Master HAWQ и сегменты полностью разделены.
# Поэтому вы также можете инициализировать, запускать или останавливать мастер и сегменты отдельно.
# Например, чтобы инициализировать:
# hawq init master, затем hawq init segment
# Чтобы остановить:
# hawq stop master, затем hawq stop segment
# Чтобы запустить:
# hawq start master, затем hawq start segment
```> Каждый раз при инициализации HAWQ вам потребуется удалить некоторые файлы. Директория всех файлов, которые требуется удалить, была конфигурирована в `/usr/local/hawq/etc/hawq-site.xml`.
>
> - 1) Название: `hawq_dfs_url`, Описание: URL для доступа к HDFS
> - 2) Название: `hawq_master_directory`, Описание: Директория master HAWQ
> - 3) Название: `hawq_segment_directory`, Описание: Директория сегмента HAWQ
> - 4) Название: `hawq_magma_locations_master`, Описание: Расположение службы HAWQ magma на master
> - 5) Название: `hawq_magma_locations_segment`, Описание: Расположение службы HAWQ magma на сегменте
>
> Например:
>
> ```bash
> hdfs dfs -rm -r /hawq*
> rm -rf /Users/xxx/data/hawq/master/*
> rm -rf /Users/xxx/data/hawq/segment/*
> rm -rf /Users/xxx/data/hawq/tmp/magma_master/*
> rm -rf /Users/xxx/data/hawq/tmp/magma_segment/*
> ```
>
> Убедитесь, что нет никаких процессов PostgreSQL или magma, работающих на вашем компьютере. Если они работают, вам следует завершить их перед инициализацией HAWQ. Например,
>
> ```bash
> ps -ef | grep postgres | grep -v grep | awk '{print $2}' | xargs kill -9
> ps -ef | grep magma | grep -v grep | awk '{print $2}' | xargs kill -9
> ```
># Установка HAWQ в CentOS 7Аналогично установке на macOS, можете попробовать.

# Установка HAWQ в CentOS 7 (версия 6.x) с использованием Docker

Аналогично установке на macOS, можете попробовать.

# Установка, сборка и тестирование (версия Apache HAWQ)

----------------
Для получения более подробной информации обратитесь к странице HAWQ wiki:
https://cwiki.apache.org/confluence/display/HAWQ/Build+and+Install

```shell
cd hawq
make feature-test

TEST_DB_NAME="hawq_feature_test_db"
psql -d postgres -c "CREATE DATABASE $TEST_DB_NAME;"
export PGDATABASE=$TEST_DB_NAME
psql -c "ALTER DATABASE $TEST_DB_NAME SET LC_MESSAGES TO 'C';"
psql -c "ALTER DATABASE $TEST_DB_NAME SET LC_MONETARY TO 'C';"
psql -c "ALTER DATABASE $TEST_DB_NAME SET LC_NUMERIC TO 'C';"
psql -c "ALTER DATABASE $TEST_DB_NAME SET LC_TIME TO 'C';"
psql -c "ALTER DATABASE $TEST_DB_NAME SET TIMEZONE_ABBREVIATIONS TO 'Default';"
psql -c "ALTER DATABASE $TEST_DB_NAME SET TIMEZONE TO 'PST8PDT';"
psql -c "ALTER DATABASE $TEST_DB_NAME SET DATESTYLE TO 'postgres,MDY';"

hawq/src/test/feature/feature-test --gtest_filter=-TestHawqRegister.*:TestTPCH.TestStress:TestHdfsFault.*:TestZookeeperFault.*:TestHawqFault.*

cd hawq/src/test/feature/
mkdir -p testresult
python ./gtest-parallel --workers=4 --output_dir=./testresult --print_test_times ./feature-test --gtest_filter=-TestHawqRegister.*:TestTPCH.*:TestHdfsFault.*:TestZookeeperFault.*:TestHawqFault.*:TestQuitQuery.*:TestErrorTable.*:TestExternalTableGpfdist.*:TestExternalTableOptionMultibytesDelimiter.TestGpfdist:TETAuth.*
```  TestHawqRegister не включен
  TestTPCH.TestStress предназначен для тестирования нагрузки TPCH
  TestHdfsFault — тесты отказоустойчивости HDFS
  TestZookeeperFault — тесты отказоустойчивости Zookeeper
  TestHawqFault — тесты отказоустойчивости HAWQ# Экспорт контролируемых товаров
----------------

Эта распределённая версия включает криптографическое программное обеспечение. Страна, в которой вы сейчас проживаете, может иметь ограничения на импорт, владение, использование и/или пересылку в другую страну криптографического программного обеспечения. **ПЕРЕД** использованием любого криптографического программного обеспечения, пожалуйста, проверьте законы, регламенты и политики вашей страны относительно импорта, владения или использования, а также пересылки криптографического программного обеспечения, чтобы узнать, разрешено ли это. Для получения дополнительной информации см. <http://www.wassenaar.org/>.

Департамент торговли США, Управление промышленной безопасности (BIS), отнёсло эту программу к категории Экспортного номера контроля товаров (ECCN) 5D002.C.1, которая включает программное обеспечение для обеспечения информационной безопасности с использованием или выполнением криптографических функций с асимметричными алгоритмами. Форма и способ распространения этой программы Apache Software Foundation делают её пригодной для экспорта под исключением Лицензионного исключения ENC для технологического программного обеспечения без ограничений (TSU) (см. раздел 740.13 Управления по экспортному администрированию BIS) как для объектного кода, так и для исходного кода.