動作環境

• Python 3.11+
• Node.js 18.17+
• PostgreSQL 16.1+

ローカル開発環境構築

※ Mac (M2) MacOS 14.1.2（23B92）にて確認

1. brew install postgresql@16

   1. psycopg2 をビルドするために pg_config コマンドが必要で、これは通常 PostgreSQL をインストールすれば入る
   2. インストール後に出力される echo 'export PATH="/opt/homebrew/opt/curl/bin:$PATH"' >> ~/.zshrc などを実行してパスも通す

2. rye sync

3. docker-compose up

4. 環境変数 DATABASE_URL を設定

5. python scripts/initialize_or_update_db.py を実行してテーブルを生成

6. python scripts/initialize_master_data.py を実行して初期データをインポート

7. python -m celery -A metaboatrace.crawlers worker --loglevel=info

8. python -m celery -A metaboatrace.crawlers flower (管理画面)

9. python -m celery -A metaboatrace.crawlers beat (定期実行)

データのインポート/エクスポート

インポート

$ psql -h 127.0.0.1 -p 55432 -U postgres -d metaboatrace_development -f 20200501.dump

エクスポート

$ pg_dump -h 127.0.0.1 -p 55432 -U postgres -d metaboatrace_development -n public --data-only --exclude-table='stadiums' --exclude-table='racers' -f 20200501.dump

トラブルシューティング

psycopg2 がインストールできない

• psycopg2-binary を代用可能

Celery で +[NSCharacterSet initialize] may have been in progress in another thread when fork() was called. のようなエラーが出る

• export OBJC_DISABLE_INITIALIZE_FORK_SAFETY=YES のように環境変数を設定してからワーカーや beat を起動する

celery beat で _dbm.error: cannot add item to database というエラーが出る

• rm celerybeat-schedule.db を実行して再起動する