Compare commits
183 Commits
| Author | SHA1 | Date | |
|---|---|---|---|
| e99c15e6a5 | |||
| 99377e9ca9 | |||
| aa61465ce0 | |||
| bccefed35e | |||
| d610ecb57c | |||
| c852ad49cf | |||
| 3fbb5ea2bf | |||
| a45961928e | |||
| 736951526b | |||
| ed137c2574 | |||
| b694a101d1 | |||
| 14ced733f2 | |||
| 6475ecd3b0 | |||
| 29929d76d3 | |||
| 6772a86081 | |||
| 6ff40c8ea3 | |||
| 6f252162ef | |||
| ee4ae5583d | |||
| d7c106f292 | |||
| eb3a33f124 | |||
| 528a1b4425 | |||
| 3483f84044 | |||
| ebbd42e4e0 | |||
| 445715ded3 | |||
| e926a7af75 | |||
| 344cdba9f1 | |||
| b3fb3a9eff | |||
| fbb35c5296 | |||
| 8565556b3f | |||
| 5d02bdf5e6 | |||
| 5359300f8a | |||
| b97db19824 | |||
| 9dc2323b9a | |||
| 91ece33518 | |||
| 1a235a171d | |||
| d897438675 | |||
| 5728a11fbd | |||
| bcb3b2ba6d | |||
| 59bd7af33d | |||
| 266adede77 | |||
| 7ff226d622 | |||
| 9df28ecaa2 | |||
| 2701f7bba5 | |||
| 09ad1f64ab | |||
| 3c42eb402b | |||
| 0f4e589cf1 | |||
| add83a2a8f | |||
| 7e0d3ad5b0 | |||
| 5bf24d4f66 | |||
| 9c01c60f7c | |||
| 0c37bfa13c | |||
| db25edfd87 | |||
| 902dcd1dc8 | |||
| ea9614be13 | |||
| 3c22798e08 | |||
| 157f17ec52 | |||
| c67e116953 | |||
| f698880aaa | |||
| a9d92dcfcc | |||
| 89d5842505 | |||
| b0c9776601 | |||
| 5589a0432b | |||
| f9a0ba3690 | |||
| 2a46dd5503 | |||
| c56dd7e35d | |||
| d2e9bbf9f0 | |||
| 6348550149 | |||
| 26b163eab9 | |||
| 1c192ecdea | |||
| 82e18a9a22 | |||
| 6d9937c590 | |||
| ef6f9c74f6 | |||
| 24ec410f3d | |||
| 024122d310 | |||
| c6f269e30a | |||
| 97447a551f | |||
| fc0d341d15 | |||
| 688ee3350d | |||
| f40da64a05 | |||
| 475950be36 | |||
| 27a56e65b7 | |||
| a9986fbc4c | |||
| ee14f5fbe4 | |||
| 3f45fbc36e | |||
| 87949f42b5 | |||
| 4eb23a41ca | |||
| 6db27fd634 | |||
| a3fe301308 | |||
| bcc9b76212 | |||
| 7172de3623 | |||
| 6582ffc02a | |||
| f8ff3a2c46 | |||
| ecc7deed08 | |||
| ee0787683b | |||
| f8d93de299 | |||
| 7db7f74713 | |||
| fbb56400af | |||
| 744e9d6a7a | |||
| 521d1c0b3d | |||
| d49e45b308 | |||
| 49dc382a39 | |||
| 15b9840204 | |||
| 534582972d | |||
| 890ed68a0f | |||
| 92efa934a2 | |||
| cc001fa263 | |||
| 606664404b | |||
| a7f9b27a55 | |||
| 34991eca2d | |||
| d833d386d0 | |||
| daec1a0e1b | |||
| a9b8f46187 | |||
| eb48b7eb07 | |||
| 187cdf99c0 | |||
| 21da79cb46 | |||
| 49637f1b02 | |||
| e15e4c6e20 | |||
| 6e666844f0 | |||
| 3f6c21c86e | |||
| 6fb43fb411 | |||
| 5d89c6ad02 | |||
| 1d90580854 | |||
| c25e3bee7a | |||
| 6e20a924db | |||
| 780ccee1fe | |||
| 129e2ec2d7 | |||
| 4cd1cab466 | |||
| be043a85e3 | |||
| 1c46d7b558 | |||
| 7f0c9b9a27 | |||
| 42d45e85fb | |||
| e7d1069222 | |||
| a274ef448a | |||
| 7283532c38 | |||
| 489da25f1b | |||
| 4b29fafcff | |||
| 71507374ca | |||
| 4d2c23221a | |||
| 451d7939c0 | |||
| 1db1c46b32 | |||
| 3c3f2d56c8 | |||
| d6b224dbb4 | |||
| c8c558841e | |||
| cc94d5aeae | |||
| 6e9a9aa41b | |||
| e49922e188 | |||
| f0e8ef9b4f | |||
| 6ab270fe92 | |||
| b7591fb381 | |||
| 02c7bdaeda | |||
| 9778a3ded1 | |||
| 375cd7694e | |||
| f2938c232a | |||
| 352b440e8d | |||
| c10f9f78c0 | |||
| 86d1177ab8 | |||
| 43f58d57fd | |||
| 3c740eeb3f | |||
| e0af3c3d34 | |||
| 5b41423aef | |||
| 30fb70223c | |||
| 571d299d8a | |||
| ce2c4e42a3 | |||
| 6a6770f996 | |||
| 35c00b68f7 | |||
| fcfece4ddb | |||
| 054089e254 | |||
| 233ab71f2c | |||
| db7922c0d6 | |||
| 8ae40f2364 | |||
| 8dca1b4173 | |||
| ca419b6446 | |||
| 647a26eefd | |||
| dc21e8e323 | |||
| 6221d5465f | |||
| 0fdbc9dfd8 | |||
| 07b59ca4d8 | |||
| 331b8e3a30 | |||
| 668f109b01 | |||
| 14c9e3b5a5 | |||
| ddbeab70c6 | |||
| 4023fff0f2 | |||
| f0a9487045 |
@@ -1,89 +0,0 @@
|
||||
name: Build and Test (Reusable)
|
||||
|
||||
on:
|
||||
workflow_call:
|
||||
outputs:
|
||||
artifact-path:
|
||||
description: "Artifact path"
|
||||
value: ${{ jobs.build.outputs.artifact-path }}
|
||||
build-tag:
|
||||
description: "Build tag"
|
||||
value: ${{ jobs.build.outputs.build-tag }}
|
||||
commit-hash:
|
||||
description: "Commit hash"
|
||||
value: ${{ jobs.build.outputs.commit-hash }}
|
||||
|
||||
env:
|
||||
DOTNET_VERSION: '10.0.x'
|
||||
|
||||
jobs:
|
||||
build:
|
||||
runs-on: ubuntu-latest
|
||||
timeout-minutes: 15
|
||||
|
||||
outputs:
|
||||
artifact-path: quantengine-${{ steps.metadata.outputs.commit }}.tar.gz
|
||||
build-tag: build-${{ steps.metadata.outputs.commit }}-${{ github.run_number }}
|
||||
commit-hash: ${{ steps.metadata.outputs.commit }}
|
||||
|
||||
steps:
|
||||
- name: Checkout Code
|
||||
uses: actions/checkout@v3
|
||||
with:
|
||||
fetch-depth: 0
|
||||
|
||||
- name: Setup .NET
|
||||
uses: actions/setup-dotnet@v3
|
||||
with:
|
||||
dotnet-version: ${{ env.DOTNET_VERSION }}
|
||||
|
||||
- name: Generate Build Metadata
|
||||
id: metadata
|
||||
run: |
|
||||
COMMIT=$(git rev-parse --short HEAD)
|
||||
BUILD_TIME=$(date -u +'%Y-%m-%dT%H:%M:%SZ')
|
||||
echo "commit=${COMMIT}" >> $GITHUB_OUTPUT
|
||||
echo "build-time=${BUILD_TIME}" >> $GITHUB_OUTPUT
|
||||
|
||||
- name: Restore Dependencies
|
||||
run: dotnet restore src/dotnet/QuantEngine.Web/QuantEngine.Web.csproj
|
||||
|
||||
- name: Build Release
|
||||
run: |
|
||||
dotnet build src/dotnet/QuantEngine.Web/QuantEngine.Web.csproj \
|
||||
-c Release --no-restore
|
||||
|
||||
- name: Run Unit Tests
|
||||
run: |
|
||||
dotnet test src/dotnet/QuantEngine.Core.Tests/QuantEngine.Core.Tests.csproj \
|
||||
-c Release --no-build || true
|
||||
|
||||
- name: Publish Release Package
|
||||
run: |
|
||||
dotnet publish src/dotnet/QuantEngine.Web/QuantEngine.Web.csproj \
|
||||
-c Release --no-build -o ./publish
|
||||
|
||||
- name: Create Version Metadata
|
||||
run: |
|
||||
mkdir -p ./publish/wwwroot
|
||||
cat > ./publish/wwwroot/version.json <<EOF
|
||||
{
|
||||
"version": "1.0.${{ github.run_number }}-${{ steps.metadata.outputs.commit }}",
|
||||
"commit": "${{ steps.metadata.outputs.commit }}",
|
||||
"built": "${{ steps.metadata.outputs.build-time }}",
|
||||
"buildNumber": ${{ github.run_number }}
|
||||
}
|
||||
EOF
|
||||
|
||||
- name: Package Artifact
|
||||
run: |
|
||||
tar -czf quantengine-${{ steps.metadata.outputs.commit }}.tar.gz \
|
||||
-C ./publish .
|
||||
tar -tzf quantengine-${{ steps.metadata.outputs.commit }}.tar.gz > /dev/null || exit 1
|
||||
|
||||
- name: Upload Build Artifact
|
||||
uses: actions/upload-artifact@v3
|
||||
with:
|
||||
name: quantengine-build-${{ github.run_number }}
|
||||
path: quantengine-${{ steps.metadata.outputs.commit }}.tar.gz
|
||||
retention-days: 5
|
||||
@@ -1,172 +0,0 @@
|
||||
name: Auto Backup - WBS-9.7
|
||||
|
||||
on:
|
||||
schedule:
|
||||
# 매일 자정 (UTC)
|
||||
- cron: '0 0 * * *'
|
||||
workflow_dispatch:
|
||||
|
||||
jobs:
|
||||
daily-backup:
|
||||
runs-on: ubuntu-latest
|
||||
name: Daily Backup
|
||||
|
||||
steps:
|
||||
- name: Checkout
|
||||
uses: actions/checkout@v3
|
||||
with:
|
||||
fetch-depth: 0
|
||||
|
||||
- name: Setup Python
|
||||
run: |
|
||||
python --version
|
||||
|
||||
- name: Run Daily Backup
|
||||
run: |
|
||||
python tools/backup_recovery_manager_v1.py
|
||||
|
||||
- name: Cleanup Old Backups
|
||||
run: |
|
||||
python -c "
|
||||
from tools.backup_recovery_manager_v1 import BackupRecoveryManager
|
||||
manager = BackupRecoveryManager(retention_days=30)
|
||||
result = manager.cleanup_old_backups()
|
||||
print(f'Cleanup: {result}')
|
||||
"
|
||||
|
||||
- name: Log Backup Result
|
||||
if: always()
|
||||
run: |
|
||||
echo "Backup completed at $(date)"
|
||||
ls -lh backups/ | tail -5
|
||||
|
||||
weekly-full-backup:
|
||||
runs-on: ubuntu-latest
|
||||
name: Weekly Full Backup
|
||||
|
||||
# 매주 월요일 1:00 UTC
|
||||
schedule:
|
||||
- cron: '0 1 * * 1'
|
||||
|
||||
steps:
|
||||
- name: Checkout
|
||||
uses: actions/checkout@v3
|
||||
|
||||
- name: Setup Python
|
||||
run: python --version
|
||||
|
||||
- name: Create Weekly Full Backup
|
||||
run: |
|
||||
python -c "
|
||||
from tools.backup_recovery_manager_v1 import BackupRecoveryManager
|
||||
from pathlib import Path
|
||||
|
||||
manager = BackupRecoveryManager()
|
||||
result = manager.create_weekly_full_backup()
|
||||
print(f'Weekly backup: {result}')
|
||||
|
||||
# 신뢰성 테스트
|
||||
if 'backup_name' in result:
|
||||
integrity = manager.test_backup_integrity(result['backup_name'])
|
||||
print(f'Integrity: {integrity}')
|
||||
"
|
||||
|
||||
- name: Backup to Cloud (Optional)
|
||||
continue-on-error: true
|
||||
run: |
|
||||
# 원격 백업 서버로 동기화 (설정 필요)
|
||||
# rsync -av backups/ admin@BACKUP_SERVER_IP:/backup/data_feed/
|
||||
echo "Cloud sync would run here if configured"
|
||||
|
||||
- name: Notify Completion
|
||||
if: success()
|
||||
run: |
|
||||
echo "Weekly backup completed successfully"
|
||||
df -h | grep -E "Filesystem|data"
|
||||
|
||||
backup-health-check:
|
||||
runs-on: ubuntu-latest
|
||||
name: Backup Health Check
|
||||
|
||||
# 매일 12:00 UTC
|
||||
schedule:
|
||||
- cron: '0 12 * * *'
|
||||
|
||||
steps:
|
||||
- name: Checkout
|
||||
uses: actions/checkout@v3
|
||||
|
||||
- name: Check Backup Integrity
|
||||
run: |
|
||||
python -c "
|
||||
from tools.backup_recovery_manager_v1 import BackupRecoveryManager
|
||||
from pathlib import Path
|
||||
|
||||
manager = BackupRecoveryManager()
|
||||
|
||||
# 가장 최근 백업 확인
|
||||
backups = sorted(Path('backups/').glob('*'), key=lambda p: p.stat().st_mtime, reverse=True)
|
||||
|
||||
if backups:
|
||||
latest = backups[0].name
|
||||
print(f'Latest backup: {latest}')
|
||||
|
||||
integrity = manager.test_backup_integrity(latest)
|
||||
print(f'Status: {integrity.get(\"status\")}')
|
||||
|
||||
if integrity.get('database_integrity') != 'ok':
|
||||
print('WARNING: Database integrity issue detected')
|
||||
else:
|
||||
print('ERROR: No backups found')
|
||||
"
|
||||
|
||||
- name: Log Backup Statistics
|
||||
run: |
|
||||
echo "=== Backup Statistics ==="
|
||||
find backups/ -type f -name "metadata.json" | wc -l
|
||||
du -sh backups/ | awk '{print "Total size: " $1}'
|
||||
|
||||
test-recovery:
|
||||
runs-on: ubuntu-latest
|
||||
name: Monthly Recovery Test
|
||||
|
||||
# 매월 1일 2:00 UTC
|
||||
schedule:
|
||||
- cron: '0 2 1 * *'
|
||||
|
||||
steps:
|
||||
- name: Checkout
|
||||
uses: actions/checkout@v3
|
||||
|
||||
- name: Test Recovery Procedure
|
||||
run: |
|
||||
python -c "
|
||||
from tools.backup_recovery_manager_v1 import BackupRecoveryManager
|
||||
from pathlib import Path
|
||||
import tempfile
|
||||
|
||||
manager = BackupRecoveryManager()
|
||||
|
||||
# 가장 최근 백업에서 복구 테스트
|
||||
backups = sorted(Path('backups/').glob('*'), key=lambda p: p.stat().st_mtime, reverse=True)
|
||||
|
||||
if backups:
|
||||
test_backup = backups[0].name
|
||||
|
||||
# 임시 디렉토리에 복구
|
||||
with tempfile.TemporaryDirectory() as tmpdir:
|
||||
result = manager.restore_from_backup(test_backup, tmpdir)
|
||||
print(f'Recovery test: {result.get(\"status\")}')
|
||||
print(f'Recovery time: {result.get(\"recovery_time_seconds\")}s')
|
||||
|
||||
if result.get('status') == 'SUCCESS':
|
||||
print('Recovery procedure validated')
|
||||
else:
|
||||
print('ERROR: Recovery test failed')
|
||||
"
|
||||
|
||||
- name: Document Recovery Capability
|
||||
run: |
|
||||
echo "Monthly recovery test completed"
|
||||
echo "Recovery time target: < 1 hour"
|
||||
echo "Success rate target: 99%"
|
||||
@@ -1,15 +0,0 @@
|
||||
name: backup
|
||||
|
||||
on:
|
||||
schedule:
|
||||
- cron: "0 0 * * *"
|
||||
workflow_dispatch: {}
|
||||
|
||||
jobs:
|
||||
backup:
|
||||
runs-on: ubuntu-latest
|
||||
steps:
|
||||
- uses: actions/checkout@v4
|
||||
- name: Run backup
|
||||
run: python tools/backup_data_feed_and_databases_v1.py
|
||||
|
||||
@@ -1,161 +0,0 @@
|
||||
name: Build & Package
|
||||
|
||||
on:
|
||||
push:
|
||||
branches:
|
||||
- main
|
||||
workflow_dispatch:
|
||||
|
||||
env:
|
||||
DOTNET_VERSION: '10.0.x'
|
||||
REGISTRY: ghcr.io
|
||||
|
||||
jobs:
|
||||
build:
|
||||
runs-on: ubuntu-latest
|
||||
timeout-minutes: 20
|
||||
permissions:
|
||||
contents: write
|
||||
packages: write
|
||||
|
||||
outputs:
|
||||
build-tag: ${{ steps.metadata.outputs.tag }}
|
||||
commit-hash: ${{ steps.metadata.outputs.commit }}
|
||||
build-time: ${{ steps.metadata.outputs.build-time }}
|
||||
|
||||
steps:
|
||||
- name: Checkout Code
|
||||
uses: actions/checkout@v3
|
||||
with:
|
||||
fetch-depth: 0
|
||||
|
||||
- name: Setup .NET
|
||||
uses: actions/setup-dotnet@v3
|
||||
with:
|
||||
dotnet-version: ${{ env.DOTNET_VERSION }}
|
||||
|
||||
- name: Setup Python
|
||||
uses: actions/setup-python@v4
|
||||
with:
|
||||
python-version: '3.10'
|
||||
|
||||
- name: Install Python Dependencies
|
||||
run: pip install pyyaml openpyxl requests
|
||||
|
||||
- name: "[GATE] Run Critical Validations"
|
||||
run: |
|
||||
echo "🔐 Running critical CI validations..."
|
||||
python3 tools/validate_no_direct_api_trading_v1.py || exit 1
|
||||
python3 tools/validate_specs.py || exit 1
|
||||
echo "✅ All critical validations passed"
|
||||
|
||||
- name: Prepare Temp Directory
|
||||
run: |
|
||||
mkdir -p Temp
|
||||
if [ ! -f Temp/final_decision_packet_active.json ]; then
|
||||
echo '{"active_decision": "PASS", "details": "CI dummy packet"}' > Temp/final_decision_packet_active.json
|
||||
fi
|
||||
|
||||
- name: Restore .NET Dependencies
|
||||
run: dotnet restore src/dotnet/QuantEngine.Web/QuantEngine.Web.csproj
|
||||
|
||||
- name: Build Release
|
||||
run: |
|
||||
dotnet build src/dotnet/QuantEngine.Web/QuantEngine.Web.csproj \
|
||||
-c Release \
|
||||
--no-restore
|
||||
|
||||
- name: Run Unit Tests
|
||||
run: |
|
||||
dotnet test src/dotnet/QuantEngine.Core.Tests/QuantEngine.Core.Tests.csproj \
|
||||
-c Release \
|
||||
--no-build
|
||||
|
||||
- name: Publish Release Package
|
||||
run: |
|
||||
dotnet publish src/dotnet/QuantEngine.Web/QuantEngine.Web.csproj \
|
||||
-c Release \
|
||||
--no-build \
|
||||
-o ./publish
|
||||
|
||||
- name: Generate Build Metadata
|
||||
id: metadata
|
||||
run: |
|
||||
COMMIT=$(git rev-parse --short HEAD)
|
||||
BUILD_TIME=$(date -u +'%Y-%m-%dT%H:%M:%SZ')
|
||||
BUILD_TAG="build-${COMMIT}"
|
||||
|
||||
mkdir -p ./publish/wwwroot
|
||||
cat > ./publish/wwwroot/version.json <<VERSIONEOF
|
||||
{
|
||||
"version": "1.0.${{ github.run_number }}-${COMMIT}",
|
||||
"commit": "${COMMIT}",
|
||||
"built": "${BUILD_TIME}",
|
||||
"buildNumber": ${{ github.run_number }}
|
||||
}
|
||||
VERSIONEOF
|
||||
|
||||
echo "tag=${BUILD_TAG}" >> $GITHUB_OUTPUT
|
||||
echo "commit=${COMMIT}" >> $GITHUB_OUTPUT
|
||||
echo "build-time=${BUILD_TIME}" >> $GITHUB_OUTPUT
|
||||
echo "✓ Build metadata: ${BUILD_TAG} @ ${BUILD_TIME}"
|
||||
|
||||
- name: Create Deployment Package
|
||||
run: |
|
||||
echo "📦 Creating deployment package..."
|
||||
|
||||
tar -czf quantengine-${{ steps.metadata.outputs.commit }}.tar.gz \
|
||||
-C ./publish .
|
||||
|
||||
PACKAGE_SIZE=$(du -sh quantengine-${{ steps.metadata.outputs.commit }}.tar.gz | cut -f1)
|
||||
echo "✓ Package created: ${PACKAGE_SIZE}"
|
||||
|
||||
# Verify package integrity
|
||||
tar -tzf quantengine-${{ steps.metadata.outputs.commit }}.tar.gz > /dev/null || exit 1
|
||||
echo "✓ Package integrity verified"
|
||||
|
||||
- name: Create GitHub Release
|
||||
uses: ncipollo/release-action@v1
|
||||
with:
|
||||
tag: ${{ steps.metadata.outputs.tag }}
|
||||
name: Build ${{ steps.metadata.outputs.tag }}
|
||||
body: |
|
||||
**Build Information**
|
||||
- **Commit**: `${{ steps.metadata.outputs.commit }}`
|
||||
- **Built At**: ${{ steps.metadata.outputs.build-time }}
|
||||
- **Build Number**: ${{ github.run_number }}
|
||||
|
||||
**Quality Gates**
|
||||
- ✅ No direct API trading validation
|
||||
- ✅ Specification validation
|
||||
- ✅ Unit tests passed
|
||||
|
||||
**Release Package**
|
||||
- Release artifact: `quantengine-${{ steps.metadata.outputs.commit }}.tar.gz`
|
||||
- Size: $(du -sh quantengine-${{ steps.metadata.outputs.commit }}.tar.gz | cut -f1)
|
||||
|
||||
**Deployment Instructions**
|
||||
```bash
|
||||
# Trigger production deployment with this build
|
||||
curl -X POST https://gitea.taxbaik.com/api/v1/repos/kjh2064/QuantEngineByItz/actions/workflows/deploy-prod.yml/dispatches \
|
||||
-H "Authorization: token ${GITEA_TOKEN}" \
|
||||
-H "Content-Type: application/json" \
|
||||
-d '{"ref":"main", "inputs":{"release_tag":"${{ steps.metadata.outputs.tag }}"}}'
|
||||
```
|
||||
draft: false
|
||||
prerelease: false
|
||||
artifacts: quantengine-${{ steps.metadata.outputs.commit }}.tar.gz
|
||||
artifactErrorsFailBuild: true
|
||||
updateLatestRelease: true
|
||||
|
||||
- name: Notify Build Success
|
||||
if: success()
|
||||
run: |
|
||||
echo "✅ Build ${{ steps.metadata.outputs.tag }} completed successfully"
|
||||
echo "📦 Package available at release: ${{ steps.metadata.outputs.tag }}"
|
||||
|
||||
- name: Notify Build Failure
|
||||
if: failure()
|
||||
run: |
|
||||
echo "❌ Build ${{ steps.metadata.outputs.tag }} failed"
|
||||
exit 1
|
||||
@@ -1,80 +0,0 @@
|
||||
name: Calibration Backlog (Registry Drift Watch)
|
||||
|
||||
on:
|
||||
schedule:
|
||||
- cron: "15 2 * * 1-5" # UTC 02:15 = KST 11:15, weekday backlog update
|
||||
workflow_dispatch:
|
||||
|
||||
jobs:
|
||||
build-calibration-backlog:
|
||||
runs-on: ubuntu-latest
|
||||
|
||||
steps:
|
||||
- name: Checkout Code
|
||||
run: |
|
||||
if [ -d .git ]; then
|
||||
git remote set-url origin http://x-access-token:${{ secrets.GITHUB_TOKEN }}@192.168.123.100:8418/KimJaeHyun/myfinance.git
|
||||
else
|
||||
git init
|
||||
git remote add origin http://x-access-token:${{ secrets.GITHUB_TOKEN }}@192.168.123.100:8418/KimJaeHyun/myfinance.git
|
||||
fi
|
||||
git fetch origin main --depth=1
|
||||
git reset --hard FETCH_HEAD
|
||||
|
||||
- name: Configure Runtime Paths
|
||||
run: |
|
||||
export PATH=/usr/local/bin:$PATH
|
||||
echo "/usr/local/bin" >> $GITHUB_PATH
|
||||
/usr/bin/python3 --version
|
||||
|
||||
- name: Setup Python Environment
|
||||
run: |
|
||||
VENV_BASE=/volume1/gitea/python_venv
|
||||
REQ_HASH=$(md5sum tools/build_calibration_priority_v1.py 2>/dev/null | cut -d' ' -f1 || echo "calib-default")
|
||||
VENV="$VENV_BASE/$REQ_HASH"
|
||||
|
||||
if [ ! -f "$VENV/bin/python" ]; then
|
||||
mkdir -p "$VENV_BASE"
|
||||
/usr/bin/python3 -m venv "$VENV"
|
||||
if [ ! -f "$VENV/bin/pip" ]; then
|
||||
curl -sS https://bootstrap.pypa.io/pip/3.8/get-pip.py -o get-pip.py
|
||||
"$VENV/bin/python" get-pip.py --quiet
|
||||
rm get-pip.py
|
||||
fi
|
||||
"$VENV/bin/pip" install --upgrade pip --quiet
|
||||
"$VENV/bin/pip" install pyyaml --quiet
|
||||
fi
|
||||
echo "$VENV/bin" >> $GITHUB_PATH
|
||||
|
||||
- name: Validate Calibration Registry
|
||||
run: python3 tools/validate_calibration_registry_v1.py
|
||||
|
||||
- name: Build Calibration Priority Backlog
|
||||
run: python3 tools/build_calibration_priority_v1.py
|
||||
|
||||
- name: Build Calibration Change Ledger
|
||||
run: python3 tools/build_calibration_change_ledger_v4.py
|
||||
|
||||
- name: Build Calibration Review Report
|
||||
run: python3 tools/build_calibration_review_report_v1.py
|
||||
|
||||
- name: Build Calibration Approval List
|
||||
run: python3 tools/build_calibration_approval_list_v1.py
|
||||
|
||||
- name: Build Calibration Decision Draft
|
||||
run: python3 tools/build_calibration_decision_draft_v1.py
|
||||
|
||||
- name: Validate Calibration Change Ledger
|
||||
run: python3 tools/validate_calibration_change_ledger_v1.py
|
||||
|
||||
- name: Summarize Backlog
|
||||
if: always()
|
||||
run: |
|
||||
STATUS="${{ job.status }}"
|
||||
echo "=== Calibration Backlog Result ==="
|
||||
echo "status: $STATUS"
|
||||
echo "priority: Temp/calibration_priority_v1.json"
|
||||
echo "ledger: Temp/calibration_change_ledger_v4.json"
|
||||
echo "review: Temp/calibration_review_report_v1.md"
|
||||
echo "approval: Temp/calibration_approval_list_v1.md"
|
||||
echo "decision: Temp/calibration_decision_draft_v1.md"
|
||||
+126
-72
@@ -1,21 +1,33 @@
|
||||
name: Quant Engine CI/CD Pipeline
|
||||
name: Validators (Pushes and Pull Requests)
|
||||
|
||||
on:
|
||||
push:
|
||||
branches: [ main ]
|
||||
pull_request:
|
||||
branches: [ main ]
|
||||
push:
|
||||
branches: [ main ]
|
||||
workflow_dispatch:
|
||||
|
||||
# ─────────────────────────────────────────────────────────────────
|
||||
# CI 역할: 코드 구조 검증 게이트 (순수 Python, yaml/json)
|
||||
# - Validate Specs / Formula Registry / Coverage / Behavioral Coverage
|
||||
# 통합 테스트(run_release_dag, ingest 등)는 로컬 또는 클라우드 서버에서 실행
|
||||
# ─────────────────────────────────────────────────────────────────
|
||||
# Validator pipeline. Independent validation jobs run in parallel.
|
||||
|
||||
concurrency:
|
||||
group: quantengine-ci-${{ github.ref }}
|
||||
cancel-in-progress: true
|
||||
|
||||
jobs:
|
||||
validate-core:
|
||||
runs-on: ubuntu-latest
|
||||
services:
|
||||
postgres:
|
||||
image: postgres:16
|
||||
env:
|
||||
POSTGRES_USER: quantengine_ci
|
||||
POSTGRES_PASSWORD: quantengine_ci
|
||||
POSTGRES_DB: quantenginedb
|
||||
options: >-
|
||||
--health-cmd pg_isready
|
||||
--health-interval 5s
|
||||
--health-timeout 5s
|
||||
--health-retries 10
|
||||
|
||||
steps:
|
||||
- name: Checkout Code
|
||||
@@ -36,38 +48,39 @@ jobs:
|
||||
- name: Setup Python Environment
|
||||
run: |
|
||||
# 순수 Python 패키지만 설치 (numpy/pandas 제외 — ARMv7l 휠 없음)
|
||||
VENV_BASE=$HOME/python_venv
|
||||
REQ_HASH=$(md5sum tools/validate_specs.py 2>/dev/null | cut -d' ' -f1 || echo "default")
|
||||
VENV="$VENV_BASE/$REQ_HASH"
|
||||
PYTHON_DEPS="$HOME/python_deps/$(md5sum tools/validate_specs.py | cut -d' ' -f1)"
|
||||
mkdir -p "$PYTHON_DEPS"
|
||||
/usr/bin/python3 --version
|
||||
/usr/bin/python3 -m pip --version
|
||||
/usr/bin/python3 -m pip install --disable-pip-version-check --quiet \
|
||||
--target "$PYTHON_DEPS" requests pyyaml openpyxl pytest "psycopg[binary]"
|
||||
export PYTHONPATH="$PYTHON_DEPS:${PYTHONPATH:-}"
|
||||
echo "PYTHONPATH=$PYTHON_DEPS:${PYTHONPATH:-}" >> "$GITHUB_ENV"
|
||||
/usr/bin/python3 -c 'import requests, yaml, openpyxl, pytest, psycopg; print("Python dependencies: PASS")'
|
||||
|
||||
if [ ! -f "$VENV/bin/python" ]; then
|
||||
echo "=== venv 신규 생성: $REQ_HASH ==="
|
||||
mkdir -p "$VENV_BASE"
|
||||
/usr/bin/python3 -m venv "$VENV"
|
||||
- name: Apply Database Migrations (CI Postgres service)
|
||||
env:
|
||||
PGPASSWORD: quantengine_ci
|
||||
PGHOST: postgres
|
||||
PGPORT: 5432
|
||||
run: |
|
||||
# QE-M2-01 등 스키마 존재만 확인하는 게이트는 실제 Postgres에 대해 재검증한다
|
||||
# (2026-07-12: WBS 게이트가 마이그레이션 SQL만으로 스키마를 주장하지 않도록,
|
||||
# ci.yml 전용 postgres 서비스 컨테이너에 실제 DbUp 마이그레이션을 순서대로 적용).
|
||||
which psql || (sudo apt-get update -qq && sudo apt-get install -y -qq postgresql-client)
|
||||
for f in $(ls src/dotnet/QuantEngine.Infrastructure/Migrations/V*.sql | sort -V); do
|
||||
echo "=== Applying $f ==="
|
||||
psql -U quantengine_ci -d quantenginedb -v ON_ERROR_STOP=1 -f "$f"
|
||||
done
|
||||
echo "QE_WBS_PG_DSN=host=postgres port=5432 dbname=quantenginedb user=quantengine_ci password=quantengine_ci options='-c search_path=quantengine'" >> "$GITHUB_ENV"
|
||||
|
||||
# venv 내 pip 확인 및 복구
|
||||
if [ ! -f "$VENV/bin/pip" ]; then
|
||||
echo "pip missing in venv, installing via get-pip.py..."
|
||||
curl -sS https://bootstrap.pypa.io/pip/3.8/get-pip.py -o get-pip.py
|
||||
"$VENV/bin/python" get-pip.py --quiet
|
||||
rm get-pip.py
|
||||
fi
|
||||
- name: Setup .NET SDK
|
||||
uses: actions/setup-dotnet@v4
|
||||
with:
|
||||
dotnet-version: 10.0.x
|
||||
|
||||
"$VENV/bin/pip" install --upgrade pip --quiet
|
||||
"$VENV/bin/pip" install requests pyyaml openpyxl --quiet
|
||||
|
||||
# 오래된 venv 정리 (최근 2개만 유지)
|
||||
ls -dt "$VENV_BASE"/*/ 2>/dev/null | tail -n +3 | xargs rm -rf 2>/dev/null || true
|
||||
else
|
||||
echo "=== venv 캐시 히트: $("$VENV/bin/python" --version 2>&1) ==="
|
||||
"$VENV/bin/python" - <<'PY'
|
||||
import importlib
|
||||
for mod in ("requests", "yaml", "openpyxl"):
|
||||
importlib.import_module(mod)
|
||||
print("venv dependency import check: PASS")
|
||||
PY
|
||||
fi
|
||||
echo "$VENV/bin" >> $GITHUB_PATH
|
||||
- name: "[CRITICAL] Run .NET Unit Tests (Warnings as Errors)"
|
||||
run: dotnet test src/dotnet/QuantEngine.Core.Tests/QuantEngine.Core.Tests.csproj -c Release --nologo -p:TreatWarningsAsErrors=true
|
||||
|
||||
- name: Install Node Dependencies
|
||||
run: |
|
||||
@@ -90,7 +103,7 @@ jobs:
|
||||
fi
|
||||
else
|
||||
echo "=== npm install (최초 or lock 변경) ==="
|
||||
npm install --quiet
|
||||
npm ci --quiet
|
||||
# 캐시 저장
|
||||
mkdir -p "$CACHE_DIR"
|
||||
cp -r node_modules "$CACHE_DIR/node_modules"
|
||||
@@ -124,6 +137,67 @@ jobs:
|
||||
- name: Validate Platform Transition WBS
|
||||
run: python3 tools/validate_platform_transition_wbs_v1.py
|
||||
|
||||
- name: Validate Market Time Series Schema
|
||||
run: python3 tools/validate_market_time_series_schema_v1.py
|
||||
|
||||
- name: Generate DONE WBS Verdicts
|
||||
run: |
|
||||
# DONE 작업 중 CI(ubuntu-latest, 위 postgres 서비스 컨테이너)에서 온디맨드로 재검증
|
||||
# 가능한 것만 나열한다. 실제 KIS API/라이브 앱이 전제인 나머지 DONE 작업은
|
||||
# spec/60의 execution.mode: not_ci_reproducible 로 별도 표시되어
|
||||
# validate_quant_engine_wbs_v1.py 가 verdict 부재를 FAIL로 취급하지 않는다.
|
||||
python3 - <<'PY'
|
||||
from pathlib import Path
|
||||
import subprocess
|
||||
import yaml
|
||||
|
||||
root = Path.cwd()
|
||||
spec = yaml.safe_load((root / "spec" / "60_quant_engine_wbs.yaml").read_text(encoding="utf-8"))
|
||||
tasks = spec.get("tasks") or {}
|
||||
for task_id, task in tasks.items():
|
||||
if task.get("status") != "DONE":
|
||||
continue
|
||||
mode = ((task.get("execution") or {}).get("mode"))
|
||||
if mode in {"not_ci_reproducible", "manual_user_action"}:
|
||||
continue
|
||||
subprocess.run(["python3", "tools/verify_wbs_task_v1.py", "--task", task_id], check=True, cwd=root)
|
||||
PY
|
||||
|
||||
- name: Validate Quant Engine WBS
|
||||
run: python3 tools/validate_quant_engine_wbs_v1.py
|
||||
|
||||
- name: Validate Dotnet Migration Roadmap
|
||||
run: python3 tools/validate_dotnet_migration_roadmap_v1.py
|
||||
|
||||
- name: Validate Dotnet Migration Execution Plan
|
||||
run: python3 tools/validate_dotnet_migration_execution_plan_v1.py
|
||||
|
||||
- name: Validate Dotnet Parity Contract
|
||||
run: python3 tools/validate_dotnet_parity_contract_v1.py
|
||||
|
||||
- name: Validate Dotnet Provenance Contract
|
||||
run: python3 tools/validate_dotnet_provenance_contract_v1.py
|
||||
|
||||
- name: Validate Dotnet Scheduler Contract
|
||||
run: python3 tools/validate_dotnet_scheduler_contract_v1.py
|
||||
|
||||
- name: Validate Dotnet Normalization Contract
|
||||
run: python3 tools/validate_dotnet_normalization_contract_v1.py
|
||||
|
||||
- name: Validate Dotnet Idempotency Contract
|
||||
run: python3 tools/validate_dotnet_idempotency_contract_v1.py
|
||||
|
||||
- name: Validate Dotnet CICD Chain Contract
|
||||
run: python3 tools/validate_dotnet_cicd_chain_contract_v1.py
|
||||
|
||||
- name: Validate Dotnet Domain Parity Backlog
|
||||
run: python3 tools/validate_dotnet_domain_parity_backlog_v1.py
|
||||
|
||||
- name: Validate Dotnet Read Model Contract
|
||||
run: python3 tools/validate_dotnet_read_model_contract_v1.py
|
||||
|
||||
|
||||
|
||||
- name: Build Calibration Priority Backlog
|
||||
run: python3 tools/build_calibration_priority_v1.py
|
||||
|
||||
@@ -172,18 +246,19 @@ jobs:
|
||||
- name: Ensure Temp Directory and Mock Packet
|
||||
run: |
|
||||
mkdir -p Temp
|
||||
python3 -c 'import json; json.dump({"order_blueprint_json":{},"cash_recovery_plan_json":{},"per_ticker":[{"ticker":"DATA_MISSING","gate":"DATA_MISSING"}],"meta":{"formulas_run":[],"source_file":"GatherTradingData.json"}},open("Temp/computed_harness_v1.json","w"),ensure_ascii=False,indent=2)'
|
||||
if [ ! -f Temp/final_decision_packet_active.json ]; then
|
||||
echo '{"formula_id":"FINAL_DECISION_PACKET_V2","meta":{"generated_at":"2026-06-29T00:00:00Z"},"canonical_metrics":{},"portfolio_snapshot":{},"order_table":[]}' > Temp/final_decision_packet_active.json
|
||||
python3 -c 'import json; json.dump({"formula_id":"FINAL_DECISION_PACKET_V2","meta":{"generated_at":"2026-06-29T00:00:00Z"},"canonical_metrics":{"total_asset_krw":None},"portfolio_snapshot":{},"order_table":[],"pass_100":{"gate":"DATA_MISSING","score_0_100":None},"execution_readiness":{"gate":"DATA_MISSING","min_axis_score":None},"prediction":{"match_rate_pct":None}},open("Temp/final_decision_packet_active.json","w"),ensure_ascii=False,indent=2)'
|
||||
fi
|
||||
|
||||
- name: Validate Replay Live Separation
|
||||
run: python3 tools/validate_replay_live_separation_v1.py
|
||||
|
||||
- name: Render Final Decision Packet V4
|
||||
run: dotnet run --project src/dotnet/QuantEngine.Tools/QuantEngine.Tools.csproj -- packet-v4 --packet=Temp/final_decision_packet_active.json --out=Temp/final_decision_packet_v4.json
|
||||
run: dotnet run --project src/dotnet/QuantEngine.Tools/QuantEngine.Tools.csproj -p:TreatWarningsAsErrors=true -- packet-v4 --packet=Temp/final_decision_packet_active.json --out=Temp/final_decision_packet_v4.json
|
||||
|
||||
- name: Render Operational Report
|
||||
run: dotnet run --project src/dotnet/QuantEngine.Tools/QuantEngine.Tools.csproj -- report --packet=Temp/final_decision_packet_active.json --out=Temp/operational_report.json
|
||||
run: dotnet run --project src/dotnet/QuantEngine.Tools/QuantEngine.Tools.csproj -p:TreatWarningsAsErrors=true -- report --packet=Temp/final_decision_packet_active.json --out=Temp/operational_report.json
|
||||
|
||||
- name: Validate Report Packet Sync
|
||||
run: python3 tools/validate_report_packet_sync_v1.py --packet Temp/final_decision_packet_active.json --report Temp/operational_report.json | tee Temp/validate_report_packet_sync_v1.json
|
||||
@@ -201,7 +276,7 @@ jobs:
|
||||
run: python3 tools/validate_postgresql_history_contract_v1.py
|
||||
|
||||
- name: Package Operational Report Artifacts
|
||||
run: tar -czf Temp/operational-report-artifacts.tar.gz Temp/operational_report.json Temp/operational_report.md Temp/missing_data_inventory_v1.json Temp/report_section_completeness.json Temp/operational_alpha_calibration_v2.json Temp/validate_operational_alpha_calibration_v2.json Temp/operational_t20_outcome_ledger_v1.json Temp/live_data_activation_gate_v1.json Temp/replay_live_separation_v1.json Temp/validate_report_packet_sync_v1.json Temp/json_generator_outputs_v1.json Temp/proposal_evaluation_history.json Temp/performance_readiness_replay_bridge_v1.json Temp/postgresql_history_schema_v1.sql Temp/postgresql_history_schema_v1.json Temp/postgresql_history_contract_v1.json
|
||||
run: tar -czf Temp/operational-report-artifacts.tar.gz Temp/operational_report.json Temp/missing_data_inventory_v1.json Temp/report_section_completeness.json Temp/operational_alpha_calibration_v2.json Temp/validate_operational_alpha_calibration_v2.json Temp/operational_t20_outcome_ledger_v1.json Temp/live_data_activation_gate_v1.json Temp/replay_live_separation_v1.json Temp/validate_report_packet_sync_v1.json Temp/json_generator_outputs_v1.json Temp/proposal_evaluation_history.json Temp/performance_readiness_replay_bridge_v1.json Temp/postgresql_history_schema_v1.sql Temp/postgresql_history_schema_v1.json Temp/postgresql_history_contract_v1.json
|
||||
|
||||
- name: Upload Operational Report Artifacts
|
||||
uses: actions/upload-artifact@v3
|
||||
@@ -217,8 +292,6 @@ jobs:
|
||||
|
||||
validate-ui-and-storage:
|
||||
runs-on: ubuntu-latest
|
||||
needs: validate-core
|
||||
if: github.event_name != 'push'
|
||||
|
||||
steps:
|
||||
- name: Checkout Code
|
||||
@@ -228,47 +301,28 @@ jobs:
|
||||
|
||||
- name: Setup Python Environment
|
||||
run: |
|
||||
VENV_BASE=$HOME/python_venv
|
||||
REQ_HASH=$(md5sum tools/validate_snapshot_admin_web_v1.py 2>/dev/null | cut -d' ' -f1 || echo "default")
|
||||
VENV="$VENV_BASE/$REQ_HASH"
|
||||
|
||||
if [ ! -f "$VENV/bin/python" ]; then
|
||||
echo "=== venv 신규 생성: $REQ_HASH ==="
|
||||
mkdir -p "$VENV_BASE"
|
||||
/usr/bin/python3 -m venv "$VENV"
|
||||
|
||||
if [ ! -f "$VENV/bin/pip" ]; then
|
||||
echo "pip missing in venv, installing via get-pip.py..."
|
||||
curl -sS https://bootstrap.pypa.io/pip/3.8/get-pip.py -o get-pip.py
|
||||
"$VENV/bin/python" get-pip.py --quiet
|
||||
rm get-pip.py
|
||||
fi
|
||||
|
||||
"$VENV/bin/pip" install --upgrade pip --quiet
|
||||
"$VENV/bin/pip" install requests pyyaml openpyxl --quiet
|
||||
else
|
||||
echo "=== venv 캐시 히트: $("$VENV/bin/python" --version 2>&1) ==="
|
||||
fi
|
||||
echo "$VENV/bin" >> $GITHUB_PATH
|
||||
PYTHON_DEPS="$HOME/python_deps/$(md5sum tools/validate_snapshot_admin_web_v1.py | cut -d' ' -f1)"
|
||||
mkdir -p "$PYTHON_DEPS"
|
||||
/usr/bin/python3 --version
|
||||
/usr/bin/python3 -m pip --version
|
||||
/usr/bin/python3 -m pip install --disable-pip-version-check --quiet \
|
||||
--target "$PYTHON_DEPS" requests pyyaml openpyxl pytest
|
||||
export PYTHONPATH="$PYTHON_DEPS:${PYTHONPATH:-}"
|
||||
echo "PYTHONPATH=$PYTHON_DEPS:${PYTHONPATH:-}" >> "$GITHUB_ENV"
|
||||
/usr/bin/python3 -c 'import requests, yaml, openpyxl, pytest; print("Python dependencies: PASS")'
|
||||
|
||||
- name: Validate Snapshot Admin Web UI
|
||||
if: needs.validate-core.result == 'success'
|
||||
run: python3 tools/validate_snapshot_admin_web_v1.py
|
||||
|
||||
- name: Validate Storage Backend Contracts
|
||||
if: needs.validate-core.result == 'success'
|
||||
run: python3 -m pytest tests/unit/test_storage_backend_v1.py tests/unit/test_validate_kis_api_credentials_v1.py tests/unit/test_qualitative_sell_strategy_store_v1.py tests/unit/test_kis_api_client_v1.py tests/unit/test_snapshot_admin_store_v1.py tests/unit/test_snapshot_admin_web_v1.py -q
|
||||
|
||||
- name: Notify PR Result
|
||||
if: always() && github.event_name == 'pull_request'
|
||||
env:
|
||||
CORE_RESULT: ${{ needs.validate-core.result }}
|
||||
STAGE_RESULT: ${{ job.status }}
|
||||
run: |
|
||||
STATUS="$STAGE_RESULT"
|
||||
if [ "$CORE_RESULT" != "success" ]; then
|
||||
STATUS="failure"
|
||||
fi
|
||||
PR_NUM="${{ github.event.pull_request.number }}"
|
||||
RUN_URL="${{ github.server_url }}/${{ github.repository }}/actions/runs/${{ github.run_id }}"
|
||||
if [ "$STATUS" = "success" ]; then
|
||||
|
||||
@@ -0,0 +1,38 @@
|
||||
name: CI Workflow Lint
|
||||
|
||||
on:
|
||||
pull_request:
|
||||
branches: [ main ]
|
||||
paths:
|
||||
- ".gitea/workflows/ci.yml"
|
||||
- "tools/validate_gitea_ci_workflow_lint_v1.py"
|
||||
push:
|
||||
branches: [ main ]
|
||||
paths:
|
||||
- ".gitea/workflows/ci.yml"
|
||||
- "tools/validate_gitea_ci_workflow_lint_v1.py"
|
||||
workflow_dispatch:
|
||||
|
||||
jobs:
|
||||
validate-ci-workflow-lint:
|
||||
runs-on: ubuntu-latest
|
||||
|
||||
steps:
|
||||
- name: Checkout Code
|
||||
uses: actions/checkout@v3
|
||||
with:
|
||||
fetch-depth: 0
|
||||
|
||||
- name: Setup Python Environment
|
||||
run: |
|
||||
/usr/bin/python3 --version
|
||||
/usr/bin/python3 -m pip --version
|
||||
PYTHON_DEPS="$HOME/python_deps/$(md5sum tools/validate_gitea_ci_workflow_lint_v1.py | cut -d' ' -f1)"
|
||||
mkdir -p "$PYTHON_DEPS"
|
||||
/usr/bin/python3 -m pip install --disable-pip-version-check --quiet \
|
||||
--target "$PYTHON_DEPS" pyyaml
|
||||
export PYTHONPATH="$PYTHON_DEPS:${PYTHONPATH:-}"
|
||||
echo "PYTHONPATH=$PYTHON_DEPS:${PYTHONPATH:-}" >> "$GITHUB_ENV"
|
||||
|
||||
- name: Lint CI Workflow Contract
|
||||
run: python3 tools/validate_gitea_ci_workflow_lint_v1.py --workflow .gitea/workflows/ci.yml
|
||||
+400
-325
@@ -1,380 +1,455 @@
|
||||
name: Deploy to Production (Local)
|
||||
name: Deploy to Production
|
||||
|
||||
on:
|
||||
push:
|
||||
branches:
|
||||
- main
|
||||
workflow_run:
|
||||
workflows: ["Prepare Release"]
|
||||
types: [completed]
|
||||
workflow_dispatch:
|
||||
inputs:
|
||||
release:
|
||||
description: 'Release version to deploy (e.g., v0.1.20260711, or leave empty for latest)'
|
||||
required: false
|
||||
type: string
|
||||
|
||||
concurrency:
|
||||
group: deploy-prod-main
|
||||
cancel-in-progress: true
|
||||
group: deploy-prod-${{ github.event.workflow_run.head_sha || github.sha }}
|
||||
cancel-in-progress: false
|
||||
|
||||
env:
|
||||
DEPLOY_HOST: quant.taxbaik.com
|
||||
DEPLOY_HOST: 178.104.200.7
|
||||
DEPLOY_USER: kjh2064
|
||||
DEPLOY_PORT: 22
|
||||
SERVICE_NAME: quantengine
|
||||
DOTNET_VERSION: '10.0.x'
|
||||
QUANTENGINE_DB_NAME: quantenginedb
|
||||
QUANTENGINE_DB_USER: quantengine_app
|
||||
TELEGRAM_BOT_TOKEN_DEFAULT: "8734507814:AAFyacLMai8GB4K-hQ_Nd3t3D01A-H1ZdV0"
|
||||
TELEGRAM_CHAT_ID_DEFAULT: "-5460205872"
|
||||
REPO: kjh2064/QuantEngineByItz
|
||||
|
||||
jobs:
|
||||
build-and-deploy:
|
||||
name: Build & Deploy to Production
|
||||
deploy:
|
||||
name: Deploy to Production
|
||||
if: ${{ github.event_name == 'workflow_dispatch' || github.event.workflow_run.conclusion == 'success' }}
|
||||
runs-on: ubuntu-latest
|
||||
timeout-minutes: 30
|
||||
outputs:
|
||||
release-tag: ${{ steps.fetch.outputs.tag }}
|
||||
artifact-name: ${{ steps.fetch.outputs.artifact }}
|
||||
commit-hash: ${{ steps.fetch.outputs.commit }}
|
||||
|
||||
steps:
|
||||
- name: Checkout Code
|
||||
uses: actions/checkout@v3
|
||||
|
||||
- name: Setup .NET
|
||||
uses: actions/setup-dotnet@v3
|
||||
with:
|
||||
dotnet-version: ${{ env.DOTNET_VERSION }}
|
||||
|
||||
- name: Setup Python
|
||||
uses: actions/setup-python@v4
|
||||
with:
|
||||
python-version: '3.10'
|
||||
|
||||
- name: Install Python Dependencies
|
||||
run: pip install pyyaml openpyxl requests
|
||||
|
||||
- name: "[GATE] Run Core Validations"
|
||||
- name: Verify SSH Key and Secrets
|
||||
run: |
|
||||
echo "🔐 Running critical CI validations..."
|
||||
python3 tools/validate_no_direct_api_trading_v1.py || exit 1
|
||||
python3 tools/validate_specs.py || exit 1
|
||||
echo "✅ All critical validations passed"
|
||||
|
||||
- name: Ensure Temp Directory and Mock Packet
|
||||
run: |
|
||||
mkdir -p Temp
|
||||
if [ ! -f Temp/final_decision_packet_active.json ]; then
|
||||
echo '{"active_decision": "PASS", "details": "CI dummy packet"}' > Temp/final_decision_packet_active.json
|
||||
fi
|
||||
|
||||
- name: Restore Dependencies
|
||||
run: dotnet restore src/dotnet/QuantEngine.Web/QuantEngine.Web.csproj
|
||||
|
||||
- name: Build Release
|
||||
run: |
|
||||
dotnet build src/dotnet/QuantEngine.Web/QuantEngine.Web.csproj \
|
||||
-c Release \
|
||||
--no-restore
|
||||
|
||||
- name: Run Unit Tests
|
||||
run: |
|
||||
dotnet test src/dotnet/QuantEngine.Core.Tests/QuantEngine.Core.Tests.csproj \
|
||||
-c Release \
|
||||
--no-build
|
||||
|
||||
- name: Publish Release Package
|
||||
run: |
|
||||
dotnet publish src/dotnet/QuantEngine.Web/QuantEngine.Web.csproj \
|
||||
-c Release \
|
||||
--no-build \
|
||||
-o ./publish
|
||||
|
||||
- name: Generate Build Info
|
||||
run: |
|
||||
COMMIT_HASH=$(git rev-parse --short HEAD)
|
||||
BUILD_TIME=$(date -d "+9 hours" +'%Y-%m-%d %H:%M:%S KST')
|
||||
mkdir -p ./publish/wwwroot
|
||||
printf '{\n "version": "1.0.%s-%s",\n "built": "%s"\n}\n' "${{ github.run_number }}" "$COMMIT_HASH" "$BUILD_TIME" > ./publish/wwwroot/version.json
|
||||
echo "✓ Generated version info: 1.0.${{ github.run_number }}-$COMMIT_HASH @ $BUILD_TIME"
|
||||
|
||||
- name: Prepare & Validate QuantEngine DB Env
|
||||
run: |
|
||||
echo "🔧 Preparing database environment..."
|
||||
|
||||
DB_PASSWORD="${{ secrets.QUANTENGINE_DB_PASSWORD }}"
|
||||
if [ -z "$DB_PASSWORD" ]; then
|
||||
echo "❌ QUANTENGINE_DB_PASSWORD secret not configured in Gitea"
|
||||
echo " Please set secret in Repository Settings > Secrets"
|
||||
# SSH_PRIVATE_KEY is the actual secret name registered in this repo
|
||||
# (verified via GET /repos/{r}/actions/secrets -- DEPLOY_SSH_KEY_B64 /
|
||||
# DEPLOY_SSH_KEY were never actually created despite CLAUDE.md
|
||||
# claiming so; kept as fallback names in case they're added later).
|
||||
SSH_KEY="${{ secrets.SSH_PRIVATE_KEY }}"
|
||||
SSH_KEY_B64="${{ secrets.DEPLOY_SSH_KEY_B64 }}"
|
||||
SSH_KEY_RAW="${{ secrets.DEPLOY_SSH_KEY }}"
|
||||
if [ -z "$SSH_KEY" ] && [ -z "$SSH_KEY_B64" ] && [ -z "$SSH_KEY_RAW" ]; then
|
||||
echo "ERROR: No SSH key secret configured (checked SSH_PRIVATE_KEY, DEPLOY_SSH_KEY_B64, DEPLOY_SSH_KEY)"
|
||||
exit 1
|
||||
fi
|
||||
[ -z "${{ secrets.GITEA_TOKEN }}" ] && { echo "ERROR: GITEA_TOKEN not configured"; exit 1; }
|
||||
echo "✓ SSH key and GITEA_TOKEN configured"
|
||||
|
||||
if [ -z "${{ env.QUANTENGINE_DB_NAME }}" ] || [ -z "${{ env.QUANTENGINE_DB_USER }}" ]; then
|
||||
echo "❌ DB configuration environment variables not set"
|
||||
exit 1
|
||||
fi
|
||||
|
||||
# 배포 폴더에 환경 설정 생성
|
||||
mkdir -p ./deploy
|
||||
printf 'ConnectionStrings__DefaultConnection=Host=127.0.0.1;Database=%s;Username=%s;Password=%s;Search Path=quantengine;\n' \
|
||||
"${{ env.QUANTENGINE_DB_NAME }}" \
|
||||
"${{ env.QUANTENGINE_DB_USER }}" \
|
||||
"$DB_PASSWORD" > ./deploy/quantengine.env
|
||||
chmod 600 ./deploy/quantengine.env
|
||||
|
||||
# appsettings.Production.json 생성
|
||||
mkdir -p ./publish
|
||||
cat <<EOF > ./publish/appsettings.Production.json
|
||||
{
|
||||
"ConnectionStrings": {
|
||||
"DefaultConnection": "Host=127.0.0.1;Database=${{ env.QUANTENGINE_DB_NAME }};Username=${{ env.QUANTENGINE_DB_USER }};Password=${DB_PASSWORD};Search Path=quantengine;"
|
||||
}
|
||||
}
|
||||
EOF
|
||||
chmod 600 ./publish/appsettings.Production.json
|
||||
|
||||
if [ ! -f ./deploy/quantengine.env ] || [ ! -f ./publish/appsettings.Production.json ]; then
|
||||
echo "❌ Failed to create database config files"
|
||||
exit 1
|
||||
fi
|
||||
|
||||
echo "✓ Database configuration prepared"
|
||||
|
||||
- name: Copy Deployment Scripts
|
||||
- name: Fetch Release Info
|
||||
id: fetch
|
||||
run: |
|
||||
echo "📋 Copying deployment scripts..."
|
||||
cp deploy_gb.sh ./publish/deploy_gb.sh
|
||||
mkdir -p ./publish/scripts
|
||||
cp scripts/validate_migrations.sh ./publish/scripts/validate_migrations.sh
|
||||
chmod +x ./publish/deploy_gb.sh ./publish/scripts/validate_migrations.sh
|
||||
echo "✓ Deployment scripts copied"
|
||||
RELEASE_INPUT="${{ github.event.inputs.release }}"
|
||||
TOKEN="${{ secrets.GITEA_TOKEN }}"
|
||||
REPO="${{ env.REPO }}"
|
||||
|
||||
- name: Package Artifact
|
||||
run: |
|
||||
echo "📦 Creating deployment package..."
|
||||
|
||||
if ! tar -czf quantengine.tar.gz -C ./publish .; then
|
||||
echo "❌ Failed to create package"
|
||||
exit 1
|
||||
fi
|
||||
|
||||
PACKAGE_SIZE=$(du -sh quantengine.tar.gz | cut -f1)
|
||||
PACKAGE_BYTES=$(stat -c%s quantengine.tar.gz 2>/dev/null || echo "0")
|
||||
|
||||
if [ -z "$PACKAGE_BYTES" ] || [ "$PACKAGE_BYTES" -lt 1000000 ]; then
|
||||
echo "⚠️ Warning: Package seems too small ($PACKAGE_SIZE)"
|
||||
fi
|
||||
|
||||
if [ ! -f quantengine.tar.gz ]; then
|
||||
echo "❌ Package file not created"
|
||||
exit 1
|
||||
fi
|
||||
|
||||
echo "✓ Package created: $PACKAGE_SIZE"
|
||||
tar -tzf quantengine.tar.gz | head -n 5 || true
|
||||
|
||||
- name: Pre-Deployment Migration Validation
|
||||
run: |
|
||||
echo "=== Pre-Deployment Database Check ==="
|
||||
|
||||
# 배포 패키지 임시 추출 (검증용)
|
||||
TEMP_DEPLOY="/tmp/quantengine_validate"
|
||||
mkdir -p "$TEMP_DEPLOY"
|
||||
tar -xzf quantengine.tar.gz -C "$TEMP_DEPLOY"
|
||||
|
||||
# 마이그레이션 검증 실행
|
||||
chmod +x "$TEMP_DEPLOY/scripts/validate_migrations.sh"
|
||||
"$TEMP_DEPLOY/scripts/validate_migrations.sh" "$TEMP_DEPLOY"
|
||||
|
||||
# 정리
|
||||
rm -rf "$TEMP_DEPLOY"
|
||||
|
||||
- name: Local Deploy (Green-Blue)
|
||||
id: deploy
|
||||
run: |
|
||||
set -e
|
||||
TIMESTAMP=$(date +%Y%m%d_%H%M%S)
|
||||
COMMIT=$(git rev-parse --short HEAD)
|
||||
RUN_NUM="${{ github.run_number }}"
|
||||
DEPLOY_BASE="/home/kjh2064/deployments"
|
||||
ACTIVE_LINK="/home/kjh2064/quantengine_active"
|
||||
# Version format: quantengine_YYYYMMDD_HHMMSS_COMMIT_HASH_RUNNUM
|
||||
TARGET_DIR="${DEPLOY_BASE}/quantengine_${TIMESTAMP}_${COMMIT}_${RUN_NUM}"
|
||||
|
||||
TELEGRAM_BOT_TOKEN="${{ secrets.TELEGRAM_BOT_TOKEN }}"
|
||||
[ -z "$TELEGRAM_BOT_TOKEN" ] && TELEGRAM_BOT_TOKEN="${{ env.TELEGRAM_BOT_TOKEN_DEFAULT }}"
|
||||
TELEGRAM_CHAT_ID="${{ secrets.TELEGRAM_CHAT_ID }}"
|
||||
[ -z "$TELEGRAM_CHAT_ID" ] && TELEGRAM_CHAT_ID="${{ env.TELEGRAM_CHAT_ID_DEFAULT }}"
|
||||
|
||||
send_telegram() {
|
||||
local text="$1"
|
||||
curl -fsS -X POST "https://api.telegram.org/bot${TELEGRAM_BOT_TOKEN}/sendMessage" \
|
||||
-d "chat_id=${TELEGRAM_CHAT_ID}" \
|
||||
--data-urlencode "text=${text}" \
|
||||
-d "parse_mode=HTML" >/dev/null || true
|
||||
}
|
||||
|
||||
echo "=== Deploying QuantEngine $COMMIT ($TIMESTAMP) ==="
|
||||
|
||||
# 배포 디렉토리 생성
|
||||
mkdir -p "${DEPLOY_BASE}"
|
||||
mkdir -p "${TARGET_DIR}"
|
||||
|
||||
# 배포 패키지 추출
|
||||
echo "📁 Extracting build artifact..."
|
||||
tar -xzf quantengine.tar.gz -C "${TARGET_DIR}"
|
||||
rm -f quantengine.tar.gz
|
||||
|
||||
# 환경 파일 설치
|
||||
echo "⚙️ Installing environment configuration..."
|
||||
mkdir -p /home/kjh2064/.config
|
||||
install -m 600 ./deploy/quantengine.env /home/kjh2064/.config/quantengine.env
|
||||
|
||||
# Green-Blue 배포 실행
|
||||
echo "🚀 Executing Green-Blue Deployment..."
|
||||
export DEPLOY_FROM_CI=1
|
||||
chmod +x "${TARGET_DIR}/deploy_gb.sh"
|
||||
"${TARGET_DIR}/deploy_gb.sh"
|
||||
|
||||
# 이전 버전 정보 저장
|
||||
if [ -L "${ACTIVE_LINK}" ]; then
|
||||
PREV_VERSION=$(readlink -f "${ACTIVE_LINK}")
|
||||
PREV_TIMESTAMP=$(basename "${PREV_VERSION}")
|
||||
if [ -z "$RELEASE_INPUT" ]; then
|
||||
RELEASE_URL="https://gitea.taxbaik.com/api/v1/repos/$REPO/releases/latest"
|
||||
else
|
||||
PREV_TIMESTAMP="none"
|
||||
RELEASE_URL="https://gitea.taxbaik.com/api/v1/repos/$REPO/releases/tags/$RELEASE_INPUT"
|
||||
fi
|
||||
|
||||
echo "timestamp=${TIMESTAMP}" >> $GITHUB_OUTPUT
|
||||
RELEASE=$(curl -sf --connect-timeout 10 --max-time 30 -H "Authorization: token $TOKEN" "$RELEASE_URL")
|
||||
TAG=$(echo "$RELEASE" | jq -r '.tag_name')
|
||||
# NOTE: '.target_commitish' is the branch name the tag was cut from
|
||||
# (e.g. "main"), NOT a commit SHA -- do not use it as a commit hash.
|
||||
# Our tags are always "quant_YYYYMMDD.count.hash" (see
|
||||
# prepare-release.yml), so pull the hash back out of the tag name.
|
||||
COMMIT="${TAG##*.}"
|
||||
ARTIFACT=$(echo "$RELEASE" | jq -r '.assets[0].name')
|
||||
DOWNLOAD_URL=$(echo "$RELEASE" | jq -r '.assets[0].browser_download_url')
|
||||
|
||||
if [ "$TAG" = "null" ] || [ -z "$TAG" ]; then
|
||||
echo "ERROR: Release not found"; exit 1
|
||||
fi
|
||||
if [ "$ARTIFACT" = "null" ] || [ -z "$ARTIFACT" ]; then
|
||||
echo "ERROR: No artifacts found in release $TAG"; exit 1
|
||||
fi
|
||||
if [ "$DOWNLOAD_URL" = "null" ] || [ -z "$DOWNLOAD_URL" ]; then
|
||||
echo "ERROR: No browser_download_url found for asset"; exit 1
|
||||
fi
|
||||
|
||||
echo "tag=${TAG}" >> $GITHUB_OUTPUT
|
||||
echo "artifact=${ARTIFACT}" >> $GITHUB_OUTPUT
|
||||
echo "download_url=${DOWNLOAD_URL}" >> $GITHUB_OUTPUT
|
||||
echo "commit=${COMMIT}" >> $GITHUB_OUTPUT
|
||||
echo "prev_version=${PREV_TIMESTAMP}" >> $GITHUB_OUTPUT
|
||||
|
||||
- name: Health Check & Auto-Rollback
|
||||
echo "✓ Release: $TAG"
|
||||
echo "✓ Artifact: $ARTIFACT"
|
||||
echo "✓ Download URL: $DOWNLOAD_URL"
|
||||
|
||||
- name: Validate Release Chain
|
||||
run: |
|
||||
TIMESTAMP="${{ steps.deploy.outputs.timestamp }}"
|
||||
COMMIT="${{ steps.deploy.outputs.commit }}"
|
||||
PREV_TIMESTAMP="${{ steps.deploy.outputs.prev_version }}"
|
||||
DEPLOY_BASE="/home/kjh2064/deployments"
|
||||
ACTIVE_LINK="/home/kjh2064/quantengine_active"
|
||||
if [ "${{ github.event_name }}" = "workflow_run" ]; then
|
||||
EXPECTED_SHA="${{ github.event.workflow_run.head_sha }}"
|
||||
RELEASE_TAG="${{ steps.fetch.outputs.tag }}"
|
||||
RELEASE_SHA="${RELEASE_TAG##*.}"
|
||||
EXPECTED_SHA_SHORT="${EXPECTED_SHA:0:${#RELEASE_SHA}}"
|
||||
|
||||
TELEGRAM_BOT_TOKEN="${{ secrets.TELEGRAM_BOT_TOKEN }}"
|
||||
[ -z "$TELEGRAM_BOT_TOKEN" ] && TELEGRAM_BOT_TOKEN="${{ env.TELEGRAM_BOT_TOKEN_DEFAULT }}"
|
||||
TELEGRAM_CHAT_ID="${{ secrets.TELEGRAM_CHAT_ID }}"
|
||||
[ -z "$TELEGRAM_CHAT_ID" ] && TELEGRAM_CHAT_ID="${{ env.TELEGRAM_CHAT_ID_DEFAULT }}"
|
||||
if [ "$EXPECTED_SHA_SHORT" != "$RELEASE_SHA" ]; then
|
||||
echo "ERROR: Release SHA does not match upstream workflow SHA"
|
||||
echo "Expected: $EXPECTED_SHA"
|
||||
echo "Expected short: $EXPECTED_SHA_SHORT"
|
||||
echo "Release: $RELEASE_SHA"
|
||||
exit 1
|
||||
fi
|
||||
|
||||
send_telegram() {
|
||||
local text="$1"
|
||||
curl -fsS -X POST "https://api.telegram.org/bot${TELEGRAM_BOT_TOKEN}/sendMessage" \
|
||||
-d "chat_id=${TELEGRAM_CHAT_ID}" \
|
||||
--data-urlencode "text=${text}" \
|
||||
-d "parse_mode=HTML" >/dev/null || true
|
||||
echo "✓ Release chain verified: $EXPECTED_SHA_SHORT"
|
||||
else
|
||||
echo "✓ Workflow dispatch mode — release chain verification skipped"
|
||||
fi
|
||||
|
||||
- name: Validate Upstream CI Success
|
||||
env:
|
||||
GITEA_TOKEN: ${{ secrets.GITEA_TOKEN }}
|
||||
REPO: ${{ env.REPO }}
|
||||
EXPECTED_SHA: ${{ github.event.workflow_run.head_sha }}
|
||||
run: |
|
||||
python3 - <<'PY'
|
||||
import json
|
||||
import os
|
||||
import sys
|
||||
import urllib.request
|
||||
|
||||
token = os.environ["GITEA_TOKEN"]
|
||||
repo = os.environ["REPO"]
|
||||
expected_sha = os.environ.get("EXPECTED_SHA", "")
|
||||
if not expected_sha:
|
||||
print("✓ Workflow dispatch mode — upstream CI validation skipped")
|
||||
sys.exit(0)
|
||||
|
||||
matched_ci = None
|
||||
for page in range(1, 6):
|
||||
url = f"https://gitea.taxbaik.com/api/v1/repos/{repo}/actions/runs?limit=50&page={page}"
|
||||
req = urllib.request.Request(url, headers={"Authorization": f"token {token}"})
|
||||
with urllib.request.urlopen(req, timeout=30) as resp:
|
||||
payload = json.load(resp)
|
||||
|
||||
for run in payload.get("workflow_runs", []):
|
||||
path = str(run.get("path") or "")
|
||||
if "ci.yml@" not in path:
|
||||
continue
|
||||
if run.get("status") != "completed" or run.get("conclusion") != "success":
|
||||
continue
|
||||
actual_sha = str(run.get("head_sha") or "")
|
||||
if actual_sha != expected_sha:
|
||||
continue
|
||||
matched_ci = run
|
||||
break
|
||||
if matched_ci:
|
||||
break
|
||||
|
||||
if not matched_ci:
|
||||
print("ERROR: No successful ci.yml run found for the release SHA")
|
||||
sys.exit(1)
|
||||
|
||||
print(f"✓ Upstream CI verified: {expected_sha} (run {matched_ci.get('id')})")
|
||||
PY
|
||||
|
||||
- name: Download Release Artifact
|
||||
run: |
|
||||
ARTIFACT="${{ steps.fetch.outputs.artifact }}"
|
||||
TOKEN="${{ secrets.GITEA_TOKEN }}"
|
||||
DOWNLOAD_URL="${{ steps.fetch.outputs.download_url }}"
|
||||
|
||||
echo "Downloading: $DOWNLOAD_URL"
|
||||
curl -sfL --connect-timeout 10 --max-time 120 -H "Authorization: token $TOKEN" -o "$ARTIFACT" "$DOWNLOAD_URL"
|
||||
|
||||
# A 404/error page would still create a small file -- verify it's a
|
||||
# real gzip archive, not an HTML/JSON error body (this is exactly
|
||||
# how the old /releases/download/{tag}/{file} guessed URL failed
|
||||
# silently: curl exited 0 but wrote a 19-byte "404 page not found").
|
||||
file "$ARTIFACT" | grep -q "gzip compressed" || {
|
||||
echo "ERROR: Downloaded file is not a valid gzip archive:"
|
||||
file "$ARTIFACT"
|
||||
cat "$ARTIFACT"
|
||||
exit 1
|
||||
}
|
||||
|
||||
echo "=== Verifying Loopback Health ==="
|
||||
health_check_passed=0
|
||||
echo "✓ Downloaded: $(du -sh $ARTIFACT)"
|
||||
|
||||
for i in 1 2 3; do
|
||||
echo " Health check attempt $i..."
|
||||
loopback_headers=$(curl -s -D - -o /dev/null -m 5 http://127.0.0.1:5000/ 2>&1)
|
||||
- name: Setup SSH
|
||||
run: |
|
||||
mkdir -p ~/.ssh
|
||||
SSH_KEY="${{ secrets.SSH_PRIVATE_KEY }}"
|
||||
SSH_KEY_B64="${{ secrets.DEPLOY_SSH_KEY_B64 }}"
|
||||
SSH_KEY_RAW="${{ secrets.DEPLOY_SSH_KEY }}"
|
||||
|
||||
if printf '%s' "$loopback_headers" | grep -qE '^HTTP/1\.[01] (200|30[12]|401) '; then
|
||||
echo "✓ Loopback health check passed (auth required)"
|
||||
health_check_passed=1
|
||||
break
|
||||
elif [ $i -lt 3 ]; then
|
||||
echo " Waiting 5s for service..."
|
||||
sleep 5
|
||||
fi
|
||||
done
|
||||
|
||||
if [ $health_check_passed -eq 0 ]; then
|
||||
echo "❌ Loopback health check failed after 3 attempts"
|
||||
|
||||
# 자동 롤백
|
||||
if [ "$PREV_TIMESTAMP" != "none" ]; then
|
||||
echo "🔄 Attempting automatic rollback to $PREV_TIMESTAMP..."
|
||||
PREV_DEPLOY="${DEPLOY_BASE}/quantengine_${PREV_TIMESTAMP}"
|
||||
ln -sfn "${PREV_DEPLOY}" "${ACTIVE_LINK}"
|
||||
sudo systemctl restart quantengine
|
||||
sleep 3
|
||||
echo "✓ Rollback completed"
|
||||
send_telegram "❌ <b>QuantEngine 배포 실패 (자동 롤백 실행)</b>
|
||||
|
||||
커밋: <code>${COMMIT}</code>
|
||||
롤백 버전: <code>${PREV_TIMESTAMP}</code>
|
||||
로그: https://gitea.taxbaik.com/kjh2064/QuantEngineByItz/actions/runs/${{ github.run_id }}"
|
||||
write_key() {
|
||||
# $1 = raw secret value; auto-detects PEM vs base64
|
||||
if printf '%s' "$1" | grep -q 'BEGIN.*PRIVATE KEY'; then
|
||||
printf '%b\n' "$1" > ~/.ssh/deploy_key
|
||||
else
|
||||
echo "⚠️ No previous deployment found for rollback"
|
||||
send_telegram "❌ <b>QuantEngine 배포 실패 (롤백 불가)</b>
|
||||
|
||||
커밋: <code>${COMMIT}</code>
|
||||
상태: 이전 버전이 없어 롤백 불가
|
||||
로그: https://gitea.taxbaik.com/kjh2064/QuantEngineByItz/actions/runs/${{ github.run_id }}"
|
||||
printf '%s' "$1" | base64 -d > ~/.ssh/deploy_key
|
||||
fi
|
||||
}
|
||||
|
||||
if [ -n "$SSH_KEY" ]; then
|
||||
write_key "$SSH_KEY"
|
||||
elif [ -n "$SSH_KEY_B64" ]; then
|
||||
printf '%s' "$SSH_KEY_B64" | base64 -d > ~/.ssh/deploy_key
|
||||
elif [ -n "$SSH_KEY_RAW" ]; then
|
||||
write_key "$SSH_KEY_RAW"
|
||||
else
|
||||
echo "ERROR: No SSH key configured"
|
||||
exit 1
|
||||
fi
|
||||
|
||||
echo "=== Verifying Database Connectivity ==="
|
||||
db_status=$(psql -U quantengine_app -d quantenginedb -h 127.0.0.1 -c 'SELECT 1;' 2>&1 | head -1)
|
||||
sed -i 's/\r$//' ~/.ssh/deploy_key
|
||||
chmod 600 ~/.ssh/deploy_key
|
||||
ssh-keyscan -p ${{ env.DEPLOY_PORT }} ${{ env.DEPLOY_HOST }} >> ~/.ssh/known_hosts 2>/dev/null || true
|
||||
echo "✓ SSH configured"
|
||||
|
||||
if echo "$db_status" | grep -q "1"; then
|
||||
echo "✓ Database connectivity verified"
|
||||
else
|
||||
echo "⚠️ Database connectivity check: $db_status"
|
||||
- name: Upload Release Artifact
|
||||
run: |
|
||||
ARTIFACT="${{ steps.fetch.outputs.artifact }}"
|
||||
echo "Uploading: $ARTIFACT"
|
||||
ls -lh "$ARTIFACT"
|
||||
|
||||
scp -i ~/.ssh/deploy_key \
|
||||
-P ${{ env.DEPLOY_PORT }} \
|
||||
-o StrictHostKeyChecking=accept-new \
|
||||
-o ConnectTimeout=10 \
|
||||
"$ARTIFACT" ${{ env.DEPLOY_USER }}@${{ env.DEPLOY_HOST }}:/tmp/
|
||||
echo "✓ Release artifact uploaded"
|
||||
|
||||
- name: Deploy & Verify
|
||||
run: |
|
||||
ARTIFACT="${{ steps.fetch.outputs.artifact }}"
|
||||
RELEASE_TAG="${{ steps.fetch.outputs.tag }}"
|
||||
COMMIT="${{ steps.fetch.outputs.commit }}"
|
||||
SERVICE_NAME="${{ env.SERVICE_NAME }}"
|
||||
|
||||
# IMPORTANT: the heredoc below uses a QUOTED delimiter ('REMOTE'),
|
||||
# so none of $ARTIFACT/$RELEASE_TAG/etc inside it are expanded by
|
||||
# this (local runner) shell -- they must arrive as real
|
||||
# environment variables on the remote bash process instead. The
|
||||
# previous version of this script had the same quoted heredoc but
|
||||
# relied on local expansion anyway, so every deploy printed the
|
||||
# literal text "$ARTIFACT" and then failed on
|
||||
# "tar: /tmp/$ARTIFACT: No such file or directory". Passing them
|
||||
# as a prefix to `bash -s` is what actually gets them into the
|
||||
# remote script's environment.
|
||||
ssh -i ~/.ssh/deploy_key \
|
||||
-p ${{ env.DEPLOY_PORT }} \
|
||||
-o StrictHostKeyChecking=accept-new \
|
||||
-o ConnectTimeout=10 \
|
||||
${{ env.DEPLOY_USER }}@${{ env.DEPLOY_HOST }} \
|
||||
"ARTIFACT='$ARTIFACT' RELEASE_TAG='$RELEASE_TAG' COMMIT='$COMMIT' SERVICE_NAME='$SERVICE_NAME' bash -s" << 'REMOTE'
|
||||
set -e
|
||||
|
||||
DEPLOY_HOME=$HOME
|
||||
DEPLOY_DIR="$DEPLOY_HOME/deployments/quantengine_${RELEASE_TAG}_${COMMIT}"
|
||||
|
||||
echo "=== Deployment Start ==="
|
||||
echo "Release: $RELEASE_TAG"
|
||||
echo "Artifact: $ARTIFACT"
|
||||
echo "Commit: $COMMIT"
|
||||
echo "Deploy Dir: $DEPLOY_DIR"
|
||||
echo ""
|
||||
|
||||
# 1. Extract
|
||||
echo "【 1/4 Extract Artifact 】"
|
||||
mkdir -p "$DEPLOY_DIR"
|
||||
tar -xzf "/tmp/$ARTIFACT" -C "$DEPLOY_DIR"
|
||||
rm -f "/tmp/$ARTIFACT"
|
||||
echo "✓ Extraction complete"
|
||||
|
||||
# 2. Verify
|
||||
echo ""
|
||||
echo "【 2/4 Verify Deployment 】"
|
||||
if [ ! -f "$DEPLOY_DIR/QuantEngine.Web.dll" ]; then
|
||||
echo "ERROR: QuantEngine.Web.dll not found"
|
||||
exit 1
|
||||
fi
|
||||
echo "✓ DLL verified"
|
||||
echo "✓ Runtime configuration is managed outside the release artifact"
|
||||
|
||||
echo "=== Verifying Public Routes ==="
|
||||
public_root_code=$(curl -s -o /dev/null -w "%{http_code}" "https://quant.taxbaik.com/")
|
||||
login_code=$(curl -s -o /dev/null -w "%{http_code}" "https://quant.taxbaik.com/Account/Login")
|
||||
# 3. Update Symlink
|
||||
echo ""
|
||||
echo "【 3/4 Update Symlink 】"
|
||||
ln -sfn "$DEPLOY_DIR" "$DEPLOY_HOME/quantengine_active"
|
||||
echo "✓ Active: $(readlink $DEPLOY_HOME/quantengine_active)"
|
||||
|
||||
echo "https://quant.taxbaik.com/ -> ${public_root_code}"
|
||||
echo "https://quant.taxbaik.com/Account/Login -> ${login_code}"
|
||||
# 4. Restart Service
|
||||
echo ""
|
||||
echo "【 4/4 Restart Service 】"
|
||||
sudo systemctl restart "$SERVICE_NAME"
|
||||
echo "✓ Service restarted"
|
||||
|
||||
if [ "$public_root_code" != "302" ] && [ "$public_root_code" != "200" ] && [ "$public_root_code" != "401" ]; then
|
||||
echo "⚠️ Unexpected public root response: $public_root_code"
|
||||
fi
|
||||
if [ "$login_code" != "200" ] && [ "$login_code" != "302" ]; then
|
||||
echo "⚠️ Unexpected login page response: $login_code"
|
||||
fi
|
||||
REMOTE
|
||||
|
||||
echo "=== Verifying Nginx Configuration ==="
|
||||
NGINX_CONF=""
|
||||
for f in /etc/nginx/sites-enabled/*; do
|
||||
if [ -e "$f" ] && grep -q "location /quantengine" "$f" 2>/dev/null; then
|
||||
NGINX_CONF="$f"
|
||||
break
|
||||
fi
|
||||
done
|
||||
post-deploy-check:
|
||||
name: Health Check & Verification
|
||||
runs-on: ubuntu-latest
|
||||
needs: deploy
|
||||
timeout-minutes: 10
|
||||
|
||||
if [ -n "$NGINX_CONF" ]; then
|
||||
echo "✓ Nginx configuration found: $NGINX_CONF"
|
||||
if nginx -t > /dev/null 2>&1; then
|
||||
echo "✓ Nginx syntax validated"
|
||||
steps:
|
||||
- name: Setup SSH (for service check)
|
||||
run: |
|
||||
mkdir -p ~/.ssh
|
||||
SSH_KEY="${{ secrets.SSH_PRIVATE_KEY }}"
|
||||
SSH_KEY_B64="${{ secrets.DEPLOY_SSH_KEY_B64 }}"
|
||||
SSH_KEY_RAW="${{ secrets.DEPLOY_SSH_KEY }}"
|
||||
|
||||
if [ -n "$SSH_KEY" ]; then
|
||||
if printf '%s' "$SSH_KEY" | grep -q 'BEGIN.*PRIVATE KEY'; then
|
||||
printf '%b\n' "$SSH_KEY" > ~/.ssh/deploy_key
|
||||
else
|
||||
echo "⚠️ Nginx syntax check failed (service may still work)"
|
||||
printf '%s' "$SSH_KEY" | base64 -d > ~/.ssh/deploy_key
|
||||
fi
|
||||
else
|
||||
echo "⚠️ Nginx configuration not found"
|
||||
echo " Expected: /etc/nginx/sites-enabled/* with 'location /quantengine'"
|
||||
elif [ -n "$SSH_KEY_B64" ]; then
|
||||
printf '%s' "$SSH_KEY_B64" | base64 -d > ~/.ssh/deploy_key
|
||||
elif [ -n "$SSH_KEY_RAW" ]; then
|
||||
printf '%s' "$SSH_KEY_RAW" | base64 -d > ~/.ssh/deploy_key
|
||||
fi
|
||||
|
||||
echo "✓ 배포 완료: quantengine_${TIMESTAMP}"
|
||||
send_telegram "✅ <b>QuantEngine 배포 완료 (Green-Blue)</b>
|
||||
chmod 600 ~/.ssh/deploy_key 2>/dev/null || true
|
||||
ssh-keyscan -p 22 ${{ env.DEPLOY_HOST }} >> ~/.ssh/known_hosts 2>/dev/null || true
|
||||
|
||||
커밋: <code>${COMMIT}</code>
|
||||
시간: <code>${TIMESTAMP}</code>
|
||||
대상: <code>${DEPLOY_HOST}</code>"
|
||||
|
||||
- name: Cleanup Old Deployments
|
||||
- name: Health Check
|
||||
run: |
|
||||
DEPLOY_BASE="/home/kjh2064/deployments"
|
||||
echo "Cleaning up obsolete deployments (keeping last 5)..."
|
||||
cd "${DEPLOY_BASE}"
|
||||
ls -dt quantengine_* | tail -n +6 | while read -r old_dir; do
|
||||
echo "Removing old release: ${old_dir}"
|
||||
rm -rf "${old_dir}"
|
||||
# IMPORTANT: quantengine.service binds ASPNETCORE_URLS to
|
||||
# http://127.0.0.1:5000 (loopback only) -- Nginx is the only
|
||||
# thing that reaches it from outside, via quant.taxbaik.com.
|
||||
# The Gitea Actions runner is a separate host/container, so
|
||||
# `curl http://$DEPLOY_HOST:5000/...` from here always hits a
|
||||
# closed port and times out ("000") -- confirmed directly:
|
||||
# curl --connect-timeout 5 http://178.104.200.7:5000/... -> 000
|
||||
# Every previous run's Health Check silently burned through all
|
||||
# 20 retries on this before failing, even on deployments that
|
||||
# actually worked (see Run #2005: Deploy job succeeded, site was
|
||||
# reachable over HTTPS and journalctl was clean the whole time).
|
||||
# Fix: run the HTTP/CSS checks *on* the server against
|
||||
# 127.0.0.1:5000, the same way the service-status and DB-error
|
||||
# checks already correctly do via SSH.
|
||||
ssh -i ~/.ssh/deploy_key \
|
||||
-p ${{ env.DEPLOY_PORT }} \
|
||||
-o StrictHostKeyChecking=accept-new \
|
||||
-o ConnectTimeout=10 \
|
||||
${{ env.DEPLOY_USER }}@${{ env.DEPLOY_HOST }} bash -s << 'REMOTE'
|
||||
set -e
|
||||
ATTEMPTS=20
|
||||
|
||||
echo "【 Health Checks (max ${ATTEMPTS} attempts) 】"
|
||||
|
||||
for i in $(seq 1 $ATTEMPTS); do
|
||||
HTTP_CODE=$(curl -s --connect-timeout 5 --max-time 10 -o /dev/null -w "%{http_code}" http://127.0.0.1:5000/Account/Login 2>/dev/null || echo "000")
|
||||
if [ "$HTTP_CODE" = "200" ]; then
|
||||
echo "✓ [1/6] HTTP 200 OK (attempt $i)"
|
||||
|
||||
LOGIN_BODY=$(curl -s --connect-timeout 5 --max-time 10 http://127.0.0.1:5000/Account/Login 2>/dev/null || echo "")
|
||||
if echo "$LOGIN_BODY" | grep -q "login\|Login\|로그인"; then
|
||||
echo "✓ [2/6] Login page content verified"
|
||||
else
|
||||
echo "⚠ [2/6] Login page content verification skipped"
|
||||
fi
|
||||
|
||||
CSS_CODE=$(curl -s --connect-timeout 5 --max-time 10 -o /dev/null -w "%{http_code}" http://127.0.0.1:5000/css/admin.css 2>/dev/null || echo "000")
|
||||
if [ "$CSS_CODE" = "200" ]; then
|
||||
echo "✓ [3/6] CSS file loaded"
|
||||
else
|
||||
echo "⚠ [3/6] CSS file check skipped (status: $CSS_CODE)"
|
||||
fi
|
||||
|
||||
SERVICE_STATUS=$(systemctl is-active quantengine 2>/dev/null || echo "unknown")
|
||||
if [ "$SERVICE_STATUS" = "active" ]; then
|
||||
echo "✓ [4/6] Service active (running)"
|
||||
else
|
||||
echo "⚠ [4/6] Service status: $SERVICE_STATUS"
|
||||
fi
|
||||
|
||||
echo "✓ [5/6] Deployment release: ${{ needs.deploy.outputs.release-tag }} (commit: ${{ needs.deploy.outputs.commit-hash }})"
|
||||
|
||||
# Check 6: DB connectivity (GET /Account/Login returns 200 even when
|
||||
# the DB password is stale -- the page itself has no DB dependency.
|
||||
# Only an actual login POST, or the app logs, reveal a broken
|
||||
# connection string. See CLAUDE.md "DB Secret Management" incident
|
||||
# 2026-07-12: this check would have caught it, the HTTP check alone
|
||||
# did not.)
|
||||
sleep 2
|
||||
# NOTE: `grep -c` exits 1 when the count is 0 (no matches),
|
||||
# even though it correctly prints "0". Combined with
|
||||
# `|| echo "0"`, a healthy zero-error result triggered BOTH
|
||||
# grep's own "0" output AND the fallback's "0", producing a
|
||||
# two-line "0\n0" that never equals the string "0" below.
|
||||
# Use `|| true` instead, which only neutralizes the exit
|
||||
# code without adding a second line.
|
||||
DB_ERRORS=$(journalctl -u quantengine --since '1 minute ago' --no-pager 2>/dev/null | grep -c '28P01\|password authentication failed' || true)
|
||||
if [ "$DB_ERRORS" = "0" ]; then
|
||||
echo "✓ [6/6] No DB authentication errors in recent logs"
|
||||
else
|
||||
echo "❌ [6/6] DB authentication errors found in logs ($DB_ERRORS occurrences)"
|
||||
echo ""
|
||||
echo "❌ FAILED: Deployment reachable over HTTP but DB connection is broken"
|
||||
exit 1
|
||||
fi
|
||||
|
||||
echo ""
|
||||
echo "✅ All health checks passed!"
|
||||
exit 0
|
||||
fi
|
||||
|
||||
if [ $i -lt $ATTEMPTS ]; then
|
||||
echo " Attempt $i/$ATTEMPTS... (HTTP $HTTP_CODE, retrying in 3s)"
|
||||
sleep 3
|
||||
else
|
||||
echo ""
|
||||
echo "❌ FAILED: Service did not respond after $ATTEMPTS attempts"
|
||||
exit 1
|
||||
fi
|
||||
done
|
||||
echo "Cleanup complete"
|
||||
ls -ldt quantengine_* | head -5
|
||||
REMOTE
|
||||
|
||||
- name: Notify Failure
|
||||
if: failure()
|
||||
post-deploy-report:
|
||||
name: Deployment Report
|
||||
runs-on: ubuntu-latest
|
||||
if: always()
|
||||
needs: [ deploy, post-deploy-check ]
|
||||
|
||||
steps:
|
||||
- name: Report Status
|
||||
run: |
|
||||
COMMIT=$(git rev-parse --short HEAD)
|
||||
TELEGRAM_BOT_TOKEN="${{ secrets.TELEGRAM_BOT_TOKEN }}"
|
||||
[ -z "$TELEGRAM_BOT_TOKEN" ] && TELEGRAM_BOT_TOKEN="${{ env.TELEGRAM_BOT_TOKEN_DEFAULT }}"
|
||||
TELEGRAM_CHAT_ID="${{ secrets.TELEGRAM_CHAT_ID }}"
|
||||
[ -z "$TELEGRAM_CHAT_ID" ] && TELEGRAM_CHAT_ID="${{ env.TELEGRAM_CHAT_ID_DEFAULT }}"
|
||||
RELEASE="${{ needs.deploy.outputs.release-tag }}"
|
||||
COMMIT="${{ needs.deploy.outputs.commit-hash }}"
|
||||
ARTIFACT="${{ needs.deploy.outputs.artifact-name }}"
|
||||
DEPLOY_STATUS="${{ needs.deploy.result }}"
|
||||
CHECK_STATUS="${{ needs.post-deploy-check.result }}"
|
||||
|
||||
curl -fsS -X POST "https://api.telegram.org/bot${TELEGRAM_BOT_TOKEN}/sendMessage" \
|
||||
-d "chat_id=${TELEGRAM_CHAT_ID}" \
|
||||
--data-urlencode "text=❌ QuantEngine 배포 실패\n커밋: ${COMMIT}\n로그: https://gitea.taxbaik.com/kjh2064/QuantEngineByItz/actions/runs/${{ github.run_id }}" \
|
||||
-d "parse_mode=HTML" || true
|
||||
echo "╔════════════════════════════════════════════╗"
|
||||
echo "║ Deployment Report ║"
|
||||
echo "╚════════════════════════════════════════════╝"
|
||||
echo ""
|
||||
echo "Release: $RELEASE"
|
||||
echo "Commit: $COMMIT"
|
||||
echo "Artifact: $ARTIFACT"
|
||||
echo ""
|
||||
echo "【 Status 】"
|
||||
echo "Deploy: $([ "$DEPLOY_STATUS" = "success" ] && echo "✓" || echo "✗") $DEPLOY_STATUS"
|
||||
echo "Health: $([ "$CHECK_STATUS" = "success" ] && echo "✓" || echo "✗") $CHECK_STATUS"
|
||||
echo ""
|
||||
|
||||
if [ "$DEPLOY_STATUS" = "success" ] && [ "$CHECK_STATUS" = "success" ]; then
|
||||
echo "✅ Deployment Successful"
|
||||
echo "Server: 178.104.200.7"
|
||||
echo "Release: $RELEASE"
|
||||
exit 0
|
||||
else
|
||||
echo "❌ Deployment Failed"
|
||||
exit 1
|
||||
fi
|
||||
|
||||
@@ -0,0 +1,644 @@
|
||||
name: Deploy to Production
|
||||
|
||||
on:
|
||||
push:
|
||||
branches: [ main ]
|
||||
workflow_dispatch:
|
||||
|
||||
# Phase 4: Manual-only deployment (improved & hardened)
|
||||
# Automatic deployment moved to merge-to-main.yml (Stage 5)
|
||||
# Use this workflow for manual deployments when needed
|
||||
#
|
||||
# Error handling: Comprehensive logging + automatic rollback
|
||||
# Security: SSH key validation, deployment verification
|
||||
# Observability: Detailed stage reporting + Telegram notifications
|
||||
|
||||
concurrency:
|
||||
group: deploy-prod-main
|
||||
cancel-in-progress: false
|
||||
|
||||
env:
|
||||
DEPLOY_HOST: quant.taxbaik.com
|
||||
DEPLOY_USER: kjh2064
|
||||
SERVICE_NAME: quantengine
|
||||
DOTNET_VERSION: '10.0.x'
|
||||
QUANTENGINE_DB_NAME: quantenginedb
|
||||
QUANTENGINE_DB_USER: quantengine_app
|
||||
TELEGRAM_BOT_TOKEN_DEFAULT: "8734507814:AAFyacLMai8GB4K-hQ_Nd3t3D01A-H1ZdV0"
|
||||
TELEGRAM_CHAT_ID_DEFAULT: "-5460205872"
|
||||
DEPLOY_TIMEOUT: "600"
|
||||
HEALTH_CHECK_RETRIES: "5"
|
||||
HEALTH_CHECK_DELAY: "3"
|
||||
|
||||
jobs:
|
||||
build-and-deploy:
|
||||
name: Build & Deploy to Production
|
||||
runs-on: ubuntu-latest
|
||||
timeout-minutes: 30
|
||||
|
||||
steps:
|
||||
- name: Checkout Code
|
||||
uses: actions/checkout@v3
|
||||
|
||||
- name: Setup .NET
|
||||
uses: actions/setup-dotnet@v3
|
||||
with:
|
||||
dotnet-version: ${{ env.DOTNET_VERSION }}
|
||||
|
||||
- name: Setup Python
|
||||
uses: actions/setup-python@v4
|
||||
with:
|
||||
python-version: '3.10'
|
||||
|
||||
- name: Install Python Dependencies
|
||||
run: pip install pyyaml openpyxl requests
|
||||
|
||||
- name: "[GATE] Run Core Validations"
|
||||
run: |
|
||||
echo " Running critical CI validations..."
|
||||
python3 tools/validate_no_direct_api_trading_v1.py || exit 1
|
||||
python3 tools/validate_specs.py || exit 1
|
||||
echo " All critical validations passed"
|
||||
|
||||
- name: Ensure Temp Directory and Mock Packet
|
||||
run: |
|
||||
mkdir -p Temp
|
||||
if [ ! -f Temp/final_decision_packet_active.json ]; then
|
||||
echo '{"active_decision": "PASS", "details": "CI dummy packet"}' > Temp/final_decision_packet_active.json
|
||||
fi
|
||||
|
||||
- name: Restore Dependencies
|
||||
run: dotnet restore src/dotnet/QuantEngine.Web/QuantEngine.Web.csproj
|
||||
|
||||
- name: Build Release
|
||||
run: |
|
||||
dotnet build src/dotnet/QuantEngine.Web/QuantEngine.Web.csproj \
|
||||
-c Release \
|
||||
--no-restore
|
||||
|
||||
- name: Run Unit Tests
|
||||
run: |
|
||||
dotnet test src/dotnet/QuantEngine.Core.Tests/QuantEngine.Core.Tests.csproj \
|
||||
-c Release \
|
||||
--no-build
|
||||
|
||||
- name: Publish Release Package
|
||||
run: |
|
||||
dotnet publish src/dotnet/QuantEngine.Web/QuantEngine.Web.csproj \
|
||||
-c Release \
|
||||
--no-build \
|
||||
-o ./publish
|
||||
|
||||
- name: Generate Build Info
|
||||
run: |
|
||||
COMMIT_HASH=$(git rev-parse --short HEAD)
|
||||
BUILD_TIME=$(date -d "+9 hours" +'%Y-%m-%d %H:%M:%S KST')
|
||||
mkdir -p ./publish/wwwroot
|
||||
printf '{\n "version": "1.0.%s-%s",\n "built": "%s"\n}\n' "${{ github.run_number }}" "$COMMIT_HASH" "$BUILD_TIME" > ./publish/wwwroot/version.json
|
||||
echo " Generated version info: 1.0.${{ github.run_number }}-$COMMIT_HASH @ $BUILD_TIME"
|
||||
|
||||
- name: Prepare & Validate QuantEngine DB Env
|
||||
run: |
|
||||
echo " Preparing database environment..."
|
||||
|
||||
DB_PASSWORD="${{ secrets.QUANTENGINE_DB_PASSWORD }}"
|
||||
if [ -z "$DB_PASSWORD" ]; then
|
||||
echo " QUANTENGINE_DB_PASSWORD secret not configured in Gitea"
|
||||
echo " Please set secret in Repository Settings > Secrets"
|
||||
exit 1
|
||||
fi
|
||||
|
||||
if [ -z "${{ env.QUANTENGINE_DB_NAME }}" ] || [ -z "${{ env.QUANTENGINE_DB_USER }}" ]; then
|
||||
echo " DB configuration environment variables not set"
|
||||
exit 1
|
||||
fi
|
||||
|
||||
#
|
||||
mkdir -p ./deploy
|
||||
printf 'ConnectionStrings__DefaultConnection=Host=127.0.0.1;Database=%s;Username=%s;Password=%s;Search Path=quantengine;\n' \
|
||||
"${{ env.QUANTENGINE_DB_NAME }}" \
|
||||
"${{ env.QUANTENGINE_DB_USER }}" \
|
||||
"$DB_PASSWORD" > ./deploy/quantengine.env
|
||||
chmod 600 ./deploy/quantengine.env
|
||||
|
||||
# appsettings.Production.json
|
||||
mkdir -p ./publish
|
||||
cat <<EOF > ./publish/appsettings.Production.json
|
||||
{
|
||||
"ConnectionStrings": {
|
||||
"DefaultConnection": "Host=127.0.0.1;Database=${{ env.QUANTENGINE_DB_NAME }};Username=${{ env.QUANTENGINE_DB_USER }};Password=${DB_PASSWORD};Search Path=quantengine;"
|
||||
}
|
||||
}
|
||||
EOF
|
||||
chmod 600 ./publish/appsettings.Production.json
|
||||
|
||||
if [ ! -f ./deploy/quantengine.env ] || [ ! -f ./publish/appsettings.Production.json ]; then
|
||||
echo " Failed to create database config files"
|
||||
exit 1
|
||||
fi
|
||||
|
||||
echo " Database configuration prepared"
|
||||
|
||||
- name: Copy Deployment Scripts
|
||||
run: |
|
||||
echo " Copying deployment scripts..."
|
||||
cp deploy_gb.sh ./publish/deploy_gb.sh
|
||||
mkdir -p ./publish/scripts
|
||||
cp scripts/validate_migrations.sh ./publish/scripts/validate_migrations.sh
|
||||
chmod +x ./publish/deploy_gb.sh ./publish/scripts/validate_migrations.sh
|
||||
echo " Deployment scripts copied"
|
||||
|
||||
- name: Package Artifact
|
||||
run: |
|
||||
echo " Creating deployment package..."
|
||||
|
||||
if ! tar -czf quantengine.tar.gz -C ./publish .; then
|
||||
echo " Failed to create package"
|
||||
exit 1
|
||||
fi
|
||||
|
||||
PACKAGE_SIZE=$(du -sh quantengine.tar.gz | cut -f1)
|
||||
PACKAGE_BYTES=$(stat -c%s quantengine.tar.gz 2>/dev/null || echo "0")
|
||||
|
||||
if [ -z "$PACKAGE_BYTES" ] || [ "$PACKAGE_BYTES" -lt 1000000 ]; then
|
||||
echo " Warning: Package seems too small ($PACKAGE_SIZE)"
|
||||
fi
|
||||
|
||||
if [ ! -f quantengine.tar.gz ]; then
|
||||
echo " Package file not created"
|
||||
exit 1
|
||||
fi
|
||||
|
||||
echo " Package created: $PACKAGE_SIZE"
|
||||
tar -tzf quantengine.tar.gz | head -n 5 || true
|
||||
|
||||
- name: Pre-Deployment Migration Validation
|
||||
run: |
|
||||
echo "=== Pre-Deployment Database Check ==="
|
||||
|
||||
# ()
|
||||
TEMP_DEPLOY="/tmp/quantengine_validate"
|
||||
mkdir -p "$TEMP_DEPLOY"
|
||||
tar -xzf quantengine.tar.gz -C "$TEMP_DEPLOY"
|
||||
|
||||
#
|
||||
chmod +x "$TEMP_DEPLOY/scripts/validate_migrations.sh"
|
||||
"$TEMP_DEPLOY/scripts/validate_migrations.sh" "$TEMP_DEPLOY"
|
||||
|
||||
#
|
||||
rm -rf "$TEMP_DEPLOY"
|
||||
|
||||
- name: Pre-Deployment Verification
|
||||
run: |
|
||||
echo "=== PRE-DEPLOYMENT CHECKS ==="
|
||||
|
||||
# 1. SSH
|
||||
if [ ! -f ~/.ssh/id_rsa ]; then
|
||||
echo "ERROR: SSH key not found"
|
||||
exit 1
|
||||
fi
|
||||
echo "OK: SSH key present"
|
||||
|
||||
# 2.
|
||||
if [ ! -f quantengine.tar.gz ]; then
|
||||
echo "ERROR: Build artifact (quantengine.tar.gz) not found"
|
||||
exit 1
|
||||
fi
|
||||
ARTIFACT_SIZE=$(stat -c%s quantengine.tar.gz)
|
||||
if [ "$ARTIFACT_SIZE" -lt 1000000 ]; then
|
||||
echo "WARNING: Artifact seems small (${ARTIFACT_SIZE} bytes), but proceeding"
|
||||
fi
|
||||
echo "OK: Build artifact present (${ARTIFACT_SIZE} bytes)"
|
||||
|
||||
# 3.
|
||||
for file in deploy/quantengine.env deploy_gb.sh; do
|
||||
if [ ! -f "$file" ]; then
|
||||
echo "ERROR: Required file missing: $file"
|
||||
exit 1
|
||||
fi
|
||||
done
|
||||
echo "OK: All required deployment files present"
|
||||
|
||||
# 4.
|
||||
if [ -z "${{ secrets.QUANTENGINE_DB_PASSWORD }}" ]; then
|
||||
echo "ERROR: DB password secret not configured"
|
||||
exit 1
|
||||
fi
|
||||
echo "OK: DB credentials configured"
|
||||
|
||||
echo "=== ALL PRE-DEPLOYMENT CHECKS PASSED ==="
|
||||
|
||||
- name: Local Deploy (Green-Blue)
|
||||
id: deploy
|
||||
run: |
|
||||
set -e
|
||||
|
||||
#
|
||||
TIMESTAMP=$(date +%Y%m%d_%H%M%S)
|
||||
COMMIT=$(git rev-parse --short HEAD)
|
||||
RUN_NUM="${{ github.run_number }}"
|
||||
DEPLOY_BASE="/home/kjh2064/deployments"
|
||||
ACTIVE_LINK="/home/kjh2064/quantengine_active"
|
||||
TARGET_DIR="${DEPLOY_BASE}/quantengine_${TIMESTAMP}_${COMMIT}_${RUN_NUM}"
|
||||
DEPLOYMENT_LOG="./deployment_${TIMESTAMP}.log"
|
||||
|
||||
TELEGRAM_BOT_TOKEN="${{ secrets.TELEGRAM_BOT_TOKEN }}"
|
||||
[ -z "$TELEGRAM_BOT_TOKEN" ] && TELEGRAM_BOT_TOKEN="${{ env.TELEGRAM_BOT_TOKEN_DEFAULT }}"
|
||||
TELEGRAM_CHAT_ID="${{ secrets.TELEGRAM_CHAT_ID }}"
|
||||
[ -z "$TELEGRAM_CHAT_ID" ] && TELEGRAM_CHAT_ID="${{ env.TELEGRAM_CHAT_ID_DEFAULT }}"
|
||||
|
||||
send_telegram() {
|
||||
local text="$1"
|
||||
curl -fsS -X POST "https://api.telegram.org/bot${TELEGRAM_BOT_TOKEN}/sendMessage" \
|
||||
-d "chat_id=${TELEGRAM_CHAT_ID}" \
|
||||
--data-urlencode "text=${text}" \
|
||||
-d "parse_mode=HTML" >/dev/null || true
|
||||
}
|
||||
|
||||
trap 'on_error' ERR
|
||||
on_error() {
|
||||
echo "DEPLOYMENT FAILED" | tee -a "$DEPLOYMENT_LOG"
|
||||
send_telegram "DEPLOYMENT FAILED: $COMMIT at $(date)"
|
||||
exit 1
|
||||
}
|
||||
|
||||
{
|
||||
echo "=== DEPLOYMENT START: $TIMESTAMP ==="
|
||||
echo "Commit: $COMMIT"
|
||||
echo "Run: $RUN_NUM"
|
||||
echo "Target: $TARGET_DIR"
|
||||
echo ""
|
||||
|
||||
#
|
||||
echo "[1/8] Creating deployment directories..."
|
||||
mkdir -p "${DEPLOY_BASE}" || { echo "FATAL: Cannot create deploy base"; exit 1; }
|
||||
mkdir -p "${TARGET_DIR}" || { echo "FATAL: Cannot create target dir"; exit 1; }
|
||||
echo "OK: Directories created"
|
||||
echo ""
|
||||
|
||||
#
|
||||
echo "[2/8] Extracting build artifact..."
|
||||
if ! tar -xzf quantengine.tar.gz -C "${TARGET_DIR}"; then
|
||||
echo "FATAL: Failed to extract artifact"
|
||||
exit 1
|
||||
fi
|
||||
echo "OK: Artifact extracted"
|
||||
ls "${TARGET_DIR}" | head -10
|
||||
echo ""
|
||||
|
||||
#
|
||||
echo "[3/8] Normalizing deployment structure..."
|
||||
if [ -d "${TARGET_DIR}/net10.0" ]; then
|
||||
echo "Found net10.0 subdirectory, moving to root..."
|
||||
if ! mv "${TARGET_DIR}/net10.0"/* "${TARGET_DIR}/"; then
|
||||
echo "WARNING: Some files could not be moved from net10.0"
|
||||
fi
|
||||
if [ -d "${TARGET_DIR}/net10.0" ]; then
|
||||
rmdir "${TARGET_DIR}/net10.0" 2>/dev/null || echo "Warning: Could not remove net10.0 dir"
|
||||
fi
|
||||
fi
|
||||
echo "OK: Structure normalized"
|
||||
echo ""
|
||||
|
||||
#
|
||||
echo "[4/8] Validating deployment contents..."
|
||||
if [ ! -f "${TARGET_DIR}/QuantEngine.Web.dll" ]; then
|
||||
echo "FATAL: QuantEngine.Web.dll not found in deployment"
|
||||
exit 1
|
||||
fi
|
||||
if [ ! -f "${TARGET_DIR}/appsettings.json" ]; then
|
||||
echo "FATAL: appsettings.json not found"
|
||||
exit 1
|
||||
fi
|
||||
echo "OK: All required files present"
|
||||
echo ""
|
||||
|
||||
#
|
||||
echo "[5/8] Installing environment configuration..."
|
||||
mkdir -p /home/kjh2064/.config || { echo "WARNING: Cannot create config dir"; }
|
||||
install -m 600 ./deploy/quantengine.env /home/kjh2064/.config/quantengine.env || { echo "WARNING: Config file install failed"; }
|
||||
echo "OK: Configuration installed"
|
||||
echo ""
|
||||
|
||||
# appsettings.Production.json
|
||||
echo "[6/8] Creating production appsettings..."
|
||||
mkdir -p "${TARGET_DIR}"
|
||||
DB_PASSWORD="${{ secrets.QUANTENGINE_DB_PASSWORD }}"
|
||||
cat > "${TARGET_DIR}/appsettings.Production.json" << EOF
|
||||
{
|
||||
"Logging": {
|
||||
"LogLevel": {
|
||||
"Default": "Information",
|
||||
"Microsoft.AspNetCore": "Warning"
|
||||
}
|
||||
},
|
||||
"AllowedHosts": "*",
|
||||
"ConnectionStrings": {
|
||||
"DefaultConnection": "Host=127.0.0.1;Database=quantenginedb;Username=quantengine_app;Password=${DB_PASSWORD};Search Path=quantengine;"
|
||||
},
|
||||
"AdminSettings": {
|
||||
"Username": "admin",
|
||||
"Password": "quant123!"
|
||||
}
|
||||
}
|
||||
EOF
|
||||
chmod 600 "${TARGET_DIR}/appsettings.Production.json"
|
||||
echo "OK: appsettings.Production.json created"
|
||||
echo ""
|
||||
|
||||
} | tee "$DEPLOYMENT_LOG"
|
||||
|
||||
echo "timestamp=${TIMESTAMP}" >> $GITHUB_OUTPUT
|
||||
echo "commit=${COMMIT}" >> $GITHUB_OUTPUT
|
||||
echo "target_dir=${TARGET_DIR}" >> $GITHUB_OUTPUT
|
||||
|
||||
# ()
|
||||
PREV_VERSION="none"
|
||||
if [ -L "${ACTIVE_LINK}" ]; then
|
||||
PREV_VERSION=$(readlink -f "${ACTIVE_LINK}")
|
||||
PREV_TIMESTAMP=$(basename "${PREV_VERSION}")
|
||||
else
|
||||
PREV_TIMESTAMP="none"
|
||||
fi
|
||||
|
||||
echo "[7/8] Executing Green-Blue deployment..."
|
||||
export DEPLOY_FROM_CI=1
|
||||
chmod +x "${TARGET_DIR}/deploy_gb.sh"
|
||||
|
||||
if ! "${TARGET_DIR}/deploy_gb.sh" >> "$DEPLOYMENT_LOG" 2>&1; then
|
||||
echo "DEPLOYMENT FAILED: Green-Blue swap error"
|
||||
send_telegram "DEPLOYMENT FAILED: Green-Blue swap failed for $COMMIT"
|
||||
exit 1
|
||||
fi
|
||||
|
||||
echo "OK: Green-Blue deployment completed"
|
||||
|
||||
#
|
||||
cat > "${TARGET_DIR}/.deployment_info" << EOF
|
||||
Deployed: $(date -u +'%Y-%m-%dT%H:%M:%SZ')
|
||||
Commit: ${COMMIT}
|
||||
Timestamp: ${TIMESTAMP}
|
||||
Run: ${RUN_NUM}
|
||||
Previous: ${PREV_TIMESTAMP}
|
||||
Status: DEPLOYED
|
||||
EOF
|
||||
|
||||
echo "timestamp=${TIMESTAMP}" >> $GITHUB_OUTPUT
|
||||
echo "commit=${COMMIT}" >> $GITHUB_OUTPUT
|
||||
echo "target_dir=${TARGET_DIR}" >> $GITHUB_OUTPUT
|
||||
echo "prev_version=${PREV_TIMESTAMP}" >> $GITHUB_OUTPUT
|
||||
|
||||
- name: Health Check & Verification
|
||||
id: health-check
|
||||
run: |
|
||||
TIMESTAMP="${{ steps.deploy.outputs.timestamp }}"
|
||||
COMMIT="${{ steps.deploy.outputs.commit }}"
|
||||
TARGET_DIR="${{ steps.deploy.outputs.target_dir }}"
|
||||
PREV_TIMESTAMP="${{ steps.deploy.outputs.prev_version }}"
|
||||
DEPLOY_BASE="/home/kjh2064/deployments"
|
||||
ACTIVE_LINK="/home/kjh2064/quantengine_active"
|
||||
|
||||
TELEGRAM_BOT_TOKEN="${{ secrets.TELEGRAM_BOT_TOKEN }}"
|
||||
[ -z "$TELEGRAM_BOT_TOKEN" ] && TELEGRAM_BOT_TOKEN="${{ env.TELEGRAM_BOT_TOKEN_DEFAULT }}"
|
||||
TELEGRAM_CHAT_ID="${{ secrets.TELEGRAM_CHAT_ID }}"
|
||||
[ -z "$TELEGRAM_CHAT_ID" ] && TELEGRAM_CHAT_ID="${{ env.TELEGRAM_CHAT_ID_DEFAULT }}"
|
||||
|
||||
send_telegram() {
|
||||
local text="$1"
|
||||
curl -fsS -X POST "https://api.telegram.org/bot${TELEGRAM_BOT_TOKEN}/sendMessage" \
|
||||
-d "chat_id=${TELEGRAM_CHAT_ID}" \
|
||||
--data-urlencode "text=${text}" \
|
||||
-d "parse_mode=HTML" >/dev/null || true
|
||||
}
|
||||
|
||||
echo "=== POST-DEPLOYMENT HEALTH CHECKS ==="
|
||||
|
||||
# 1.
|
||||
echo "[1/4] Verifying deployment directory..."
|
||||
if [ ! -d "$TARGET_DIR" ]; then
|
||||
echo "FATAL: Deployment directory not found: $TARGET_DIR"
|
||||
exit 1
|
||||
fi
|
||||
if [ ! -f "${TARGET_DIR}/QuantEngine.Web.dll" ]; then
|
||||
echo "FATAL: Application DLL not found in deployment"
|
||||
exit 1
|
||||
fi
|
||||
echo "OK: Deployment directory verified"
|
||||
|
||||
# 2. Loopback
|
||||
echo "[2/4] Performing loopback health checks..."
|
||||
health_check_passed=0
|
||||
for i in $(seq 1 ${{ env.HEALTH_CHECK_RETRIES }}); do
|
||||
echo " Attempt $i/${{ env.HEALTH_CHECK_RETRIES }}..."
|
||||
if timeout 10 curl -s -f -o /dev/null -w '%{http_code}' http://127.0.0.1:5000/ 2>/dev/null | grep -qE '^(200|302|401)$'; then
|
||||
echo " OK: Service responding"
|
||||
health_check_passed=1
|
||||
break
|
||||
fi
|
||||
if [ $i -lt ${{ env.HEALTH_CHECK_RETRIES }} ]; then
|
||||
sleep ${{ env.HEALTH_CHECK_DELAY }}
|
||||
fi
|
||||
done
|
||||
|
||||
if [ $health_check_passed -eq 0 ]; then
|
||||
echo "FAILED: Health check did not pass after ${{ env.HEALTH_CHECK_RETRIES }} attempts"
|
||||
echo "status=failed" >> $GITHUB_OUTPUT
|
||||
exit 1
|
||||
fi
|
||||
echo "OK: Loopback health check passed"
|
||||
|
||||
# 3.
|
||||
echo "[3/4] Verifying database connectivity..."
|
||||
if timeout 10 bash -c 'cat /home/kjh2064/.config/quantengine.env | grep -q "postgresql"' 2>/dev/null; then
|
||||
echo "OK: Database credentials configured"
|
||||
else
|
||||
echo "WARNING: Could not verify database credentials"
|
||||
fi
|
||||
|
||||
# 4.
|
||||
echo "[4/4] Checking service status..."
|
||||
if systemctl is-active --quiet quantengine; then
|
||||
echo "OK: Service is running"
|
||||
else
|
||||
echo "WARNING: Service may not be running, but health checks passed"
|
||||
fi
|
||||
|
||||
echo "status=success" >> $GITHUB_OUTPUT
|
||||
echo "=== ALL HEALTH CHECKS PASSED ==="
|
||||
send_telegram "OK: QuantEngine deployed successfully (commit: ${COMMIT})"
|
||||
|
||||
- name: Auto-Rollback on Health Check Failure
|
||||
if: failure() && steps.health-check.outcome == 'failure'
|
||||
run: |
|
||||
COMMIT="${{ steps.deploy.outputs.commit }}"
|
||||
PREV_TIMESTAMP="${{ steps.deploy.outputs.prev_version }}"
|
||||
DEPLOY_BASE="/home/kjh2064/deployments"
|
||||
ACTIVE_LINK="/home/kjh2064/quantengine_active"
|
||||
|
||||
TELEGRAM_BOT_TOKEN="${{ secrets.TELEGRAM_BOT_TOKEN }}"
|
||||
[ -z "$TELEGRAM_BOT_TOKEN" ] && TELEGRAM_BOT_TOKEN="${{ env.TELEGRAM_BOT_TOKEN_DEFAULT }}"
|
||||
TELEGRAM_CHAT_ID="${{ secrets.TELEGRAM_CHAT_ID }}"
|
||||
[ -z "$TELEGRAM_CHAT_ID" ] && TELEGRAM_CHAT_ID="${{ env.TELEGRAM_CHAT_ID_DEFAULT }}"
|
||||
|
||||
send_telegram() {
|
||||
local text="$1"
|
||||
curl -fsS -X POST "https://api.telegram.org/bot${TELEGRAM_BOT_TOKEN}/sendMessage" \
|
||||
-d "chat_id=${TELEGRAM_CHAT_ID}" \
|
||||
--data-urlencode "text=${text}" \
|
||||
-d "parse_mode=HTML" >/dev/null || true
|
||||
}
|
||||
|
||||
echo "=== AUTOMATIC ROLLBACK INITIATED ==="
|
||||
echo "Health check failed, rolling back to previous version..."
|
||||
|
||||
if [ "$PREV_TIMESTAMP" != "none" ]; then
|
||||
PREV_DEPLOY="${DEPLOY_BASE}/quantengine_${PREV_TIMESTAMP}"
|
||||
if [ -d "$PREV_DEPLOY" ]; then
|
||||
echo "Restoring symlink to: $PREV_DEPLOY"
|
||||
ln -sfn "${PREV_DEPLOY}" "${ACTIVE_LINK}"
|
||||
echo "Restarting service..."
|
||||
systemctl restart quantengine 2>&1 || echo "WARNING: Service restart may have issues"
|
||||
sleep 3
|
||||
echo "Rollback completed"
|
||||
send_telegram "ROLLBACK: Deployment of ${COMMIT} failed, rolled back to ${PREV_TIMESTAMP}"
|
||||
else
|
||||
echo "ERROR: Previous deployment directory not found"
|
||||
send_telegram "CRITICAL: Rollback failed - previous deployment not found"
|
||||
exit 1
|
||||
fi
|
||||
else
|
||||
echo "ERROR: No previous deployment available for rollback"
|
||||
send_telegram "CRITICAL: Health check failed - no previous deployment to rollback to"
|
||||
exit 1
|
||||
fi
|
||||
|
||||
echo "=== Verifying Database Connectivity ==="
|
||||
db_status=$(psql -U quantengine_app -d quantenginedb -h 127.0.0.1 -c 'SELECT 1;' 2>&1 | head -1)
|
||||
|
||||
if echo "$db_status" | grep -q "1"; then
|
||||
echo " Database connectivity verified"
|
||||
else
|
||||
echo " Database connectivity check: $db_status"
|
||||
fi
|
||||
|
||||
- name: Post-Deployment Verification
|
||||
if: success()
|
||||
run: |
|
||||
echo "=== POST-DEPLOYMENT VERIFICATION ==="
|
||||
|
||||
# Public endpoints
|
||||
echo "[1/3] Verifying public endpoints..."
|
||||
for endpoint in "/" "/Account/Login"; do
|
||||
code=$(curl -s -o /dev/null -w "%{http_code}" --connect-timeout 5 "https://quant.taxbaik.com${endpoint}")
|
||||
echo " https://quant.taxbaik.com${endpoint} -> $code"
|
||||
if ! echo "$code" | grep -qE '^(200|302|401)$'; then
|
||||
echo " WARNING: Unexpected response code"
|
||||
fi
|
||||
done
|
||||
|
||||
# Nginx
|
||||
echo "[2/3] Verifying Nginx configuration..."
|
||||
if nginx -t 2>&1 | grep -q "successful"; then
|
||||
echo " OK: Nginx syntax valid"
|
||||
else
|
||||
echo " WARNING: Nginx validation may have issues"
|
||||
fi
|
||||
|
||||
#
|
||||
echo "[3/3] Creating deployment record..."
|
||||
DEPLOYMENT_SUMMARY="deployment_summary_${{ steps.deploy.outputs.timestamp }}.txt"
|
||||
cat > "$DEPLOYMENT_SUMMARY" << EOF
|
||||
DEPLOYMENT SUCCESSFUL
|
||||
=====================
|
||||
|
||||
Timestamp: ${{ steps.deploy.outputs.timestamp }}
|
||||
Commit: ${{ steps.deploy.outputs.commit }}
|
||||
Target: ${{ steps.deploy.outputs.target_dir }}
|
||||
Previous: ${{ steps.deploy.outputs.prev_version }}
|
||||
Status: ACTIVE
|
||||
|
||||
Health Check: PASSED
|
||||
Service: RUNNING
|
||||
Database: CONNECTED
|
||||
Public Endpoints: RESPONDING
|
||||
|
||||
EOF
|
||||
|
||||
echo "OK: Deployment record created"
|
||||
echo "=== VERIFICATION COMPLETE ==="
|
||||
|
||||
- name: Cleanup Old Deployments
|
||||
if: always()
|
||||
run: |
|
||||
DEPLOY_BASE="/home/kjh2064/deployments"
|
||||
KEEP_COUNT=5
|
||||
|
||||
echo "Cleaning up old deployments (keeping $KEEP_COUNT most recent)..."
|
||||
cd "$DEPLOY_BASE"
|
||||
|
||||
count=$(ls -d quantengine_* 2>/dev/null | wc -l)
|
||||
if [ $count -gt $KEEP_COUNT ]; then
|
||||
remove_count=$((count - KEEP_COUNT))
|
||||
echo "Removing $remove_count old deployment(s)..."
|
||||
ls -dt quantengine_* | tail -n +$((KEEP_COUNT + 1)) | while read -r old_dir; do
|
||||
echo " Removing: $old_dir"
|
||||
rm -rf "$old_dir" 2>/dev/null || echo " WARNING: Could not remove $old_dir"
|
||||
done
|
||||
fi
|
||||
|
||||
echo "Cleanup complete. Current deployments:"
|
||||
ls -ldt quantengine_* | head -5 | awk '{print $9, "(" $5 " bytes)"}'
|
||||
|
||||
- name: Notify Success
|
||||
if: success()
|
||||
run: |
|
||||
TELEGRAM_BOT_TOKEN="${{ secrets.TELEGRAM_BOT_TOKEN }}"
|
||||
[ -z "$TELEGRAM_BOT_TOKEN" ] && TELEGRAM_BOT_TOKEN="${{ env.TELEGRAM_BOT_TOKEN_DEFAULT }}"
|
||||
TELEGRAM_CHAT_ID="${{ secrets.TELEGRAM_CHAT_ID }}"
|
||||
[ -z "$TELEGRAM_CHAT_ID" ] && TELEGRAM_CHAT_ID="${{ env.TELEGRAM_CHAT_ID_DEFAULT }}"
|
||||
|
||||
curl -fsS -X POST "https://api.telegram.org/bot${TELEGRAM_BOT_TOKEN}/sendMessage" \
|
||||
-d "chat_id=${TELEGRAM_CHAT_ID}" \
|
||||
--data-urlencode "text=SUCCESS: QuantEngine deployment complete (commit: ${{ steps.deploy.outputs.commit }})" \
|
||||
-d "parse_mode=HTML" >/dev/null || true
|
||||
|
||||
- name: Notify Failure
|
||||
if: failure()
|
||||
run: |
|
||||
TELEGRAM_BOT_TOKEN="${{ secrets.TELEGRAM_BOT_TOKEN }}"
|
||||
[ -z "$TELEGRAM_BOT_TOKEN" ] && TELEGRAM_BOT_TOKEN="${{ env.TELEGRAM_BOT_TOKEN_DEFAULT }}"
|
||||
TELEGRAM_CHAT_ID="${{ secrets.TELEGRAM_CHAT_ID }}"
|
||||
[ -z "$TELEGRAM_CHAT_ID" ] && TELEGRAM_CHAT_ID="${{ env.TELEGRAM_CHAT_ID_DEFAULT }}"
|
||||
|
||||
curl -fsS -X POST "https://api.telegram.org/bot${TELEGRAM_BOT_TOKEN}/sendMessage" \
|
||||
-d "chat_id=${TELEGRAM_CHAT_ID}" \
|
||||
--data-urlencode "text=FAILURE: QuantEngine deployment failed (commit: ${{ steps.deploy.outputs.commit }})
|
||||
|
||||
Logs: https://gitea.taxbaik.com/kjh2064/QuantEngineByItz/actions/runs/${{ github.run_id }}" \
|
||||
-d "parse_mode=HTML" >/dev/null || true
|
||||
|
||||
- name: Cleanup Old Deployments
|
||||
run: |
|
||||
DEPLOY_BASE="/home/kjh2064/deployments"
|
||||
echo "Cleaning up obsolete deployments (keeping last 5)..."
|
||||
cd "${DEPLOY_BASE}"
|
||||
ls -dt quantengine_* | tail -n +6 | while read -r old_dir; do
|
||||
echo "Removing old release: ${old_dir}"
|
||||
rm -rf "${old_dir}"
|
||||
done
|
||||
echo "Cleanup complete"
|
||||
ls -ldt quantengine_* | head -5
|
||||
|
||||
- name: Notify Failure
|
||||
if: failure()
|
||||
run: |
|
||||
COMMIT=$(git rev-parse --short HEAD)
|
||||
TELEGRAM_BOT_TOKEN="${{ secrets.TELEGRAM_BOT_TOKEN }}"
|
||||
[ -z "$TELEGRAM_BOT_TOKEN" ] && TELEGRAM_BOT_TOKEN="${{ env.TELEGRAM_BOT_TOKEN_DEFAULT }}"
|
||||
TELEGRAM_CHAT_ID="${{ secrets.TELEGRAM_CHAT_ID }}"
|
||||
[ -z "$TELEGRAM_CHAT_ID" ] && TELEGRAM_CHAT_ID="${{ env.TELEGRAM_CHAT_ID_DEFAULT }}"
|
||||
|
||||
curl -fsS -X POST "https://api.telegram.org/bot${TELEGRAM_BOT_TOKEN}/sendMessage" \
|
||||
-d "chat_id=${TELEGRAM_CHAT_ID}" \
|
||||
--data-urlencode "text= QuantEngine \n: ${COMMIT}\n: https://gitea.taxbaik.com/kjh2064/QuantEngineByItz/actions/runs/${{ github.run_id }}" \
|
||||
-d "parse_mode=HTML" || true
|
||||
@@ -1,41 +0,0 @@
|
||||
name: Fast Validation
|
||||
|
||||
on:
|
||||
pull_request:
|
||||
branches: [ main ]
|
||||
workflow_dispatch:
|
||||
|
||||
jobs:
|
||||
quick-checks:
|
||||
runs-on: ubuntu-latest
|
||||
timeout-minutes: 2
|
||||
|
||||
steps:
|
||||
- name: Checkout Code
|
||||
uses: actions/checkout@v3
|
||||
|
||||
- name: YAML Lint
|
||||
run: |
|
||||
python3 -m pip install -q yamllint
|
||||
yamllint -c "{extends: default}" .gitea/workflows/*.yml || true
|
||||
|
||||
- name: No Hardcoded Secrets
|
||||
run: |
|
||||
! grep -r "Password=" .gitea/workflows/ --include="*.yml" | grep -v "secrets\." || exit 1
|
||||
|
||||
- name: JSON Validation
|
||||
run: |
|
||||
python3 -c "
|
||||
import json, glob
|
||||
for f in glob.glob('**/*.json', recursive=True):
|
||||
try:
|
||||
with open(f) as file:
|
||||
json.load(file)
|
||||
except Exception as e:
|
||||
print(f'ERROR: {f}: {e}')
|
||||
exit(1)
|
||||
"
|
||||
|
||||
- name: Report Complete
|
||||
if: success()
|
||||
run: echo "Fast validation passed"
|
||||
@@ -1,244 +1,21 @@
|
||||
name: KIS Data Collection (SQLite Canonical Feed)
|
||||
|
||||
# ─────────────────────────────────────────────────────────────────
|
||||
# [중요] 이 워크플로우는 KIS Open API를 코어로 하는 read-only 데이터 수집만 수행한다.
|
||||
# GatherTradingData.json + live read-only APIs를 통해 SQLite canonical store를 갱신한다.
|
||||
# xlsx는 이 워크플로우의 직접 입력이 아니며, KIS 실패 시에만 별도 보조 경로에서 사용한다.
|
||||
#
|
||||
# 스케줄: 영업일(월~금) 08:00~17:00 KST, 2시간 간격(08/10/12/14/16시).
|
||||
# Gitea Actions의 schedule cron은 UTC 기준으로 평가된다(서버 타임존이 별도
|
||||
# 설정되어 있지 않은 경우의 기본값). 아래 cron은 UTC로 작성했다:
|
||||
# KST 08:00 = UTC 전날 23:00 → 요일은 "한국 기준 평일"에 맞춰 UTC 0-4(일~목)로 이동
|
||||
# KST 10/12/14/16:00 = UTC 01/03/05/07:00, 같은 날(UTC 월~금, 1-5)
|
||||
#
|
||||
# [실제 Gitea 서버 타임존이 Asia/Seoul로 설정되어 있다면] 아래 cron을 그대로
|
||||
# "0 8,10,12,14,16 * * 1-5" 한 줄로 교체하면 된다 — 첫 실행 후 Actions 실행
|
||||
# 기록의 타임스탬프를 확인해 KST 08시 전후로 도는지 검증할 것(추정하지 말고 확인).
|
||||
#
|
||||
# 스케줄 주기 변경: 아래 schedule 목록의 cron 줄을 추가/삭제/수정하면 된다.
|
||||
# 예) 1시간 간격으로 바꾸려면 09,11,13,15시 슬롯을 추가.
|
||||
# ─────────────────────────────────────────────────────────────────
|
||||
name: KIS Data Collection Validation
|
||||
|
||||
on:
|
||||
schedule:
|
||||
- cron: "0 23 * * 0-4" # KST 월~금 08:00 (UTC 일~목 23:00)
|
||||
- cron: "0 1 * * 1-5" # KST 월~금 10:00 (UTC 01:00)
|
||||
- cron: "0 3 * * 1-5" # KST 월~금 12:00 (UTC 03:00)
|
||||
- cron: "0 5 * * 1-5" # KST 월~금 14:00 (UTC 05:00)
|
||||
- cron: "0 7 * * 1-5" # KST 월~금 16:00 (UTC 07:00)
|
||||
workflow_dispatch: # 수동 실행 — 스케줄 검증/즉시 재시도용
|
||||
- cron: "30 0 * * 1-5"
|
||||
workflow_dispatch:
|
||||
|
||||
jobs:
|
||||
validate-kis-config-smoke:
|
||||
if: github.event_name == 'workflow_dispatch'
|
||||
validate:
|
||||
runs-on: ubuntu-latest
|
||||
steps:
|
||||
- name: Checkout Code
|
||||
run: |
|
||||
if [ -d .git ]; then
|
||||
git remote set-url origin http://x-access-token:${{ secrets.GITHUB_TOKEN }}@192.168.123.100:8418/KimJaeHyun/myfinance.git
|
||||
else
|
||||
git init
|
||||
git remote add origin http://x-access-token:${{ secrets.GITHUB_TOKEN }}@192.168.123.100:8418/KimJaeHyun/myfinance.git
|
||||
fi
|
||||
TARGET_REF="${GITHUB_REF_NAME:-main}"
|
||||
git fetch origin "$TARGET_REF" --depth=1
|
||||
git reset --hard FETCH_HEAD
|
||||
|
||||
- name: Setup Python Environment
|
||||
run: |
|
||||
VENV_BASE=/volume1/gitea/python_venv
|
||||
REQ_HASH=$(md5sum tools/run_kis_data_collection_v1.py 2>/dev/null | cut -d' ' -f1 || echo "kis-default")
|
||||
VENV="$VENV_BASE/$REQ_HASH"
|
||||
|
||||
if [ ! -f "$VENV/bin/python" ]; then
|
||||
mkdir -p "$VENV_BASE"
|
||||
/usr/bin/python3 -m venv "$VENV"
|
||||
if [ ! -f "$VENV/bin/pip" ]; then
|
||||
curl -sS https://bootstrap.pypa.io/pip/3.8/get-pip.py -o get-pip.py
|
||||
"$VENV/bin/python" get-pip.py --quiet
|
||||
rm get-pip.py
|
||||
fi
|
||||
"$VENV/bin/pip" install --upgrade pip --quiet
|
||||
"$VENV/bin/pip" install requests beautifulsoup4 pyyaml --quiet
|
||||
ls -dt "$VENV_BASE"/*/ 2>/dev/null | tail -n +3 | xargs rm -rf 2>/dev/null || true
|
||||
fi
|
||||
"$VENV/bin/pip" install requests beautifulsoup4 pyyaml --quiet
|
||||
echo "$VENV/bin" >> $GITHUB_PATH
|
||||
|
||||
- name: "[CRITICAL] No Direct API Trading Gate"
|
||||
run: python3 tools/validate_no_direct_api_trading_v1.py
|
||||
|
||||
- name: "[CRITICAL] Validate KIS API Credentials (mock)"
|
||||
env:
|
||||
# Gitea repository variables are injected here; the Python loader reads these env names.
|
||||
KIS_APP_Key_TEST: ${{ vars.KIS_APP_KEY_TEST }}
|
||||
KIS_APP_Secret_TEST: ${{ vars.KIS_APP_SECRET_TEST }}
|
||||
run: |
|
||||
if [ -z "${KIS_APP_Key_TEST:-}" ]; then
|
||||
echo "::error::Gitea variable KIS_APP_KEY_TEST is missing or empty"
|
||||
exit 1
|
||||
fi
|
||||
if [ -z "${KIS_APP_Secret_TEST:-}" ]; then
|
||||
echo "::error::Gitea variable KIS_APP_SECRET_TEST is missing or empty"
|
||||
exit 1
|
||||
fi
|
||||
python3 tools/validate_kis_api_credentials_v1.py \
|
||||
--account mock \
|
||||
--ticker 005930 \
|
||||
--dry-run
|
||||
|
||||
collect-kis-data-live:
|
||||
if: github.event_name == 'schedule'
|
||||
runs-on: ubuntu-latest
|
||||
|
||||
steps:
|
||||
- name: Checkout Code
|
||||
run: |
|
||||
if [ -d .git ]; then
|
||||
git remote set-url origin http://x-access-token:${{ secrets.GITHUB_TOKEN }}@192.168.123.100:8418/KimJaeHyun/myfinance.git
|
||||
else
|
||||
git init
|
||||
git remote add origin http://x-access-token:${{ secrets.GITHUB_TOKEN }}@192.168.123.100:8418/KimJaeHyun/myfinance.git
|
||||
fi
|
||||
TARGET_REF="${GITHUB_REF_NAME:-main}"
|
||||
git fetch origin "$TARGET_REF" --depth=1
|
||||
git reset --hard FETCH_HEAD
|
||||
|
||||
- name: Prepare Raw Seed Snapshot
|
||||
run: |
|
||||
if [ -f GatherTradingData.json ]; then
|
||||
echo "GatherTradingData.json present"
|
||||
exit 0
|
||||
fi
|
||||
|
||||
if [ -f .clasprc.json ]; then
|
||||
echo "GatherTradingData.json missing; seed regeneration is not performed in this workflow."
|
||||
echo "::error::Commit or pre-stage GatherTradingData.json before running this workflow."
|
||||
echo "::error::If workbook conversion is required, run tools/convert_xlsx_to_json.py in a separate seed-prep step."
|
||||
exit 1
|
||||
fi
|
||||
|
||||
echo "::error::GatherTradingData.json is missing."
|
||||
echo "::error::This workflow is JSON-first and does not consume GatherTradingData.xlsx directly."
|
||||
echo "::error::Fix options:"
|
||||
echo "::error:: 1) Commit GatherTradingData.json to the repository tree."
|
||||
echo "::error:: 2) Run a separate seed-prep job to generate GatherTradingData.json from workbook sources."
|
||||
exit 1
|
||||
|
||||
- name: Configure Runtime Paths
|
||||
run: |
|
||||
export PATH=/usr/local/bin:$PATH
|
||||
echo "/usr/local/bin" >> $GITHUB_PATH
|
||||
/usr/bin/python3 --version
|
||||
|
||||
- name: Setup Python Environment
|
||||
run: |
|
||||
VENV_BASE=/volume1/gitea/python_venv
|
||||
REQ_HASH=$(md5sum tools/run_kis_data_collection_v1.py 2>/dev/null | cut -d' ' -f1 || echo "kis-default")
|
||||
VENV="$VENV_BASE/$REQ_HASH"
|
||||
|
||||
if [ ! -f "$VENV/bin/python" ]; then
|
||||
mkdir -p "$VENV_BASE"
|
||||
/usr/bin/python3 -m venv "$VENV"
|
||||
if [ ! -f "$VENV/bin/pip" ]; then
|
||||
curl -sS https://bootstrap.pypa.io/pip/3.8/get-pip.py -o get-pip.py
|
||||
"$VENV/bin/python" get-pip.py --quiet
|
||||
rm get-pip.py
|
||||
fi
|
||||
"$VENV/bin/pip" install --upgrade pip --quiet
|
||||
"$VENV/bin/pip" install requests beautifulsoup4 pyyaml --quiet
|
||||
ls -dt "$VENV_BASE"/*/ 2>/dev/null | tail -n +3 | xargs rm -rf 2>/dev/null || true
|
||||
fi
|
||||
"$VENV/bin/pip" install requests beautifulsoup4 pyyaml --quiet
|
||||
echo "$VENV/bin" >> $GITHUB_PATH
|
||||
|
||||
- name: "[CRITICAL] No Direct API Trading Gate"
|
||||
run: python3 tools/validate_no_direct_api_trading_v1.py
|
||||
|
||||
- name: Collect KIS Market Data to SQLite (read-only)
|
||||
env:
|
||||
# Real collection uses repository variables, not Windows shell env syntax.
|
||||
KIS_APP_Key: ${{ vars.KIS_APP_KEY }}
|
||||
KIS_APP_Secret: ${{ vars.KIS_APP_SECRET }}
|
||||
run: |
|
||||
if [ -z "${KIS_APP_Key:-}" ]; then
|
||||
echo "::error::Gitea variable KIS_APP_KEY is missing or empty"
|
||||
exit 1
|
||||
fi
|
||||
if [ -z "${KIS_APP_Secret:-}" ]; then
|
||||
echo "::error::Gitea variable KIS_APP_SECRET is missing or empty"
|
||||
exit 1
|
||||
fi
|
||||
python3 tools/run_kis_data_collection_v1.py \
|
||||
--input-json GatherTradingData.json \
|
||||
--sqlite-db outputs/kis_data_collection/kis_data_collection.db \
|
||||
--output-json Temp/kis_data_collection_v1.json \
|
||||
--kis-account real
|
||||
|
||||
- name: Validate SQLite Artifact
|
||||
run: |
|
||||
python3 - <<'PY'
|
||||
import json, sqlite3
|
||||
from pathlib import Path
|
||||
db = Path("outputs/kis_data_collection/kis_data_collection.db")
|
||||
report = Path("Temp/kis_data_collection_v1.json")
|
||||
assert db.exists(), f"missing db: {db}"
|
||||
assert report.exists(), f"missing report: {report}"
|
||||
conn = sqlite3.connect(db)
|
||||
try:
|
||||
run_count = conn.execute("SELECT COUNT(*) FROM collection_runs").fetchone()[0]
|
||||
snap_count = conn.execute("SELECT COUNT(*) FROM collection_snapshots").fetchone()[0]
|
||||
print(json.dumps({"run_count": run_count, "snapshot_count": snap_count}, ensure_ascii=False))
|
||||
assert run_count >= 1
|
||||
assert snap_count >= 1
|
||||
finally:
|
||||
conn.close()
|
||||
PY
|
||||
|
||||
- name: Backup SQLite Database (WBS-9.7)
|
||||
if: always()
|
||||
run: |
|
||||
BACKUP_BASE="/volume1/gitea/backups/kis_data_collection"
|
||||
mkdir -p "$BACKUP_BASE"
|
||||
|
||||
TIMESTAMP=$(date +%Y%m%d_%H%M%S)
|
||||
SOURCE_DB="outputs/kis_data_collection/kis_data_collection.db"
|
||||
BACKUP_DIR="$BACKUP_BASE/$TIMESTAMP"
|
||||
BACKUP_DB="$BACKUP_DIR/kis_data_collection.db"
|
||||
|
||||
if [ -f "$SOURCE_DB" ]; then
|
||||
mkdir -p "$BACKUP_DIR"
|
||||
cp "$SOURCE_DB" "$BACKUP_DB"
|
||||
echo "Backup created: $BACKUP_DB"
|
||||
|
||||
# 메타데이터 저장 (backup manifest)
|
||||
cat > "$BACKUP_DIR/manifest.json" <<EOF
|
||||
{
|
||||
"timestamp": "$(date -u +%Y-%m-%dT%H:%M:%SZ)",
|
||||
"source_db": "$SOURCE_DB",
|
||||
"backup_db": "$BACKUP_DB",
|
||||
"job_id": "${{ github.run_id }}",
|
||||
"branch": "${{ github.ref }}",
|
||||
"status": "${{ job.status }}"
|
||||
}
|
||||
EOF
|
||||
|
||||
# 오래된 백업 정리 (7일 이상 된 것 삭제)
|
||||
find "$BACKUP_BASE" -mindepth 1 -maxdepth 1 -type d -mtime +7 -exec rm -rf {} \; 2>/dev/null || true
|
||||
else
|
||||
echo "::warning::Source DB not found: $SOURCE_DB"
|
||||
fi
|
||||
|
||||
- name: Notify Run Result
|
||||
if: always()
|
||||
run: |
|
||||
STATUS="${{ job.status }}"
|
||||
RUN_URL="${{ github.server_url }}/${{ github.repository }}/actions/runs/${{ github.run_id }}"
|
||||
SUMMARY_FILE="Temp/kis_data_collection_v1.json"
|
||||
SUMMARY_TEXT="(요약 파일 없음)"
|
||||
[ -f "$SUMMARY_FILE" ] && SUMMARY_TEXT=$(cat "$SUMMARY_FILE")
|
||||
echo "=== KIS Data Collection Result ==="
|
||||
echo "status: $STATUS"
|
||||
echo "summary: $SUMMARY_TEXT"
|
||||
echo "run log: $RUN_URL"
|
||||
- uses: actions/checkout@v3
|
||||
- name: Validate mock credentials
|
||||
env:
|
||||
KIS_APP_Key_TEST: ${{ vars.KIS_APP_KEY_TEST }}
|
||||
KIS_APP_Secret_TEST: ${{ vars.KIS_APP_SECRET_TEST }}
|
||||
KIS_APP_Key: ${{ vars.KIS_APP_KEY }}
|
||||
KIS_APP_Secret: ${{ vars.KIS_APP_SECRET }}
|
||||
run: python3 tools/validate_kis_api_credentials_v1.py --account mock --ticker 005930 --dry-run
|
||||
- name: Validate .NET PostgreSQL JSON cutover
|
||||
run: python3 tools/validate_dotnet_postgresql_json_cutover_v1.py
|
||||
|
||||
@@ -1,205 +0,0 @@
|
||||
name: Merge to Main - Full Pipeline
|
||||
|
||||
on:
|
||||
push:
|
||||
branches: [ main ]
|
||||
workflow_dispatch:
|
||||
|
||||
concurrency:
|
||||
group: merge-main
|
||||
cancel-in-progress: false
|
||||
|
||||
env:
|
||||
DOTNET_VERSION: '10.0.x'
|
||||
|
||||
jobs:
|
||||
stage-1-fast-gates:
|
||||
name: "Stage 1: Fast Gates"
|
||||
runs-on: ubuntu-latest
|
||||
timeout-minutes: 2
|
||||
|
||||
steps:
|
||||
- name: Checkout Code
|
||||
uses: actions/checkout@v3
|
||||
|
||||
- name: YAML Validation
|
||||
run: |
|
||||
python3 -m pip install -q yamllint
|
||||
yamllint -c "{extends: default}" .gitea/workflows/*.yml || true
|
||||
|
||||
- name: Secret Scanning
|
||||
run: |
|
||||
! grep -r "Password=" .gitea/workflows/ --include="*.yml" | grep -v "secrets\." || exit 1
|
||||
|
||||
- name: JSON Validation
|
||||
run: |
|
||||
python3 -c "
|
||||
import json, glob
|
||||
for f in glob.glob('**/*.json', recursive=True):
|
||||
try:
|
||||
with open(f) as file:
|
||||
json.load(file)
|
||||
except Exception as e:
|
||||
print(f'ERROR: {f}: {e}')
|
||||
exit(1)
|
||||
"
|
||||
|
||||
- name: Report Tier 1
|
||||
if: success()
|
||||
run: echo "Tier 1 gates passed"
|
||||
|
||||
stage-2-critical-gates:
|
||||
name: "Stage 2: Critical Gates"
|
||||
runs-on: ubuntu-latest
|
||||
timeout-minutes: 5
|
||||
needs: stage-1-fast-gates
|
||||
|
||||
steps:
|
||||
- name: Checkout Code
|
||||
uses: actions/checkout@v3
|
||||
with:
|
||||
fetch-depth: 0
|
||||
|
||||
- name: Setup Python
|
||||
uses: actions/setup-python@v4
|
||||
with:
|
||||
python-version: '3.10'
|
||||
|
||||
- name: KIS API Governance
|
||||
run: |
|
||||
pip install -q pyyaml
|
||||
python3 tools/validate_no_direct_api_trading_v1.py || exit 1
|
||||
|
||||
- name: Database Schema Validation
|
||||
run: python3 tools/validate_postgresql_history_contract_v1.py || exit 1
|
||||
|
||||
- name: Report Tier 2
|
||||
if: success()
|
||||
run: echo "Tier 2 critical gates passed"
|
||||
|
||||
stage-3-validators-parallel:
|
||||
name: "Stage 3: Integration Tests"
|
||||
runs-on: ubuntu-latest
|
||||
timeout-minutes: 10
|
||||
needs: stage-2-critical-gates
|
||||
continue-on-error: true
|
||||
|
||||
steps:
|
||||
- name: Checkout Code
|
||||
uses: actions/checkout@v3
|
||||
|
||||
- name: Setup Python
|
||||
run: pip install -q pyyaml openpyxl requests
|
||||
|
||||
- name: Validate Specs
|
||||
run: python3 tools/validate_specs.py || true
|
||||
|
||||
- name: Validate Formula Registry
|
||||
run: python3 tools/validate_formula_registry.py || true
|
||||
|
||||
- name: Report Tier 3
|
||||
if: always()
|
||||
run: echo "Tier 3 integration tests completed"
|
||||
|
||||
stage-4-build:
|
||||
name: "Stage 4: Build and Package"
|
||||
runs-on: ubuntu-latest
|
||||
timeout-minutes: 15
|
||||
needs:
|
||||
- stage-1-fast-gates
|
||||
- stage-2-critical-gates
|
||||
- stage-3-validators-parallel
|
||||
if: needs.stage-1-fast-gates.result == 'success' && needs.stage-2-critical-gates.result == 'success'
|
||||
|
||||
outputs:
|
||||
artifact-name: quantengine-${{ steps.metadata.outputs.commit }}
|
||||
|
||||
steps:
|
||||
- name: Checkout Code
|
||||
uses: actions/checkout@v3
|
||||
with:
|
||||
fetch-depth: 0
|
||||
|
||||
- name: Setup .NET
|
||||
uses: actions/setup-dotnet@v3
|
||||
with:
|
||||
dotnet-version: ${{ env.DOTNET_VERSION }}
|
||||
|
||||
- name: Generate Metadata
|
||||
id: metadata
|
||||
run: |
|
||||
COMMIT=$(git rev-parse --short HEAD)
|
||||
echo "commit=${COMMIT}" >> $GITHUB_OUTPUT
|
||||
echo "Commit: ${COMMIT}"
|
||||
|
||||
- name: Restore Dependencies
|
||||
run: dotnet restore src/dotnet/QuantEngine.Web/QuantEngine.Web.csproj
|
||||
|
||||
- name: Build Release
|
||||
run: |
|
||||
dotnet build src/dotnet/QuantEngine.Web/QuantEngine.Web.csproj \
|
||||
-c Release --no-restore
|
||||
|
||||
- name: Unit Tests
|
||||
run: |
|
||||
dotnet test src/dotnet/QuantEngine.Core.Tests/QuantEngine.Core.Tests.csproj \
|
||||
-c Release --no-build || true
|
||||
|
||||
- name: Publish and Package
|
||||
run: |
|
||||
dotnet publish src/dotnet/QuantEngine.Web/QuantEngine.Web.csproj \
|
||||
-c Release --no-build -o ./publish
|
||||
|
||||
tar -czf quantengine-${{ steps.metadata.outputs.commit }}.tar.gz -C ./publish .
|
||||
echo "Package ready: quantengine-${{ steps.metadata.outputs.commit }}.tar.gz"
|
||||
|
||||
- name: Upload Artifact
|
||||
uses: actions/upload-artifact@v3
|
||||
with:
|
||||
name: quantengine-${{ github.run_number }}
|
||||
path: quantengine-${{ steps.metadata.outputs.commit }}.tar.gz
|
||||
retention-days: 7
|
||||
|
||||
stage-5-deploy:
|
||||
name: "Stage 5: Deploy to Production"
|
||||
runs-on: ubuntu-latest
|
||||
timeout-minutes: 15
|
||||
needs: stage-4-build
|
||||
if: success()
|
||||
|
||||
steps:
|
||||
- name: Checkout Code
|
||||
uses: actions/checkout@v3
|
||||
|
||||
- name: Verify Secret
|
||||
run: |
|
||||
if [ -z "${{ secrets.QUANTENGINE_DB_PASSWORD }}" ]; then
|
||||
echo "ERROR: QUANTENGINE_DB_PASSWORD not set"
|
||||
exit 1
|
||||
fi
|
||||
echo "Secret configured"
|
||||
|
||||
- name: Prepare Deployment
|
||||
run: |
|
||||
echo "Deployment ready"
|
||||
|
||||
summary:
|
||||
name: "Pipeline Summary"
|
||||
runs-on: ubuntu-latest
|
||||
if: always()
|
||||
needs:
|
||||
- stage-1-fast-gates
|
||||
- stage-2-critical-gates
|
||||
- stage-3-validators-parallel
|
||||
- stage-4-build
|
||||
- stage-5-deploy
|
||||
|
||||
steps:
|
||||
- name: Generate Summary
|
||||
run: |
|
||||
echo "Pipeline Execution Summary"
|
||||
echo "Stage 1 (Fast Gates): ${{ needs.stage-1-fast-gates.result }}"
|
||||
echo "Stage 2 (Critical): ${{ needs.stage-2-critical-gates.result }}"
|
||||
echo "Stage 3 (Integration): ${{ needs.stage-3-validators-parallel.result }}"
|
||||
echo "Stage 4 (Build): ${{ needs.stage-4-build.result }}"
|
||||
echo "Stage 5 (Deploy): ${{ needs.stage-5-deploy.result }}"
|
||||
@@ -0,0 +1,227 @@
|
||||
name: Prepare Release
|
||||
|
||||
on:
|
||||
workflow_run:
|
||||
workflows: ["Validators (Pushes and Pull Requests)"]
|
||||
types: [completed]
|
||||
workflow_dispatch:
|
||||
inputs:
|
||||
version:
|
||||
description: 'Release version (auto-generated if empty, e.g. quant_20260711.0.abc1234 for the first deploy that day)'
|
||||
required: false
|
||||
type: string
|
||||
|
||||
env:
|
||||
DOTNET_VERSION: '10.0.x'
|
||||
|
||||
concurrency:
|
||||
group: prepare-release-${{ github.event.workflow_run.head_sha || github.sha }}
|
||||
cancel-in-progress: false
|
||||
|
||||
jobs:
|
||||
upstream-gate:
|
||||
name: Upstream Success Gate
|
||||
runs-on: ubuntu-latest
|
||||
steps:
|
||||
- name: Fail Fast on Failed Validator Chain
|
||||
run: |
|
||||
if [ "${{ github.event_name }}" = "workflow_run" ] && [ "${{ github.event.workflow_run.conclusion }}" != "success" ]; then
|
||||
echo "ERROR: Validators workflow did not succeed; release preparation is blocked."
|
||||
exit 1
|
||||
fi
|
||||
|
||||
build-and-release:
|
||||
name: Build & Create Release
|
||||
if: ${{ github.event_name == 'workflow_dispatch' || github.event.workflow_run.conclusion == 'success' }}
|
||||
runs-on: ubuntu-latest
|
||||
timeout-minutes: 30
|
||||
needs: upstream-gate
|
||||
outputs:
|
||||
version: ${{ steps.metadata.outputs.version }}
|
||||
commit: ${{ steps.metadata.outputs.commit }}
|
||||
|
||||
steps:
|
||||
- name: Checkout
|
||||
uses: actions/checkout@v4
|
||||
|
||||
- name: Setup .NET
|
||||
uses: actions/setup-dotnet@v4
|
||||
with:
|
||||
dotnet-version: ${{ env.DOTNET_VERSION }}
|
||||
|
||||
- name: Generate Metadata
|
||||
id: metadata
|
||||
env:
|
||||
GITEA_TOKEN: ${{ secrets.GITEA_TOKEN }}
|
||||
run: |
|
||||
VERSION_INPUT="${{ github.event.inputs.version }}"
|
||||
COMMIT=$(git rev-parse --short HEAD)
|
||||
|
||||
# Auto-generate version if not provided
|
||||
if [ -z "$VERSION_INPUT" ]; then
|
||||
# This project operates on Korea Standard Time (production
|
||||
# server logs, ops schedule, and the team are all KST) --
|
||||
# using UTC here silently rolled the date back by up to 9
|
||||
# hours (e.g. 2026-07-12 01:xx KST is still 2026-07-11 16:xx
|
||||
# UTC), so a release cut right after midnight KST would tag
|
||||
# itself with yesterday's date.
|
||||
TODAY=$(TZ=Asia/Seoul date +%Y%m%d)
|
||||
|
||||
# NOTE: Do NOT count today's releases via `git tag -l` here.
|
||||
# actions/checkout@v4 defaults to a shallow, single-branch
|
||||
# clone that does not fetch any tags, so every job container
|
||||
# sees zero local tags regardless of how many releases exist
|
||||
# -- this is exactly why every release tonight came out as
|
||||
# "quant_20260711.1.*" (three of them: b7591fb, 6ab270f,
|
||||
# e49922e, all claiming to be deploy #1). Query the actual
|
||||
# Gitea Releases API instead, which reflects real state.
|
||||
# Sequence number resets to 0 on each new date -- the first
|
||||
# release of a day is quant_YYYYMMDD.0.hash, the second .1, etc.
|
||||
RELEASES_TODAY=$(curl -sf --connect-timeout 10 --max-time 30 \
|
||||
-H "Authorization: token ${GITEA_TOKEN}" \
|
||||
"https://gitea.taxbaik.com/api/v1/repos/${{ github.repository }}/tags?limit=50" \
|
||||
| jq -r --arg prefix "quant_${TODAY}." '[.[] | select(.name | startswith($prefix))] | length')
|
||||
DEPLOY_COUNT=$RELEASES_TODAY
|
||||
|
||||
VERSION="quant_${TODAY}.${DEPLOY_COUNT}.${COMMIT}"
|
||||
else
|
||||
VERSION="$VERSION_INPUT"
|
||||
fi
|
||||
|
||||
echo "version=${VERSION}" >> $GITHUB_OUTPUT
|
||||
echo "commit=${COMMIT}" >> $GITHUB_OUTPUT
|
||||
echo "Version: $VERSION"
|
||||
echo "Commit: $COMMIT"
|
||||
|
||||
- name: Restore
|
||||
run: |
|
||||
dotnet restore src/dotnet/QuantEngine.Web/QuantEngine.Web.csproj
|
||||
|
||||
- name: Build (Release)
|
||||
run: |
|
||||
dotnet build src/dotnet/QuantEngine.Web/QuantEngine.Web.csproj \
|
||||
-c Release \
|
||||
--no-restore \
|
||||
-p:ContinuousIntegrationBuild=true
|
||||
|
||||
- name: Publish
|
||||
run: |
|
||||
dotnet publish src/dotnet/QuantEngine.Web/QuantEngine.Web.csproj \
|
||||
-c Release \
|
||||
-o ./publish \
|
||||
--no-restore \
|
||||
--no-build
|
||||
|
||||
- name: Write Version Text
|
||||
run: |
|
||||
echo "${{ steps.metadata.outputs.version }}" > ./publish/version.txt
|
||||
|
||||
- name: Write Production Config
|
||||
run: |
|
||||
mkdir -p ./publish
|
||||
python3 -c '
|
||||
import json
|
||||
import pathlib
|
||||
|
||||
# NOTE: No ConnectionStrings here on purpose. The real DB
|
||||
# password lives only in /home/kjh2064/.config/quantengine.env
|
||||
# on the production server and is injected via systemd
|
||||
# EnvironmentFile (ConnectionStrings__DefaultConnection),
|
||||
# which overrides this file at runtime. Never bake secrets
|
||||
# into a build artifact that ends up in a Gitea Release.
|
||||
config = {
|
||||
"Logging": {
|
||||
"LogLevel": {
|
||||
"Default": "Information"
|
||||
}
|
||||
}
|
||||
}
|
||||
|
||||
pathlib.Path("./publish/appsettings.Production.json").write_text(
|
||||
json.dumps(config, ensure_ascii=False, indent=2),
|
||||
encoding="utf-8"
|
||||
)'
|
||||
|
||||
test -s ./publish/appsettings.Production.json || { echo "ERROR: appsettings.Production.json is empty"; exit 1; }
|
||||
echo "✓ Production config created (no secrets included)"
|
||||
|
||||
- name: Package Artifact
|
||||
run: |
|
||||
VERSION="${{ steps.metadata.outputs.version }}"
|
||||
ARTIFACT="quantengine_${VERSION}.tar.gz"
|
||||
tar -czf "$ARTIFACT" -C ./publish .
|
||||
echo "artifact=${ARTIFACT}" >> $GITHUB_OUTPUT
|
||||
echo "✓ Package: $(du -sh $ARTIFACT | cut -f1)"
|
||||
file "$ARTIFACT"
|
||||
|
||||
- name: Create Git Tag
|
||||
run: |
|
||||
VERSION="${{ steps.metadata.outputs.version }}"
|
||||
COMMIT="${{ steps.metadata.outputs.commit }}"
|
||||
|
||||
git config user.name "Gitea Actions"
|
||||
git config user.email "actions@gitea.local"
|
||||
|
||||
git tag -a "$VERSION" -m "Release $VERSION (commit: $COMMIT)" HEAD
|
||||
echo "✓ Local tag created: $VERSION"
|
||||
|
||||
git push origin "$VERSION"
|
||||
echo "✓ Tag pushed: $VERSION"
|
||||
|
||||
- name: Create Gitea Release
|
||||
env:
|
||||
VERSION: ${{ steps.metadata.outputs.version }}
|
||||
COMMIT: ${{ steps.metadata.outputs.commit }}
|
||||
GITEA_TOKEN: ${{ secrets.GITEA_TOKEN }}
|
||||
run: |
|
||||
ARTIFACT="quantengine_${VERSION}.tar.gz"
|
||||
API="https://gitea.taxbaik.com/api/v1"
|
||||
REPO="kjh2064/QuantEngineByItz"
|
||||
|
||||
test -s "$ARTIFACT" || { echo "ERROR: artifact missing: $ARTIFACT"; exit 1; }
|
||||
|
||||
echo "Creating release $VERSION via Gitea API..."
|
||||
RELEASE_JSON=$(curl -sf -X POST \
|
||||
-H "Authorization: token ${GITEA_TOKEN}" \
|
||||
-H "Content-Type: application/json" \
|
||||
-d "{\"tag_name\":\"${VERSION}\",\"name\":\"Release ${VERSION}\",\"body\":\"Release Version: ${VERSION} | Commit: ${COMMIT}\",\"target_commitish\":\"main\"}" \
|
||||
"${API}/repos/${REPO}/releases")
|
||||
|
||||
RELEASE_ID=$(echo "$RELEASE_JSON" | python3 -c "import sys,json; print(json.load(sys.stdin)['id'])")
|
||||
|
||||
if [ -z "$RELEASE_ID" ] || [ "$RELEASE_ID" = "null" ]; then
|
||||
echo "ERROR: Failed to create release"
|
||||
echo "$RELEASE_JSON"
|
||||
exit 1
|
||||
fi
|
||||
|
||||
echo "✓ Release created: $VERSION (id: $RELEASE_ID)"
|
||||
|
||||
echo "Uploading artifact..."
|
||||
curl -sf -X POST \
|
||||
-H "Authorization: token ${GITEA_TOKEN}" \
|
||||
-H "Content-Type: multipart/form-data" \
|
||||
-F "attachment=@${ARTIFACT}" \
|
||||
"${API}/repos/${REPO}/releases/${RELEASE_ID}/assets?name=${ARTIFACT}" \
|
||||
-o /dev/null
|
||||
|
||||
echo "✓ Artifact attached: $ARTIFACT"
|
||||
|
||||
notification:
|
||||
name: Release Notification
|
||||
runs-on: ubuntu-latest
|
||||
if: always()
|
||||
needs: [upstream-gate, build-and-release]
|
||||
|
||||
steps:
|
||||
- name: Notify Release Ready
|
||||
if: needs.build-and-release.result == 'success'
|
||||
run: |
|
||||
echo "════════════════════════════════════════"
|
||||
echo "✅ Release Ready for Deployment"
|
||||
echo "════════════════════════════════════════"
|
||||
echo "Version: ${{ needs.build-and-release.outputs.version }}"
|
||||
echo "Commit: ${{ needs.build-and-release.outputs.commit }}"
|
||||
echo ""
|
||||
echo "Next: Use deploy-prod.yml to deploy this release"
|
||||
echo "════════════════════════════════════════"
|
||||
@@ -1,156 +1,24 @@
|
||||
name: Qualitative Sell Strategy (Read-Only, SQLite Canonical)
|
||||
name: Qualitative Sell Strategy Validation
|
||||
|
||||
on:
|
||||
schedule:
|
||||
- cron: "0 10 * * 1-5" # KST 19:00-ish daily post-close batch window (UTC 10:00)
|
||||
- cron: "15 0 * * 1-5"
|
||||
workflow_dispatch:
|
||||
|
||||
jobs:
|
||||
evaluate-qualitative-sell:
|
||||
validate:
|
||||
runs-on: ubuntu-latest
|
||||
|
||||
steps:
|
||||
- name: Checkout Code
|
||||
run: |
|
||||
if [ -d .git ]; then
|
||||
git remote set-url origin http://x-access-token:${{ secrets.GITHUB_TOKEN }}@192.168.123.100:8418/KimJaeHyun/myfinance.git
|
||||
else
|
||||
git init
|
||||
git remote add origin http://x-access-token:${{ secrets.GITHUB_TOKEN }}@192.168.123.100:8418/KimJaeHyun/myfinance.git
|
||||
fi
|
||||
TARGET_REF="${GITHUB_REF_NAME:-main}"
|
||||
git fetch origin "$TARGET_REF" --depth=1
|
||||
git reset --hard FETCH_HEAD
|
||||
|
||||
- name: Prepare Raw Seed Snapshot
|
||||
run: |
|
||||
if [ -f GatherTradingData.json ]; then
|
||||
echo "GatherTradingData.json present"
|
||||
exit 0
|
||||
fi
|
||||
|
||||
if [ -f GatherTradingData.xlsx ]; then
|
||||
echo "GatherTradingData.json missing; regenerating from GatherTradingData.xlsx"
|
||||
python3 tools/convert_xlsx_to_json.py \
|
||||
--xlsx GatherTradingData.xlsx \
|
||||
--out GatherTradingData.json
|
||||
if [ -f GatherTradingData.json ]; then
|
||||
echo "GatherTradingData.json regenerated successfully"
|
||||
exit 0
|
||||
fi
|
||||
echo "::error::GatherTradingData.xlsx is present but JSON regeneration failed."
|
||||
echo "::error::Check tools/convert_xlsx_to_json.py and workbook sheet integrity."
|
||||
exit 1
|
||||
fi
|
||||
|
||||
if [ -f .clasprc.json ]; then
|
||||
echo "GatherTradingData seed files missing; downloading GatherTradingData.xlsx from Google Drive via .clasprc.json"
|
||||
python3 tools/download_trading_data.py
|
||||
if [ -f GatherTradingData.xlsx ]; then
|
||||
echo "GatherTradingData.xlsx downloaded successfully; regenerating GatherTradingData.json"
|
||||
python3 tools/convert_xlsx_to_json.py \
|
||||
--xlsx GatherTradingData.xlsx \
|
||||
--out GatherTradingData.json
|
||||
if [ -f GatherTradingData.json ]; then
|
||||
echo "GatherTradingData.json regenerated successfully from downloaded workbook"
|
||||
exit 0
|
||||
fi
|
||||
echo "::error::Downloaded GatherTradingData.xlsx but JSON regeneration failed."
|
||||
echo "::error::Check workbook integrity and tools/convert_xlsx_to_json.py."
|
||||
exit 1
|
||||
fi
|
||||
echo "::error::.clasprc.json exists but GatherTradingData.xlsx was not downloaded."
|
||||
echo "::error::Check Google Drive access and tools/download_trading_data.py."
|
||||
exit 1
|
||||
fi
|
||||
|
||||
echo "::error::Neither GatherTradingData.json nor GatherTradingData.xlsx exists in the checked-out tree."
|
||||
echo "::error::This workflow requires a canonical seed snapshot before batch build can start."
|
||||
echo "::error::Fix options:"
|
||||
echo "::error:: 1) Commit GatherTradingData.json to the repository tree."
|
||||
echo "::error:: 2) Commit GatherTradingData.xlsx so the workflow can regenerate the JSON."
|
||||
echo "::error:: 3) Provide .clasprc.json so the workflow can download GatherTradingData.xlsx from Google Drive and regenerate the JSON."
|
||||
echo "::error:: 4) If neither file should be tracked, add a prior step that downloads the seed before collection."
|
||||
exit 1
|
||||
|
||||
- name: Configure Runtime Paths
|
||||
run: |
|
||||
export PATH=/usr/local/bin:$PATH
|
||||
echo "/usr/local/bin" >> $GITHUB_PATH
|
||||
/usr/bin/python3 --version
|
||||
|
||||
- name: Setup Python Environment
|
||||
run: |
|
||||
VENV_BASE=/volume1/gitea/python_venv
|
||||
REQ_HASH=$(md5sum tools/build_qualitative_sell_inputs_v1.py 2>/dev/null | cut -d' ' -f1 || echo "qual-default")
|
||||
VENV="$VENV_BASE/$REQ_HASH"
|
||||
if [ ! -f "$VENV/bin/python" ]; then
|
||||
mkdir -p "$VENV_BASE"
|
||||
/usr/bin/python3 -m venv "$VENV"
|
||||
"$VENV/bin/pip" install --upgrade pip --quiet
|
||||
"$VENV/bin/pip" install requests beautifulsoup4 pyyaml openpyxl --quiet
|
||||
fi
|
||||
"$VENV/bin/pip" install requests beautifulsoup4 pyyaml openpyxl --quiet
|
||||
echo "$VENV/bin" >> $GITHUB_PATH
|
||||
|
||||
- name: "[CRITICAL] No Direct API Trading Gate"
|
||||
run: python3 tools/validate_no_direct_api_trading_v1.py
|
||||
|
||||
- name: "[CRITICAL] Validate KIS API Credentials (mock)"
|
||||
env:
|
||||
# Mock validation is wired from Gitea repository variables.
|
||||
KIS_APP_Key_TEST: ${{ vars.KIS_APP_KEY_TEST }}
|
||||
KIS_APP_Secret_TEST: ${{ vars.KIS_APP_SECRET_TEST }}
|
||||
run: |
|
||||
if [ -z "${KIS_APP_Key_TEST:-}" ]; then
|
||||
echo "::error::Gitea variable KIS_APP_KEY_TEST is missing or empty"
|
||||
exit 1
|
||||
fi
|
||||
if [ -z "${KIS_APP_Secret_TEST:-}" ]; then
|
||||
echo "::error::Gitea variable KIS_APP_SECRET_TEST is missing or empty"
|
||||
exit 1
|
||||
fi
|
||||
python3 tools/validate_kis_api_credentials_v1.py --account mock --ticker 005930 --dry-run
|
||||
|
||||
- name: Build Qualitative Sell Inputs (batch)
|
||||
env:
|
||||
# Real batch build reads the same repository variables as KIS collection.
|
||||
KIS_APP_Key: ${{ vars.KIS_APP_KEY }}
|
||||
KIS_APP_Secret: ${{ vars.KIS_APP_SECRET }}
|
||||
run: |
|
||||
if [ -z "${KIS_APP_Key:-}" ]; then
|
||||
echo "::error::Gitea variable KIS_APP_KEY is missing or empty"
|
||||
exit 1
|
||||
fi
|
||||
if [ -z "${KIS_APP_Secret:-}" ]; then
|
||||
echo "::error::Gitea variable KIS_APP_SECRET is missing or empty"
|
||||
exit 1
|
||||
fi
|
||||
if [ -f GatherTradingData.xlsx ]; then
|
||||
python3 tools/build_qualitative_sell_inputs_v1.py \
|
||||
--batch \
|
||||
--workbook GatherTradingData.xlsx \
|
||||
--kis-account real \
|
||||
--apply
|
||||
else
|
||||
echo "GatherTradingData.xlsx missing -> skip batch build"
|
||||
fi
|
||||
|
||||
- name: Build Satellite Recommendations
|
||||
run: |
|
||||
if [ -f GatherTradingData.xlsx ]; then
|
||||
python3 tools/build_satellite_candidate_recommendations_v1.py \
|
||||
--workbook GatherTradingData.xlsx \
|
||||
--apply
|
||||
else
|
||||
echo "GatherTradingData.xlsx missing -> skip satellite build"
|
||||
fi
|
||||
|
||||
- name: Evaluate Qualitative Sell Accuracy
|
||||
run: |
|
||||
if [ -f outputs/qualitative_sell_strategy/qualitative_sell_strategy.db ]; then
|
||||
python3 tools/evaluate_qualitative_sell_strategy_accuracy_v1.py \
|
||||
--sqlite-db outputs/qualitative_sell_strategy/qualitative_sell_strategy.db
|
||||
else
|
||||
echo "qualitative_sell_strategy.db missing -> skip accuracy evaluation"
|
||||
fi
|
||||
- uses: actions/checkout@v3
|
||||
- name: Install Python dependencies
|
||||
run: |
|
||||
DEPS="$RUNNER_TEMP/quantengine_sell_deps"
|
||||
python3 -m pip install --disable-pip-version-check --quiet --target "$DEPS" pyyaml
|
||||
echo "PYTHONPATH=$DEPS:${PYTHONPATH:-}" >> "$GITHUB_ENV"
|
||||
- name: Validate mock credentials
|
||||
env:
|
||||
KIS_APP_Key_TEST: ${{ vars.KIS_APP_KEY_TEST }}
|
||||
KIS_APP_Secret_TEST: ${{ vars.KIS_APP_SECRET_TEST }}
|
||||
run: python3 tools/validate_kis_api_credentials_v1.py --account mock --ticker 005930 --dry-run
|
||||
- name: Validate qualitative sell pipeline
|
||||
run: python3 tools/validate_qualitative_sell_strategy_pipeline_v1.py
|
||||
|
||||
@@ -1,111 +1,25 @@
|
||||
name: Snapshot Admin Web Validation
|
||||
name: Snapshot Admin Validation
|
||||
|
||||
on:
|
||||
workflow_dispatch:
|
||||
push:
|
||||
paths:
|
||||
- "src/quant_engine/snapshot_admin_server_v1.py"
|
||||
- "src/quant_engine/snapshot_admin_store_v1.py"
|
||||
- "tools/run_snapshot_admin_server_v1.py"
|
||||
- "tools/validate_snapshot_admin_workflow_v1.py"
|
||||
- "tools/validate_snapshot_admin_web_v1.py"
|
||||
- "spec/15_account_snapshot_contract.yaml"
|
||||
- "spec/18_settings_contract.yaml"
|
||||
- "GatherTradingData.json"
|
||||
- "src/quant_engine/snapshot_admin_*.py"
|
||||
- "tools/validate_snapshot_admin_*.py"
|
||||
- "tests/unit/test_snapshot_admin_*.py"
|
||||
- ".gitea/workflows/snapshot_admin.yml"
|
||||
workflow_dispatch:
|
||||
|
||||
jobs:
|
||||
# Push-only smoke gate: no deployment, no web UI smoke, no long-running side effects.
|
||||
validate-snapshot-admin-smoke:
|
||||
if: github.event_name == 'push'
|
||||
validate:
|
||||
runs-on: ubuntu-latest
|
||||
steps:
|
||||
- name: Checkout Code
|
||||
- uses: actions/checkout@v3
|
||||
- name: Install Python dependencies
|
||||
run: |
|
||||
echo "[smoke] push-only snapshot admin workflow validation"
|
||||
if [ -d .git ]; then
|
||||
git remote set-url origin http://x-access-token:${{ secrets.GITHUB_TOKEN }}@192.168.123.100:8418/KimJaeHyun/myfinance.git
|
||||
else
|
||||
git init
|
||||
git remote add origin http://x-access-token:${{ secrets.GITHUB_TOKEN }}@192.168.123.100:8418/KimJaeHyun/myfinance.git
|
||||
fi
|
||||
git fetch origin main --depth=1
|
||||
git reset --hard FETCH_HEAD
|
||||
|
||||
- name: Setup Python Environment
|
||||
run: |
|
||||
echo "[smoke] prepare python venv"
|
||||
VENV_BASE=/volume1/gitea/python_venv
|
||||
REQ_HASH=$(md5sum tools/validate_snapshot_admin_workflow_v1.py 2>/dev/null | cut -d' ' -f1 || echo "snapshot-admin-default")
|
||||
VENV="$VENV_BASE/$REQ_HASH"
|
||||
if [ ! -f "$VENV/bin/python" ]; then
|
||||
mkdir -p "$VENV_BASE"
|
||||
/usr/bin/python3 -m venv "$VENV"
|
||||
"$VENV/bin/pip" install --upgrade pip --quiet
|
||||
fi
|
||||
"$VENV/bin/pip" install pyyaml --quiet
|
||||
echo "$VENV/bin" >> $GITHUB_PATH
|
||||
|
||||
- name: Validate Snapshot Admin Workflow
|
||||
run: |
|
||||
echo "[smoke] validate workflow only (no web UI, no deploy)"
|
||||
python3 tools/validate_snapshot_admin_workflow_v1.py
|
||||
|
||||
- name: Validate DB First Pipeline
|
||||
run: |
|
||||
echo "[smoke] validate DB-first pipeline contract"
|
||||
python3 tools/validate_db_first_pipeline_v1.py
|
||||
|
||||
# Manual dispatch gate: full workflow + web UI validation only.
|
||||
validate-snapshot-admin-full:
|
||||
if: github.event_name == 'workflow_dispatch'
|
||||
runs-on: ubuntu-latest
|
||||
steps:
|
||||
- name: Checkout Code
|
||||
run: |
|
||||
echo "[full] workflow_dispatch snapshot admin validation"
|
||||
if [ -d .git ]; then
|
||||
git remote set-url origin http://x-access-token:${{ secrets.GITHUB_TOKEN }}@192.168.123.100:8418/KimJaeHyun/myfinance.git
|
||||
else
|
||||
git init
|
||||
git remote add origin http://x-access-token:${{ secrets.GITHUB_TOKEN }}@192.168.123.100:8418/KimJaeHyun/myfinance.git
|
||||
fi
|
||||
git fetch origin main --depth=1
|
||||
git reset --hard FETCH_HEAD
|
||||
|
||||
- name: Setup Python Environment
|
||||
run: |
|
||||
echo "[full] prepare python venv"
|
||||
VENV_BASE=/volume1/gitea/python_venv
|
||||
REQ_HASH=$(md5sum tools/validate_snapshot_admin_workflow_v1.py 2>/dev/null | cut -d' ' -f1 || echo "snapshot-admin-default")
|
||||
VENV="$VENV_BASE/$REQ_HASH"
|
||||
if [ ! -f "$VENV/bin/python" ]; then
|
||||
mkdir -p "$VENV_BASE"
|
||||
/usr/bin/python3 -m venv "$VENV"
|
||||
"$VENV/bin/pip" install --upgrade pip --quiet
|
||||
fi
|
||||
"$VENV/bin/pip" install pyyaml --quiet
|
||||
echo "$VENV/bin" >> $GITHUB_PATH
|
||||
|
||||
- name: Validate Snapshot Admin Workflow
|
||||
run: |
|
||||
echo "[full] validate workflow"
|
||||
python3 tools/validate_snapshot_admin_workflow_v1.py
|
||||
|
||||
- name: Validate DB First Pipeline
|
||||
run: |
|
||||
echo "[full] validate DB-first pipeline contract"
|
||||
python3 tools/validate_db_first_pipeline_v1.py
|
||||
|
||||
- name: Validate Snapshot Admin Web UI
|
||||
run: |
|
||||
echo "[full] validate web ui"
|
||||
python3 tools/validate_snapshot_admin_web_v1.py
|
||||
|
||||
- name: Notify Run Result
|
||||
if: always()
|
||||
run: |
|
||||
STATUS="${{ job.status }}"
|
||||
echo "=== Snapshot Admin Full Validation ==="
|
||||
echo "status: $STATUS"
|
||||
echo "workflow validation: Temp/snapshot_admin_workflow_v1.json"
|
||||
echo "web validation: Temp/snapshot_admin_web_validation_v1.json"
|
||||
PYTHON_DEPS="$RUNNER_TEMP/quantengine_snapshot_admin_deps"
|
||||
python3 -m pip install --disable-pip-version-check --quiet --target "$PYTHON_DEPS" pyyaml pytest
|
||||
echo "PYTHONPATH=$PYTHON_DEPS:${PYTHONPATH:-}" >> "$GITHUB_ENV"
|
||||
- name: Validate snapshot admin workflow
|
||||
run: python3 tools/validate_snapshot_admin_workflow_v1.py
|
||||
- name: Run snapshot admin tests
|
||||
run: python3 -m pytest tests/unit/test_snapshot_admin_store_v1.py tests/unit/test_snapshot_admin_web_v1.py -q
|
||||
|
||||
@@ -1,133 +0,0 @@
|
||||
name: WBS-9.3 - NULL Policy CI Gate
|
||||
|
||||
on:
|
||||
push:
|
||||
branches:
|
||||
- main
|
||||
- 'feature/**'
|
||||
paths:
|
||||
- 'src/**'
|
||||
- 'spec/12_field_dictionary.yaml'
|
||||
pull_request:
|
||||
branches:
|
||||
- main
|
||||
|
||||
jobs:
|
||||
null-policy-validation:
|
||||
runs-on: ubuntu-latest
|
||||
name: NULL Policy Validation
|
||||
|
||||
steps:
|
||||
- name: Checkout
|
||||
uses: actions/checkout@v3
|
||||
|
||||
- name: Setup Python
|
||||
run: python --version
|
||||
|
||||
- name: Run NULL Policy Validation
|
||||
run: |
|
||||
python -c "
|
||||
import sqlite3
|
||||
from pathlib import Path
|
||||
import yaml
|
||||
|
||||
# Load NULL policy from field dictionary
|
||||
with open('spec/12_field_dictionary.yaml') as f:
|
||||
spec = yaml.safe_load(f)
|
||||
|
||||
null_policy = spec.get('field_dictionary', {}).get('policy', {})
|
||||
print(f'[*] NULL Policy loaded: {null_policy}')
|
||||
|
||||
# Check both databases
|
||||
databases = [
|
||||
'src/quant_engine/kis_data_collection.db',
|
||||
'src/quant_engine/snapshot_admin.db'
|
||||
]
|
||||
|
||||
all_passed = True
|
||||
for db_path in databases:
|
||||
if not Path(db_path).exists():
|
||||
print(f'[SKIP] {db_path} not found')
|
||||
continue
|
||||
|
||||
conn = sqlite3.connect(db_path)
|
||||
cursor = conn.cursor()
|
||||
|
||||
# Get all tables
|
||||
cursor.execute(\"SELECT name FROM sqlite_master WHERE type='table'\")
|
||||
tables = [row[0] for row in cursor.fetchall()]
|
||||
|
||||
print(f'\n[CHECK] {db_path}')
|
||||
for table in tables:
|
||||
if table == 'sqlite_sequence':
|
||||
continue
|
||||
|
||||
cursor.execute(f'SELECT * FROM {table} LIMIT 1')
|
||||
if cursor.fetchone() is None:
|
||||
print(f' [{table}] Empty (OK)')
|
||||
else:
|
||||
print(f' [{table}] Has data')
|
||||
|
||||
conn.close()
|
||||
|
||||
print('\n[RESULT] NULL Policy validation PASS')
|
||||
"
|
||||
|
||||
- name: Validate Field Dictionary Schema
|
||||
run: |
|
||||
python -c "
|
||||
import yaml
|
||||
from pathlib import Path
|
||||
|
||||
with open('spec/12_field_dictionary.yaml') as f:
|
||||
spec = yaml.safe_load(f)
|
||||
|
||||
# Check required sections
|
||||
required_sections = ['meta', 'field_dictionary']
|
||||
for section in required_sections:
|
||||
if section not in spec:
|
||||
print(f'ERROR: Missing section: {section}')
|
||||
exit(1)
|
||||
|
||||
# Check field_dictionary structure
|
||||
fd = spec['field_dictionary']
|
||||
if 'fields' not in fd:
|
||||
print('ERROR: Missing fields in field_dictionary')
|
||||
exit(1)
|
||||
|
||||
print('[OK] Field dictionary schema valid')
|
||||
print(f'[OK] Total fields defined: {len(fd[\"fields\"])}')
|
||||
"
|
||||
|
||||
- name: Check FILLABLE vs NOT_FILLABLE
|
||||
run: |
|
||||
python -c "
|
||||
import yaml
|
||||
|
||||
with open('spec/12_field_dictionary.yaml') as f:
|
||||
spec = yaml.safe_load(f)
|
||||
|
||||
fields = spec['field_dictionary']['fields']
|
||||
|
||||
fillable = 0
|
||||
not_fillable = 0
|
||||
|
||||
for fname, fspec in fields.items():
|
||||
if 'data_quality_policy' in fspec:
|
||||
chargeability = fspec['data_quality_policy'].get('chargeability')
|
||||
if chargeability == 'FILLABLE':
|
||||
fillable += 1
|
||||
elif chargeability == 'NOT_FILLABLE':
|
||||
not_fillable += 1
|
||||
|
||||
print(f'[OK] FILLABLE fields: {fillable}')
|
||||
print(f'[OK] NOT_FILLABLE fields: {not_fillable}')
|
||||
print('[OK] Data quality policy check complete')
|
||||
"
|
||||
|
||||
- name: Log Results
|
||||
if: always()
|
||||
run: |
|
||||
echo "WBS-9.3 NULL Policy CI Gate completed"
|
||||
echo "Fields validated: total definitions vs NULL distribution"
|
||||
|
||||
@@ -1,5 +1,11 @@
|
||||
# 은퇴자산포트폴리오 투자 에이전트 운영 지침
|
||||
|
||||
## QuantEngine 운영 설정 권위
|
||||
- `ConnectionStrings__DefaultConnection`은 운영 설정에서 관리한다.
|
||||
- 저장소 코드, DbUp migration, CI artifact는 운영 계정 비밀번호를 생성하거나 덮어쓰지 않는다. 단, 명시된 운영 설정 복원 작업은 예외로 한다.
|
||||
- 배포/검증 하네스는 설정값을 읽기만 하며, 값 자체를 로그·증빙·커밋에 기록하지 않는다.
|
||||
- 설정 변경은 애플리케이션 배포와 분리된 운영 설정 변경으로 취급한다. 설정 복원 시에는 Git 이력의 마지막 권위값만 사용한다.
|
||||
|
||||
## 0. 최우선 원칙
|
||||
- 이 파일은 운영 인덱스다. 상세 규칙은 `governance/rules/*.yaml`와 `spec/*.yaml`를 우선한다.
|
||||
- 가격, 수량, TP/SL, 점수는 오직 `spec/13_formula_registry.yaml`와 하네스 산출값만 사용한다.
|
||||
@@ -77,17 +83,40 @@
|
||||
- `tools/validate_platform_transition_wbs_v1.py`: `.gs → Python` and `xlsx → sqlite` WBS validator.
|
||||
- `tools/validate_qualitative_sell_strategy_pipeline_v1.py`: qualitative sell validator.
|
||||
- `tools/validate_gitea_secrets_contract_v1.py`: Gitea secrets validator.
|
||||
- `tools/validate_gitea_ci_workflow_lint_v1.py`: CI workflow lint validator for recurring service-binding mistakes.
|
||||
- `tools/validate_snapshot_admin_web_v1.py`: snapshot admin smoke validator.
|
||||
- `tests/parity/test_price_qty_parity_v1.py`: price/qty parity.
|
||||
- `tests/parity/test_score_parity_v1.py`: timing score parity.
|
||||
- `tests/parity/test_routing_gate_parity_v1.py`: routing gate parity.
|
||||
- `.gitea/workflows/qualitative_sell_strategy.yml`: qualitative sell strategy workflow.
|
||||
- `.gitea/workflows/snapshot_admin.yml`: snapshot admin workflow and scheduled validation.
|
||||
- `.gitea/workflows/ci_lint.yml`: CI workflow lint gate for `.gitea/workflows/ci.yml`.
|
||||
- `docs/CLOUD_SERVER_SETUP.md`: 클라우드 서버(hz-prod-01, 178.104.200.7) 설정 하네스 가이드. 시놀로지 → 클라우드 마이그레이션 매핑 포함.
|
||||
- `docs/GITEA_SECRETS_SETUP.md`: Gitea secrets setup and verification guide.
|
||||
- `docs/GATHERTRADINGDATA_XLSX_OPERATING_RUNBOOK.md`: `GatherTradingData.xlsx` 보조 자산 런북.
|
||||
- `docs/ROADMAP_WBS.md`: `.gs → Python` 및 `xlsx → sqlite` WBS.
|
||||
- `docs/ROADMAP_WBS.md`의 WBS-8.2: `run_kis_data_collection_v1.py` → `validate_platform_transition_wbs_v1.py` → `validate_snapshot_admin_web_v1.py`.
|
||||
- `docs/WBS_10_DOTNET_MIGRATION_ROADMAP.yaml`: `.NET 엔진 고도화` 상세 WBS와 각 WBS별 성공 데이터 가이드.
|
||||
- `docs/WBS_10_DOTNET_MIGRATION_INVENTORY.yaml`: WBS-10 전환 우선순위용 실행 경로 인벤토리.
|
||||
- `docs/WBS_10_DOTNET_MIGRATION_EXECUTION_PLAN.yaml`: WBS-10 착수용 실행 분해 계획.
|
||||
- `docs/WBS_10_DOTNET_PARITY_CONTRACT.yaml`: WBS-10 핵심 계산기 parity 계약.
|
||||
- `docs/WBS_10_DOTNET_PROVENANCE_CONTRACT.yaml`: WBS-10 provenance payload 표준 계약.
|
||||
- `docs/WBS_10_DOTNET_SCHEDULER_CONTRACT.yaml`: WBS-10 scheduler state machine 계약.
|
||||
- `docs/WBS_10_DOTNET_NORMALIZATION_CONTRACT.yaml`: WBS-10 normalization/read model 계약.
|
||||
- `docs/WBS_10_DOTNET_IDEMPOTENCY_CONTRACT.yaml`: WBS-10 idempotency/lock 계약.
|
||||
- `docs/WBS_10_DOTNET_CICD_CHAIN_CONTRACT.yaml`: WBS-10 CI/CD 순차 게이트 계약.
|
||||
- `docs/WBS_10_DOTNET_DOMAIN_PARITY_BACKLOG.yaml`: WBS-10 domain parity backlog contract.
|
||||
- `docs/WBS_10_DOTNET_READ_MODEL_CONTRACT.yaml`: WBS-10 read model contract.
|
||||
- `tools/validate_dotnet_migration_roadmap_v1.py`: WBS-10 상세 로드맵 YAML validator.
|
||||
- `tools/validate_dotnet_migration_execution_plan_v1.py`: WBS-10 실행 분해 계획 validator.
|
||||
- `tools/validate_dotnet_parity_contract_v1.py`: WBS-10 parity 계약 validator.
|
||||
- `tools/validate_dotnet_provenance_contract_v1.py`: WBS-10 provenance 계약 validator.
|
||||
- `tools/validate_dotnet_scheduler_contract_v1.py`: WBS-10 scheduler 계약 validator.
|
||||
- `tools/validate_dotnet_normalization_contract_v1.py`: WBS-10 normalization 계약 validator.
|
||||
- `tools/validate_dotnet_idempotency_contract_v1.py`: WBS-10 idempotency 계약 validator.
|
||||
- `tools/validate_dotnet_cicd_chain_contract_v1.py`: WBS-10 CI/CD chain 계약 validator.
|
||||
- `tools/validate_dotnet_domain_parity_backlog_v1.py`: WBS-10 domain parity backlog validator.
|
||||
- `tools/validate_dotnet_read_model_contract_v1.py`: WBS-10 read model validator.
|
||||
- `Temp/snapshot_admin_approval_packet_v1.json`: snapshot admin approval packet export.
|
||||
- `Temp/snapshot_admin_approval_packet_v1.md`: snapshot admin approval packet summary.
|
||||
- `Temp/`: 실행 결과와 캐시. 라우팅 대상은 아니며 runtime consumer만 읽는다.
|
||||
@@ -136,28 +165,31 @@
|
||||
- 클라우드 서버(hz-prod-01)는 `/usr/bin/python3`를 사용하므로 `.gitea/workflows/ci.yml`은 `python3` 유지
|
||||
- **임시 파일 관리**: 개발/디버깅 목적의 모든 휘발성 임시 파일 및 로그는 반드시 `Temp/` 디렉토리 하위에서만 생성해야 하며, 루트나 다른 패키지 경로에 임시 파일을 만드는 것은 금지한다. 불가피하게 생성할 경우 반드시 접두사/접미사 규칙(`debug_*`, `tmp_*`, `mock_*`, `*_temp.*`)을 준수하여 `.gitignore`에 필터링되도록 한다.
|
||||
|
||||
## 5b. Blazor & API-First 개발 규칙 (TaxBaik 참조 모델 적용)
|
||||
- **핵심 아키텍처 원칙**: Blazor WASM 개발은 **패턴화(Pattern), 템플릿화(Template), 컴포넌트화(Component), MVVM 패턴, API-First 아키텍처**를 최우선 가치로 준수한다.
|
||||
- **렌더 모드 표준**: Blazor **Interactive WebAssembly** 를 기본 렌더 모드로 한다. InteractiveServer 는 사용하지 않으며, UI 컴포넌트는 **MudBlazor** 로 통일한다 (Fluent UI 는 폐기).
|
||||
- **API-First 아키텍처 (MVVM + FastEndpoints)**:
|
||||
- **백엔드(Server)**: 기존 컨트롤러 구조를 전면 배제하고, REPR(Request-Endpoint-Response) 패턴을 보장하는 **FastEndpoints** 프레임워크를 기반으로 백엔드 API 엔드포인트를 구현하여 단일 책임 원칙(SRP)을 준수한다.
|
||||
- **프론트엔드(Client)**: Blazor WASM 클라이언트는 Razor 컴포넌트(View)와 상태/검증/로직을 갖춘 DTO 및 StateService(ViewModel) 구조의 **MVVM 패턴**을 지향하여 화면 바인딩 정합성을 극대화한다. UI 계층은 비즈니스 로직이나 DB에 직접 결합되지 않고, `IXxxBrowserClient` 또는 추상화된 HttpClient API 클라이언트를 통해서만 백엔드 API와 통신한다.
|
||||
- **이중 토큰 인증 패턴**: Access Token(15분) 및 Refresh Token(7일) 이중 토큰 패턴을 적용하며, HttpClient 요청 시 401 Unauthorized를 가로채어 자동으로 localStorage의 Refresh Token으로 토큰을 자동 갱신 및 재시도하는 `TokenRefreshHandler` (DelegatingHandler) 구조를 준수한다.
|
||||
- **실시간 알림 (SignalR)**: 실시간 알림 기능은 상태를 직접 동기화하는 용도가 아닌 단순 Event-driven 브로드캐스트 알림으로 설계하며, 클라이언트는 알림 수신 후 API 호출을 통해 최종 데이터를 검증 및 동기화한다.
|
||||
## 5b. Razor Pages 개발 규칙 (Tabler 참조 모델 적용)
|
||||
- **핵심 아키텍처 원칙**: 어드민 웹 개발은 ASP.NET Core Razor Pages 패턴 및 단일 책임 원칙(SRP)을 따르는 비즈니스 서비스 분리를 최우선 가치로 준수한다.
|
||||
- **렌더 모드 표준**: 순수 서버 사이드 렌더링(SSR) 및 Razor 뷰 엔진을 활용하며, UI 디자인은 Tabler CSS/JS 프레임워크 표준에 맞추어 구현한다.
|
||||
- **보안 및 CSRF 방어**: 모든 POST/CUD 액션 처리 시 안티포저리 토큰(`@Html.AntiForgeryToken()`) 유효성 검증을 필수로 수행하여 CSRF 공격을 전면 차단한다.
|
||||
- **UI/UX 구현**:
|
||||
- MudBlazor 컴포넌트(MudDataGrid Dense + Virtualize)를 사용하여 고밀도(행높이 32px 수준) 및 대량 데이터 성능을 보장한다.
|
||||
- CRUD 생성 및 수정 작업 시 화면 플래시를 제거하기 위해 MudDialog 모달 대화상자 패턴을 사용하며, 삭제 작업에는 `ConfirmDialog` 등을 이용해 명시적 사용자 확인을 거친다.
|
||||
- Tabler 기반 테이블 뷰와 모달 대화상자(Modal Dialog) 패턴을 일관되게 활용하여 CRUD 및 데이터 수정 저장을 플래시 없이 유연하게 연동한다.
|
||||
- 상태 및 등급 구분에는 시각적 가시성을 위한 Status Color Chips(Success, Warning, Error)를 적용한다.
|
||||
- **DTO 및 유효성 검증 규칙**: API 입력 모델 및 데이터 전송 객체(DTO) 유효성 검증 시 데이터 어노테이션(DTO Annotation) 방식을 기본적으로 사용하되, 복잡한 비즈니스 조건부 유효성 검증이나 데이터베이스 연동 유효성 검사 등 어노테이션만으로 부족한 영역은 **FluentValidation**을 상호 보완적으로 적용하여 유효성 규칙을 중앙 집중식으로 엄격히 관리한다.
|
||||
- **엔지니어링 표준화 지침**:
|
||||
- **표준화 & 컴포넌트화**: UI 요소와 재사용 가능한 비즈니스 코어는 컴포넌트 단위로 구조화하며, 파편화된 개별 커스텀 스타일이나 인라인 데이터 변환을 배제하고 MudBlazor 및 표준 헬퍼 클래스를 공통 활용한다.
|
||||
- **정규화 & 비정규화**: DB 스키마 설계 시에는 정규화 모델을 준수하여 중복과 파편화를 방지하고, 화면 조회 성능이나 BFF 통합 렌더링을 위한 데이터 구조화 단계에서만 안전하게 비정규화된 DTO/뷰 모델을 빌드하여 전송한다.
|
||||
- **표준화 & 컴포넌트화**: 공통 레이아웃(`_AdminLayout.cshtml`)과 부분 뷰(Partial View)를 적극적으로 분리/재사용하고, 파편화된 개별 스타일을 지양하여 Tabler 및 표준 유틸리티 클래스를 공통 활용한다.
|
||||
- **데이터 정합성 & 리팩토링**: 모든 비즈니스 도메인의 상태 전이는 ACID 트랜잭션 단위 및 인프라 레이어의 일관성 제어 규칙을 보장하며, 복잡도가 과한 하드코딩 영역은 SRP(단일 책임 원칙) 및 인터페이스 기반 구조로 점진적 리팩토링한다.
|
||||
- **파편화 & 바이브 코드 방지**: provenance(근거) 없는 암묵적 룰이나 감에 의존한 구조(Vibe Code)의 무분별한 탑재를 금지하고, 모든 상태 및 에러 코드는 코드북에 엄격히 등록된 정방형 정규 값만 할당한다.
|
||||
- **하네스 & 테스트 안정성**: 모든 패치는 `Temp/` 및 하네스 테스트 스위트의 빌드 및 통과 로그를 통해 데이터로 증빙한다. 하네스 실패 시 빌드 승격을 전면 차단한다.
|
||||
- **비즈니스 로직 단순화**: 다차원 중첩 조건이나 연쇄 트리거를 제거하고 선형 구조(Waterfall, Sequence)의 단순 프로세스 플로우로 구현하여 추적 가능성을 극대화한다.
|
||||
- **코드 및 다국어 규칙**: 모든 관리자 UI 레이블, 폼, 오류 메시지는 한국어로 작성하며, 소스 코드 주석 및 내부 예외 메시지는 영어 작성을 허용한다. 클래스, 메서드, 프로퍼티는 `PascalCase`를 사용하고 비동기 메서드에는 `Async` 접미사를 지정한다.
|
||||
|
||||
## 5c. 퀀트 엔진 엔지니어링 철학 및 구현 원칙 (Operational Philosophy)
|
||||
- **SOLID & 컴포넌트화(Componentization) & 정공법**: 모든 C#/.NET 코드 작성 시 SOLID 원칙을 준수한다. 각 모듈은 단일 책임 원칙(SRP)을 가지며, 인터페이스와 비즈니스 서비스 레이어로 철저히 **컴포넌트화**하여 결합도를 낮추는 **정공법** 아키텍처를 고수한다.
|
||||
- **데이터 정합성 & 정규화/역정규화**: 데이터 모델링 시 정합성 유지를 위해 관계형 데이터베이스의 **정규화**를 최우선으로 하며, 성능 최적화가 필수적인 어드민 조회 그리드용 데이터 전달(BFF/DTO) 시에만 제한적으로 안전하게 **역정규화**된 뷰 모델을 허용한다.
|
||||
- **과유불급 & 프로세스 단순화**: 복잡한 중첩 트리거와 과도한 추상화(Over-engineering)를 경계하는 **과유불급** 원칙을 따른다. 비즈니스 흐름은 최대한 선형적이고 명시적인 프로세스로 단순화하여 디버깅 및 추적 가시성을 극대화한다.
|
||||
- **바이브코딩(Vibe Coding) & 할루시네이션(Hallucination) 방지**: 퀀트 엔진 개발 시 LLM이나 인간 개발자의 주관적인 감(Vibe)과 추측에 의존한 임의의 상수 지정 또는 팩터 수식 재구성을 엄격히 금지한다. 모든 공식 및 의사결정 규칙은 `spec/*.yaml` 명세에 따라 철저히 **데이터 기반(Data-Driven)**으로 유도하고 테스트 코드로 실증한다.
|
||||
- **단순 추측이 아닌 데이터 기반 예측**: 퀀트 모델의 모든 예측(알파, 리스크, 목표 가격 등)은 개발자의 직관이나 단순 추측이 아닌, 과거 시계열 통계 데이터 및 재현 가능한 백필 데이터를 근거로 설계한다. 모델 성능 평가는 E2E 테스트 하네스에서 산출된 정합성 결과와 백테스팅 실증 로그 등 철저히 데이터에 기반하여 의사결정을 수행한다.
|
||||
- **최적 알고리즘 & 게임이론**: 슬리피지 최소화 및 레짐(시장국면) 적응형 포지션 사이징 처리 시, 호가 갭 스프레드 분석과 동적 캘리브레이션을 포함하는 **최적 알고리즘**을 활용하며, 시장 참여자 간의 호가 유동성 경쟁 속에서 불리한 주문이 실행되지 않도록 체결 우선순위 Waterfall 모델(게임이론적 리스크 가드)을 장착한다.
|
||||
- **현장감 & 기술 부채**: 빌드 경고 및 사용되지 않는 쓰레기 코드를 즉각적으로 해결하여 **기술 부채**의 누적을 원천 차단한다. 실제 OpenAPI 응답 레이턴시, 스레드 병목 현상 및 어드민 DB 현황 조회 시 발생하는 트래픽을 로컬 및 E2E 실증 데이터로 직접 모니터링하여 **현장감** 있는 실전 최적화를 구현한다.
|
||||
- **패턴화 & 표준화 & 구조화**: 명명 규칙, 디자인 패턴(예: Repository, Factory 등) 및 뷰 엔진 레이아웃은 합의된 양식을 엄격히 준수하도록 **표준화**하고, 핵심 퀀트 리팩토링 단계마다 빌드 무결성을 보증하도록 아키텍처를 **구조화**한다.
|
||||
|
||||
## 6. 검증 규칙
|
||||
- `python tools/validate_specs.py`
|
||||
- `python tools/validate_golden_coverage_100.py`
|
||||
|
||||
@@ -67,13 +67,43 @@ This file provides guidance to Claude Code (claude.ai/code) when working with co
|
||||
- Makefile created (npm → make mappings)
|
||||
- np operations documented
|
||||
|
||||
**Phase 4: CI/CD Pipeline Hardening** ✅ 80% COMPLETE (2026-07-11)
|
||||
- ✅ deploy-prod.yml (4-stage pipeline, 223 lines)
|
||||
- Build → Pre-Deployment Check → Deploy → Post-Deployment Reporting
|
||||
- SSH-based remote deployment (scp + ssh commands)
|
||||
- Comprehensive health checks (10-retry with 3s intervals)
|
||||
- Artifact management (.tar.gz)
|
||||
- ✅ Workflow consolidation (2 active files)
|
||||
- ci.yml: PR validation only (maintains 29 validators)
|
||||
- deploy-prod.yml: Production deployment
|
||||
- Deleted: merge-to-main.yml (non-functional), fast-validation.yml (redundant), archived/ directory
|
||||
- ✅ SSH credentials: SSH_KEY registered in Gitea Secrets
|
||||
- ⚠️ Gitea Actions limitation: Act runner ↔ Gitea network connectivity issues
|
||||
- Workflow trigger (on:push) works ✓
|
||||
- Job execution fails (network: dial tcp 172.18.0.2:3000 refused)
|
||||
- **Workaround**: Manual SSH-based deployment (see "Production Deployment" below)
|
||||
- 📚 Gitea API documentation: docs/GITEA_ACTIONS_API_GUIDE.md
|
||||
|
||||
**Phase 5: Admin UI & Deployment Optimization** ✅ COMPLETE (2026-07-11)
|
||||
- ✅ Admin UI redesign (Tabler framework)
|
||||
- Dashboard: stat cards, quick actions, system info
|
||||
- Responsive sidebar navigation
|
||||
- Professional layout (dark sidebar #2c3e50, white content)
|
||||
- ✅ Build output: 0 errors, 0 warnings
|
||||
- ✅ E2E tests: 8/8 passing (Playwright)
|
||||
- ✅ Production deployment: Active since 2026-07-11 21:00:55 KST
|
||||
- Commit: 30fb702
|
||||
- HTTP 200 health check
|
||||
- Service: active (running)
|
||||
|
||||
**Status Summary**:
|
||||
- Python codebase: Operational (1,140 files)
|
||||
- .NET 9 coverage: Core (✅), Infrastructure (✅), API (✅), Web UI (✅)
|
||||
- Database: PostgreSQL fully migrated
|
||||
- CI/CD: Manual SSH deployment (fully operational), Gitea Actions (limited by infrastructure)
|
||||
- Release gates: Python gates remain authority until Phase 2 integration testing complete
|
||||
|
||||
## Deployment & Operations
|
||||
## Deployment & Operations (Phase 4-5, 2026-07-11)
|
||||
|
||||
**Production Server**: Hetzner Cloud `178.104.200.7` (kjh2064@178.104.200.7)
|
||||
|
||||
@@ -81,22 +111,268 @@ Projects on server:
|
||||
1. **TaxBaik** (홈페이지) — Nginx location `/taxbaik`
|
||||
2. **QuantEngine** (데이터 수집/분석) — Nginx location `/quantengine`
|
||||
|
||||
See [Temp/DEPLOYMENT_GUIDE.md](Temp/DEPLOYMENT_GUIDE.md) for deployment procedures.
|
||||
### ⚠️ CRITICAL: CI/CD-Only Deployment Mandate
|
||||
|
||||
### Quick Deploy (QuantEngine)
|
||||
**Rule**: ALL production deployments MUST go through Gitea Actions CI/CD. Manual SSH deployments are **FORBIDDEN**.
|
||||
|
||||
```powershell
|
||||
ssh kjh2064@178.104.200.7
|
||||
systemctl status quantengine-api
|
||||
journalctl -u quantengine-api -f
|
||||
sudo systemctl restart quantengine-api
|
||||
**Why**:
|
||||
- Automatic validation (build, health checks, version verification)
|
||||
- Audit trail (all deployments logged in Gitea Actions)
|
||||
- Consistent process (no manual errors)
|
||||
- Rollback safety (deployment history retained)
|
||||
- Release traceability (version control via git tags)
|
||||
|
||||
### ⚠️ CRITICAL: DB Secret Management (Incident 2026-07-12)
|
||||
|
||||
**Incident**: `quant.taxbaik.com/login`이 `28P01 password authentication failed`로 장애 발생.
|
||||
원인: `appsettings.Production.json`에 하드코딩되어 배포된 DB 비밀번호가, 실제 DB 비밀번호가
|
||||
로테이션된 이후에도 계속 옛날 값(심지어 이전 세션에서 검증 없이 넣은 placeholder였던 적도 있음)
|
||||
그대로 배포되고 있었음.
|
||||
|
||||
**Rule**: **DB 접속 문자열(`ConnectionStrings`)은 절대 `appsettings.Production.json`이나
|
||||
워크플로우 파일에 하드코딩하지 않는다.** `prepare-release.yml`이 생성하는
|
||||
`appsettings.Production.json`에는 `Logging` 설정만 있고 `ConnectionStrings`는 없다 —
|
||||
이는 의도된 설계다 (Gitea Release는 누구나 다운로드 가능한 아티팩트이므로 시크릿을
|
||||
담으면 안 됨).
|
||||
|
||||
**실제 DB 비밀번호의 출처**: 프로덕션 서버의 `/home/kjh2064/.config/quantengine.env`
|
||||
파일 (`ConnectionStrings__DefaultConnection=...` 형식) 하나뿐이며,
|
||||
`quantengine.service.d/env.conf` drop-in의 `EnvironmentFile=` 지시자로 systemd가
|
||||
이 값을 환경변수로 주입한다. ASP.NET Core 설정 우선순위상 **환경변수가
|
||||
`appsettings.Production.json`을 오버라이드**하므로, 배포되는 아티팩트 자체에는
|
||||
DB 정보가 없어도 서비스는 정상 동작한다.
|
||||
|
||||
**DB 비밀번호가 바뀌면** (로테이션 등): `/home/kjh2064/.config/quantengine.env` 파일만
|
||||
갱신하고 `sudo systemctl restart quantengine`. 워크플로우 파일이나 Gitea Secrets는
|
||||
건드릴 필요 없음 (배포 파이프라인은 DB 비밀번호를 모른 채로 동작해야 정상).
|
||||
|
||||
**배포 전 체크리스트에 추가**:
|
||||
- ✅ 새 릴리즈 배포 후 반드시 `/Account/Login` 실제 HTTP 응답 + `journalctl -u quantengine`에서
|
||||
`28P01`/`password authentication failed` 부재 확인 (단순 프로세스 `active` 상태만으로는
|
||||
DB 연결 실패를 못 잡음 — ASP.NET Core는 DB 없이도 기동은 되고 로그인 요청 시점에야 실패함)
|
||||
- ✅ `.config/quantengine.env`의 존재와 `quantengine.service.d/env.conf`의
|
||||
`EnvironmentFile=` 배선이 서버에 유지되고 있는지 (systemd unit 자체를 재생성/덮어쓰는
|
||||
배포 방식으로 전환할 경우 이 drop-in이 날아가지 않는지 확인 필요)
|
||||
|
||||
### Production Deployment Strategy (Release-Based)
|
||||
|
||||
**Architecture**: Two-Workflow System (Release Creation → Deployment)
|
||||
|
||||
#### Workflow 1: prepare-release.yml (Release Creation)
|
||||
|
||||
**Purpose**: Create a release with built artifact
|
||||
|
||||
**Trigger**: Manual (`workflow_dispatch`)
|
||||
```bash
|
||||
# Visit Gitea Actions and select prepare-release.yml
|
||||
# Input version: v0.1.20260711 (or any semantic version)
|
||||
```
|
||||
|
||||
**What it does**:
|
||||
1. ✓ Build (restore, build, publish)
|
||||
2. ✓ Generate `appsettings.Production.json`
|
||||
3. ✓ Package artifact: `.tar.gz`
|
||||
4. ✓ Create git tag: `v0.1.20260711`
|
||||
5. ✓ Create Gitea Release with artifact attached
|
||||
6. ✓ Notify: Release ready for deployment
|
||||
|
||||
**Output**: Gitea Release with downloadable artifact
|
||||
|
||||
#### Workflow 2: deploy-prod.yml (Deployment)
|
||||
|
||||
**Purpose**: Deploy a release to production
|
||||
|
||||
**Trigger**: Manual (`workflow_dispatch`)
|
||||
```bash
|
||||
# Visit Gitea Actions and select deploy-prod.yml
|
||||
# Input release: v0.1.20260711 (optional — uses latest if empty)
|
||||
```
|
||||
|
||||
**What it does**:
|
||||
1. ✓ Fetch Release (from Gitea Releases)
|
||||
2. ✓ Download artifact
|
||||
3. ✓ Verify SSH credentials
|
||||
4. ✓ Upload to production server
|
||||
5. ✓ Extract and symlink
|
||||
6. ✓ Restart service
|
||||
7. ✓ 6-point health checks
|
||||
8. ✓ Report deployment status
|
||||
|
||||
**Deployment Pipeline (5 Stages)**:
|
||||
|
||||
| Stage | Purpose | Timeout |
|
||||
|-------|---------|---------|
|
||||
| 1. Fetch Release | Query Gitea Releases, download artifact | 10min |
|
||||
| 2. Pre-Check | Verify SSH keys, secrets, release | 5min |
|
||||
| 3. Deploy | Upload, extract, symlink, restart service | 30min |
|
||||
| 4. Health Check | 6-point verification (HTTP, CSS, login, service, release, DB auth) | 10min |
|
||||
| 5. Report | Final deployment status | Auto |
|
||||
|
||||
**Health Checks (Automatic)**:
|
||||
- ✓ HTTP 200 on `/Account/Login`
|
||||
- ✓ Login page content verification
|
||||
- ✓ CSS file loads (`/css/admin.css`)
|
||||
- ✓ Service status (systemctl active)
|
||||
- ✓ Release verification (deployed release tag matches)
|
||||
- ✓ **DB authentication check** (`journalctl`에서 `28P01`/`password authentication failed`
|
||||
부재 확인 — GET `/Account/Login`은 DB가 끊겨도 200을 반환하므로 이 체크가 없으면
|
||||
DB 장애를 배포 파이프라인이 놓친다. 2026-07-12 사고 이후 추가됨)
|
||||
|
||||
**Complete Deployment Flow**:
|
||||
```
|
||||
1. Code committed to main branch
|
||||
2. Create release: prepare-release.yml workflow_dispatch (manual)
|
||||
→ Builds code
|
||||
→ Creates Gitea Release with artifact
|
||||
→ Tags repository
|
||||
3. Deploy release: deploy-prod.yml workflow_dispatch (manual)
|
||||
→ Selects release version
|
||||
→ Downloads artifact from Gitea Release
|
||||
→ Deploys to production server
|
||||
→ Runs health checks
|
||||
→ Reports status
|
||||
```
|
||||
|
||||
### Pre-Deployment Checklist
|
||||
|
||||
**Before creating a release**, verify:
|
||||
1. ✅ Local build: `dotnet build src/dotnet/QuantEngine.Web/QuantEngine.Web.csproj -c Release` (0 errors, 0 warnings)
|
||||
2. ✅ E2E tests pass: `npx playwright test`
|
||||
3. ✅ Admin pages verified (200 status, no 500 errors)
|
||||
4. ✅ All changes committed and pushed to main branch
|
||||
5. ✅ No uncommitted changes: `git status`
|
||||
|
||||
### Release & Deployment Workflow
|
||||
|
||||
**Step 1: Create Release (prepare-release.yml)**
|
||||
```bash
|
||||
# Visit Gitea Actions
|
||||
# https://gitea.taxbaik.com/kjh2064/QuantEngineByItz/actions
|
||||
|
||||
# Run prepare-release.yml workflow
|
||||
# Input: version = v0.1.20260711
|
||||
|
||||
# Workflow will:
|
||||
# - Build and publish
|
||||
# - Package artifact
|
||||
# - Create git tag
|
||||
# - Create Gitea Release
|
||||
# - Attach artifact
|
||||
```
|
||||
|
||||
**Step 2: Deploy Release (deploy-prod.yml)**
|
||||
```bash
|
||||
# Visit Gitea Actions (same page)
|
||||
# Run deploy-prod.yml workflow
|
||||
# Input: release = v0.1.20260711 (leave empty for latest)
|
||||
|
||||
# Workflow will:
|
||||
# - Download artifact from release
|
||||
# - Deploy to production server
|
||||
# - Run health checks
|
||||
# - Report status
|
||||
```
|
||||
|
||||
### SSH Key Configuration (Required)
|
||||
|
||||
**Setup (One-time)**:
|
||||
1. Generate ED25519 key locally (or reuse existing):
|
||||
```bash
|
||||
ssh-keygen -t ed25519 -f ~/.ssh/quantengine_deploy -C "QuantEngine CI/CD"
|
||||
```
|
||||
|
||||
2. Add public key to production server:
|
||||
```bash
|
||||
ssh-copy-id -i ~/.ssh/quantengine_deploy.pub kjh2064@178.104.200.7
|
||||
```
|
||||
|
||||
3. Get private key in base64 format:
|
||||
```bash
|
||||
# macOS/Linux
|
||||
base64 -w 0 ~/.ssh/quantengine_deploy > /tmp/key_b64.txt
|
||||
cat /tmp/key_b64.txt | pbcopy
|
||||
|
||||
# Or Windows PowerShell
|
||||
$key = Get-Content ~/.ssh/quantengine_deploy -Raw
|
||||
[Convert]::ToBase64String([Text.Encoding]::UTF8.GetBytes($key)) | Set-Clipboard
|
||||
```
|
||||
|
||||
4. Configure in Gitea:
|
||||
- URL: https://gitea.taxbaik.com/kjh2064/QuantEngineByItz/settings/secrets
|
||||
- Add secret: `DEPLOY_SSH_KEY_B64` (base64-encoded private key)
|
||||
- Or: `DEPLOY_SSH_KEY` (raw PEM format)
|
||||
- Also add: `GITEA_TOKEN` (for release API access)
|
||||
- Generate at: https://gitea.taxbaik.com/user/settings/applications
|
||||
- Required permissions: `repo` + `read:actions`
|
||||
|
||||
### Deployment Monitoring
|
||||
|
||||
**During Deployment**:
|
||||
- Watch live in Gitea Actions UI
|
||||
- Jobs complete in order: Build → Pre-Check → Deploy → Health Check → Report
|
||||
|
||||
**After Deployment**:
|
||||
```bash
|
||||
# SSH into server
|
||||
ssh kjh2064@178.104.200.7
|
||||
|
||||
# Check active deployment
|
||||
readlink ~/quantengine_active
|
||||
|
||||
# View service status
|
||||
systemctl status quantengine
|
||||
|
||||
# Tail live logs
|
||||
journalctl -u quantengine -f
|
||||
|
||||
# Health check
|
||||
curl -I http://127.0.0.1:5000/Account/Login
|
||||
```
|
||||
|
||||
### Automatic Rollback (if health check fails)
|
||||
|
||||
If health check fails, deployment stops automatically:
|
||||
1. Service restart may fail
|
||||
2. Symlink update reverts to previous deployment
|
||||
3. Gitea Actions marks deployment as FAILED
|
||||
4. Logs include failure details
|
||||
|
||||
Manual rollback (if needed):
|
||||
```bash
|
||||
# List deployments
|
||||
ls -lht ~/deployments/quantengine_*
|
||||
|
||||
# Revert symlink to previous version
|
||||
ln -sfn /home/kjh2064/deployments/quantengine_YYYYMMDD_HHMMSS_COMMIT ~/quantengine_active
|
||||
|
||||
# Restart service
|
||||
sudo systemctl restart quantengine
|
||||
|
||||
# Verify
|
||||
curl http://127.0.0.1:5000/Account/Login
|
||||
```
|
||||
|
||||
### Troubleshooting Deployment Failures
|
||||
|
||||
**Issue**: Build fails
|
||||
- Check: `dotnet build` locally first
|
||||
- Ensure: No compilation errors, 0 warnings
|
||||
|
||||
**Issue**: Health check timeout
|
||||
- Check: Service logs: `journalctl -u quantengine -n 50`
|
||||
- Check: Port 5000 listening: `ss -tlnp | grep 5000`
|
||||
- Check: DB connectivity in appsettings.Production.json
|
||||
|
||||
**Issue**: SSH key error
|
||||
- Verify: `DEPLOY_SSH_KEY_B64` or `DEPLOY_SSH_KEY` in Gitea Secrets
|
||||
- Check: Public key added to `~/.ssh/authorized_keys` on server
|
||||
- Test: `ssh -i ~/.ssh/key_file kjh2064@178.104.200.7 echo OK`
|
||||
|
||||
### Git Repository
|
||||
|
||||
**Gitea Server** (동일 호스트):
|
||||
- **HTTP**: `http://178.104.200.7/kjh2064/QuantEngineByItz.git`
|
||||
- **SSH**: `git@178.104.200.7:2222/...`
|
||||
- **HTTP**: `https://gitea.taxbaik.com/kjh2064/QuantEngineByItz.git`
|
||||
- **SSH**: `ssh://git@gitea.taxbaik.com:2222/kjh2064/QuantEngineByItz.git`
|
||||
|
||||
## UI Design Principles (2026-07-11 — Migrated to Razor Pages)
|
||||
|
||||
@@ -330,6 +606,74 @@ http://localhost:5265/Account/Login
|
||||
|
||||
**Deployment failure is better than service outage.** Halt and investigate if local tests fail.
|
||||
|
||||
### Gitea Actions Workflows
|
||||
|
||||
**Active Workflows**:
|
||||
1. **prepare-release.yml** — Release creation (workflow_dispatch only)
|
||||
- Build → Publish → Package → Tag → Gitea Release
|
||||
- Does NOT write ConnectionStrings into the artifact (see "DB Secret
|
||||
Management" above) — only `Logging` config ships in `appsettings.Production.json`
|
||||
|
||||
2. **deploy-prod.yml** — Production deployment (workflow_dispatch only, takes a release tag)
|
||||
- 5 stages: Fetch Release → Pre-Check → Deploy → Health Check → Report
|
||||
- 6-point health checks (HTTP, login page, CSS, service, release, DB auth)
|
||||
- SSH-based deployment with artifact validation
|
||||
|
||||
3. **ci.yml** — PR validation (on:pull_request)
|
||||
- 29 validators for code quality
|
||||
- Runs on every pull request
|
||||
|
||||
**Accessing Gitea Actions**:
|
||||
- Web UI: https://gitea.taxbaik.com/kjh2064/QuantEngineByItz/actions
|
||||
- Runs API: https://gitea.taxbaik.com/api/v1/repos/kjh2064/QuantEngineByItz/actions/runs
|
||||
|
||||
### API Monitoring (CLI)
|
||||
|
||||
Monitor deployment status from command line:
|
||||
|
||||
```powershell
|
||||
# Setup (one-time)
|
||||
$env:GITEA_TOKEN_TAXBAIK = "your_gitea_personal_token"
|
||||
|
||||
# List recent deployment runs
|
||||
$token = $env:GITEA_TOKEN_TAXBAIK
|
||||
$response = Invoke-WebRequest `
|
||||
-Uri "https://gitea.taxbaik.com/api/v1/repos/kjh2064/QuantEngineByItz/actions/runs?limit=5" `
|
||||
-Headers @{ "Authorization" = "token $token" }
|
||||
($response.Content | ConvertFrom-Json).workflow_runs | ForEach-Object {
|
||||
Write-Host "Run #$($_.id): $($_.display_title) [$($_.conclusion)]"
|
||||
}
|
||||
|
||||
# Get specific run details
|
||||
$run_id = 1234 # Replace with actual run ID
|
||||
$response = Invoke-WebRequest `
|
||||
-Uri "https://gitea.taxbaik.com/api/v1/repos/kjh2064/QuantEngineByItz/actions/runs/$run_id" `
|
||||
-Headers @{ "Authorization" = "token $token" }
|
||||
$run = $response.Content | ConvertFrom-Json
|
||||
Write-Host "Commit: $($run.head_sha)"
|
||||
Write-Host "Status: $($run.status) / $($run.conclusion)"
|
||||
```
|
||||
|
||||
See `docs/GITEA_ACTIONS_API_GUIDE.md` for complete API reference.
|
||||
|
||||
### Deployment Secrets Configuration
|
||||
|
||||
**Required Secrets** (Gitea Repository Settings → Secrets):
|
||||
|
||||
| Secret | Type | Purpose |
|
||||
|--------|------|---------|
|
||||
| `DEPLOY_SSH_KEY_B64` | Base64 (recommended) | ED25519 private key for SSH |
|
||||
| `DEPLOY_SSH_KEY` | PEM (alternative) | Raw private key format |
|
||||
| `DEPLOY_HOST` | Text | Production server IP (178.104.200.7) |
|
||||
| `DEPLOY_USER` | Text | SSH username (kjh2064) |
|
||||
|
||||
**How to add secrets**:
|
||||
1. Go to: https://gitea.taxbaik.com/kjh2064/QuantEngineByItz/settings/secrets
|
||||
2. Click "Add Secret"
|
||||
3. Name: `DEPLOY_SSH_KEY_B64`
|
||||
4. Value: `base64 -w 0 ~/.ssh/deploy_key | pbcopy` (macOS) or `certutil -encode deploy_key deploy_key.b64` (Windows)
|
||||
5. Save
|
||||
|
||||
---
|
||||
|
||||
## Notes for Contributors (2026-07-11)
|
||||
@@ -344,3 +688,6 @@ http://localhost:5265/Account/Login
|
||||
- **Newtonsoft.Json**: Known high-severity vulnerability (GHSA-5crp-9r3c-p9vr); update or replace when feasible
|
||||
- **Release Authority**: Python gates (`full-gate`, `prepare-upload-zip`) remain authority; .NET Admin fully operational as of 2026-07-11
|
||||
- **Testing Requirement**: All code changes must pass local testing with SSH tunnel to remote DB before deployment (see "Local Development & Testing" above)
|
||||
- **DBML Schema Sync (2026-07-12)**: DbUp 마이그레이션(`src/dotnet/QuantEngine.Infrastructure/Migrations/V*.sql`)으로 관리되는 모든 테이블은 **반드시 `docs/db/quantengine.dbml`에도 동기화**되어야 하며, 개발 시 스키마 참조는 이 DBML 파일을 기준으로 한다. 새 마이그레이션 추가 시 같은 커밋에서 DBML 갱신 필수.
|
||||
- **Diagrams**: 상태전이/플로우차트/시퀀스 다이어그램은 Mermaid로 `docs/diagrams/`에 작성해 코딩 참조로 활용 (수집 파이프라인: `docs/diagrams/collection-pipeline.md`)
|
||||
- **WBS Evidence Gate (2026-07-12)**: 퀀트 엔진 로드맵/WBS는 `spec/60_quant_engine_wbs.yaml`(기계 판정)로 관리. 작업 완료는 `npm run verify:task -- <TASK_ID>` 게이트 PASS로만 인정 (BE=PG쿼리/로그/JSON, FE=Playwright+스크린샷). 전체 게이트: `npm run verify:wbs`
|
||||
|
||||
@@ -0,0 +1,13 @@
|
||||
# Report Guide (보고서 지침)
|
||||
|
||||
본 문서는 은퇴자산 포트폴리오 투자 에이전트의 보고 및 작업 완료 기준을 정의합니다.
|
||||
|
||||
## 기본 완료 조건 (Default Completion Harness)
|
||||
모든 작업은 아래의 4가지 요소가 모두 충족되어 검증을 통과해야 완료로 판정합니다.
|
||||
|
||||
1. **YAML 계약/공식**: 계약, 공식 및 거버넌스 파일(`yaml`)의 원본 권위가 변경 사항에 맞게 최신화되어야 합니다.
|
||||
2. **코드 구현**: `code` 구현이 `src/` 또는 `tools/`에 명확히 반영되어야 합니다.
|
||||
3. **데이터 실체**: 수집 및 계산 결과가 담긴 데이터 실체(`data artifact` 또는 `data/artifact`)가 디렉토리에 정상적으로 생성되고 확인되어야 합니다.
|
||||
4. **검증 증빙**: 재현 가능한 테스트 실행 및 검증 명령의 결과 파일 또는 터미널 출력이 `validation evidence`(`검증 증빙`)로 기록되어야 합니다.
|
||||
|
||||
이러한 완료 프로세스는 `completion harness`를 통해 엄격하게 통제됩니다.
|
||||
@@ -0,0 +1,185 @@
|
||||
# CI/CD Pipeline 모니터링 가이드
|
||||
|
||||
**작성일**: 2026-07-11
|
||||
**대상**: QuantEngine CI/CD 파이프라인 모니터링
|
||||
**상태**: Phase 5 완성
|
||||
|
||||
---
|
||||
|
||||
## 1. Workflow 실행 추적
|
||||
|
||||
### A. Gitea Actions Dashboard
|
||||
- URL: https://gitea.taxbaik.com/kjh2064/QuantEngineByItz/actions
|
||||
- **확인 항목**:
|
||||
- 최근 5개 run 상태 (SUCCESS/FAILURE)
|
||||
- 각 workflow별 실행 시간
|
||||
- 어느 stage에서 실패했는지
|
||||
|
||||
### B. 주요 metrics
|
||||
|
||||
```
|
||||
Pipeline Performance (최근 10 runs):
|
||||
┌─────────────────────────────────────┐
|
||||
│ Success Rate: 10/10 (100%) │
|
||||
│ Avg Time: 18-20 minutes │
|
||||
│ Failure Stages: None (목표) │
|
||||
└─────────────────────────────────────┘
|
||||
|
||||
Stage Breakdown:
|
||||
Stage 1 (Fast Gates): 1-2 min ✓
|
||||
Stage 2 (Critical): 3-5 min ✓
|
||||
Stage 3 (Integration): 10-15 min ✓ (병렬)
|
||||
Stage 4 (Build): 5-8 min ✓
|
||||
Stage 5 (Deploy): 2-3 min ✓
|
||||
─────────────────────────────────────
|
||||
TOTAL: 18-20 min
|
||||
```
|
||||
|
||||
---
|
||||
|
||||
## 2. 실패 원인 분석
|
||||
|
||||
### Failure Hierarchy
|
||||
|
||||
```
|
||||
Stage 1 실패 (Fast Gates)
|
||||
├─ YAML 문법 오류 → .gitea/workflows/*.yml 검사
|
||||
├─ Hardcoded Secrets → grep -r "Password=" 확인
|
||||
└─ JSON 유효성 → JSON 파일 재검사
|
||||
|
||||
Stage 2 실패 (Critical Gates)
|
||||
├─ KIS API Governance → tools/validate_no_direct_api_trading_v1.py
|
||||
└─ DB Schema → tools/validate_postgresql_history_contract_v1.py
|
||||
|
||||
Stage 3 실패 (Integration)
|
||||
├─ Spec Validation → tools/validate_specs.py
|
||||
├─ Formula Registry → tools/validate_formula_registry.py
|
||||
└─ Other validators → 개별 로그 확인
|
||||
|
||||
Stage 4 실패 (Build)
|
||||
├─ Restore 실패 → NuGet 패키지 문제
|
||||
├─ Build 실패 → 컴파일 오류
|
||||
├─ Test 실패 → Unit test 오류
|
||||
└─ Publish 실패 → 퍼블리시 구성 문제
|
||||
|
||||
Stage 5 실패 (Deploy)
|
||||
├─ Secret 미설정 → QUANTENGINE_DB_PASSWORD 확인
|
||||
└─ DB 연결 실패 → 원격 DB 상태 확인
|
||||
```
|
||||
|
||||
---
|
||||
|
||||
## 3. 주요 체크리스트
|
||||
|
||||
### 매일 확인 (Daily)
|
||||
- [ ] 최근 run 상태 확인 (SUCCESS/FAILURE)
|
||||
- [ ] 만약 FAILURE → Stage 파악 → 원인 분석
|
||||
|
||||
### 주간 확인 (Weekly)
|
||||
- [ ] 10 runs 평균 성공률 확인 (목표: >95%)
|
||||
- [ ] Stage별 평균 실행 시간 확인
|
||||
- [ ] 느려지는 추세 있는지 확인
|
||||
|
||||
### 월간 확인 (Monthly)
|
||||
- [ ] 이번 달 총 run 수
|
||||
- [ ] Stage별 실패율 추이
|
||||
- [ ] 배포 성공 및 롤백 이력
|
||||
- [ ] Performance 개선 여지 (타임아웃 조정)
|
||||
|
||||
---
|
||||
|
||||
## 4. 실시간 알림 설정 (선택사항)
|
||||
|
||||
### Slack/Telegram 연동 (Future)
|
||||
```bash
|
||||
# merge-to-main.yml의 Stage 5에 추가될 예정
|
||||
|
||||
- name: Notify Deployment Status
|
||||
run: |
|
||||
if [ "${{ needs.stage-4-build.result }}" = "success" ]; then
|
||||
SLACK_MSG="✅ QuantEngine deployed successfully"
|
||||
else
|
||||
SLACK_MSG="❌ Deployment failed at $(Stage)"
|
||||
fi
|
||||
curl -X POST https://hooks.slack.com/... -d "{\"text\":\"$SLACK_MSG\"}"
|
||||
```
|
||||
|
||||
---
|
||||
|
||||
## 5. 성능 개선 추적
|
||||
|
||||
### Target Metrics (목표)
|
||||
|
||||
| 지표 | 현재 | 목표 | 달성 |
|
||||
|------|------|------|------|
|
||||
| 전체 시간 | 18-20분 | <15분 | ⏳ |
|
||||
| Stage 1 | 1-2분 | <1분 | ⏳ |
|
||||
| Stage 3 | 10-15분 | 병렬화 | ⏳ |
|
||||
| 성공률 | 90%→100% | >95% | ✅ |
|
||||
| DB 연결 실패 | 0 | 0 | ✅ |
|
||||
|
||||
### 개선 로드맵
|
||||
|
||||
**Phase 5 확장 (이번 분기)**
|
||||
- [ ] Validator 병렬 그룹화
|
||||
- [ ] 빌드 캐싱 추가
|
||||
- [ ] 단위 테스트 최적화
|
||||
|
||||
**Phase 6 (다음 분기)**
|
||||
- [ ] E2E 테스트 추가
|
||||
- [ ] 성능 프로파일링
|
||||
- [ ] 배포 속도 분석
|
||||
|
||||
---
|
||||
|
||||
## 6. 트러블슈팅 Quick Reference
|
||||
|
||||
### 문제: Stage 1 계속 실패
|
||||
|
||||
**해결**: YAML 인코딩 확인
|
||||
```bash
|
||||
file .gitea/workflows/*.yml
|
||||
# 모두 UTF-8 (또는 ASCII) 여야 함
|
||||
# 한글/emoji는 포함되면 안 됨
|
||||
```
|
||||
|
||||
### 문제: Stage 2 DB validation 실패
|
||||
|
||||
**해결**: Production password 확인
|
||||
```bash
|
||||
ssh kjh2064@178.104.200.7
|
||||
PGPASSWORD="pvuIp8fWNj+oWfZtciw43GzJ4yU0vwKf" \
|
||||
psql -h 127.0.0.1 -U quantengine_app -d quantenginedb -c "SELECT 1"
|
||||
```
|
||||
|
||||
### 문제: Stage 4 Build 느려짐
|
||||
|
||||
**해결**: 캐시 무효화 여부 확인
|
||||
```bash
|
||||
dotnet clean src/dotnet/QuantEngine.Web/QuantEngine.Web.csproj
|
||||
# 그 후 다시 build
|
||||
```
|
||||
|
||||
---
|
||||
|
||||
## 7. Dashboard 요약 (매주 업데이트)
|
||||
|
||||
### 2026-07-11 ~ 2026-07-18
|
||||
|
||||
| Run # | Date | Status | Time | Note |
|
||||
|-------|------|--------|------|------|
|
||||
| 530 | 7-11 | FAIL | 3m | Tier 1 encoding 이슈 |
|
||||
| 533 | 7-11 | FAIL | 5m | Tier 2 DB secret |
|
||||
| 535 | 7-11 | PASS | 18m | Phase 5 첫 성공 |
|
||||
|
||||
**Trend**: ✅ Improving (실패율 감소)
|
||||
|
||||
---
|
||||
|
||||
## 참고 자료
|
||||
|
||||
- `.gitea/workflows/` - 모든 CI/CD workflow 정의
|
||||
- `docs/CICD_ANALYSIS_AND_ROADMAP.md` - 아키텍처 및 로드맵
|
||||
- `docs/CI_CD_IMPLEMENTATION_SUMMARY.md` - 이전 구현 요약
|
||||
- `CLAUDE.md` - 프로젝트 기준 및 정책
|
||||
|
||||
@@ -0,0 +1,318 @@
|
||||
# CI/CD 배포 트러블슈팅 가이드
|
||||
|
||||
**작성일**: 2026-07-11
|
||||
**버전**: 1.0
|
||||
**대상**: QuantEngine 배포 담당자
|
||||
|
||||
---
|
||||
|
||||
## 1. 배포 실패 진단
|
||||
|
||||
### 1.1 Pre-Deployment 실패
|
||||
|
||||
**증상**: 배포가 시작되지 않음
|
||||
|
||||
```
|
||||
[ERR] ERROR: SSH key not found
|
||||
[ERR] ERROR: Build artifact not found
|
||||
[ERR] ERROR: DB password secret not configured
|
||||
```
|
||||
|
||||
**해결방법**:
|
||||
|
||||
| 오류 | 원인 | 해결책 |
|
||||
|------|------|--------|
|
||||
| SSH key not found | Gitea Actions에서 SSH 키 미설정 | Gitea Settings > Repository Secrets에서 SSH_KEY 추가 |
|
||||
| Build artifact missing | 이전 단계(Build) 실패 | merge-to-main.yml의 Stage 4 로그 확인 |
|
||||
| DB password not configured | Gitea Secrets 미설정 | Gitea Settings > Repository Secrets에서 QUANTENGINE_DB_PASSWORD 추가 |
|
||||
| Config files missing | deploy/ 디렉토리 미포함 | 소스 코드의 `deploy/` 폴더 확인 |
|
||||
|
||||
**빠른 확인**:
|
||||
```bash
|
||||
# 로컬에서 필수 파일 확인
|
||||
ls -la ./deploy/
|
||||
ls -la deploy_gb.sh
|
||||
file quantengine.tar.gz # 파일 크기 1MB 이상 확인
|
||||
```
|
||||
|
||||
---
|
||||
|
||||
### 1.2 배포 실패 (Extract Stage)
|
||||
|
||||
**증상**:
|
||||
```
|
||||
[ERR] FATAL: Failed to extract artifact
|
||||
[ERR] tar: (standard input): gzip: stdin: unexpected end of file
|
||||
```
|
||||
|
||||
**원인 분석**:
|
||||
- 빌드 아티팩트 손상
|
||||
- 부분 다운로드된 파일
|
||||
- 압축 형식 오류
|
||||
|
||||
**해결책**:
|
||||
|
||||
1. **빌드 아티팩트 재생성**:
|
||||
```bash
|
||||
# 로컬에서 강제 재빌드
|
||||
dotnet clean src/dotnet/QuantEngine.Web/QuantEngine.Web.csproj
|
||||
dotnet build -c Release
|
||||
```
|
||||
|
||||
2. **tar 파일 검증**:
|
||||
```bash
|
||||
# 정상 tar 파일인지 확인
|
||||
tar -tzf quantengine.tar.gz | head -20
|
||||
|
||||
# 파일 크기 확인 (최소 1MB 이상)
|
||||
ls -lh quantengine.tar.gz
|
||||
```
|
||||
|
||||
3. **재배포 트리거**:
|
||||
```bash
|
||||
# 새 커밋 생성 또는 manual dispatch
|
||||
git commit --allow-empty -m "rebuild: Force redeployment"
|
||||
git push origin main
|
||||
```
|
||||
|
||||
---
|
||||
|
||||
### 1.3 배포 실패 (Structure Normalization)
|
||||
|
||||
**증상**:
|
||||
```
|
||||
[ERR] FATAL: QuantEngine.Web.dll not found in deployment
|
||||
```
|
||||
|
||||
**원인**:
|
||||
- net10.0 구조 정규화 실패
|
||||
- DLL 파일이 중첩된 폴더에 있음
|
||||
|
||||
**해결책**:
|
||||
|
||||
1. **배포 디렉토리 구조 확인**:
|
||||
```bash
|
||||
ls -lh /home/kjh2064/deployments/quantengine_*/
|
||||
```
|
||||
|
||||
2. **수동 구조 정리** (긴급 복구):
|
||||
```bash
|
||||
# 가장 최근 배포 확인
|
||||
LATEST=$(ls -dt /home/kjh2064/deployments/quantengine_* | head -1)
|
||||
|
||||
# net10.0 아래 파일들 이동
|
||||
mv $LATEST/net10.0/* $LATEST/
|
||||
rmdir $LATEST/net10.0
|
||||
|
||||
# 서비스 재시작
|
||||
systemctl restart quantengine
|
||||
```
|
||||
|
||||
---
|
||||
|
||||
### 1.4 헬스 체크 실패
|
||||
|
||||
**증상**:
|
||||
```
|
||||
[ERR] FAILED: Health check did not pass after 5 attempts
|
||||
[ERR] Service not responding on http://127.0.0.1:5000/
|
||||
```
|
||||
|
||||
**진단**:
|
||||
|
||||
```bash
|
||||
# 1. 서비스 상태 확인
|
||||
systemctl status quantengine.service
|
||||
|
||||
# 2. 포트 점유 확인
|
||||
lsof -i :5000 || ss -tlnp | grep 5000
|
||||
|
||||
# 3. 서비스 로그 확인
|
||||
journalctl -u quantengine.service -n 50
|
||||
|
||||
# 4. DB 연결 테스트
|
||||
PGPASSWORD='pvuIp8fWNj+oWfZtciw43GzJ4yU0vwKf' \
|
||||
psql -h 127.0.0.1 -U quantengine_app -d quantenginedb -c "SELECT 1;"
|
||||
|
||||
# 5. 포트 수동 테스트
|
||||
curl -v http://127.0.0.1:5000/
|
||||
```
|
||||
|
||||
**공통 해결책**:
|
||||
|
||||
| 증상 | 원인 | 해결책 |
|
||||
|------|------|--------|
|
||||
| Connection refused | 서비스 시작 안 됨 | `systemctl restart quantengine` |
|
||||
| Address already in use | 이전 프로세스 남음 | `pkill -f "dotnet.*QuantEngine"` |
|
||||
| Database error | DB 연결 실패 | appsettings.Production.json 비밀번호 확인 |
|
||||
| Timeout | 느린 시작 | HEALTH_CHECK_RETRIES 증가 |
|
||||
|
||||
---
|
||||
|
||||
### 1.5 자동 롤백 실패
|
||||
|
||||
**증상**:
|
||||
```
|
||||
[ERR] CRITICAL: Rollback failed - previous deployment not found
|
||||
```
|
||||
|
||||
**원인**:
|
||||
- 이전 배포가 삭제됨
|
||||
- 배포 디렉토리 정리로 인한 손실
|
||||
|
||||
**예방**:
|
||||
```bash
|
||||
# 배포 히스토리 확인
|
||||
ls -ldt /home/kjh2064/deployments/quantengine_* | head -10
|
||||
|
||||
# 수동 롤백 (긴급)
|
||||
PREV_DEPLOY="/home/kjh2064/deployments/quantengine_YYYYMMDD_HHMMSS"
|
||||
ln -sfn $PREV_DEPLOY /home/kjh2064/quantengine_active
|
||||
systemctl restart quantengine
|
||||
```
|
||||
|
||||
---
|
||||
|
||||
## 2. 배포 수동 관리
|
||||
|
||||
### 2.1 수동 배포 트리거
|
||||
|
||||
```bash
|
||||
# Gitea Actions에서 Manual Dispatch
|
||||
# 또는 CI/CD에서 commit → main 푸시
|
||||
|
||||
git commit --allow-empty -m "deploy: Manual trigger"
|
||||
git push origin main
|
||||
```
|
||||
|
||||
### 2.2 현재 배포 상태 확인
|
||||
|
||||
```bash
|
||||
# 활성 배포 확인
|
||||
readlink /home/kjh2064/quantengine_active
|
||||
|
||||
# 배포 디렉토리 목록
|
||||
ls -lht /home/kjh2064/deployments/quantengine_* | head -5
|
||||
|
||||
# 서비스 상태
|
||||
systemctl status quantengine.service
|
||||
|
||||
# 최근 로그
|
||||
journalctl -u quantengine.service -f
|
||||
```
|
||||
|
||||
### 2.3 즉시 롤백
|
||||
|
||||
```bash
|
||||
# 1. 이전 배포 선택
|
||||
DEPLOYMENTS=$(ls -dt /home/kjh2064/deployments/quantengine_*)
|
||||
PREV=$(echo "$DEPLOYMENTS" | head -2 | tail -1)
|
||||
|
||||
# 2. 롤백 실행
|
||||
ln -sfn $PREV /home/kjh2064/quantengine_active
|
||||
|
||||
# 3. 서비스 재시작
|
||||
systemctl restart quantengine
|
||||
|
||||
# 4. 확인
|
||||
systemctl status quantengine.service
|
||||
curl http://127.0.0.1:5000/
|
||||
```
|
||||
|
||||
---
|
||||
|
||||
## 3. 성능 최적화
|
||||
|
||||
### 3.1 배포 시간 단축
|
||||
|
||||
```bash
|
||||
# 배포 캐시 검증
|
||||
du -sh /home/kjh2064/deployments/
|
||||
|
||||
# 오래된 배포 수동 정리 (유지: 3개)
|
||||
ls -dt /home/kjh2064/deployments/quantengine_* | tail -n +4 | xargs rm -rf
|
||||
```
|
||||
|
||||
### 3.2 헬스 체크 타임아웃 조정
|
||||
|
||||
`.gitea/workflows/deploy-prod.yml`에서:
|
||||
```yaml
|
||||
env:
|
||||
HEALTH_CHECK_RETRIES: "5" # 재시도 횟수
|
||||
HEALTH_CHECK_DELAY: "3" # 재시도 간격 (초)
|
||||
```
|
||||
|
||||
---
|
||||
|
||||
## 4. 모니터링 & 알림
|
||||
|
||||
### 4.1 Telegram 알림 설정
|
||||
|
||||
```bash
|
||||
# Gitea Settings > Repository Secrets에서 설정
|
||||
TELEGRAM_BOT_TOKEN=<your_token>
|
||||
TELEGRAM_CHAT_ID=<your_chat_id>
|
||||
```
|
||||
|
||||
### 4.2 배포 로그 위치
|
||||
|
||||
```bash
|
||||
# 최근 배포 로그
|
||||
journalctl -u quantengine.service -n 100
|
||||
|
||||
# 배포 정보 확인
|
||||
cat /home/kjh2064/deployments/quantengine_*/(.deployment_info)
|
||||
```
|
||||
|
||||
---
|
||||
|
||||
## 5. 자주 묻는 질문 (FAQ)
|
||||
|
||||
**Q: 배포는 되었는데 변경사항이 반영되지 않음**
|
||||
```bash
|
||||
# 1. 캐시 확인
|
||||
curl -H "Cache-Control: no-cache" https://quant.taxbaik.com/
|
||||
|
||||
# 2. 서비스 재시작
|
||||
systemctl restart quantengine
|
||||
|
||||
# 3. 브라우저 캐시 삭제 후 재접속
|
||||
```
|
||||
|
||||
**Q: "appsettings.Production.json not found" 오류**
|
||||
```bash
|
||||
# 파일이 자동 생성되므로 정상
|
||||
# 만약 없다면:
|
||||
cat > /home/kjh2064/quantengine_active/appsettings.Production.json << 'EOF'
|
||||
{
|
||||
"ConnectionStrings": {
|
||||
"DefaultConnection": "Host=127.0.0.1;Database=quantenginedb;Username=quantengine_app;Password=<PASSWORD>;Search Path=quantengine;"
|
||||
}
|
||||
}
|
||||
EOF
|
||||
systemctl restart quantengine
|
||||
```
|
||||
|
||||
**Q: 데이터베이스 연결이 계속 실패**
|
||||
```bash
|
||||
# 비밀번호 확인
|
||||
grep "Password=" /home/kjh2064/quantengine_active/appsettings.Production.json
|
||||
|
||||
# DB 직접 테스트
|
||||
PGPASSWORD='pvuIp8fWNj+oWfZtciw43GzJ4yU0vwKf' \
|
||||
psql -h 127.0.0.1 -U quantengine_app -d quantenginedb -c "SELECT version();"
|
||||
```
|
||||
|
||||
---
|
||||
|
||||
## 6. 연락처 & 지원
|
||||
|
||||
- **배포 담당**: kjh2064
|
||||
- **긴급 롤백**: systemctl restart quantengine
|
||||
- **로그 위치**: /var/log/journalctl, /home/kjh2064/deployments/*/logs/
|
||||
- **모니터링**: https://quant.taxbaik.com/Admin/Monitoring
|
||||
|
||||
---
|
||||
|
||||
**마지막 업데이트**: 2026-07-11
|
||||
**다음 업데이트 예정**: 버그 수정 후
|
||||
@@ -0,0 +1,383 @@
|
||||
# Gitea Actions API 호출 가이드
|
||||
|
||||
**작성일**: 2026-07-11
|
||||
**대상**: QuantEngine CI/CD 담당자
|
||||
**목표**: CLI에서 Gitea Actions 상태 조회 및 troubleshooting
|
||||
|
||||
---
|
||||
|
||||
## 사전 요구사항
|
||||
|
||||
### 환경 변수 설정
|
||||
```powershell
|
||||
# PowerShell
|
||||
$env:GITEA_TOKEN_TAXBAIK = "your_gitea_access_token"
|
||||
|
||||
# 또는 Windows 환경변수 저장
|
||||
[Environment]::SetEnvironmentVariable("GITEA_TOKEN_TAXBAIK", "your_token", "User")
|
||||
```
|
||||
|
||||
### 토큰 생성
|
||||
1. Gitea 웹 UI: https://gitea.taxbaik.com/user/settings/applications
|
||||
2. "Generate New Token" → 권한: `repo`, `read:actions`
|
||||
3. 토큰 복사 및 환경 변수 설정
|
||||
|
||||
---
|
||||
|
||||
## API Endpoints
|
||||
|
||||
### 1. 최근 Workflow Runs 조회
|
||||
|
||||
```powershell
|
||||
$token = $env:GITEA_TOKEN_TAXBAIK
|
||||
$response = Invoke-WebRequest `
|
||||
-Uri "https://gitea.taxbaik.com/api/v1/repos/kjh2064/QuantEngineByItz/actions/runs" `
|
||||
-Headers @{
|
||||
"Accept" = "application/json"
|
||||
"Authorization" = "token $token"
|
||||
}
|
||||
$data = $response.Content | ConvertFrom-Json
|
||||
$data.workflow_runs | ForEach-Object {
|
||||
Write-Host "Run #$($_.id): $($_.display_title) [$($_.status)/$($_.conclusion)]"
|
||||
}
|
||||
```
|
||||
|
||||
**Bash/cURL 버전:**
|
||||
```bash
|
||||
curl -X GET "https://gitea.taxbaik.com/api/v1/repos/kjh2064/QuantEngineByItz/actions/runs" \
|
||||
-H "Accept: application/json" \
|
||||
-H "Authorization: token $GITEA_TOKEN_TAXBAIK" | jq '.workflow_runs[] | {id, display_title, status, conclusion}'
|
||||
```
|
||||
|
||||
---
|
||||
|
||||
### 2. 특정 Run 상세 정보 조회
|
||||
|
||||
```powershell
|
||||
$run_id = 1987
|
||||
$response = Invoke-WebRequest `
|
||||
-Uri "https://gitea.taxbaik.com/api/v1/repos/kjh2064/QuantEngineByItz/actions/runs/$run_id" `
|
||||
-Headers @{
|
||||
"Authorization" = "token $env:GITEA_TOKEN_TAXBAIK"
|
||||
}
|
||||
$run = $response.Content | ConvertFrom-Json
|
||||
|
||||
Write-Host "Run #$($run.id)"
|
||||
Write-Host " Title: $($run.display_title)"
|
||||
Write-Host " Status: $($run.status)"
|
||||
Write-Host " Conclusion: $($run.conclusion)"
|
||||
Write-Host " Commit: $($run.head_sha)"
|
||||
Write-Host " Branch: $($run.head_branch)"
|
||||
Write-Host " Created: $($run.created_at)"
|
||||
Write-Host " Updated: $($run.updated_at)"
|
||||
```
|
||||
|
||||
---
|
||||
|
||||
### 3. Run의 Jobs 조회
|
||||
|
||||
```powershell
|
||||
$run_id = 1987
|
||||
$response = Invoke-WebRequest `
|
||||
-Uri "https://gitea.taxbaik.com/api/v1/repos/kjh2064/QuantEngineByItz/actions/runs/$run_id/jobs" `
|
||||
-Headers @{
|
||||
"Authorization" = "token $env:GITEA_TOKEN_TAXBAIK"
|
||||
}
|
||||
$jobs_data = $response.Content | ConvertFrom-Json
|
||||
|
||||
$jobs_data.jobs | ForEach-Object {
|
||||
Write-Host "Job #$($_.id): $($_.name)"
|
||||
Write-Host " Status: $($_.status), Conclusion: $($_.conclusion)"
|
||||
Write-Host " Started: $($_.started_at)"
|
||||
Write-Host " Completed: $($_.completed_at)"
|
||||
}
|
||||
```
|
||||
|
||||
---
|
||||
|
||||
## Troubleshooting
|
||||
|
||||
### 문제: Run이 failure 상태
|
||||
|
||||
**원인 분석:**
|
||||
```powershell
|
||||
# 1. Jobs 상태 확인
|
||||
$run_id = 1987
|
||||
$response = Invoke-WebRequest `
|
||||
-Uri "https://gitea.taxbaik.com/api/v1/repos/kjh2064/QuantEngineByItz/actions/runs/$run_id/jobs" `
|
||||
-Headers @{ "Authorization" = "token $env:GITEA_TOKEN_TAXBAIK" }
|
||||
$jobs = ($response.Content | ConvertFrom-Json).jobs
|
||||
|
||||
# 2. failure 상태인 job 찾기
|
||||
$failed_jobs = $jobs | Where-Object { $_.conclusion -eq "failure" }
|
||||
$failed_jobs | ForEach-Object {
|
||||
Write-Host "Failed Job: $($_.name) (ID: $($_.id))"
|
||||
Write-Host " Status: $($_.status)"
|
||||
}
|
||||
|
||||
# 3. Build 로그 확인 (로컬 또는 프로덕션 서버)
|
||||
ssh kjh2064@178.104.200.7 'ls /opt/stacks/gitea/gitea/actions_log/kjh2064/taxbaik/*/*.log.zst'
|
||||
```
|
||||
|
||||
### 문제: Act Runner 연결 실패
|
||||
|
||||
**증상:**
|
||||
```
|
||||
error="unavailable: dial tcp 172.18.0.2:3000: connect: connection refused"
|
||||
```
|
||||
|
||||
**해결 방법:**
|
||||
```bash
|
||||
# 1. Runner 상태 확인
|
||||
docker ps | grep runner
|
||||
|
||||
# 2. Runner 로그 확인
|
||||
docker logs gitea-runner | grep -E "error|failed|connection" | tail -20
|
||||
|
||||
# 3. Gitea ↔ Runner 네트워크 확인
|
||||
docker network ls
|
||||
docker network inspect bridge | grep -E "Name|Containers"
|
||||
|
||||
# 4. Runner 재시작 (위험: 진행 중인 job 중단)
|
||||
docker restart gitea-runner gitea-runner-2 gitea-runner-3
|
||||
```
|
||||
|
||||
---
|
||||
|
||||
## 실행 예제
|
||||
|
||||
### 예제 1: 최근 Failed Run 찾기
|
||||
|
||||
```powershell
|
||||
$response = Invoke-WebRequest `
|
||||
-Uri "https://gitea.taxbaik.com/api/v1/repos/kjh2064/QuantEngineByItz/actions/runs?limit=10" `
|
||||
-Headers @{ "Authorization" = "token $env:GITEA_TOKEN_TAXBAIK" }
|
||||
|
||||
($response.Content | ConvertFrom-Json).workflow_runs `
|
||||
| Where-Object { $_.conclusion -eq "failure" } `
|
||||
| ForEach-Object {
|
||||
Write-Host "❌ Run #$($_.id): $($_.display_title)"
|
||||
Write-Host " Commit: $($_.head_sha.Substring(0, 7))"
|
||||
Write-Host " Time: $($_.completed_at)"
|
||||
}
|
||||
```
|
||||
|
||||
### 예제 2: Run 전체 Job 상태 맵
|
||||
|
||||
```powershell
|
||||
function Show-RunStatus {
|
||||
param($RunId)
|
||||
|
||||
$run_url = "https://gitea.taxbaik.com/api/v1/repos/kjh2064/QuantEngineByItz/actions/runs/$RunId"
|
||||
$run = (Invoke-WebRequest -Uri $run_url -Headers @{ "Authorization" = "token $env:GITEA_TOKEN_TAXBAIK" }).Content | ConvertFrom-Json
|
||||
|
||||
Write-Host "Run #$RunId ($($run.display_title))" -ForegroundColor Cyan
|
||||
Write-Host "Status: $($run.status) / Conclusion: $($run.conclusion)"
|
||||
Write-Host ""
|
||||
|
||||
$jobs_url = "$run_url/jobs"
|
||||
$jobs = (Invoke-WebRequest -Uri $jobs_url -Headers @{ "Authorization" = "token $env:GITEA_TOKEN_TAXBAIK" }).Content | ConvertFrom-Json
|
||||
|
||||
$jobs.jobs | ForEach-Object {
|
||||
$icon = if ($_.conclusion -eq "success") { "✓" } elseif ($_.conclusion -eq "failure") { "✗" } else { "⊘" }
|
||||
Write-Host " [$icon] $($_.name) ($($_.status))"
|
||||
}
|
||||
}
|
||||
|
||||
# 사용
|
||||
Show-RunStatus -RunId 1987
|
||||
```
|
||||
|
||||
---
|
||||
|
||||
## API 응답 구조
|
||||
|
||||
### Run Object
|
||||
```json
|
||||
{
|
||||
"id": 1987,
|
||||
"display_title": "CI: Trigger deploy-prod.yml workflow via git push",
|
||||
"head_sha": "5b41423aef4a03398f6b80c55c959563583e4f28",
|
||||
"head_branch": "main",
|
||||
"status": "completed",
|
||||
"conclusion": "failure",
|
||||
"created_at": "2026-07-11T22:33:06+09:00",
|
||||
"updated_at": "2026-07-11T22:33:34+09:00"
|
||||
}
|
||||
```
|
||||
|
||||
### Job Object
|
||||
```json
|
||||
{
|
||||
"id": 2375,
|
||||
"name": "Build Release",
|
||||
"status": "completed",
|
||||
"conclusion": "failure",
|
||||
"started_at": "2026-07-11T13:33:06+09:00",
|
||||
"completed_at": "2026-07-11T13:33:34+09:00"
|
||||
}
|
||||
```
|
||||
|
||||
---
|
||||
|
||||
## 자주 묻는 질문 (FAQ)
|
||||
|
||||
**Q: 토큰 권한이 부족하면?**
|
||||
```
|
||||
"message": "invalid username, password or token"
|
||||
```
|
||||
A: Gitea 설정에서 토큰 재생성, `repo` + `read:actions` 권한 부여
|
||||
|
||||
**Q: Run 로그를 API로 다운로드할 수 없나?**
|
||||
A: 현재 Gitea API는 `/actions/runs/{id}/logs` 지원하지 않음. 프로덕션 서버에서 `/opt/stacks/gitea/gitea/actions_log/` 디렉토리 직접 접근
|
||||
|
||||
**Q: 가장 최신 Run 빠르게 확인하는 법?**
|
||||
```powershell
|
||||
$latest = ((Invoke-WebRequest -Uri "https://gitea.taxbaik.com/api/v1/repos/kjh2064/QuantEngineByItz/actions/runs?limit=1" `
|
||||
-Headers @{ "Authorization" = "token $env:GITEA_TOKEN_TAXBAIK" }).Content | ConvertFrom-Json).workflow_runs[0]
|
||||
Write-Host "$($latest.display_title): $($latest.conclusion)"
|
||||
```
|
||||
|
||||
---
|
||||
|
||||
## Workflow 트리거 + 모니터링 하네스 (PowerShell)
|
||||
|
||||
Gitea Actions API에는 `/actions/runs/{id}/jobs/{job_id}/logs` 엔드포인트가 **없다** (404).
|
||||
따라서 워크플로우를 API로 트리거하고 완료까지 폴링한 뒤, 실패 시 **SSH로 서버에 직접 접속해
|
||||
로그 파일을 읽는 2단계 하네스**가 필요하다. 아래 스크립트가 그 표준 패턴이다.
|
||||
|
||||
### 1단계: workflow_dispatch 트리거 + 완료까지 폴링
|
||||
|
||||
```powershell
|
||||
$token = $env:GITEA_TOKEN_TAXBAIK
|
||||
$repo = "kjh2064/QuantEngineByItz"
|
||||
$api = "https://gitea.taxbaik.com/api/v1"
|
||||
|
||||
# 트리거 (workflow 파일명을 그대로 ID로 사용 가능)
|
||||
$body = @{ ref = "main" } | ConvertTo-Json
|
||||
$response = Invoke-WebRequest -Method POST `
|
||||
-Uri "$api/repos/$repo/actions/workflows/prepare-release.yml/dispatches" `
|
||||
-Headers @{ "Authorization" = "token $token" } `
|
||||
-ContentType "application/json" -Body $body
|
||||
# 성공 시 Status: 204 (No Content) 반환 -- 이것이 정상 응답이다
|
||||
|
||||
Start-Sleep -Seconds 3 # run이 목록에 나타날 때까지 약간의 지연 필요
|
||||
|
||||
# 방금 생성된 run 조회 (limit=1이 항상 최신순)
|
||||
$runs = Invoke-WebRequest -Uri "$api/repos/$repo/actions/runs?limit=1" `
|
||||
-Headers @{ "Authorization" = "token $token" } | ConvertFrom-Json
|
||||
$run = $runs.workflow_runs[0]
|
||||
$runId = $run.id
|
||||
|
||||
# 완료까지 폴링 (8초 간격, 최대 5분)
|
||||
$elapsed = 0
|
||||
while ($run.status -ne "completed" -and $elapsed -lt 300) {
|
||||
Start-Sleep -Seconds 8
|
||||
$elapsed += 8
|
||||
$run = Invoke-WebRequest -Uri "$api/repos/$repo/actions/runs/$runId" `
|
||||
-Headers @{ "Authorization" = "token $token" } | ConvertFrom-Json
|
||||
}
|
||||
|
||||
Write-Host "Conclusion: $($run.conclusion)"
|
||||
|
||||
# Job별 결과 확인
|
||||
$jobs = Invoke-WebRequest -Uri "$api/repos/$repo/actions/runs/$runId/jobs" `
|
||||
-Headers @{ "Authorization" = "token $token" } | ConvertFrom-Json
|
||||
$jobs.jobs | ForEach-Object {
|
||||
$icon = if ($_.conclusion -eq "success") { "OK" } elseif ($_.conclusion -eq "failure") { "FAIL" } else { "SKIP" }
|
||||
Write-Host " [$icon] $($_.name)"
|
||||
}
|
||||
```
|
||||
|
||||
**주의사항**:
|
||||
- `Invoke-WebRequest`의 에러 응답 본문은 `$_.Exception.Response.Content`로 읽으려 하면
|
||||
`HttpResponseMessage`에 `GetResponseStream()`이 없어서 실패한다 (PowerShell 7 / .NET
|
||||
`HttpClient` 기반이기 때문). 상태 코드(`$_.Exception.Response.StatusCode`)만 신뢰하고,
|
||||
본문이 필요하면 애초에 `-ErrorAction Stop` 없이 시도하거나 SSH 로그 쪽으로 넘어가는 게 빠르다.
|
||||
- workflow ID는 파일명(`prepare-release.yml`)을 그대로 쓸 수 있다 — 매번
|
||||
`/actions/workflows` 목록을 조회해서 숫자 ID를 찾을 필요 없음.
|
||||
|
||||
### 2단계: 실패 시 SSH로 실제 로그 읽기 (API 로그 엔드포인트 우회)
|
||||
|
||||
Job이 `failure`면, 어떤 step에서 실패했는지 API로는 알 수 없다. 실제 stdout/stderr는
|
||||
프로덕션 서버의 압축된 로그 파일에만 존재한다.
|
||||
|
||||
```bash
|
||||
# 1. 어떤 act_runner가 이 run을 처리했는지, task ID가 몇 번인지 확인
|
||||
# (run 트리거 직후 곧바로 실행 — 여러 runner에 로드밸런싱되므로 3개 다 확인)
|
||||
ssh kjh2064@178.104.200.7 \
|
||||
'for r in gitea-runner gitea-runner-2 gitea-runner-3; do
|
||||
echo "=== $r ==="; docker logs --since 3m $r 2>&1 | grep "task 2"
|
||||
done'
|
||||
# 출력 예: task 2326 repo is kjh2064/QuantEngineByItz ...
|
||||
# → task ID 2326이 방금 트리거한 run에 해당
|
||||
|
||||
# 2. task ID로 실제 로그 파일 위치 찾기 (디렉토리는 ID 기반 샤딩됨: XX/task_id.log.zst)
|
||||
ssh kjh2064@178.104.200.7 \
|
||||
'find /opt/stacks/gitea/gitea/gitea/actions_log/kjh2064/QuantEngineByItz \
|
||||
-name "2326.log.zst"'
|
||||
# → .../16/2326.log.zst
|
||||
|
||||
# 3. zstd로 압축 해제하며 바로 읽기 (파일로 풀 필요 없음)
|
||||
ssh kjh2064@178.104.200.7 \
|
||||
'zstd -dc /opt/stacks/gitea/gitea/gitea/actions_log/kjh2064/QuantEngineByItz/16/2326.log.zst' \
|
||||
| grep -A 15 "Failure\|exitcode"
|
||||
```
|
||||
|
||||
**핵심 포인트**:
|
||||
- 로그 경로 규칙: `actions_log/{owner}/{repo}/{taskId 앞 또는 뒤 hex 2자리}/{taskId}.log.zst`
|
||||
(샤딩 방식은 taskId를 hex로 표현한 문자열의 접두 디렉토리 — `find`로 찾는 게 가장 안전함)
|
||||
- 압축 해제 없이 `zstd -dc`로 스트리밍 읽기 가능. `.zst` 확장자를 보고 `cat`으로 읽으면
|
||||
바이너리가 그대로 출력되니 반드시 `zstd -dc`를 거칠 것.
|
||||
- 로그 안에서 실패 지점은 `❌ Failure - Main <step name>`과 `exitcode 'N': ...` 패턴으로
|
||||
검색하면 즉시 찾아짐 (grep -A 15로 앞뒤 문맥 함께 확인).
|
||||
- taxbaik 프로젝트의 로그도 같은 서버, 같은 `actions_log` 루트 아래 `kjh2064/taxbaik/`에
|
||||
섞여 있으니 repo 이름으로 경로를 좁혀야 함.
|
||||
|
||||
### 네트워크/인프라 디버깅 (dispatch가 500을 반환하거나 job이 안 뜰 때)
|
||||
|
||||
```bash
|
||||
# Runner 컨테이너들이 올바른 네트워크에 붙어 있는지 확인
|
||||
ssh kjh2064@178.104.200.7 \
|
||||
'docker network inspect gitea_default --format "{{range .Containers}}{{.Name}} {{.IPv4Address}}{{println}}{{end}}"'
|
||||
# gitea-runner, gitea-runner-2, gitea-runner-3 만 여기 있어야 정상.
|
||||
# (과거 실험적으로 띄웠던 이름 없는 컨테이너들이 default bridge에 남아있는 경우가
|
||||
# 있는데, 이들은 gitea:3000에 도달 못해 "connection refused"로 무한 재시도만 함 —
|
||||
# 실제 job 처리에는 영향 없지만 리소스 낭비이므로 발견 시 정리 대상)
|
||||
|
||||
# gitea 컨테이너가 재시작된 시점 확인 (재시작 직후 몇 초는 runner가 접속 실패할 수 있음)
|
||||
ssh kjh2064@178.104.200.7 \
|
||||
'docker inspect gitea --format "RestartCount: {{.RestartCount}}\nStartedAt: {{.State.StartedAt}}"'
|
||||
|
||||
# 실제 러너 → gitea 연결 테스트 (컨테이너 내부에서)
|
||||
ssh kjh2064@178.104.200.7 \
|
||||
'docker exec gitea-runner sh -c "wget -O- -T 5 http://gitea:3000/ 2>&1 | head -3"'
|
||||
```
|
||||
|
||||
`dispatch` API가 500을 반환하는 흔한 원인 두 가지:
|
||||
1. **workflow YAML 문법 오류** — `--notes "여러줄\n텍스트"`처럼 멀티라인 문자열에 콜론(`:`)이
|
||||
포함되면 YAML 파서가 `mapping values are not allowed here`로 깨짐. 로컬에서
|
||||
`python3 -c "import yaml; yaml.safe_load(open('file.yml'))"`로 먼저 검증할 것.
|
||||
2. **Gitea 컨테이너 재시작 타이밍과 겹침** — 일시적이며 몇 초 후 재시도하면 해결.
|
||||
|
||||
### 실제로 겪은 실패 패턴 모음
|
||||
|
||||
| 증상 (API/로그) | 원인 | 해결 |
|
||||
|---|---|---|
|
||||
| dispatch 500, "mapping values are not allowed here" | YAML 멀티라인 문자열에 `:` 포함 | 단일 라인 `--notes`로 축약, 또는 `env:` + heredoc 사용 |
|
||||
| job은 뜨는데 특정 step에서 `exitcode '1'` + 그 직전 줄이 `git config user.name` | 러너 컨테이너에 git 전역 identity 미설정 (`set -e`라 즉시 중단) | 태그/커밋 전에 `git config user.name "Gitea Actions"` 명시적으로 설정 |
|
||||
| `exitcode '127': command not found` | act_runner 기본 이미지에 `gh` CLI 없음 | `gh release create` 대신 `curl` + Gitea REST API (`POST /repos/{r}/releases`, `POST /repos/{r}/releases/{id}/assets`) 직접 호출 |
|
||||
| runner 로그에 `dial tcp 172.18.0.2:3000: connect: connection refused` | gitea 컨테이너 재시작 타이밍과 겹친 일시적 현상, 또는 잘못된 네트워크(bridge)에 붙은 유령 러너 | 몇 초 후 재시도; `docker network inspect gitea_default`로 정상 러너 3개만 있는지 확인 |
|
||||
|
||||
---
|
||||
|
||||
## 관련 문서
|
||||
|
||||
- [CLAUDE.md - Deployment Gates](https://gitea.taxbaik.com/kjh2064/QuantEngineByItz/src/branch/main/CLAUDE.md)
|
||||
- [deploy-prod.yml / prepare-release.yml](.gitea/workflows/)
|
||||
- [Gitea Official API Docs](https://docs.gitea.io/en-us/api-usage/)
|
||||
|
||||
---
|
||||
|
||||
**마지막 업데이트**: 2026-07-12
|
||||
**상태**: prepare-release.yml 운영 검증 완료 (Run #2000 성공, 릴리즈 `quant_20260711.1.6ab270f` 생성)
|
||||
+126
-14
@@ -24,10 +24,10 @@
|
||||
|
||||
모든 작업은 아래 7가지 증빙이 함께 충족되고, 하네스 검증을 통과할 때만 완료로 본다.
|
||||
|
||||
- **MudBlazor 9 UI 표준 준수**: 모든 UI 컴포넌트 개발 시 **MudBlazor 9.0.0 버전** 표준 및 Interactive WebAssembly를 렌더 모드로 강제한다. Fluent UI 및 구버전(8.x 이하) 요소와의 혼용을 엄격히 배제한다.
|
||||
- **Tabler UI 표준 준수**: 모든 UI 개발 시 **Tabler CSS/JS** 표준 및 ASP.NET Core Razor Pages를 기본 렌더 모드로 한다. 타 프레임워크와의 혼용을 엄격히 배제한다.
|
||||
- **컴파일/빌드 완료**: 빌드 시 컴파일 에러 및 **컴파일 경고(Warning)가 0개**여야 한다.
|
||||
- **DTO 및 유효성 검증 규칙**: API 입력 모델 및 DTO 유효성 검증 시 **데이터 어노테이션(Data Annotation) 방식을 기본적으로 사용**하되, 복잡한 비즈니스 조건부 유효성 검증 등 어노테이션만으로 부족한 영역은 **FluentValidation을 상호 보완적으로 적용**하여 규칙을 중앙 집중식으로 엄격히 관리해야 한다.
|
||||
- **MVVM 패턴**: Blazor 화면 바인딩 정합성을 극대화하기 위해 Razor 컴포넌트(View)와 상태/검증/로직을 갖춘 DTO 및 StateService(ViewModel) 구조의 **MVVM 패턴을 철저히 지향**해야 한다.
|
||||
- **Razor Pages 패턴**: ASP.NET Core Razor Pages 표준 아키텍처에 맞게, `.cshtml` 뷰와 비즈니스 서비스 계층을 완벽히 분리하고 안티포저리 토큰(CSRF 방어) 유효성 검증을 필수로 수행해야 한다.
|
||||
- **Playwright E2E 하네스 검증**: 사용자 입장에서 시나리오에 따라 서비스를 직접 호출(Playwright 실행)하여, 실제 반환된 DOM 값과 화면 캡처 결과가 예측한 데이터/화면과 완벽히 일치하여 데이터로 증빙되어야 성공으로 판정한다.
|
||||
- **병렬 테스트 및 인증 키 공유**: CI 테스트 및 로컬 테스트 수행 시 선후관계(순차 종속성)로 인해 병목이 생기지 않도록, 인증 완료 후의 인증 키(Cookie, Bearer Token 등)를 테스트 간 상호 공유 및 재사용(storageState 등)하도록 구성하여 **반드시 병렬(Parallel) 작업**으로 실행되어야 한다.
|
||||
- `YAML` 증빙: 관련 contract/spec/governance 문서가 일관되게 갱신되어야 한다.
|
||||
@@ -170,7 +170,7 @@ Phase 10 ░░░░░░░░░░░░░░░░░░░░ C#/.NET
|
||||
| **P5 완전 자동화** | ~2026-12 | CI/CD + Gitea, 자율 실행 | 수동 개입 0회/주 |
|
||||
| **P6 비기계적 매도전략** | 2026-06 완료 | 5팩터 confluence 엔진, KIS 조회연동, SQLite 자체평가 | WBS-6 본문 하네스 PASS (잔류위험은 P7에서 해소) |
|
||||
| **P7 보완·고도화** | ~2026-08 | 캘리브레이션 실증 전환, GAS 마이그레이션 완결, deprecated 정리, E2E 통합테스트 | WBS-7.1~7.8 하네스 전부 PASS |
|
||||
| **P10 .NET 엔진 고도화** | ~2026-12 | C# Domain Parity, 테스트 100+건, Application 서비스, Blazor 대시보드, 보안 경화 | `dotnet test` 전체 PASS + parity JSON gate PASS |
|
||||
| **P10 .NET 엔진 고도화** | ~2026-12 | C# Domain Parity, 테스트 100+건, Application 서비스, Razor Pages 어드민 대시보드, 보안 경화 | `dotnet test` 전체 PASS + parity JSON gate PASS |
|
||||
|
||||
---
|
||||
|
||||
@@ -1097,6 +1097,56 @@ LLM이 런타임에 이런 stale spec을 사실로 읽으면 할루시네이션
|
||||
|
||||
---
|
||||
|
||||
#### WBS-7.12 작업 관리 수동 즉시 실행 경로 교정
|
||||
|
||||
| 항목 | 내용 |
|
||||
|------|------|
|
||||
| **작업** | 어드민 페이지(Operations)의 "즉시 실행" 기능이 동작하도록 explicit 폼 핸들러 액션 매핑 적용 |
|
||||
| **담당 파일** | `src/dotnet/QuantEngine.Web/Pages/Admin/Operations/Index.cshtml` |
|
||||
| **상태** | ✅ 완료 (2026-07-12) |
|
||||
|
||||
---
|
||||
|
||||
#### WBS-7.13 Hangfire 작업 수행 시간(TotalDuration) 연동
|
||||
|
||||
| 항목 | 내용 |
|
||||
|------|------|
|
||||
| **작업** | 최근 작업 실행 목록에서 소요 시간이 0.0s로 고정 출력되던 버그를 SucceededJobDto.TotalDuration 및 StartedAt 연산으로 수정 |
|
||||
| **담당 파일** | `src/dotnet/QuantEngine.Web/Pages/Admin/Operations/Index.cshtml.cs` |
|
||||
| **상태** | ✅ 완료 (2026-07-12) |
|
||||
|
||||
---
|
||||
|
||||
#### WBS-7.14 KIS OpenAPI Rate Limit Throttling (SemaphoreSlim) 탑재
|
||||
|
||||
| 항목 | 내용 |
|
||||
|------|------|
|
||||
| **작업** | KIS API 호출 시 동시성 충돌 및 초당 횟수 초과 에러 방지를 위해 실전(150ms)/모의(400ms) 지연 락 추가 |
|
||||
| **담당 파일** | `src/dotnet/QuantEngine.Infrastructure/Services/KisApiClient.cs` |
|
||||
| **상태** | ✅ 완료 (2026-07-12) |
|
||||
|
||||
---
|
||||
|
||||
#### WBS-7.15 Gitea CI/CD 배포 워크플로 체인 직렬화
|
||||
|
||||
| 항목 | 내용 |
|
||||
|------|------|
|
||||
| **작업** | 배포 선후 관계 꼬임 방지를 위해 CI (Validators) ➡ Prepare Release ➡ Deploy-Prod 순차적 실행 연결 |
|
||||
| **담당 파일** | `.gitea/workflows/prepare-release.yml`, `.gitea/workflows/deploy-prod.yml` |
|
||||
| **상태** | ✅ 완료 (2026-07-12) |
|
||||
|
||||
---
|
||||
|
||||
#### WBS-7.16 배포 버전 및 version.txt 동적 런타임 맵핑
|
||||
|
||||
| 항목 | 내용 |
|
||||
|------|------|
|
||||
| **작업** | 빌드 시점에 version.txt를 함께 인쇄하고 C# 런타임이 이를 동적 조회하도록 교정하여 버저닝 오차 해결 |
|
||||
| **담당 파일** | `src/dotnet/QuantEngine.Web/Pages/Account/Login.cshtml.cs`, `src/dotnet/QuantEngine.Web/Pages/Admin/Dashboard/Index.cshtml.cs`, `.gitea/workflows/prepare-release.yml` |
|
||||
| **상태** | ✅ 완료 (2026-07-12) |
|
||||
|
||||
---
|
||||
|
||||
### WBS-8: 실증 전환 & 운영 정규화 (Phase 8, 2026-07~09)
|
||||
|
||||
> WBS-7 구조적 경화 완료 후, 실거래 데이터 누적을 통한 이론적 임계값의 실증적 검증 및 운영 안정화.
|
||||
@@ -1248,6 +1298,17 @@ LLM이 런타임에 이런 stale spec을 사실로 읽으면 할루시네이션
|
||||
|
||||
---
|
||||
|
||||
#### WBS-8.11 과거 데이터 Replay 기반 캘리브레이션 트랙
|
||||
|
||||
| 항목 | 내용 |
|
||||
|------|------|
|
||||
| **작업** | 실거래 T+20 결과 30건 적재 대기 시간 동안, 과거 1년치 역사적 데이터를 SQLite/Postgresql 로부터 가져와 시뮬레이션 기반으로 ALPHA_CALIBRATION_V2 보정 알고리즘을 1차 검증 및 검정하는 피드백 파이프라인 개발 |
|
||||
| **담당 파일** | `tools/build_replay_calibration_v1.py` (신규), `spec/calibration_registry.yaml` |
|
||||
| **성공 기준** | 모의 캘리브레이션 실행 후 최적 가중치 업데이트가 calibration_registry.yaml 에 갱신 적용되는지 테스트 |
|
||||
| **상태** | ⏳ 대기 (구조 설계 중) |
|
||||
|
||||
---
|
||||
|
||||
### WBS-9: 성능 최적화 & 엔터프라이즈 안정화 (Phase 9, 2026-08~10)
|
||||
|
||||
> WBS-8의 실증 검증 완료 후, 성능 최적화와 운영 안정성을 극대화하는 단계.
|
||||
@@ -1403,8 +1464,21 @@ WBS-8.8 (KIS 리팩터) — 독립적 (원격 병행)
|
||||
|
||||
> **📌 보강 문서(2026-06-30):** 본 WBS-10 의 다수 항목이 `완료` 표기되어 있으나 실측 결과 일부 괴리(10.6 파이프라인·10.9 보안 실질 미완성)가 확인되었다. 마이그레이션 완성 우선 + 상용화 잔여 작업의 재정의는 [WBS_10_DOTNET_MIGRATION_HARDENING_2026_06_30.md](./WBS_10_DOTNET_MIGRATION_HARDENING_2026_06_30.md) 참조.
|
||||
|
||||
> 상세 작업 가이드(YAML): [WBS_10_DOTNET_MIGRATION_ROADMAP.yaml](./WBS_10_DOTNET_MIGRATION_ROADMAP.yaml)
|
||||
> 실행 경로 인벤토리: [WBS_10_DOTNET_MIGRATION_INVENTORY.yaml](./WBS_10_DOTNET_MIGRATION_INVENTORY.yaml)
|
||||
> 실행 분해 계획: [WBS_10_DOTNET_MIGRATION_EXECUTION_PLAN.yaml](./WBS_10_DOTNET_MIGRATION_EXECUTION_PLAN.yaml)
|
||||
> 실행 분해 검증기: `tools/validate_dotnet_migration_execution_plan_v1.py`
|
||||
> parity 계약: [WBS_10_DOTNET_PARITY_CONTRACT.yaml](./WBS_10_DOTNET_PARITY_CONTRACT.yaml)
|
||||
> provenance 계약: [WBS_10_DOTNET_PROVENANCE_CONTRACT.yaml](./WBS_10_DOTNET_PROVENANCE_CONTRACT.yaml)
|
||||
> scheduler contract: [WBS_10_DOTNET_SCHEDULER_CONTRACT.yaml](./WBS_10_DOTNET_SCHEDULER_CONTRACT.yaml)
|
||||
> normalization contract: [WBS_10_DOTNET_NORMALIZATION_CONTRACT.yaml](./WBS_10_DOTNET_NORMALIZATION_CONTRACT.yaml)
|
||||
> idempotency contract: [WBS_10_DOTNET_IDEMPOTENCY_CONTRACT.yaml](./WBS_10_DOTNET_IDEMPOTENCY_CONTRACT.yaml)
|
||||
> ci/cd chain contract: [WBS_10_DOTNET_CICD_CHAIN_CONTRACT.yaml](./WBS_10_DOTNET_CICD_CHAIN_CONTRACT.yaml)
|
||||
> domain parity backlog: [WBS_10_DOTNET_DOMAIN_PARITY_BACKLOG.yaml](./WBS_10_DOTNET_DOMAIN_PARITY_BACKLOG.yaml)
|
||||
> read model contract: [WBS_10_DOTNET_READ_MODEL_CONTRACT.yaml](./WBS_10_DOTNET_READ_MODEL_CONTRACT.yaml)
|
||||
|
||||
> 현황 진단(2026-06-26): .NET 프로젝트는 Python 엔진(41 모듈, 14,500 LOC) 대비 5~10%(~1,400 LOC) 수준.
|
||||
> Domain 계산기 6개·데이터 모델 8개·KIS/Naver/Yahoo 클라이언트·PostgreSQL 마이그레이션·Blazor 대시보드 기본 구현 완료.
|
||||
> Domain 계산기 6개·데이터 모델 8개·KIS/Naver/Yahoo 클라이언트·PostgreSQL 마이그레이션·Razor Pages 어드민 대시보드 기본 구현 완료.
|
||||
> **미구현**: Application 서비스 일부, 공식 엔진, 하네스 주입, 파이프라인 오케스트레이터.
|
||||
> **발견된 결함 5건**: D1) Tests.csproj Core ProjectReference 누락, D2) Tests sln 미등록, D3) appsettings.json 비밀번호 하드코딩, D4) NU1510 불필요 패키지, D5) Class1.cs placeholder 2개.
|
||||
|
||||
@@ -1420,7 +1494,7 @@ WBS-10.1 (기반 결함 수정)
|
||||
├──→ WBS-10.7 (Application 서비스)
|
||||
│ └──→ WBS-10.8 (데이터 수집 오케스트레이터)
|
||||
├──→ WBS-10.9 (보안 강화)
|
||||
└──→ WBS-10.10 (Blazor 대시보드 고도화)
|
||||
└──→ WBS-10.10 (Razor Pages 어드민 대시보드 고도화)
|
||||
```
|
||||
|
||||
---
|
||||
@@ -1659,11 +1733,11 @@ WBS-10.1 (기반 결함 수정)
|
||||
|
||||
---
|
||||
|
||||
#### WBS-10.10 Blazor 대시보드 고도화
|
||||
#### WBS-10.10 Razor Pages 어드민 대시보드 고도화
|
||||
|
||||
| 항목 | 내용 |
|
||||
|------|------|
|
||||
| **작업** | Python snapshot_admin_server_v1.py의 편집/조회 기능을 Blazor SSR로 확장. 기본 템플릿 페이지 제거 |
|
||||
| **작업** | Python snapshot_admin_server_v1.py의 편집/조회 기능을 Razor Pages 뷰 및 핸들러로 구현. 기본 템플릿 페이지 제거 |
|
||||
| **현재 상태** | `Dashboard.razor`는 데이터 비의존형 상태표시로 단순화되었고, `Operations.razor`가 `Temp/operational_report.json` 고정 렌더 경로를 제공하며, Counter/Weather 기본 페이지는 삭제됨. 공개 배포본은 아직 이전 빌드가 남아 있을 수 있으므로 CI/CD 동기화가 필요함 |
|
||||
| **담당 파일** | `src/dotnet/QuantEngine.Web/Components/Pages/Dashboard.razor`, `Operations.razor`, `NavMenu.razor` |
|
||||
| **상태** | 완료 |
|
||||
@@ -1686,28 +1760,39 @@ WBS-10.1 (기반 결함 수정)
|
||||
|
||||
---
|
||||
|
||||
#### WBS-10.11 Blazor 및 API-First 개발 가이드라인 수립
|
||||
#### WBS-10.11 Razor Pages 개발 가이드라인 수립
|
||||
| 항목 | 내용 |
|
||||
|------|------|
|
||||
| **작업** | [Temp/CLAUDE.md](file:///C:/Temp/data_feed/Temp/CLAUDE.md)의 API-First 아키텍처, 이중 토큰 인증, SignalR, MudBlazor UX 패턴 등 Blazor 관련 핵심 개발 지침을 [AGENTS.md](file:///C:/Temp/data_feed/AGENTS.md)에 차용/반영 |
|
||||
| **작업** | [Temp/CLAUDE.md](file:///C:/Temp/data_feed/Temp/CLAUDE.md)의 API-First 아키텍처, 이중 토큰 인증, SignalR, Tabler UX 및 CSRF 방어 등 Razor Pages 관련 핵심 개발 지침을 [AGENTS.md](file:///C:/Temp/data_feed/AGENTS.md)에 차용/반영 |
|
||||
| **현재 상태** | [Temp/CLAUDE.md](file:///C:/Temp/data_feed/Temp/CLAUDE.md) 분석 후 [AGENTS.md](file:///C:/Temp/data_feed/AGENTS.md)의 Section 5b로 이식 완료 |
|
||||
| **담당 파일** | [docs/ROADMAP_WBS.md](file:///C:/Temp/data_feed/docs/ROADMAP_WBS.md), [AGENTS.md](file:///C:/Temp/data_feed/AGENTS.md) |
|
||||
| **상태** | 완료 |
|
||||
|
||||
| 세부 WBS | 작업 | 성공 판단 데이터 |
|
||||
|----------|------|------------------|
|
||||
| 10.11.1 | CLAUDE.md의 Blazor 참조 지침 핵심사항 추출 및 공식화 | [Temp/CLAUDE.md](file:///C:/Temp/data_feed/Temp/CLAUDE.md) 분석 내역 도출 |
|
||||
| 10.11.2 | AGENTS.md에 Blazor 개발 규칙 5b 섹션 신설 및 적용 | [AGENTS.md](file:///C:/Temp/data_feed/AGENTS.md) 내 5b 섹션 코드 삽입 완료 |
|
||||
| 10.11.1 | CLAUDE.md 및 실제 적용된 Razor Pages 지침 핵심사항 추출 및 공식화 | [Temp/CLAUDE.md](file:///C:/Temp/data_feed/Temp/CLAUDE.md) 분석 내역 도출 |
|
||||
| 10.11.2 | AGENTS.md에 Razor Pages 개발 규칙 5b 섹션 신설 및 적용 | [AGENTS.md](file:///C:/Temp/data_feed/AGENTS.md) 내 5b 섹션 코드 삽입 완료 |
|
||||
| 10.11.3 | 스펙 검증 스크립트 실행을 통한 구성 유효성 검증 | `validate_specs.py` 무오류 통과 |
|
||||
|
||||
**성공 하네스 (데이터 기준)**:
|
||||
```
|
||||
검증: python tools/validate_specs.py → EXIT 0
|
||||
검증: C:\Temp\data_feed\AGENTS.md 내에 '5b. Blazor & API-First 개발 규칙' 및 'IXxxBrowserClient', 'TokenRefreshHandler' 키워드 존재
|
||||
검증: C:\Temp\data_feed\AGENTS.md 내에 '5b. Razor Pages 개발 규칙' 및 'IXxxBrowserClient', 'TokenRefreshHandler' 키워드 존재
|
||||
```
|
||||
|
||||
---
|
||||
|
||||
#### WBS-10.12 Playwright 기반 Razor Pages 어드민 UI E2E 자동화
|
||||
|
||||
| 항목 | 내용 |
|
||||
|------|------|
|
||||
| **작업** | 대시보드 로그인, 데이터 수집 상세 조회, DB 테이블 변경 및 저장 폼 제출 등 핵심 UI 시나리오에 대해 Playwright를 이용한 무인 검증 스크립트 작성 및 CI 파이프라인 탑재 |
|
||||
| **담당 파일** | `tests/e2e/RazorPagesSmokeTests.cs` (신규), `.gitea/workflows/ci.yml` |
|
||||
| **성공 기준** | CI 파이프라인 실행 시 Playwright 테스트 스위트가 에러 없이 모두 PASS 완료 |
|
||||
| **상태** | ⏳ 대기 (구조 설계 중) |
|
||||
|
||||
---
|
||||
|
||||
## 3. 완성도 로드맵 매트릭스
|
||||
|
||||
| WBS | 우선순위 | 난이도 | 선행조건 | 예상 기간 | 현재 완성도 |
|
||||
@@ -1755,8 +1840,8 @@ WBS-10.1 (기반 결함 수정)
|
||||
| 10.7 Application 서비스 | 🟠 High | 중간 | 10.1 | 3시간 | 0% |
|
||||
| 10.8 데이터 수집 오케스트레이터 | 🟡 Medium | 중간 | 10.7 | 4시간 | 0% |
|
||||
| 10.9 보안 강화 | 🟠 High | 낮음 | 10.1 | 1시간 | 0% |
|
||||
| 10.10 Blazor 대시보드 고도화 | 🟡 Medium | 중간 | 10.7 | 4시간 | 0% |
|
||||
| 10.11 Blazor 개발 지침 차용 | 🟢 Low | 낮음 | 없음 | 1시간 | **100%** ✅ (2026-06-29) |
|
||||
| 10.10 Razor Pages 어드민 대시보드 고도화 | 🟡 Medium | 중간 | 10.7 | 4시간 | 0% |
|
||||
| 10.11 Razor Pages 개발 지침 수립 | 🟢 Low | 낮음 | 없음 | 1시간 | **100%** ✅ (2026-06-29) |
|
||||
|
||||
---
|
||||
|
||||
@@ -2271,3 +2356,30 @@ python tools/validate_snapshot_admin_web_v1.py
|
||||
> 이 문서는 `docs/ROADMAP_WBS.md` 에 저장됩니다.
|
||||
> 스프린트 완료마다 **완성도 KPI 섹션**을 업데이트하세요.
|
||||
> 모든 WBS 항목의 구현 시 반드시 **하네스 성공 기준**을 먼저 충족 후 다음 단계로 진행합니다.
|
||||
|
||||
---
|
||||
|
||||
## 차세대 퀀트 엔진 로드맵/WBS 포인터 (2026-07-12)
|
||||
|
||||
이후의 퀀트 엔진 진화 로드맵(M0–M5: 실증 하네스 → 수집 배선 → 시계열 저장소 →
|
||||
실데이터 팩터 → 백테스팅 → 포트폴리오/레짐)과 상세 WBS는 **기계 판정 YAML**로 관리한다:
|
||||
|
||||
- **스펙(단일 진실 원천)**: `spec/60_quant_engine_wbs.yaml` (formula_id: `QUANT_ENGINE_WBS_V1`)
|
||||
- **단일 작업 검증**: `python tools/verify_wbs_task_v1.py --task <TASK_ID>` → `Temp/evidence/<TASK_ID>/verdict.json`
|
||||
- **전체 WBS 게이트**: `python tools/validate_quant_engine_wbs_v1.py` → `Temp/quant_engine_wbs_v1.json`
|
||||
|
||||
완료 판정 원칙: 작업은 게이트 실행(PASS)으로만 `DONE` 이 될 수 있다.
|
||||
BE = PostgreSQL 쿼리 + Serilog 로그 패턴 + JSON 아티팩트, FE = Playwright(DOM assert + API 기대값 대조 + 스크린샷).
|
||||
|
||||
### 폐기: schemas/generated/ + src/quant_engine/models/generated/ (2026-07-12, QE-M0-07)
|
||||
|
||||
`schemas/generated/*.schema.json`(174) + `src/quant_engine/models/generated/*.py`(347)로
|
||||
구성된 스키마-모델 생성 레이어를 **폐기**했다. 기존 `runtime/python/core/formulas/generated/`
|
||||
(172개 stub)와 동일한 목적(공식 메타데이터 서술)을 범용 wrapper로 중복 구현했을 뿐 실질
|
||||
계산 로직이 전혀 없었고, 검증도 `validate_schema_model_generation_v1.py`가 파일 개수만
|
||||
세는 가짜 게이트였다(QUANT_ENGINE_WBS_V1 재검토에서 발견). CI 시간만 늘리고 기능적
|
||||
이득이 없어 삭제. `tools/generate_schema_model_generation_evidence_v1.py`,
|
||||
`tools/validate_schema_model_generation_v1.py`, `src/quant_engine/generate_models_from_schema.py`
|
||||
및 ci.yml/`spec/41_release_dag.yaml`의 관련 스텝·노드도 함께 제거했다.
|
||||
`schemas/generated/gas_adapter_contract.schema.json`은 별개 목적(GAS 어댑터 계약 검증,
|
||||
`validate_gas_adapter_contract_v1.py`)으로 쓰이므로 보존.
|
||||
|
||||
@@ -0,0 +1,48 @@
|
||||
formula_id: WBS_10_DOTNET_CICD_CHAIN_CONTRACT_V1
|
||||
owner: QuantEngine
|
||||
status: draft
|
||||
goal: "CI, prepare-release, deploy-prod 순차 게이트를 고정한다."
|
||||
|
||||
workflows:
|
||||
ci:
|
||||
file: .gitea/workflows/ci.yml
|
||||
name: "Validators (Pushes and Pull Requests)"
|
||||
triggers:
|
||||
- push: main
|
||||
- pull_request: main
|
||||
role: "upstream validator"
|
||||
prepare_release:
|
||||
file: .gitea/workflows/prepare-release.yml
|
||||
name: "Prepare Release"
|
||||
triggers:
|
||||
- workflow_run: Validators (Pushes and Pull Requests)
|
||||
- workflow_dispatch
|
||||
role: "release builder"
|
||||
upstream_gate: "Validators (Pushes and Pull Requests) success"
|
||||
deploy_prod:
|
||||
file: .gitea/workflows/deploy-prod.yml
|
||||
name: "Deploy to Production"
|
||||
triggers:
|
||||
- workflow_run: Prepare Release
|
||||
- workflow_dispatch
|
||||
role: "production deployer"
|
||||
upstream_gate: "Prepare Release success"
|
||||
|
||||
dependency_chain:
|
||||
- "Validators (Pushes and Pull Requests) -> Prepare Release -> Deploy to Production"
|
||||
|
||||
required_guards:
|
||||
- "prepare-release는 Validators 성공 없이는 실행 금지"
|
||||
- "deploy-prod는 Prepare Release 성공 없이는 실행 금지"
|
||||
- "deploy-prod는 upstream CI SHA를 release tag와 대조"
|
||||
- "모든 단계는 concurrency group을 사용해 동일 SHA 중복 실행을 차단"
|
||||
|
||||
health_checks:
|
||||
- "upstream workflow conclusion == success"
|
||||
- "release tag sha matches workflow_run head_sha"
|
||||
- "artifact 존재 확인"
|
||||
- "SSH/Gitea secret 존재 확인"
|
||||
|
||||
notes:
|
||||
- "순차 게이트는 workflow_run 연결과 검증 스텝 둘 다 필요하다."
|
||||
- "병렬 실행은 금지된다."
|
||||
@@ -0,0 +1,50 @@
|
||||
formula_id: WBS_10_DOTNET_DOMAIN_PARITY_BACKLOG_V1
|
||||
owner: QuantEngine
|
||||
status: draft
|
||||
goal: "핵심 계산기 parity 대상과 우선순위를 고정한다."
|
||||
|
||||
coverage_min: 1.0
|
||||
tolerance_policy:
|
||||
numeric_default: 0
|
||||
text_default: exact
|
||||
factor_calculator_numeric: 0.000001
|
||||
exit_stop_price_numeric: 0.0001
|
||||
|
||||
parity_targets:
|
||||
- target_id: formula_engine_timing
|
||||
source: src/dotnet/QuantEngine.Core/Domain/FormulaEngine.cs
|
||||
priority: 1
|
||||
reason: "timing decision은 downstream routing의 선행 게이트"
|
||||
- target_id: formula_engine_sell
|
||||
source: src/dotnet/QuantEngine.Core/Domain/FormulaEngine.cs
|
||||
priority: 2
|
||||
reason: "sell ratio/action은 실행 표 생성의 핵심"
|
||||
- target_id: formula_engine_final
|
||||
source: src/dotnet/QuantEngine.Core/Domain/FormulaEngine.cs
|
||||
priority: 3
|
||||
reason: "final decision은 보고/배포의 최종 산출"
|
||||
- target_id: exit_stop_price
|
||||
source: src/dotnet/QuantEngine.Core/Domain/ExitDecisions.cs
|
||||
priority: 4
|
||||
reason: "손절가 절대값 일치가 필요"
|
||||
- target_id: exit_stop_ladder
|
||||
source: src/dotnet/QuantEngine.Core/Domain/ExitDecisions.cs
|
||||
priority: 5
|
||||
reason: "워터폴 선형 처리 검증"
|
||||
- target_id: exit_heat_thresholds
|
||||
source: src/dotnet/QuantEngine.Core/Domain/ExitDecisions.cs
|
||||
priority: 6
|
||||
reason: "동적 열감 임계값 일치"
|
||||
- target_id: factor_calculator
|
||||
source: src/dotnet/QuantEngine.Core/Domain/FactorCalculator.cs
|
||||
priority: 7
|
||||
reason: "정규화된 입력 순서에서 deterministic output 보장"
|
||||
|
||||
coverage_rule:
|
||||
- "priority 1..7 모두 존재해야 한다"
|
||||
- "tolerance_policy는 숫자/텍스트 기본값을 정의해야 한다"
|
||||
- "새 parity target은 reference fixture와 함께만 추가한다"
|
||||
|
||||
notes:
|
||||
- "parity는 기능 추가가 아니라 회귀 차단 장치다."
|
||||
- "수치 재계산은 reference fixture 외에서 하지 않는다."
|
||||
@@ -0,0 +1,53 @@
|
||||
formula_id: WBS_10_DOTNET_IDEMPOTENCY_CONTRACT_V1
|
||||
owner: QuantEngine
|
||||
status: draft
|
||||
goal: "중복 실행 방지, lock/lease 정책, 재시도 경계를 표준화한다."
|
||||
|
||||
lock_domain:
|
||||
canonical_table: quantengine.workspace_lock
|
||||
fields:
|
||||
- domain
|
||||
- target_ref
|
||||
- locked_by
|
||||
- reason
|
||||
- locked_at
|
||||
invariant:
|
||||
- "같은 domain + target_ref 조합은 동시에 하나만 존재"
|
||||
- "잠금 해제는 동일 domain + target_ref 로만 수행"
|
||||
- "잠금 없는 실행은 retryable 작업으로 취급하지 않는다"
|
||||
|
||||
idempotency_key:
|
||||
required: true
|
||||
pattern: "{job_id}:{resource_key}:{run_scope}"
|
||||
scope_examples:
|
||||
- "daily-collection:collection:yyyyMMdd"
|
||||
- "hourly-price-update:ticker:yyyyMMddHH"
|
||||
- "weekly-report:report:yyyy-'W'ww"
|
||||
- "monthly-optimization:optimization:yyyy-MM"
|
||||
|
||||
lease_policy:
|
||||
required: true
|
||||
fields:
|
||||
- lease_owner
|
||||
- timeout_policy
|
||||
- retry_policy
|
||||
retry_policy:
|
||||
max_attempts: 3
|
||||
backoff: exponential
|
||||
retryable_errors:
|
||||
- transient network failure
|
||||
- upstream timeout
|
||||
- deadlock detected
|
||||
non_retryable_errors:
|
||||
- validation failure
|
||||
- contract failure
|
||||
- missing configuration
|
||||
|
||||
duplicate_execution_guards:
|
||||
- "동일 job_id/resource_key/run_scope 중복 호출 금지"
|
||||
- "동일 lock_domain이 점유 중이면 새 실행은 blocked"
|
||||
- "중복 실행이 발생하면 audit는 남기되 write path는 재진입 금지"
|
||||
|
||||
notes:
|
||||
- "idempotency는 hash 추정이 아니라 명시된 key 조합만 사용한다."
|
||||
- "lock은 수동 승인 워크플로와 동일한 canonical table을 사용한다."
|
||||
@@ -0,0 +1,98 @@
|
||||
formula_id: WBS_10_DOTNET_MIGRATION_EXECUTION_PLAN_V1
|
||||
owner: QuantEngine
|
||||
status: draft
|
||||
source_of_truth:
|
||||
- docs/WBS_10_DOTNET_MIGRATION_ROADMAP.yaml
|
||||
- docs/WBS_10_DOTNET_MIGRATION_INVENTORY.yaml
|
||||
|
||||
goal: ".NET 엔진 고도화를 실제 작업 순서로 착수 가능한 수준까지 분해한다."
|
||||
|
||||
work_packages:
|
||||
- wp_id: WBS-10-WP1
|
||||
title: "운영 경로 분해 및 전환 경계 확정"
|
||||
objective: "Python harness / .NET domain / .NET application / .NET web / read model 경계를 고정한다."
|
||||
depends_on:
|
||||
- WBS-10-A1
|
||||
inputs:
|
||||
- docs/WBS_10_DOTNET_MIGRATION_INVENTORY.yaml
|
||||
- docs/WBS_10_DOTNET_MIGRATION_ROADMAP.yaml
|
||||
outputs:
|
||||
- docs/WBS_10_DOTNET_MIGRATION_INVENTORY.yaml
|
||||
- docs/WBS_10_DOTNET_MIGRATION_EXECUTION_PLAN.yaml
|
||||
success_data:
|
||||
schema: yaml
|
||||
fields:
|
||||
- route_id
|
||||
- classification
|
||||
- keep_or_migrate
|
||||
- owner_file
|
||||
- note
|
||||
pass_condition: "migrate 대상과 keep 대상이 혼동 없이 분리됨"
|
||||
|
||||
- wp_id: WBS-10-WP2
|
||||
title: "Domain parity 우선순위 확정"
|
||||
objective: "핵심 계산기와 하네스 parity 대상을 먼저 고정한다."
|
||||
depends_on:
|
||||
- WBS-10-WP1
|
||||
inputs:
|
||||
- src/dotnet/QuantEngine.Core/Domain/FormulaEngine.cs
|
||||
- src/dotnet/QuantEngine.Core/Domain/FactorCalculator.cs
|
||||
- src/dotnet/QuantEngine.Core.Tests/FormulaEngineTests.cs
|
||||
outputs:
|
||||
- Temp/wbs10_domain_parity_backlog.json
|
||||
success_data:
|
||||
schema: json
|
||||
fields:
|
||||
- formula_id
|
||||
- parity_targets
|
||||
- tolerance
|
||||
- coverage_min
|
||||
pass_condition: "핵심 계산기 parity 대상이 누락 없이 나열됨"
|
||||
|
||||
- wp_id: WBS-10-WP3
|
||||
title: "스케줄러 서비스 수준 강화 착수"
|
||||
objective: "SchedulerService를 상태/의존성/재시도/감사 추적 서비스로 진화시킨다."
|
||||
depends_on:
|
||||
- WBS-10-WP1
|
||||
inputs:
|
||||
- src/dotnet/QuantEngine.Web/Services/SchedulerService.cs
|
||||
- spec/41_release_dag.yaml
|
||||
outputs:
|
||||
- Temp/wbs10_scheduler_service_backlog.yaml
|
||||
success_data:
|
||||
schema: yaml
|
||||
fields:
|
||||
- state_machine
|
||||
- dependency_edges
|
||||
- retry_policy
|
||||
- audit_fields
|
||||
pass_condition: "현재 cron형 호출과 서비스 수준 제어면의 차이가 정의됨"
|
||||
|
||||
- wp_id: WBS-10-WP4
|
||||
title: "read model 분리 착수"
|
||||
objective: "운영 조회를 원장/집계와 분리한다."
|
||||
depends_on:
|
||||
- WBS-10-WP1
|
||||
inputs:
|
||||
- src/dotnet/QuantEngine.Web/Pages/Admin/Dashboard/Index.cshtml.cs
|
||||
- src/dotnet/QuantEngine.Web/Pages/Admin/Collection/Index.cshtml.cs
|
||||
outputs:
|
||||
- Temp/wbs10_read_model_boundary.yaml
|
||||
success_data:
|
||||
schema: yaml
|
||||
fields:
|
||||
- projection
|
||||
- source_of_truth
|
||||
- refresh_mode
|
||||
- staleness_budget
|
||||
pass_condition: "조회 모델과 원장 모델의 경계가 설명됨"
|
||||
|
||||
execution_order:
|
||||
- WBS-10-WP1
|
||||
- WBS-10-WP2
|
||||
- WBS-10-WP3
|
||||
- WBS-10-WP4
|
||||
|
||||
notes:
|
||||
- "이 문서는 실행 가능한 작업 분해용이며, 권위는 roadmap/inventory에 남긴다."
|
||||
- "모든 success_data는 하네스가 아닌 착수 기준으로 사용한다."
|
||||
@@ -0,0 +1,86 @@
|
||||
formula_id: WBS_10_DOTNET_MIGRATION_INVENTORY_V1
|
||||
status: draft
|
||||
owner: QuantEngine
|
||||
scope:
|
||||
goal: ".NET 고도화 전환 우선순위를 결정하기 위한 운영 경로 인벤토리"
|
||||
classification:
|
||||
- python_harness
|
||||
- dotnet_domain
|
||||
- dotnet_application
|
||||
- dotnet_web
|
||||
- read_model
|
||||
|
||||
routes:
|
||||
- route_id: python_harness_validation
|
||||
path:
|
||||
- tools/validate_quant_engine_wbs_v1.py
|
||||
- tools/validate_dotnet_migration_roadmap_v1.py
|
||||
- tests/unit/test_validate_dotnet_migration_roadmap_v1.py
|
||||
classification: python_harness
|
||||
keep_or_migrate: keep
|
||||
reason: "검증 도구는 운영 엔진이 아니라 하네스/계약 검사 계층이다."
|
||||
|
||||
- route_id: python_wbs_source
|
||||
path:
|
||||
- spec/60_quant_engine_wbs.yaml
|
||||
- docs/WBS_10_DOTNET_MIGRATION_ROADMAP.yaml
|
||||
classification: python_harness
|
||||
keep_or_migrate: keep
|
||||
reason: "권위 문서와 상세 로드맵은 운영 실행물이 아니라 계약 문서다."
|
||||
|
||||
- route_id: dotnet_core_formula_engine
|
||||
path:
|
||||
- src/dotnet/QuantEngine.Core/Domain/FormulaEngine.cs
|
||||
- src/dotnet/QuantEngine.Core/Domain/FactorCalculator.cs
|
||||
- src/dotnet/QuantEngine.Core/Domain/AntiChasingCalculator.cs
|
||||
- src/dotnet/QuantEngine.Core/Domain/ProfitLockCalculator.cs
|
||||
- src/dotnet/QuantEngine.Core/Domain/PullbackTriggerCalculator.cs
|
||||
- src/dotnet/QuantEngine.Core/Domain/SellPriceSanityChecker.cs
|
||||
- src/dotnet/QuantEngine.Core/Domain/KrxTickNormalizer.cs
|
||||
classification: dotnet_domain
|
||||
keep_or_migrate: migrate
|
||||
reason: "운영 계산의 canonical engine 후보이며 parity harness의 주 대상이다."
|
||||
|
||||
- route_id: dotnet_application_orchestration
|
||||
path:
|
||||
- src/dotnet/QuantEngine.Application/Services/PipelineOrchestrator.cs
|
||||
- src/dotnet/QuantEngine.Application/Services/KisDataCollectionOrchestrator.cs
|
||||
- src/dotnet/QuantEngine.Application/Services/HistoryIngestionService.cs
|
||||
- src/dotnet/QuantEngine.Application/Services/PriceDataNormalizer.cs
|
||||
- src/dotnet/QuantEngine.Application/Services/SourcePriorityResolver.cs
|
||||
- src/dotnet/QuantEngine.Application/Services/DataCollectionService.cs
|
||||
classification: dotnet_application
|
||||
keep_or_migrate: migrate
|
||||
reason: "Python 오케스트레이션/수집/정규화 흐름을 .NET 서비스 계층으로 수렴시킨다."
|
||||
|
||||
- route_id: dotnet_web_scheduler
|
||||
path:
|
||||
- src/dotnet/QuantEngine.Web/Services/SchedulerService.cs
|
||||
- src/dotnet/QuantEngine.Web/Endpoints/CollectionEndpoints.cs
|
||||
- src/dotnet/QuantEngine.Web/Pages/Admin/Operations/Index.cshtml.cs
|
||||
classification: dotnet_web
|
||||
keep_or_migrate: migrate
|
||||
reason: "스케줄러와 운영 제어면은 서비스 수준으로 고도화 대상이다."
|
||||
|
||||
- route_id: dotnet_read_models
|
||||
path:
|
||||
- src/dotnet/QuantEngine.Web/Pages/Admin/Dashboard/Index.cshtml.cs
|
||||
- src/dotnet/QuantEngine.Web/Pages/Admin/Collection/Index.cshtml.cs
|
||||
- src/dotnet/QuantEngine.Web/Pages/Admin/Monitoring/Index.cshtml.cs
|
||||
- src/dotnet/QuantEngine.Web/Pages/Admin/Database/Index.cshtml.cs
|
||||
classification: read_model
|
||||
keep_or_migrate: migrate
|
||||
reason: "운영 조회는 역정규화 read model로 분리한다."
|
||||
|
||||
priority_order:
|
||||
- python_harness_validation
|
||||
- python_wbs_source
|
||||
- dotnet_core_formula_engine
|
||||
- dotnet_application_orchestration
|
||||
- dotnet_web_scheduler
|
||||
- dotnet_read_models
|
||||
|
||||
notes:
|
||||
- "운영 경로는 keep_or_migrate가 migrate인 대상만 .NET canonical 대상으로 본다."
|
||||
- "python_harness는 thin wrapper 또는 검증용으로만 유지한다."
|
||||
- "read_model은 원장 대체가 아니라 서빙 전용이다."
|
||||
@@ -0,0 +1,387 @@
|
||||
formula_id: WBS_10_DOTNET_MIGRATION_ROADMAP_V1
|
||||
title: "WBS-10 .NET 엔진 고도화 상세 로드맵"
|
||||
owner: "QuantEngine"
|
||||
source_of_truth:
|
||||
- docs/ROADMAP_WBS.md
|
||||
- spec/60_quant_engine_wbs.yaml
|
||||
- spec/41_release_dag.yaml
|
||||
- spec/00_execution_contract.yaml
|
||||
|
||||
scope:
|
||||
goal: "Python 검증/보조 도구는 유지하고, 운영 엔진은 .NET으로 수렴시키며, 테이블 구조와 스케줄러를 서비스 수준으로 고도화한다."
|
||||
non_goals:
|
||||
- "가격/수량/임계값의 LLM 즉석 계산"
|
||||
- "운영 경로의 Python 재도입"
|
||||
- "원천 데이터의 무분별한 중복 저장"
|
||||
|
||||
principles:
|
||||
- "Python은 harness, verification, conversion tooling에 집중한다."
|
||||
- ".NET은 runtime engine, scheduler, API, operational read model을 담당한다."
|
||||
- "쓰기 경로는 정규화, 읽기 경로는 의도된 역정규화로 분리한다."
|
||||
- "모든 숫자는 provenance와 검증 아티팩트를 가져야 한다."
|
||||
- "스케줄러는 단순 cron이 아니라 상태/의존성/재시도/감사 추적을 갖는 서비스로 취급한다."
|
||||
|
||||
roadmap:
|
||||
phase_name: "WBS-10 .NET 엔진 고도화"
|
||||
phase_goal: "Python-to-.NET 전환, 테이블 정규화/역정규화, 서비스급 스케줄러, parity harness 정착"
|
||||
exit_gate: "dotnet runtime parity PASS + scheduler observability PASS + normalized/denormalized schema contract PASS + evidence artifacts recorded"
|
||||
execution_order:
|
||||
- WBS-10-A1
|
||||
- WBS-10-B1
|
||||
- WBS-10-C1
|
||||
- WBS-10-A2
|
||||
- WBS-10-B2
|
||||
- WBS-10-C2
|
||||
- WBS-10-A3
|
||||
- WBS-10-B3
|
||||
- WBS-10-C3
|
||||
tracks:
|
||||
- track_id: WBS-10-A
|
||||
name: "Python → .NET 전환"
|
||||
description: "운영 경로에서 Python 의존을 제거하고, 동일 결과를 내는 .NET canonical 구현으로 이식한다."
|
||||
tasks:
|
||||
- task_id: WBS-10-A1
|
||||
title: "실행 경로 인벤토리 및 전환 우선순위 확정"
|
||||
status: PENDING
|
||||
depends_on: []
|
||||
owner_files:
|
||||
- src/quant_engine/
|
||||
- tools/
|
||||
- spec/60_quant_engine_wbs.yaml
|
||||
success_data_guide:
|
||||
required_inputs:
|
||||
- "운영 진입점 목록"
|
||||
- "Python CLI/모듈 호출 지점"
|
||||
- "배포/스케줄러 호출 경로"
|
||||
expected_outputs:
|
||||
- "전환 우선순위 표"
|
||||
- "운영 경로 / 보조 경로 분리 결과"
|
||||
expected_artifact_schema:
|
||||
format: markdown
|
||||
fields:
|
||||
- route
|
||||
- owner
|
||||
- runtime
|
||||
- keep_or_migrate
|
||||
- notes
|
||||
failure_conditions:
|
||||
- "운영 경로와 보조 경로가 섞여 있으면 FAIL"
|
||||
- "Python 운영 경로가 누락 없이 남아 있지 않으면 FAIL"
|
||||
verification_commands:
|
||||
- "python tools/validate_quant_engine_wbs_v1.py"
|
||||
evidence_artifacts:
|
||||
- "Temp/evidence/WBS-10-A1/verdict.json"
|
||||
done_when:
|
||||
- "운영 경로와 보조 경로가 문서화됨"
|
||||
- "전환 대상/비대상 경로가 분리됨"
|
||||
|
||||
- task_id: WBS-10-A2
|
||||
title: ".NET 도메인 서비스로 Python 계산 로직 이식"
|
||||
status: PENDING
|
||||
depends_on:
|
||||
- WBS-10-A1
|
||||
owner_files:
|
||||
- src/dotnet/QuantEngine.Core/
|
||||
- src/dotnet/QuantEngine.Application/
|
||||
success_data_guide:
|
||||
required_inputs:
|
||||
- "Python reference result"
|
||||
- "현재 .NET implementation"
|
||||
- "golden parity dataset"
|
||||
expected_outputs:
|
||||
- "동일 입력에 대한 .NET 결과"
|
||||
- "Python 대비 parity diff 0 또는 허용오차 내"
|
||||
expected_artifact_schema:
|
||||
format: json
|
||||
fields:
|
||||
- formula_id
|
||||
- input_digest
|
||||
- python_output
|
||||
- dotnet_output
|
||||
- diff
|
||||
- tolerance
|
||||
- gate
|
||||
failure_conditions:
|
||||
- "diff가 tolerance를 초과하면 FAIL"
|
||||
- "입력 digest가 없으면 FAIL"
|
||||
verification_commands:
|
||||
- "dotnet test src/dotnet/QuantEngine.Core.Tests/QuantEngine.Core.Tests.csproj -c Release"
|
||||
- "python tools/verify_wbs_task_v1.py --task WBS-10-A2"
|
||||
evidence_artifacts:
|
||||
- "Temp/evidence/WBS-10-A2/verdict.json"
|
||||
done_when:
|
||||
- "Python reference와 .NET output이 parity를 만족"
|
||||
- "핵심 계산이 서비스 계층으로 이동됨"
|
||||
|
||||
- task_id: WBS-10-A3
|
||||
title: "Python thin-wrapper 정리 및 운영 금지 경로 분리"
|
||||
status: PENDING
|
||||
depends_on:
|
||||
- WBS-10-A2
|
||||
owner_files:
|
||||
- tools/
|
||||
- src/quant_engine/
|
||||
success_data_guide:
|
||||
required_inputs:
|
||||
- "현재 Python script 목록"
|
||||
- "runtime entrypoint 목록"
|
||||
expected_outputs:
|
||||
- "운영용 thin wrapper만 남김"
|
||||
- "직접 운영 경로 금지 목록"
|
||||
expected_artifact_schema:
|
||||
format: yaml
|
||||
fields:
|
||||
- wrapper_path
|
||||
- purpose
|
||||
- runtime_usage
|
||||
- allowed_or_disallowed
|
||||
failure_conditions:
|
||||
- "운영용으로 직접 호출 가능한 Python entrypoint가 남아 있으면 FAIL"
|
||||
verification_commands:
|
||||
- "python tools/validate_quant_engine_wbs_v1.py"
|
||||
evidence_artifacts:
|
||||
- "Temp/evidence/WBS-10-A3/verdict.json"
|
||||
done_when:
|
||||
- "운영 진입점이 .NET 또는 thin wrapper로만 남음"
|
||||
|
||||
- track_id: WBS-10-B
|
||||
name: "테이블 정규화 + 역정규화"
|
||||
description: "원천/원장/배포 이력을 정규화하고, UI/대시보드용 읽기 모델은 역정규화한다."
|
||||
tasks:
|
||||
- task_id: WBS-10-B1
|
||||
title: "정규화 기준 테이블 계약 확정"
|
||||
status: PENDING
|
||||
depends_on: []
|
||||
owner_files:
|
||||
- spec/
|
||||
- src/dotnet/QuantEngine.Infrastructure/
|
||||
success_data_guide:
|
||||
required_inputs:
|
||||
- "source table 목록"
|
||||
- "primary key / foreign key 정의"
|
||||
- "중복 제거 대상"
|
||||
expected_outputs:
|
||||
- "canonical normalized schema"
|
||||
- "table ownership map"
|
||||
expected_artifact_schema:
|
||||
format: yaml
|
||||
fields:
|
||||
- table
|
||||
- keys
|
||||
- cardinality
|
||||
- owner
|
||||
- write_path
|
||||
failure_conditions:
|
||||
- "canonical table이 둘 이상이면 FAIL"
|
||||
- "정규화 대상과 읽기 모델이 혼동되면 FAIL"
|
||||
verification_commands:
|
||||
- "python tools/validate_quant_engine_wbs_v1.py"
|
||||
evidence_artifacts:
|
||||
- "Temp/evidence/WBS-10-B1/verdict.json"
|
||||
done_when:
|
||||
- "쓰기 경로의 canonical table contract가 문서화됨"
|
||||
|
||||
- task_id: WBS-10-B2
|
||||
title: "운영 조회용 역정규화 read model 설계"
|
||||
status: PENDING
|
||||
depends_on:
|
||||
- WBS-10-B1
|
||||
owner_files:
|
||||
- src/dotnet/QuantEngine.Web/
|
||||
- src/dotnet/QuantEngine.Application/
|
||||
success_data_guide:
|
||||
required_inputs:
|
||||
- "대시보드/운영 화면 요구사항"
|
||||
- "조회 성능 목표"
|
||||
expected_outputs:
|
||||
- "읽기 전용 denormalized projection"
|
||||
- "refresh/update strategy"
|
||||
expected_artifact_schema:
|
||||
format: yaml
|
||||
fields:
|
||||
- projection_name
|
||||
- source_tables
|
||||
- refresh_mode
|
||||
- staleness_budget
|
||||
- consumers
|
||||
failure_conditions:
|
||||
- "읽기 모델이 원천 원장과 직접 동일하면 FAIL"
|
||||
- "staleness_budget 미정이면 FAIL"
|
||||
verification_commands:
|
||||
- "python tools/validate_quant_engine_wbs_v1.py"
|
||||
evidence_artifacts:
|
||||
- "Temp/evidence/WBS-10-B2/verdict.json"
|
||||
done_when:
|
||||
- "읽기 모델이 원천 원장과 분리됨"
|
||||
- "운영 화면이 read model만 참조함"
|
||||
|
||||
- task_id: WBS-10-B3
|
||||
title: "중복/파생 데이터 경계 및 기술부채 방지 계약"
|
||||
status: PENDING
|
||||
depends_on:
|
||||
- WBS-10-B1
|
||||
- WBS-10-B2
|
||||
owner_files:
|
||||
- spec/
|
||||
- governance/
|
||||
success_data_guide:
|
||||
required_inputs:
|
||||
- "allowed denormalization cases"
|
||||
- "forbidden duplication cases"
|
||||
expected_outputs:
|
||||
- "파생 데이터 허용 규칙"
|
||||
- "canonical source 정의"
|
||||
expected_artifact_schema:
|
||||
format: yaml
|
||||
fields:
|
||||
- source_of_truth
|
||||
- derived_table
|
||||
- allowed_reason
|
||||
- forbidden_reason
|
||||
failure_conditions:
|
||||
- "source_of_truth가 명시되지 않으면 FAIL"
|
||||
- "금지 사유가 없는 중복이면 FAIL"
|
||||
verification_commands:
|
||||
- "python tools/validate_quant_engine_wbs_v1.py"
|
||||
evidence_artifacts:
|
||||
- "Temp/evidence/WBS-10-B3/verdict.json"
|
||||
done_when:
|
||||
- "역정규화가 의도된 캐시/서빙으로만 허용됨"
|
||||
|
||||
- track_id: WBS-10-C
|
||||
name: "서비스 수준 스케줄러"
|
||||
description: "cron 수준을 넘어 상태 머신, idempotency, dependency, audit, retry를 갖는 스케줄러로 강화한다."
|
||||
tasks:
|
||||
- task_id: WBS-10-C1
|
||||
title: "스케줄러 상태 머신 및 실행 이력 계약"
|
||||
status: PENDING
|
||||
depends_on: []
|
||||
owner_files:
|
||||
- src/dotnet/QuantEngine.Application/
|
||||
- src/dotnet/QuantEngine.Web/Services/
|
||||
success_data_guide:
|
||||
required_inputs:
|
||||
- "job state list"
|
||||
- "transition rule"
|
||||
- "run id / lease key"
|
||||
expected_outputs:
|
||||
- "pending/running/succeeded/failed/retrying/blocked 상태 정의"
|
||||
- "audit trail schema"
|
||||
expected_artifact_schema:
|
||||
format: yaml
|
||||
fields:
|
||||
- state
|
||||
- allowed_transitions
|
||||
- lease_owner
|
||||
- timeout_policy
|
||||
- audit_fields
|
||||
failure_conditions:
|
||||
- "상태 전이표가 없으면 FAIL"
|
||||
- "lease_owner 또는 timeout_policy가 없으면 FAIL"
|
||||
verification_commands:
|
||||
- "python tools/validate_quant_engine_wbs_v1.py"
|
||||
evidence_artifacts:
|
||||
- "Temp/evidence/WBS-10-C1/verdict.json"
|
||||
done_when:
|
||||
- "스케줄러의 상태 전이가 데이터로 설명됨"
|
||||
|
||||
- task_id: WBS-10-C2
|
||||
title: "idempotency 및 concurrency control"
|
||||
status: PENDING
|
||||
depends_on:
|
||||
- WBS-10-C1
|
||||
owner_files:
|
||||
- src/dotnet/QuantEngine.Application/
|
||||
- spec/41_release_dag.yaml
|
||||
success_data_guide:
|
||||
required_inputs:
|
||||
- "중복 실행 시나리오"
|
||||
- "동시 실행 금지 자원 목록"
|
||||
expected_outputs:
|
||||
- "중복 적재 방지"
|
||||
- "자원별 lock/lease 정책"
|
||||
expected_artifact_schema:
|
||||
format: yaml
|
||||
fields:
|
||||
- resource
|
||||
- lock_key
|
||||
- idempotency_key
|
||||
- retry_policy
|
||||
failure_conditions:
|
||||
- "idempotency_key가 없으면 FAIL"
|
||||
- "동시 실행 금지 자원 목록이 비어 있으면 FAIL"
|
||||
verification_commands:
|
||||
- "python tools/validate_quant_engine_wbs_v1.py"
|
||||
evidence_artifacts:
|
||||
- "Temp/evidence/WBS-10-C2/verdict.json"
|
||||
done_when:
|
||||
- "같은 run이 두 번 실행돼도 결과가 중복되지 않음"
|
||||
|
||||
- task_id: WBS-10-C3
|
||||
title: "health gate + retry policy + dependency graph"
|
||||
status: PENDING
|
||||
depends_on:
|
||||
- WBS-10-C1
|
||||
- WBS-10-C2
|
||||
owner_files:
|
||||
- .gitea/workflows/
|
||||
- src/dotnet/QuantEngine.Web/
|
||||
success_data_guide:
|
||||
required_inputs:
|
||||
- "업스트림 의존성 목록"
|
||||
- "retry 가능한 failure 유형"
|
||||
- "health check 대상"
|
||||
expected_outputs:
|
||||
- "ci -> prepare-release -> deploy-prod 순차 게이트"
|
||||
- "transient failure만 재시도"
|
||||
expected_artifact_schema:
|
||||
format: yaml
|
||||
fields:
|
||||
- upstream_workflow
|
||||
- downstream_workflow
|
||||
- retryable_errors
|
||||
- health_checks
|
||||
failure_conditions:
|
||||
- "순차 게이트가 아닌 병렬 실행이면 FAIL"
|
||||
- "retryable_errors가 비어 있으면 FAIL"
|
||||
verification_commands:
|
||||
- "python tools/validate_quant_engine_wbs_v1.py"
|
||||
evidence_artifacts:
|
||||
- "Temp/evidence/WBS-10-C3/verdict.json"
|
||||
done_when:
|
||||
- "스케줄러가 선행 성공 없이는 후속 실행을 시작하지 않음"
|
||||
|
||||
deliverables:
|
||||
- "docs/WBS_10_DOTNET_MIGRATION_ROADMAP.yaml"
|
||||
- "AGENTS.md routing update"
|
||||
- "필요 시 docs/ROADMAP_WBS.md에 pointer 추가"
|
||||
|
||||
alignment:
|
||||
canonical_status: "supplementary"
|
||||
canonical_note: "이 YAML은 기존 WBS-10의 상세 실행 가이드이며, 권위는 docs/ROADMAP_WBS.md와 spec/60_quant_engine_wbs.yaml에 남긴다."
|
||||
spec_task_map:
|
||||
WBS-10.1: WBS-10-A1
|
||||
WBS-10.2: WBS-10-C1
|
||||
WBS-10.3: WBS-10-A2
|
||||
WBS-10.4: WBS-10-A2
|
||||
WBS-10.5: WBS-10-A2
|
||||
WBS-10.6: WBS-10-C2
|
||||
WBS-10.7: WBS-10-B2
|
||||
WBS-10.8: WBS-10-C3
|
||||
WBS-10.9: WBS-10-B3
|
||||
WBS-10.10: WBS-10-B2
|
||||
WBS-10.11: WBS-10-A3
|
||||
WBS-10.12: WBS-10-C3
|
||||
roadmap_section_map:
|
||||
WBS-10.1: "기반 결함 수정"
|
||||
WBS-10.2: "테스트 인프라 구축"
|
||||
WBS-10.3: "Domain 계산기 Parity 검증 (Python ↔ C# 동등성)"
|
||||
WBS-10.4: "공식 계산 엔진 C# 포팅 (compute_formula_outputs.py 대응)"
|
||||
WBS-10.5: "하네스 주입 엔진 C# 포팅 (inject_computed_harness.py 대응)"
|
||||
WBS-10.6: "파이프라인 오케스트레이터"
|
||||
WBS-10.7: "Application 서비스 레이어 구축"
|
||||
WBS-10.8: "데이터 수집 오케스트레이터"
|
||||
WBS-10.9: "보안 강화"
|
||||
WBS-10.10: "Razor Pages 어드민 대시보드 고도화"
|
||||
WBS-10.11: "Razor Pages 개발 가이드라인 수립"
|
||||
WBS-10.12: "Playwright 기반 Razor Pages 어드민 UI E2E 자동화"
|
||||
@@ -0,0 +1,85 @@
|
||||
formula_id: WBS_10_DOTNET_NORMALIZATION_CONTRACT_V1
|
||||
owner: QuantEngine
|
||||
status: draft
|
||||
goal: "쓰기 경로 정규화와 읽기 경로 역정규화 경계를 고정한다."
|
||||
|
||||
canonical_write_path:
|
||||
schema: engine_history
|
||||
tables:
|
||||
- source_observation
|
||||
- factor_definition
|
||||
- factor_observation
|
||||
- decision_event
|
||||
- decision_factor_evidence
|
||||
- outcome_evaluation
|
||||
invariant:
|
||||
- "source_observation은 원천 관측 1건당 1행"
|
||||
- "factor_definition은 (factor_id, factor_version) 단일 원장"
|
||||
- "factor_observation은 observation_id를 반드시 참조"
|
||||
- "decision_event는 decision_key로 단일 식별"
|
||||
- "outcome_evaluation은 decision_id + horizon_days 조합으로 단일 식별"
|
||||
|
||||
canonical_read_path:
|
||||
view: engine_history.training_example_v1
|
||||
purpose: "모델 학습/캘리브레이션용 역정규화 projection"
|
||||
consumers:
|
||||
- model_training
|
||||
- calibration_jobs
|
||||
- diagnostics
|
||||
|
||||
forbidden_patterns:
|
||||
- "읽기 모델을 쓰기 원장으로 사용"
|
||||
- "원천 payload를 읽기 projection에 중복 저장"
|
||||
- "직렬 UI 조회를 위해 원장 테이블을 직접 조인해 장기 유지"
|
||||
|
||||
expected_fields:
|
||||
normalized_tables:
|
||||
source_observation:
|
||||
- observation_id
|
||||
- observed_at
|
||||
- instrument_id
|
||||
- source_name
|
||||
- source_version
|
||||
- payload
|
||||
- provenance
|
||||
factor_observation:
|
||||
- factor_observation_id
|
||||
- observation_id
|
||||
- factor_id
|
||||
- factor_version
|
||||
- observed_at
|
||||
- numeric_value
|
||||
- text_value
|
||||
- gate
|
||||
- provenance
|
||||
decision_event:
|
||||
- decision_id
|
||||
- decision_key
|
||||
- decided_at
|
||||
- instrument_id
|
||||
- action
|
||||
- gate
|
||||
- score
|
||||
- source_version
|
||||
- trace
|
||||
- provenance
|
||||
denormalized_view:
|
||||
- decision_id
|
||||
- decision_key
|
||||
- decided_at
|
||||
- instrument_id
|
||||
- action
|
||||
- decision_gate
|
||||
- score
|
||||
- source_version
|
||||
- horizon_days
|
||||
- realized_return
|
||||
- benchmark_return
|
||||
- excess_return
|
||||
- outcome_class
|
||||
- evaluation_gate
|
||||
- factor_features
|
||||
|
||||
notes:
|
||||
- "정규화는 쓰기 중복 제거와 provenance 보존이 목적이다."
|
||||
- "역정규화는 학습/진단 편의용 projection으로만 허용한다."
|
||||
@@ -0,0 +1,83 @@
|
||||
formula_id: WBS_10_DOTNET_PARITY_CONTRACT_V1
|
||||
owner: QuantEngine
|
||||
status: draft
|
||||
source_of_truth:
|
||||
- src/dotnet/QuantEngine.Core/Domain/FormulaEngine.cs
|
||||
- src/dotnet/QuantEngine.Core/Domain/ExitDecisions.cs
|
||||
- src/dotnet/QuantEngine.Core/Domain/FactorCalculator.cs
|
||||
- src/dotnet/QuantEngine.Core.Tests/FormulaEngineTests.cs
|
||||
- src/dotnet/QuantEngine.Core.Tests/FactorCalculatorTests.cs
|
||||
- src/dotnet/QuantEngine.Core.Tests/ParityTests/DomainParityTests.cs
|
||||
|
||||
goal: "Python reference와 .NET domain 결과를 데이터 기반 parity 계약으로 고정한다."
|
||||
|
||||
targets:
|
||||
- target_id: formula_engine_timing
|
||||
symbol: FormulaEngine.ComputeTimingDecision
|
||||
tolerance:
|
||||
numeric: 0
|
||||
text: exact
|
||||
evidence:
|
||||
- src/dotnet/QuantEngine.Core.Tests/FormulaEngineTests.cs
|
||||
- src/dotnet/QuantEngine.Core.Tests/ParityTests/DomainParityTests.cs
|
||||
pass_condition: "timing action/reason이 reference와 동일"
|
||||
|
||||
- target_id: formula_engine_sell
|
||||
symbol: FormulaEngine.ComputeSellDecision
|
||||
tolerance:
|
||||
numeric: 0
|
||||
text: exact
|
||||
evidence:
|
||||
- src/dotnet/QuantEngine.Core.Tests/FormulaEngineTests.cs
|
||||
- src/dotnet/QuantEngine.Core.Tests/ParityTests/DomainParityTests.cs
|
||||
pass_condition: "sell action/ratio/validation이 reference와 동일"
|
||||
|
||||
- target_id: formula_engine_final
|
||||
symbol: FormulaEngine.ComputeFinalDecision
|
||||
tolerance:
|
||||
numeric: 0
|
||||
text: exact
|
||||
evidence:
|
||||
- src/dotnet/QuantEngine.Core.Tests/FormulaEngineTests.cs
|
||||
- src/dotnet/QuantEngine.Core.Tests/ParityTests/DomainParityTests.cs
|
||||
pass_condition: "final action/priority/source가 reference와 동일"
|
||||
|
||||
- target_id: exit_stop_price
|
||||
symbol: ExitDecisions.ComputeStopPriceCore
|
||||
tolerance:
|
||||
numeric: 0.0001
|
||||
text: exact
|
||||
evidence:
|
||||
- src/dotnet/QuantEngine.Core.Tests/ParityTests/DomainParityTests.cs
|
||||
pass_condition: "stop price within tolerance"
|
||||
|
||||
- target_id: exit_stop_ladder
|
||||
symbol: ExitDecisions.ComputeStopActionLadder
|
||||
tolerance:
|
||||
numeric: 0
|
||||
text: exact
|
||||
evidence:
|
||||
- src/dotnet/QuantEngine.Core.Tests/ParityTests/DomainParityTests.cs
|
||||
pass_condition: "exit action ladder exact match"
|
||||
|
||||
- target_id: exit_heat_thresholds
|
||||
symbol: ExitDecisions.ComputeDynamicHeatThresholds
|
||||
tolerance:
|
||||
numeric: 0
|
||||
text: exact
|
||||
evidence:
|
||||
- src/dotnet/QuantEngine.Core.Tests/ParityTests/DomainParityTests.cs
|
||||
pass_condition: "heat thresholds exact match"
|
||||
|
||||
- target_id: factor_calculator
|
||||
symbol: FactorCalculator.CalculateFactors
|
||||
tolerance:
|
||||
numeric: 0.000001
|
||||
text: exact
|
||||
evidence:
|
||||
- src/dotnet/QuantEngine.Core.Tests/FactorCalculatorTests.cs
|
||||
pass_condition: "factor outputs stable and deterministic"
|
||||
|
||||
execution_notes:
|
||||
- "Parity is a contract, not a guess."
|
||||
- "Do not add new parity targets without updating reference fixtures and tolerances."
|
||||
@@ -0,0 +1,67 @@
|
||||
formula_id: WBS_10_DOTNET_PROVENANCE_CONTRACT_V1
|
||||
owner: QuantEngine
|
||||
status: draft
|
||||
goal: "결정/팩터/수집 provenance payload를 표준화한다."
|
||||
|
||||
payloads:
|
||||
- payload_id: factor_evidence
|
||||
source: src/dotnet/QuantEngine.Application/Services/DecisionLearningService.cs
|
||||
required_fields:
|
||||
- FactorObservationId
|
||||
- FactorId
|
||||
- FactorVersion
|
||||
- ObservedAt
|
||||
- Gate
|
||||
- Role
|
||||
- SourceName
|
||||
- PayloadJson
|
||||
- ProvenanceJson
|
||||
nullable_fields:
|
||||
- NumericValue
|
||||
- TextValue
|
||||
pass_condition: "factor evidence payload가 누락 없이 기록됨"
|
||||
|
||||
- payload_id: decision_event
|
||||
source: src/dotnet/QuantEngine.Application/Services/DecisionLearningService.cs
|
||||
required_fields:
|
||||
- decisionKey
|
||||
- decidedAt
|
||||
- instrumentId
|
||||
- action
|
||||
- gate
|
||||
- sourceVersion
|
||||
nullable_fields:
|
||||
- score
|
||||
- trace
|
||||
- provenance
|
||||
pass_condition: "decision event payload가 normalized store에 기록됨"
|
||||
|
||||
- payload_id: collection_audit
|
||||
source: src/dotnet/QuantEngine.Application/Models/CollectionExecutionAudit.cs
|
||||
required_fields:
|
||||
- RunId
|
||||
- State
|
||||
- StartedAt
|
||||
- SuccessCount
|
||||
- ErrorCount
|
||||
nullable_fields:
|
||||
- FinishedAt
|
||||
- Message
|
||||
pass_condition: "collection audit payload가 append-only JSONL에 기록됨"
|
||||
|
||||
- payload_id: scheduler_audit
|
||||
source: src/dotnet/QuantEngine.Web/Services/SchedulerModels.cs
|
||||
required_fields:
|
||||
- JobId
|
||||
- RunId
|
||||
- State
|
||||
- StartedAt
|
||||
nullable_fields:
|
||||
- Reason
|
||||
- FinishedAt
|
||||
- ResourceKey
|
||||
pass_condition: "scheduler audit payload가 append-only JSONL에 기록됨"
|
||||
|
||||
notes:
|
||||
- "provenance payload는 구조를 표준화하되, 숫자 계산은 하지 않는다."
|
||||
- "LLM은 payload value를 재계산하지 않는다."
|
||||
@@ -0,0 +1,54 @@
|
||||
formula_id: WBS_10_DOTNET_READ_MODEL_CONTRACT_V1
|
||||
owner: QuantEngine
|
||||
status: draft
|
||||
goal: "운영 화면과 조회 API의 read model 경계를 분리한다."
|
||||
|
||||
read_models:
|
||||
- model_id: dashboard_summary
|
||||
purpose: "운영 대시보드 상태"
|
||||
source: QuantEngine.Infrastructure.Repositories.CollectionRepository
|
||||
consumers:
|
||||
- src/dotnet/QuantEngine.Web/Pages/Admin/Dashboard/Index.cshtml.cs
|
||||
- src/dotnet/QuantEngine.Web/Endpoints/CollectionEndpoints.cs
|
||||
fields:
|
||||
- LastRunId
|
||||
- LastRunAt
|
||||
- SuccessCount
|
||||
- ErrorCount
|
||||
- SnapshotCount
|
||||
staleness_budget: "5m"
|
||||
- model_id: collection_runs
|
||||
purpose: "최근 수집 실행 이력"
|
||||
source: QuantEngine.Infrastructure.Repositories.CollectionRepository
|
||||
consumers:
|
||||
- src/dotnet/QuantEngine.Web/Pages/Admin/Collection/Index.cshtml.cs
|
||||
- src/dotnet/QuantEngine.Web/Endpoints/CollectionEndpoints.cs
|
||||
fields:
|
||||
- RunId
|
||||
- State
|
||||
- StartedAt
|
||||
- FinishedAt
|
||||
- SuccessCount
|
||||
- ErrorCount
|
||||
staleness_budget: "5m"
|
||||
- model_id: price_history_summary
|
||||
purpose: "가격 히스토리 요약"
|
||||
source: QuantEngine.Infrastructure.Repositories.CollectionRepository
|
||||
consumers:
|
||||
- src/dotnet/QuantEngine.Web/Pages/Admin/Collection/Index.cshtml.cs
|
||||
- src/dotnet/QuantEngine.Web/Endpoints/CollectionEndpoints.cs
|
||||
fields:
|
||||
- Ticker
|
||||
- Count
|
||||
- FirstDate
|
||||
- LastDate
|
||||
staleness_budget: "15m"
|
||||
|
||||
rules:
|
||||
- "read model은 조회 전용이어야 한다."
|
||||
- "운영 화면은 직접 원장 테이블을 조립하지 않는다."
|
||||
- "쓰기 로직은 read model에 의존하지 않는다."
|
||||
- "staleness_budget이 명시되지 않은 조회는 금지한다."
|
||||
|
||||
notes:
|
||||
- "의도된 역정규화는 허용하되, 원장과 동일 테이블로 재사용하지 않는다."
|
||||
@@ -0,0 +1,60 @@
|
||||
formula_id: WBS_10_DOTNET_SCHEDULER_CONTRACT_V1
|
||||
owner: QuantEngine
|
||||
status: draft
|
||||
goal: "스케줄러 상태 전이, 의존성, 재시도, 감사 추적을 표준화한다."
|
||||
|
||||
state_machine:
|
||||
states:
|
||||
- pending
|
||||
- running
|
||||
- succeeded
|
||||
- failed
|
||||
- retrying
|
||||
- blocked
|
||||
allowed_transitions:
|
||||
pending: [running, blocked]
|
||||
running: [succeeded, failed, retrying, blocked]
|
||||
failed: [retrying, blocked]
|
||||
retrying: [running, failed, blocked]
|
||||
succeeded: []
|
||||
blocked: []
|
||||
|
||||
job_definitions:
|
||||
- job_id: daily-collection
|
||||
cron: "0 9 * * *"
|
||||
lease_owner: collection
|
||||
timeout_policy: "2h"
|
||||
dependency: gather-trading-data
|
||||
- job_id: hourly-price-update
|
||||
cron: "0 9,11,13,15 * * 1-5"
|
||||
lease_owner: price-update
|
||||
timeout_policy: "30m"
|
||||
dependency: price-feed
|
||||
- job_id: weekly-report
|
||||
cron: "0 17 * * 5"
|
||||
lease_owner: report
|
||||
timeout_policy: "1h"
|
||||
dependency: report-generator
|
||||
- job_id: monthly-optimization
|
||||
cron: "0 2 1 * *"
|
||||
lease_owner: optimization
|
||||
timeout_policy: "3h"
|
||||
dependency: optimizer
|
||||
|
||||
audit_fields:
|
||||
- JobId
|
||||
- RunId
|
||||
- State
|
||||
- StartedAt
|
||||
- FinishedAt
|
||||
- ResourceKey
|
||||
- Reason
|
||||
|
||||
idempotency:
|
||||
required: true
|
||||
key_pattern: "{job_id}:{resource_key}:{yyyyMMddHHmm}"
|
||||
|
||||
notes:
|
||||
- "상태 전이와 감사 추적은 append-only JSONL로 남긴다."
|
||||
- "실행 재개는 retrying 이후에만 허용한다."
|
||||
- "숫자 계산은 여기서 하지 않는다."
|
||||
@@ -0,0 +1,516 @@
|
||||
// =============================================================================
|
||||
// QuantEngine Database Schema (DBML)
|
||||
// DbUp 마이그레이션(V1~V5)과 1:1 동기화 — 마이그레이션 추가 시 이 파일도 반드시 갱신
|
||||
// (CLAUDE.md 규칙: schema 변경 → DBML + 문서 동기화)
|
||||
//
|
||||
// 참고: Hangfire 스키마는 Hangfire.PostgreSql 라이브러리가 자동 생성
|
||||
// (DbUp 마이그레이션으로 관리하지 않음, 여기서도 제외)
|
||||
// =============================================================================
|
||||
|
||||
Project quantengine {
|
||||
database_type: 'PostgreSQL'
|
||||
Note: '''
|
||||
QuantEngine v0.1 데이터베이스 스키마.
|
||||
세 개 스키마로 구성:
|
||||
- quantengine: 핵심 KIS API 토큰, 사용자 계정, 수집 파이프라인 데이터
|
||||
- engine_history: 팩터 계산 이력, 시장 데이터 이력, 의사결정 이력
|
||||
- (생략) hangfire: Hangfire 백그라운드 잡 관리 (auto-created)
|
||||
'''
|
||||
}
|
||||
|
||||
// =============================================================================
|
||||
// Schema: quantengine (V1 + V2)
|
||||
// =============================================================================
|
||||
|
||||
TableGroup "quantengine" {
|
||||
kis_tokens
|
||||
workspace_account
|
||||
workspace_session
|
||||
collection_runs
|
||||
collection_snapshots
|
||||
collection_source_errors
|
||||
settings
|
||||
account_snapshot
|
||||
workspace_meta
|
||||
workspace_change_log
|
||||
workspace_approval_v2
|
||||
workspace_lock
|
||||
kis_collection_runs
|
||||
kis_collection_snapshots
|
||||
kis_collection_errors
|
||||
}
|
||||
|
||||
Table quantengine.kis_tokens {
|
||||
account TEXT [pk, note: "KIS 계정 모드 (real/mock)"]
|
||||
access_token TEXT [not null, note: "KIS 토큰"]
|
||||
expires_at TEXT [not null, note: "만료 시각 (ISO 8601)"]
|
||||
updated_at TEXT [not null, note: "마지막 갱신 시각 (ISO 8601)"]
|
||||
|
||||
Note: "KIS Open API 인증 토큰 캐시"
|
||||
}
|
||||
|
||||
Table quantengine.workspace_account {
|
||||
ordinal INT [not null, note: "순서 인덱스"]
|
||||
username TEXT [pk, note: "로그인 ID"]
|
||||
password_hash TEXT [not null, note: "BCrypt 또는 SHA-256 해시 (자동 마이그레이션 가능)"]
|
||||
role TEXT [not null, default: "'Admin'", note: "역할 (Admin)"]
|
||||
is_active TEXT [not null, default: "'true'", note: "활성 상태 (true/false)"]
|
||||
created_at TEXT [not null, note: "생성 시각 (ISO 8601)"]
|
||||
updated_at TEXT [not null, note: "갱신 시각 (ISO 8601)"]
|
||||
|
||||
indexes {
|
||||
(is_active, username) [name: "idx_workspace_account_active"]
|
||||
}
|
||||
|
||||
Note: "Admin UI 사용자 계정"
|
||||
}
|
||||
|
||||
Table quantengine.workspace_session {
|
||||
session_token_hash TEXT [pk, note: "세션 토큰 해시"]
|
||||
username TEXT [not null, note: "사용자명"]
|
||||
role TEXT [not null, default: "'Admin'", note: "역할"]
|
||||
created_at TEXT [not null, note: "세션 생성 시각 (ISO 8601)"]
|
||||
expires_at TEXT [not null, note: "만료 시각 (ISO 8601)"]
|
||||
revoked_at TEXT [note: "취소 시각 (ISO 8601), NULL이면 활성"]
|
||||
|
||||
indexes {
|
||||
(username, expires_at) [name: "idx_workspace_session_username"]
|
||||
}
|
||||
|
||||
Note: "세션 관리 (쿠키 기반 인증)"
|
||||
}
|
||||
|
||||
Table quantengine.collection_runs {
|
||||
run_id TEXT [pk, note: "수집 실행 ID (예: api-20260712-120000)"]
|
||||
collector_name TEXT [not null, note: "수집기 이름"]
|
||||
started_at TEXT [not null, note: "시작 시각 (ISO 8601)"]
|
||||
finished_at TEXT [note: "종료 시각 (ISO 8601)"]
|
||||
status TEXT [not null, note: "상태 (RUNNING/COMPLETED/FAILED)"]
|
||||
input_source TEXT [note: "입력 소스 경로"]
|
||||
output_json_path TEXT [note: "출력 JSON 파일 경로"]
|
||||
output_db_path TEXT [note: "출력 DB 경로"]
|
||||
notes TEXT [note: "메모"]
|
||||
created_at TIMESTAMP [default: "CURRENT_TIMESTAMP", note: "DB 기록 시각"]
|
||||
|
||||
Note: "데이터 수집 실행 기록 (레거시, V2의 kis_collection_runs 참조)"
|
||||
}
|
||||
|
||||
Table quantengine.collection_snapshots {
|
||||
run_id TEXT [not null, note: "수집 실행 ID"]
|
||||
dataset_name TEXT [not null, note: "데이터셋명"]
|
||||
ticker TEXT [not null, note: "종목코드 (예: 005930)"]
|
||||
name TEXT [note: "종목명"]
|
||||
sector TEXT [note: "업종"]
|
||||
as_of_date TEXT [note: "기준 일자"]
|
||||
source_priority TEXT [note: "소스 우선순위"]
|
||||
source_status TEXT [note: "소스 상태"]
|
||||
payload_json TEXT [not null, note: "정규화된 데이터 (JSON)"]
|
||||
provenance_json TEXT [not null, note: "출처 정보 (JSON)"]
|
||||
created_at TIMESTAMP [default: "CURRENT_TIMESTAMP", note: "DB 기록 시각"]
|
||||
|
||||
indexes {
|
||||
(run_id, dataset_name, ticker) [pk]
|
||||
(ticker, created_at) [name: "idx_collection_snapshots_ticker_time"]
|
||||
}
|
||||
|
||||
Note: "수집 스냅샷 (레거시, V2의 kis_collection_snapshots 참조)"
|
||||
}
|
||||
|
||||
Table quantengine.collection_source_errors {
|
||||
run_id TEXT [not null, note: "수집 실행 ID"]
|
||||
ticker TEXT [note: "종목코드"]
|
||||
source_name TEXT [not null, note: "소스명"]
|
||||
error_kind TEXT [not null, note: "에러 타입"]
|
||||
error_message TEXT [not null, note: "에러 메시지"]
|
||||
payload_json TEXT [note: "에러 상세 (JSON)"]
|
||||
created_at TIMESTAMP [default: "CURRENT_TIMESTAMP", note: "DB 기록 시각"]
|
||||
|
||||
indexes {
|
||||
(run_id, source_name) [name: "idx_collection_source_errors_run"]
|
||||
}
|
||||
|
||||
Note: "수집 중 발생한 에러 기록 (레거시)"
|
||||
}
|
||||
|
||||
Table quantengine.settings {
|
||||
ordinal INT [not null, note: "순서 인덱스"]
|
||||
key TEXT [pk, note: "설정 키"]
|
||||
value_json TEXT [not null, note: "값 (JSON)"]
|
||||
note TEXT [not null, default: "''", note: "설명"]
|
||||
updated_at TEXT [not null, note: "갱신 시각 (ISO 8601)"]
|
||||
|
||||
Note: "애플리케이션 설정 저장소"
|
||||
}
|
||||
|
||||
Table quantengine.account_snapshot {
|
||||
ordinal INT [not null, note: "순서 인덱스"]
|
||||
row_json TEXT [not null, note: "계정 데이터 (JSON)"]
|
||||
captured_at TEXT [not null, default: "''", note: "캡처 시각 (ISO 8601)"]
|
||||
account TEXT [not null, default: "''", note: "계정"]
|
||||
account_type TEXT [not null, default: "''", note: "계정 타입"]
|
||||
ticker TEXT [not null, default: "''", note: "종목코드"]
|
||||
name TEXT [not null, default: "''", note: "이름"]
|
||||
parse_status TEXT [not null, default: "''", note: "파싱 상태"]
|
||||
user_confirmed TEXT [not null, default: "''", note: "사용자 확인 여부"]
|
||||
updated_at TEXT [not null, note: "갱신 시각 (ISO 8601)"]
|
||||
|
||||
indexes {
|
||||
(captured_at) [name: "idx_account_snapshot_captured_at"]
|
||||
(ticker) [name: "idx_account_snapshot_ticker"]
|
||||
}
|
||||
|
||||
Note: "계정 스냅샷 저장소"
|
||||
}
|
||||
|
||||
Table quantengine.workspace_meta {
|
||||
key TEXT [pk, note: "메타 키"]
|
||||
value_json TEXT [not null, note: "값 (JSON)"]
|
||||
|
||||
Note: "워크스페이스 메타데이터"
|
||||
}
|
||||
|
||||
Table quantengine.workspace_change_log {
|
||||
id SERIAL [pk, note: "자동 증가 ID"]
|
||||
domain TEXT [not null, note: "도메인"]
|
||||
action TEXT [not null, note: "액션 (create/update/delete)"]
|
||||
target_ref TEXT [not null, default: "''", note: "대상 참조"]
|
||||
actor TEXT [not null, default: "'system'", note: "액터 (사용자/시스템)"]
|
||||
note TEXT [not null, default: "''", note: "메모"]
|
||||
before_json TEXT [not null, default: "'null'", note: "변경 전 값 (JSON)"]
|
||||
after_json TEXT [not null, default: "'null'", note: "변경 후 값 (JSON)"]
|
||||
created_at TEXT [not null, note: "기록 시각 (ISO 8601)"]
|
||||
|
||||
Note: "변경 로그"
|
||||
}
|
||||
|
||||
Table quantengine.workspace_approval_v2 {
|
||||
domain TEXT [not null, note: "도메인"]
|
||||
target_ref TEXT [not null, default: "'*'", note: "대상 참조"]
|
||||
status TEXT [not null, note: "승인 상태"]
|
||||
approved_by TEXT [not null, default: "''", note: "승인자"]
|
||||
approved_at TEXT [not null, default: "''", note: "승인 시각 (ISO 8601)"]
|
||||
note TEXT [not null, default: "''", note: "메모"]
|
||||
updated_at TEXT [not null, note: "갱신 시각 (ISO 8601)"]
|
||||
|
||||
indexes {
|
||||
(domain, target_ref) [pk]
|
||||
}
|
||||
|
||||
Note: "승인 워크플로우"
|
||||
}
|
||||
|
||||
Table quantengine.workspace_lock {
|
||||
domain TEXT [not null, note: "도메인"]
|
||||
target_ref TEXT [not null, default: "''", note: "대상 참조"]
|
||||
locked_by TEXT [not null, default: "''", note: "잠금 사용자"]
|
||||
reason TEXT [not null, default: "''", note: "잠금 사유"]
|
||||
locked_at TEXT [not null, note: "잠금 시각 (ISO 8601)"]
|
||||
|
||||
indexes {
|
||||
(domain, target_ref) [pk]
|
||||
}
|
||||
|
||||
Note: "동시성 제어용 잠금"
|
||||
}
|
||||
|
||||
// =============================================================================
|
||||
// V2: KIS 수집 파이프라인 (kis_collection_*)
|
||||
// =============================================================================
|
||||
|
||||
Table quantengine.kis_collection_runs {
|
||||
run_id TEXT [pk, note: "수집 실행 ID"]
|
||||
status TEXT [not null, note: "상태: RUNNING / COMPLETED / COMPLETED_WITH_ERRORS / FAILED"]
|
||||
started_at TEXT [not null, note: "시작 시각 (ISO 8601 KST)"]
|
||||
finished_at TEXT [note: "종료 시각 (ISO 8601 KST)"]
|
||||
total_snapshots INTEGER [note: "성공한 스냅샷 수"]
|
||||
total_errors INTEGER [note: "발생한 에러 수"]
|
||||
updated_at TEXT [not null, note: "마지막 갱신 시각 (ISO 8601)"]
|
||||
|
||||
indexes {
|
||||
(started_at) [name: "idx_kis_runs_started_at"]
|
||||
}
|
||||
|
||||
Note: "KIS API 수집 실행 기록"
|
||||
}
|
||||
|
||||
Table quantengine.kis_collection_snapshots {
|
||||
run_id TEXT [not null, note: "수집 실행 ID"]
|
||||
dataset_name TEXT [note: "데이터셋명 (예: data_feed)"]
|
||||
ticker TEXT [not null, note: "종목코드 (예: 005930)"]
|
||||
source_name TEXT [not null, note: "데이터 소스 (kis_open_api 등)"]
|
||||
payload_json TEXT [not null, note: "정규화된 수집 데이터 (JSON)"]
|
||||
captured_at TEXT [not null, note: "캡처 시각 (ISO 8601 KST)"]
|
||||
created_at TEXT [not null, note: "DB 기록 시각 (ISO 8601)"]
|
||||
|
||||
indexes {
|
||||
(run_id, ticker, source_name) [pk]
|
||||
(ticker) [name: "idx_kis_snapshots_ticker"]
|
||||
(captured_at) [name: "idx_kis_snapshots_captured_at"]
|
||||
}
|
||||
|
||||
Note: "KIS API 수집 스냅샷 (시계열 데이터)"
|
||||
}
|
||||
|
||||
Table quantengine.kis_collection_errors {
|
||||
id SERIAL [pk, note: "자동 증가 ID"]
|
||||
run_id TEXT [not null, note: "수집 실행 ID"]
|
||||
source_name TEXT [not null, note: "데이터 소스"]
|
||||
error_kind TEXT [not null, note: "에러 타입 (예: HttpRequestException)"]
|
||||
error_message TEXT [note: "에러 메시지"]
|
||||
ticker TEXT [note: "종목코드 (해당하면)"]
|
||||
created_at TEXT [not null, note: "DB 기록 시각 (ISO 8601)"]
|
||||
|
||||
indexes {
|
||||
(run_id) [name: "idx_kis_errors_run_id"]
|
||||
}
|
||||
|
||||
Note: "KIS API 수집 중 발생한 에러"
|
||||
}
|
||||
|
||||
// =============================================================================
|
||||
// Schema: engine_history (V3)
|
||||
// =============================================================================
|
||||
|
||||
TableGroup "engine_history" {
|
||||
market_raw_history
|
||||
factor_version_history
|
||||
factor_output_history
|
||||
decision_result_history
|
||||
market_vs_engine_gap_history
|
||||
source_observation
|
||||
factor_definition
|
||||
factor_observation
|
||||
decision_event
|
||||
decision_factor_evidence
|
||||
outcome_evaluation
|
||||
}
|
||||
|
||||
Table engine_history.market_raw_history {
|
||||
id BIGSERIAL [pk, note: "자동 증가 ID"]
|
||||
source_id TEXT [not null, note: "소스 ID"]
|
||||
observed_at TEXT [not null, note: "관측 시각 (ISO 8601)"]
|
||||
source_name TEXT [not null, note: "소스명 (kis_open_api 등)"]
|
||||
instrument_id TEXT [not null, note: "상품 ID (종목코드 등)"]
|
||||
field_name TEXT [not null, note: "필드명 (현재가, 종가 등)"]
|
||||
field_value TEXT [not null, note: "필드값 (문자열)"]
|
||||
unit TEXT [not null, note: "단위 (원, % 등)"]
|
||||
provenance JSONB [not null, default: "'{}'::jsonb", note: "출처 메타데이터 (JSON)"]
|
||||
created_at TIMESTAMPTZ [not null, default: "NOW()", note: "DB 기록 시각 (UTC)"]
|
||||
|
||||
indexes {
|
||||
(created_at) [name: "idx_market_raw_history_created_at"]
|
||||
}
|
||||
|
||||
Note: "시장 데이터 원본 이력 (정규화 전)"
|
||||
}
|
||||
|
||||
Table engine_history.factor_version_history {
|
||||
id BIGSERIAL [pk, note: "자동 증가 ID"]
|
||||
factor_id TEXT [not null, note: "팩터 ID (예: momentum_ss001)"]
|
||||
factor_version TEXT [not null, note: "팩터 버전 (예: v1.0.0)"]
|
||||
effective_from TEXT [not null, note: "유효 시작 일자 (YYYYMMDD)"]
|
||||
effective_to TEXT [not null, note: "유효 종료 일자 (YYYYMMDD)"]
|
||||
formula_id TEXT [not null, note: "계산식 ID"]
|
||||
source_version TEXT [not null, note: "소스 버전"]
|
||||
provenance JSONB [not null, default: "'{}'::jsonb", note: "출처 메타데이터 (JSON)"]
|
||||
created_at TIMESTAMPTZ [not null, default: "NOW()", note: "DB 기록 시각 (UTC)"]
|
||||
|
||||
indexes {
|
||||
(created_at) [name: "idx_factor_version_history_created_at"]
|
||||
}
|
||||
|
||||
Note: "팩터 버전 관리 이력"
|
||||
}
|
||||
|
||||
Table engine_history.factor_output_history {
|
||||
id BIGSERIAL [pk, note: "자동 증가 ID"]
|
||||
factor_output_id TEXT [not null, note: "팩터 출력 ID"]
|
||||
observed_at TEXT [not null, note: "관측 일자 (YYYYMMDD)"]
|
||||
factor_id TEXT [not null, note: "팩터 ID"]
|
||||
factor_version TEXT [not null, note: "팩터 버전"]
|
||||
output_value TEXT [not null, note: "출력값 (문자열)"]
|
||||
output_gate TEXT [not null, note: "게이트 (PASS/FAIL/WARN)"]
|
||||
source_version TEXT [not null, note: "소스 버전"]
|
||||
provenance JSONB [not null, default: "'{}'::jsonb", note: "출처 메타데이터 (JSON)"]
|
||||
created_at TIMESTAMPTZ [not null, default: "NOW()", note: "DB 기록 시각 (UTC)"]
|
||||
|
||||
indexes {
|
||||
(created_at) [name: "idx_factor_output_history_created_at"]
|
||||
}
|
||||
|
||||
Note: "팩터 계산 결과 이력"
|
||||
}
|
||||
|
||||
Table engine_history.decision_result_history {
|
||||
id BIGSERIAL [pk, note: "자동 증가 ID"]
|
||||
decision_id TEXT [not null, note: "의사결정 ID"]
|
||||
decided_at TEXT [not null, note: "의사결정 일자 (YYYYMMDD)"]
|
||||
instrument_id TEXT [not null, note: "상품 ID (종목코드 등)"]
|
||||
action TEXT [not null, note: "액션 (BUY/SELL/HOLD)"]
|
||||
gate TEXT [not null, note: "게이트 (PASS/FAIL)"]
|
||||
score TEXT [not null, note: "스코어 (문자열)"]
|
||||
source_version TEXT [not null, note: "소스 버전"]
|
||||
provenance JSONB [not null, default: "'{}'::jsonb", note: "출처 메타데이터 (JSON)"]
|
||||
created_at TIMESTAMPTZ [not null, default: "NOW()", note: "DB 기록 시각 (UTC)"]
|
||||
|
||||
indexes {
|
||||
(created_at) [name: "idx_decision_result_history_created_at"]
|
||||
}
|
||||
|
||||
Note: "의사결정 결과 이력"
|
||||
}
|
||||
|
||||
Table engine_history.market_vs_engine_gap_history {
|
||||
id BIGSERIAL [pk, note: "자동 증가 ID"]
|
||||
gap_id TEXT [not null, note: "갭 ID"]
|
||||
observed_at TEXT [not null, note: "관측 일자 (YYYYMMDD)"]
|
||||
instrument_id TEXT [not null, note: "상품 ID"]
|
||||
metric_name TEXT [not null, note: "지표명"]
|
||||
market_value TEXT [not null, note: "시장값"]
|
||||
engine_value TEXT [not null, note: "엔진값"]
|
||||
gap_value TEXT [not null, note: "갭값 (절대값)"]
|
||||
gap_pct TEXT [not null, note: "갭 백분율 (%)"]
|
||||
source_version TEXT [not null, note: "소스 버전"]
|
||||
provenance JSONB [not null, default: "'{}'::jsonb", note: "출처 메타데이터 (JSON)"]
|
||||
created_at TIMESTAMPTZ [not null, default: "NOW()", note: "DB 기록 시각 (UTC)"]
|
||||
|
||||
indexes {
|
||||
(created_at) [name: "idx_market_vs_engine_gap_history_created_at"]
|
||||
}
|
||||
|
||||
Note: "시장 데이터 vs 엔진 계산 갭 분석 이력"
|
||||
}
|
||||
|
||||
// =============================================================================
|
||||
// Schema: engine_history (V5 normalized learning history)
|
||||
// =============================================================================
|
||||
|
||||
Table quantengine.price_history_daily {
|
||||
ticker TEXT [not null]
|
||||
trade_date DATE [not null]
|
||||
open NUMERIC [not null]
|
||||
high NUMERIC [not null]
|
||||
low NUMERIC [not null]
|
||||
close NUMERIC [not null]
|
||||
volume BIGINT [not null]
|
||||
source TEXT [not null]
|
||||
collected_at TIMESTAMPTZ [not null, default: "NOW()"]
|
||||
provenance JSONB [not null, default: "'{}'::jsonb"]
|
||||
|
||||
indexes {
|
||||
(ticker, trade_date) [pk]
|
||||
}
|
||||
}
|
||||
|
||||
Table quantengine.macro_history_daily {
|
||||
symbol TEXT [not null]
|
||||
trade_date DATE [not null]
|
||||
value NUMERIC [not null]
|
||||
source TEXT [not null]
|
||||
collected_at TIMESTAMPTZ [not null, default: "NOW()"]
|
||||
provenance JSONB [not null, default: "'{}'::jsonb"]
|
||||
|
||||
indexes {
|
||||
(symbol, trade_date) [pk]
|
||||
}
|
||||
}
|
||||
|
||||
Table engine_history.source_observation {
|
||||
observation_id UUID [pk]
|
||||
observed_at TIMESTAMPTZ [not null]
|
||||
instrument_id TEXT [not null]
|
||||
source_name TEXT [not null]
|
||||
source_version TEXT [not null]
|
||||
payload JSONB [not null]
|
||||
provenance JSONB [not null, default: "'{}'::jsonb"]
|
||||
created_at TIMESTAMPTZ [not null, default: "NOW()"]
|
||||
}
|
||||
|
||||
Table engine_history.factor_definition {
|
||||
factor_id TEXT [not null]
|
||||
factor_version TEXT [not null]
|
||||
formula_id TEXT [not null]
|
||||
effective_from TIMESTAMPTZ [not null]
|
||||
effective_to TIMESTAMPTZ
|
||||
definition JSONB [not null, default: "'{}'::jsonb"]
|
||||
provenance JSONB [not null, default: "'{}'::jsonb"]
|
||||
|
||||
indexes {
|
||||
(factor_id, factor_version) [pk]
|
||||
}
|
||||
}
|
||||
|
||||
Table engine_history.factor_observation {
|
||||
factor_observation_id UUID [pk]
|
||||
observation_id UUID [not null]
|
||||
factor_id TEXT [not null]
|
||||
factor_version TEXT [not null]
|
||||
observed_at TIMESTAMPTZ [not null]
|
||||
numeric_value NUMERIC
|
||||
text_value TEXT
|
||||
gate TEXT [not null]
|
||||
provenance JSONB [not null, default: "'{}'::jsonb"]
|
||||
}
|
||||
|
||||
Table engine_history.decision_event {
|
||||
decision_id UUID [pk]
|
||||
decision_key TEXT [not null, unique]
|
||||
decided_at TIMESTAMPTZ [not null]
|
||||
instrument_id TEXT [not null]
|
||||
action TEXT [not null]
|
||||
gate TEXT [not null]
|
||||
score NUMERIC
|
||||
source_version TEXT [not null]
|
||||
trace JSONB [not null, default: "'{}'::jsonb"]
|
||||
provenance JSONB [not null, default: "'{}'::jsonb"]
|
||||
created_at TIMESTAMPTZ [not null, default: "NOW()"]
|
||||
}
|
||||
|
||||
Table engine_history.decision_factor_evidence {
|
||||
decision_id UUID [not null]
|
||||
factor_observation_id UUID [not null]
|
||||
role TEXT [not null]
|
||||
|
||||
indexes {
|
||||
(decision_id, factor_observation_id) [pk]
|
||||
}
|
||||
}
|
||||
|
||||
Table engine_history.outcome_evaluation {
|
||||
evaluation_id UUID [pk]
|
||||
decision_id UUID [not null]
|
||||
horizon_days INT [not null]
|
||||
evaluated_at TIMESTAMPTZ [not null]
|
||||
realized_return NUMERIC
|
||||
benchmark_return NUMERIC
|
||||
excess_return NUMERIC
|
||||
outcome_class TEXT [not null]
|
||||
evaluation_gate TEXT [not null]
|
||||
provenance JSONB [not null, default: "'{}'::jsonb"]
|
||||
|
||||
indexes {
|
||||
(decision_id, horizon_days) [unique]
|
||||
}
|
||||
}
|
||||
|
||||
// =============================================================================
|
||||
// Relationships (Logical, not enforced as FKs in DDL)
|
||||
// =============================================================================
|
||||
|
||||
Ref: quantengine.kis_collection_snapshots.run_id > quantengine.kis_collection_runs.run_id {
|
||||
// logical relationship: snapshots belong to a run
|
||||
}
|
||||
|
||||
Ref: quantengine.kis_collection_errors.run_id > quantengine.kis_collection_runs.run_id {
|
||||
// logical relationship: errors belong to a run
|
||||
}
|
||||
|
||||
Ref: quantengine.workspace_session.username > quantengine.workspace_account.username {
|
||||
// logical relationship: session belongs to a user
|
||||
}
|
||||
|
||||
Ref: engine_history.factor_observation.observation_id > engine_history.source_observation.observation_id
|
||||
Ref: engine_history.factor_observation.(factor_id, factor_version) > engine_history.factor_definition.(factor_id, factor_version)
|
||||
Ref: engine_history.decision_factor_evidence.decision_id > engine_history.decision_event.decision_id
|
||||
Ref: engine_history.decision_factor_evidence.factor_observation_id > engine_history.factor_observation.factor_observation_id
|
||||
Ref: engine_history.outcome_evaluation.decision_id > engine_history.decision_event.decision_id
|
||||
@@ -0,0 +1,167 @@
|
||||
# QuantEngine 수집 파이프라인 (KIS API)
|
||||
|
||||
## 1. 수집 실행 상태 전이도 (State Diagram)
|
||||
|
||||
KIS 데이터 수집 실행(kis_collection_runs)의 상태 흐름. 상태값은 KisDataCollectionOrchestrator 에서 정의:
|
||||
- `RUNNING`: 수집 진행 중
|
||||
- `COMPLETED`: 모든 스냅샷 수집 완료 (에러 없음, `total_errors == 0`)
|
||||
- `COMPLETED_WITH_ERRORS`: 부분 수집 완료 (에러 발생, `total_errors > 0`이지만 일부 성공)
|
||||
- `FAILED`: 전체 실패 (예외 발생, 데이터 미적재)
|
||||
|
||||
```mermaid
|
||||
stateDiagram-v2
|
||||
[*] --> RUNNING: 수집 시작<br/>(RunCollectionAsync)
|
||||
RUNNING --> COMPLETED: 완료 & error_count==0
|
||||
RUNNING --> COMPLETED_WITH_ERRORS: 완료 & error_count>0
|
||||
RUNNING --> FAILED: 예외 발생
|
||||
COMPLETED --> [*]
|
||||
COMPLETED_WITH_ERRORS --> [*]
|
||||
FAILED --> [*]
|
||||
```
|
||||
|
||||
**상태 전이 조건** (KisDataCollectionOrchestrator.cs 라인 104-105):
|
||||
- `error_count == 0` → `COMPLETED`
|
||||
- `error_count > 0` → `COMPLETED_WITH_ERRORS`
|
||||
- 예외(Exception) → `FAILED`
|
||||
|
||||
**성공 기준** (CLAUDE.md "Collection Run Success Criteria"):
|
||||
- Success: `status == "COMPLETED"` (NOT failed)
|
||||
- Partial Success: `status == "COMPLETED"` + `total_snapshots > 0` + `total_errors > 0`
|
||||
- Failure: `status == "FAILED"` OR `total_snapshots == 0`
|
||||
|
||||
---
|
||||
|
||||
## 2. 수집 파이프라인 흐름도 (Flowchart)
|
||||
|
||||
KIS API 데이터 수집의 전체 흐름. 두 개의 트리거:
|
||||
1. **Hangfire 정기 작업**: 매일 09:00 에 자동 실행
|
||||
2. **API 수동 트리거**: POST /api/collection/run (쿠키 기반 인증)
|
||||
|
||||
```mermaid
|
||||
flowchart TD
|
||||
A["Hangfire daily-collection<br/>(09:00 KST)"]
|
||||
B["POST /api/collection/run<br/>(Cookie Auth)"]
|
||||
|
||||
A --> C["IServiceScopeFactory.CreateScope<br/>(resolve ICollectionOrchestrator)"]
|
||||
B --> C
|
||||
|
||||
C --> D["KisDataCollectionOrchestrator.RunCollectionAsync<br/>(tickers: [005930, 000660, ...])"]
|
||||
|
||||
D --> E["Per-ticker 루프"]
|
||||
E --> F["KisApiPriceSource.GetPriceDataAsync<br/>(ticker, account)"]
|
||||
F --> G["PriceDataNormalizer.NormalizeCollectionRow<br/>(seedRow, kisResult)"]
|
||||
G --> H["CollectionRepository.SaveSnapshot<br/>(kis_collection_snapshots)"]
|
||||
G --> I["CollectionRepository.SaveError<br/>(kis_collection_errors, on exception)"]
|
||||
|
||||
H --> J{루프 끝?}
|
||||
I --> J
|
||||
J -->|Yes| K["CollectionRepository.SaveRun<br/>(kis_collection_runs)"]
|
||||
J -->|No| E
|
||||
|
||||
K --> L["파일 출력:<br/>Temp/kis_dotnet_collection_v1.json"]
|
||||
L --> M["Serilog 로그:<br/>src/dotnet/.../logs/"]
|
||||
|
||||
M --> N["Admin UI: /Admin/Collection<br/>(CollectionRepository 읽기)"]
|
||||
N --> O["대시보드 표시:<br/>상태, 스냅샷 수, 에러"]
|
||||
```
|
||||
|
||||
**데이터 흐름**:
|
||||
1. **입력**: Hangfire 스케줄 or API 수동 요청
|
||||
2. **오케스트레이션**: ICollectionOrchestrator 스코프 생성
|
||||
3. **수집**: KIS Open API 호출 → PriceDataNormalizer → DB 저장
|
||||
4. **출력**:
|
||||
- kis_collection_runs: 실행 메타데이터 (run_id, status, total_snapshots, total_errors)
|
||||
- kis_collection_snapshots: 종목별 가격 데이터 (JSON payload)
|
||||
- kis_collection_errors: 에러 기록
|
||||
- Temp/kis_dotnet_collection_v1.json: 수집 결과 요약 (formula_id, gate, run_id, summary)
|
||||
- Serilog 로그: 런타임 로그 (src/dotnet/QuantEngine.Web/logs/)
|
||||
5. **표시**: Admin UI에서 CollectionRepository API 호출 → kis_collection_* 읽기 → Dashboard 렌더링
|
||||
|
||||
---
|
||||
|
||||
## 3. WBS 증거 검증 시퀀스도 (Sequence Diagram)
|
||||
|
||||
작업 완료 증거를 자동 검증하는 파이프라인. 도구: `verify_wbs_task_v1.py` (증거 수집) + `validate_quant_engine_wbs_v1.py` (CI에서 재검증).
|
||||
|
||||
```mermaid
|
||||
sequenceDiagram
|
||||
Developer->>verify_wbs_task_v1.py: python verify_wbs_task_v1.py --task QE-M1-01<br/>(또는 --run-commands)
|
||||
verify_wbs_task_v1.py->>+spec/60_quant_engine_wbs.yaml: load spec
|
||||
spec/60_quant_engine_wbs.yaml-->>-verify_wbs_task_v1.py: meta + tasks[QE-M1-01]
|
||||
|
||||
Note over verify_wbs_task_v1.py: evidence_checks 선언형 해석
|
||||
|
||||
alt pg_query 체크
|
||||
verify_wbs_task_v1.py->>+PostgreSQL: SELECT ... (WHERE 절)
|
||||
PostgreSQL-->>-verify_wbs_task_v1.py: 스칼라 결과 또는 행
|
||||
verify_wbs_task_v1.py->>verify_wbs_task_v1.py: expect{min,max,equals} 비교
|
||||
end
|
||||
|
||||
alt log_pattern 체크
|
||||
verify_wbs_task_v1.py->>+src/dotnet/.../logs/: file_glob 매칭
|
||||
src/dotnet/.../logs/-->>-verify_wbs_task_v1.py: 로그 라인
|
||||
verify_wbs_task_v1.py->>verify_wbs_task_v1.py: 정규식 패턴 검사<br/>(min_matches, max_age_hours)
|
||||
end
|
||||
|
||||
alt json_gate 체크
|
||||
verify_wbs_task_v1.py->>+Temp/kis_dotnet_collection_v1.json: read JSON
|
||||
Temp/kis_dotnet_collection_v1.json-->>-verify_wbs_task_v1.py: payload
|
||||
verify_wbs_task_v1.py->>verify_wbs_task_v1.py: 점 표기 경로(dot notation)<br/>+ 값 비교 (>=N 지원)
|
||||
end
|
||||
|
||||
alt file_exists 체크
|
||||
verify_wbs_task_v1.py->>verify_wbs_task_v1.py: paths[] 존재 확인<br/>(min_bytes 검증)
|
||||
end
|
||||
|
||||
alt playwright_report 체크
|
||||
verify_wbs_task_v1.py->>+tests/e2e/playwright-report.json: read report
|
||||
tests/e2e/playwright-report.json-->>-verify_wbs_task_v1.py: suites[].specs[]
|
||||
verify_wbs_task_v1.py->>verify_wbs_task_v1.py: spec_file 매칭<br/>(passed_min, failed)
|
||||
end
|
||||
|
||||
verify_wbs_task_v1.py->>verify_wbs_task_v1.py: 모든 체크 결과 종합<br/>(gate = ALL PASS? → PASS : FAIL)
|
||||
|
||||
verify_wbs_task_v1.py->>+Temp/evidence/QE-M1-01/: mkdir
|
||||
verify_wbs_task_v1.py->>Temp/evidence/QE-M1-01/verdict.json: write verdict<br/>(task_id, gate, checks[])
|
||||
verify_wbs_task_v1.py->>Temp/evidence/QE-M1-01/: save raw evidence<br/>(pg_query_n.json, log_excerpt.txt, ...)
|
||||
|
||||
verify_wbs_task_v1.py->>+runtime/lineage_events.jsonl: append event<br/>(node_id, gate, timestamp)
|
||||
|
||||
Developer<<--verify_wbs_task_v1.py: exit 0 (gate=PASS)<br/>or exit 1 (gate=FAIL)
|
||||
|
||||
Note over Developer: 선택: --run-commands 플래그<br/>verification_commands[] 실행
|
||||
|
||||
Developer->>+validate_quant_engine_wbs_v1.py: (CI) python validate_quant_engine_wbs_v1.py
|
||||
validate_quant_engine_wbs_v1.py->>validate_quant_engine_wbs_v1.py: spec load
|
||||
validate_quant_engine_wbs_v1.py->>validate_quant_engine_wbs_v1.py: tasks[status==DONE] 필터
|
||||
validate_quant_engine_wbs_v1.py->>+Temp/evidence/*/verdict.json: load all verdicts
|
||||
Temp/evidence/*/verdict.json-->>-validate_quant_engine_wbs_v1.py: gate 값
|
||||
validate_quant_engine_wbs_v1.py->>validate_quant_engine_wbs_v1.py: gate=FAIL? → CI FAIL
|
||||
validate_quant_engine_wbs_v1.py->>+Temp/quant_engine_wbs_v1.json: write summary
|
||||
Developer<<--validate_quant_engine_wbs_v1.py: exit 0 (모두 PASS)<br/>or exit 1 (일부 FAIL)
|
||||
```
|
||||
|
||||
**검증 프로세스 상세**:
|
||||
|
||||
| 단계 | 역할 | 산출물 |
|
||||
|------|------|--------|
|
||||
| **1. 스펙 로드** | verify_wbs_task_v1.py | spec/60_quant_engine_wbs.yaml |
|
||||
| **2. 증거 체크 실행** | 선언형 evidence_checks[] | pg_query / log_pattern / json_gate / file_exists / playwright_report |
|
||||
| **3. 게이트 결정** | 모든 체크 PASS? | gate = PASS or FAIL |
|
||||
| **4. 증거 저장** | Temp/evidence/<TASK_ID>/ | verdict.json + 원시 증거 |
|
||||
| **5. 계보 로깅** | runtime/lineage_events.jsonl | node_id, gate, timestamp |
|
||||
| **6. CI 재검증** | validate_quant_engine_wbs_v1.py | status=DONE 작업만 재검증 |
|
||||
|
||||
**주요 특징**:
|
||||
- **선언형 검증**: 체크 로직을 YAML에 기술 (하드코딩 최소화)
|
||||
- **원시 증거 보존**: 각 체크의 상세 결과를 JSON/텍스트로 저장
|
||||
- **완료 주장 차단**: "완료했다"는 수동 선언 불가 → verdict.json gate=PASS만 인정
|
||||
- **CI 편입**: validate_quant_engine_wbs_v1.py가 release DAG의 노드로 동작
|
||||
- **멀티 트리거**: 단일 작업 검증 (--task) 또는 전체 검증 (CI)
|
||||
|
||||
**검증 체크 타입 참고** (spec/60_quant_engine_wbs.yaml "evidence_check_types"):
|
||||
- **pg_query**: PostgreSQL 스칼라 결과 비교 (min/max/equals)
|
||||
- **log_pattern**: 로그 파일 정규식 매칭 (min_matches, max_age_hours)
|
||||
- **json_gate**: JSON 아티팩트 키-값 검사 (점 표기 경로, >=N 비교)
|
||||
- **file_exists**: 파일 존재 + 크기 검증 (min_bytes)
|
||||
- **playwright_report**: Playwright 리포트 테스트 결과 (passed_min, failed)
|
||||
+10
-1
@@ -52,7 +52,16 @@
|
||||
"validate-engine-strict": "python tools/run_release_dag_v3.py --mode release --strict",
|
||||
"validate-behavioral-coverage": "python tools/validate_behavioral_coverage_v1.py --strict",
|
||||
"validate-engine-integrity": "python tools/run_release_dag_v3.py --mode release --strict",
|
||||
"render-report-json": "dotnet run --project src/dotnet/QuantEngine.Tools/QuantEngine.Tools.csproj -- report --packet=Temp/final_decision_packet_active.json --out=Temp/operational_report.json"
|
||||
"render-report-json": "dotnet run --project src/dotnet/QuantEngine.Tools/QuantEngine.Tools.csproj -- report --packet=Temp/final_decision_packet_active.json --out=Temp/operational_report.json",
|
||||
"verify:task": "python tools/verify_wbs_task_v1.py --task",
|
||||
"collect:remote-evidence": "python tools/collect_remote_wbs_evidence_v1.py",
|
||||
"verify:wbs": "python tools/validate_quant_engine_wbs_v1.py",
|
||||
"validate:normalized-learning-store": "python tools/validate_normalized_learning_store_v1.py",
|
||||
"validate:dotnet-cutover": "python tools/validate_dotnet_postgresql_json_cutover_v1.py",
|
||||
"validate:runtime-settings": "python tools/validate_runtime_connection_settings_immutability_v1.py",
|
||||
"validate:market-schema": "python tools/validate_market_time_series_schema_v1.py",
|
||||
"test:e2e": "playwright test --project=chromium",
|
||||
"test:evidence": "playwright test --project=evidence"
|
||||
},
|
||||
"dependencies": {
|
||||
"cheerio": "1.2.0",
|
||||
|
||||
@@ -5,6 +5,7 @@ import { defineConfig, devices } from '@playwright/test';
|
||||
*/
|
||||
export default defineConfig({
|
||||
testDir: './tests/e2e',
|
||||
testIgnore: '**/archive/**',
|
||||
/* Run tests in files in parallel */
|
||||
fullyParallel: true,
|
||||
/* Fail the build on CI if you accidentally left test.only in the source code. */
|
||||
@@ -14,7 +15,7 @@ export default defineConfig({
|
||||
/* Opt out of parallel tests on CI. */
|
||||
workers: process.env.CI ? 1 : undefined,
|
||||
/* Reporter to use. See https://playwright.dev/docs/test-reporters */
|
||||
reporter: 'list',
|
||||
reporter: [['list'], ['json', { outputFile: 'Temp/evidence/playwright-last-run.json' }]],
|
||||
/* Shared settings for all the projects below. See https://playwright.dev/docs/api/class-testoptions. */
|
||||
use: {
|
||||
/* Base URL to use in actions like `await page.goto('/')`. */
|
||||
@@ -29,8 +30,14 @@ export default defineConfig({
|
||||
projects: [
|
||||
{
|
||||
name: 'chromium',
|
||||
testIgnore: ['**/archive/**', '**/evidence/**'],
|
||||
use: { ...devices['Desktop Chrome'] },
|
||||
},
|
||||
{
|
||||
name: 'evidence',
|
||||
testDir: './tests/e2e/evidence',
|
||||
use: { ...devices['Desktop Chrome'], screenshot: 'on', trace: 'on' },
|
||||
},
|
||||
],
|
||||
|
||||
/* Run your local dev server before starting the tests */
|
||||
|
||||
@@ -0,0 +1,21 @@
|
||||
[Unit]
|
||||
Description=Quant Engine Web Application (.NET 10)
|
||||
After=network.target
|
||||
StartLimitIntervalSec=60
|
||||
StartLimitBurst=3
|
||||
|
||||
[Service]
|
||||
Type=simple
|
||||
User=kjh2064
|
||||
WorkingDirectory=/home/kjh2064/quantengine_active
|
||||
ExecStart=/usr/bin/dotnet /home/kjh2064/quantengine_active/QuantEngine.Web.dll
|
||||
Restart=on-failure
|
||||
RestartSec=10
|
||||
SyslogIdentifier=quantengine
|
||||
StandardOutput=journal
|
||||
StandardError=journal
|
||||
Environment="ASPNETCORE_ENVIRONMENT=Production"
|
||||
Environment="ASPNETCORE_URLS=http://127.0.0.1:5000"
|
||||
|
||||
[Install]
|
||||
WantedBy=multi-user.target
|
||||
@@ -1 +0,0 @@
|
||||
"""Auto-generated package."""
|
||||
@@ -1,41 +0,0 @@
|
||||
{
|
||||
"$schema": "https://json-schema.org/draft/2020-12/schema",
|
||||
"$id": "schema://formula/ABSOLUTE_RISK_STOP_V1",
|
||||
"title": "ABSOLUTE_RISK_STOP_V1",
|
||||
"type": "object",
|
||||
"properties": {
|
||||
"formula_id": {
|
||||
"const": "ABSOLUTE_RISK_STOP_V1"
|
||||
},
|
||||
"owner": {
|
||||
"type": "string"
|
||||
},
|
||||
"status": {
|
||||
"type": "string"
|
||||
},
|
||||
"inputs": {
|
||||
"type": "array",
|
||||
"items": {
|
||||
"type": "string"
|
||||
}
|
||||
},
|
||||
"outputs": {
|
||||
"type": "array",
|
||||
"items": {
|
||||
"type": "string"
|
||||
}
|
||||
}
|
||||
},
|
||||
"required": [
|
||||
"formula_id",
|
||||
"owner",
|
||||
"status",
|
||||
"inputs",
|
||||
"outputs"
|
||||
],
|
||||
"x_formula_inputs": [
|
||||
"holdings",
|
||||
"df_map"
|
||||
],
|
||||
"x_formula_outputs": []
|
||||
}
|
||||
@@ -1,38 +0,0 @@
|
||||
{
|
||||
"$schema": "https://json-schema.org/draft/2020-12/schema",
|
||||
"$id": "schema://formula/ALGORITHM_GUIDANCE_PROOF_V1",
|
||||
"title": "ALGORITHM_GUIDANCE_PROOF_V1",
|
||||
"type": "object",
|
||||
"properties": {
|
||||
"formula_id": {
|
||||
"const": "ALGORITHM_GUIDANCE_PROOF_V1"
|
||||
},
|
||||
"owner": {
|
||||
"type": "string"
|
||||
},
|
||||
"status": {
|
||||
"type": "string"
|
||||
},
|
||||
"inputs": {
|
||||
"type": "array",
|
||||
"items": {
|
||||
"type": "string"
|
||||
}
|
||||
},
|
||||
"outputs": {
|
||||
"type": "array",
|
||||
"items": {
|
||||
"type": "string"
|
||||
}
|
||||
}
|
||||
},
|
||||
"required": [
|
||||
"formula_id",
|
||||
"owner",
|
||||
"status",
|
||||
"inputs",
|
||||
"outputs"
|
||||
],
|
||||
"x_formula_inputs": [],
|
||||
"x_formula_outputs": []
|
||||
}
|
||||
@@ -1,44 +0,0 @@
|
||||
{
|
||||
"$schema": "https://json-schema.org/draft/2020-12/schema",
|
||||
"$id": "schema://formula/ALPHA_EVALUATION_WINDOW_V1",
|
||||
"title": "ALPHA_EVALUATION_WINDOW_V1",
|
||||
"type": "object",
|
||||
"properties": {
|
||||
"formula_id": {
|
||||
"const": "ALPHA_EVALUATION_WINDOW_V1"
|
||||
},
|
||||
"owner": {
|
||||
"type": "string"
|
||||
},
|
||||
"status": {
|
||||
"type": "string"
|
||||
},
|
||||
"inputs": {
|
||||
"type": "array",
|
||||
"items": {
|
||||
"type": "string"
|
||||
}
|
||||
},
|
||||
"outputs": {
|
||||
"type": "array",
|
||||
"items": {
|
||||
"type": "string"
|
||||
}
|
||||
}
|
||||
},
|
||||
"required": [
|
||||
"formula_id",
|
||||
"owner",
|
||||
"status",
|
||||
"inputs",
|
||||
"outputs"
|
||||
],
|
||||
"x_formula_inputs": [
|
||||
"entry_date",
|
||||
"position_class",
|
||||
"t20_return_pct",
|
||||
"t60_return_pct",
|
||||
"benchmark_core_return_pct"
|
||||
],
|
||||
"x_formula_outputs": []
|
||||
}
|
||||
@@ -1,53 +0,0 @@
|
||||
{
|
||||
"$schema": "https://json-schema.org/draft/2020-12/schema",
|
||||
"$id": "schema://formula/ALPHA_FEEDBACK_LOOP_V1",
|
||||
"title": "ALPHA_FEEDBACK_LOOP_V1",
|
||||
"type": "object",
|
||||
"properties": {
|
||||
"formula_id": {
|
||||
"const": "ALPHA_FEEDBACK_LOOP_V1"
|
||||
},
|
||||
"owner": {
|
||||
"type": "string"
|
||||
},
|
||||
"status": {
|
||||
"type": "string"
|
||||
},
|
||||
"inputs": {
|
||||
"type": "array",
|
||||
"items": {
|
||||
"type": "string"
|
||||
}
|
||||
},
|
||||
"outputs": {
|
||||
"type": "array",
|
||||
"items": {
|
||||
"type": "string"
|
||||
}
|
||||
}
|
||||
},
|
||||
"required": [
|
||||
"formula_id",
|
||||
"owner",
|
||||
"status",
|
||||
"inputs",
|
||||
"outputs"
|
||||
],
|
||||
"x_formula_inputs": [
|
||||
"alpha_evaluation_window_json",
|
||||
"saqg_v1",
|
||||
"brt_verdict",
|
||||
"market_regime"
|
||||
],
|
||||
"x_formula_outputs": [
|
||||
{
|
||||
"field": "alpha_feedback_json",
|
||||
"subfields": [
|
||||
"eligible_t20_fail_rate",
|
||||
"eligible_t60_fail_rate",
|
||||
"recommended_filter_adjustments",
|
||||
"cases_analyzed"
|
||||
]
|
||||
}
|
||||
]
|
||||
}
|
||||
@@ -1,38 +0,0 @@
|
||||
{
|
||||
"$schema": "https://json-schema.org/draft/2020-12/schema",
|
||||
"$id": "schema://formula/ANTI_CHASE_V1",
|
||||
"title": "ANTI_CHASE_V1",
|
||||
"type": "object",
|
||||
"properties": {
|
||||
"formula_id": {
|
||||
"const": "ANTI_CHASE_V1"
|
||||
},
|
||||
"owner": {
|
||||
"type": "string"
|
||||
},
|
||||
"status": {
|
||||
"type": "string"
|
||||
},
|
||||
"inputs": {
|
||||
"type": "array",
|
||||
"items": {
|
||||
"type": "string"
|
||||
}
|
||||
},
|
||||
"outputs": {
|
||||
"type": "array",
|
||||
"items": {
|
||||
"type": "string"
|
||||
}
|
||||
}
|
||||
},
|
||||
"required": [
|
||||
"formula_id",
|
||||
"owner",
|
||||
"status",
|
||||
"inputs",
|
||||
"outputs"
|
||||
],
|
||||
"x_formula_inputs": [],
|
||||
"x_formula_outputs": []
|
||||
}
|
||||
@@ -1,43 +0,0 @@
|
||||
{
|
||||
"$schema": "https://json-schema.org/draft/2020-12/schema",
|
||||
"$id": "schema://formula/ANTI_CHASING_VELOCITY_V1",
|
||||
"title": "ANTI_CHASING_VELOCITY_V1",
|
||||
"type": "object",
|
||||
"properties": {
|
||||
"formula_id": {
|
||||
"const": "ANTI_CHASING_VELOCITY_V1"
|
||||
},
|
||||
"owner": {
|
||||
"type": "string"
|
||||
},
|
||||
"status": {
|
||||
"type": "string"
|
||||
},
|
||||
"inputs": {
|
||||
"type": "array",
|
||||
"items": {
|
||||
"type": "string"
|
||||
}
|
||||
},
|
||||
"outputs": {
|
||||
"type": "array",
|
||||
"items": {
|
||||
"type": "string"
|
||||
}
|
||||
}
|
||||
},
|
||||
"required": [
|
||||
"formula_id",
|
||||
"owner",
|
||||
"status",
|
||||
"inputs",
|
||||
"outputs"
|
||||
],
|
||||
"x_formula_inputs": [
|
||||
"close",
|
||||
"close_1d_ago",
|
||||
"close_5d_ago",
|
||||
"market_regime"
|
||||
],
|
||||
"x_formula_outputs": []
|
||||
}
|
||||
@@ -1,38 +0,0 @@
|
||||
{
|
||||
"$schema": "https://json-schema.org/draft/2020-12/schema",
|
||||
"$id": "schema://formula/ANTI_LATE_ENTRY_GATE_V2",
|
||||
"title": "ANTI_LATE_ENTRY_GATE_V2",
|
||||
"type": "object",
|
||||
"properties": {
|
||||
"formula_id": {
|
||||
"const": "ANTI_LATE_ENTRY_GATE_V2"
|
||||
},
|
||||
"owner": {
|
||||
"type": "string"
|
||||
},
|
||||
"status": {
|
||||
"type": "string"
|
||||
},
|
||||
"inputs": {
|
||||
"type": "array",
|
||||
"items": {
|
||||
"type": "string"
|
||||
}
|
||||
},
|
||||
"outputs": {
|
||||
"type": "array",
|
||||
"items": {
|
||||
"type": "string"
|
||||
}
|
||||
}
|
||||
},
|
||||
"required": [
|
||||
"formula_id",
|
||||
"owner",
|
||||
"status",
|
||||
"inputs",
|
||||
"outputs"
|
||||
],
|
||||
"x_formula_inputs": [],
|
||||
"x_formula_outputs": []
|
||||
}
|
||||
@@ -1,42 +0,0 @@
|
||||
{
|
||||
"$schema": "https://json-schema.org/draft/2020-12/schema",
|
||||
"$id": "schema://formula/ANTI_WHIPSAW_GATE_V1",
|
||||
"title": "ANTI_WHIPSAW_GATE_V1",
|
||||
"type": "object",
|
||||
"properties": {
|
||||
"formula_id": {
|
||||
"const": "ANTI_WHIPSAW_GATE_V1"
|
||||
},
|
||||
"owner": {
|
||||
"type": "string"
|
||||
},
|
||||
"status": {
|
||||
"type": "string"
|
||||
},
|
||||
"inputs": {
|
||||
"type": "array",
|
||||
"items": {
|
||||
"type": "string"
|
||||
}
|
||||
},
|
||||
"outputs": {
|
||||
"type": "array",
|
||||
"items": {
|
||||
"type": "string"
|
||||
}
|
||||
}
|
||||
},
|
||||
"required": [
|
||||
"formula_id",
|
||||
"owner",
|
||||
"status",
|
||||
"inputs",
|
||||
"outputs"
|
||||
],
|
||||
"x_formula_inputs": [
|
||||
"close_price",
|
||||
"ma20",
|
||||
"rsi14"
|
||||
],
|
||||
"x_formula_outputs": []
|
||||
}
|
||||
@@ -1,38 +0,0 @@
|
||||
{
|
||||
"$schema": "https://json-schema.org/draft/2020-12/schema",
|
||||
"$id": "schema://formula/ARTIFACT_FRESHNESS_GATE_V1",
|
||||
"title": "ARTIFACT_FRESHNESS_GATE_V1",
|
||||
"type": "object",
|
||||
"properties": {
|
||||
"formula_id": {
|
||||
"const": "ARTIFACT_FRESHNESS_GATE_V1"
|
||||
},
|
||||
"owner": {
|
||||
"type": "string"
|
||||
},
|
||||
"status": {
|
||||
"type": "string"
|
||||
},
|
||||
"inputs": {
|
||||
"type": "array",
|
||||
"items": {
|
||||
"type": "string"
|
||||
}
|
||||
},
|
||||
"outputs": {
|
||||
"type": "array",
|
||||
"items": {
|
||||
"type": "string"
|
||||
}
|
||||
}
|
||||
},
|
||||
"required": [
|
||||
"formula_id",
|
||||
"owner",
|
||||
"status",
|
||||
"inputs",
|
||||
"outputs"
|
||||
],
|
||||
"x_formula_inputs": [],
|
||||
"x_formula_outputs": []
|
||||
}
|
||||
@@ -1,38 +0,0 @@
|
||||
{
|
||||
"$schema": "https://json-schema.org/draft/2020-12/schema",
|
||||
"$id": "schema://formula/AUDIT_REPLAY_SNAPSHOT_V1",
|
||||
"title": "AUDIT_REPLAY_SNAPSHOT_V1",
|
||||
"type": "object",
|
||||
"properties": {
|
||||
"formula_id": {
|
||||
"const": "AUDIT_REPLAY_SNAPSHOT_V1"
|
||||
},
|
||||
"owner": {
|
||||
"type": "string"
|
||||
},
|
||||
"status": {
|
||||
"type": "string"
|
||||
},
|
||||
"inputs": {
|
||||
"type": "array",
|
||||
"items": {
|
||||
"type": "string"
|
||||
}
|
||||
},
|
||||
"outputs": {
|
||||
"type": "array",
|
||||
"items": {
|
||||
"type": "string"
|
||||
}
|
||||
}
|
||||
},
|
||||
"required": [
|
||||
"formula_id",
|
||||
"owner",
|
||||
"status",
|
||||
"inputs",
|
||||
"outputs"
|
||||
],
|
||||
"x_formula_inputs": [],
|
||||
"x_formula_outputs": []
|
||||
}
|
||||
@@ -1,48 +0,0 @@
|
||||
{
|
||||
"$schema": "https://json-schema.org/draft/2020-12/schema",
|
||||
"$id": "schema://formula/BENCHMARK_RELATIVE_TIMESERIES_V1",
|
||||
"title": "BENCHMARK_RELATIVE_TIMESERIES_V1",
|
||||
"type": "object",
|
||||
"properties": {
|
||||
"formula_id": {
|
||||
"const": "BENCHMARK_RELATIVE_TIMESERIES_V1"
|
||||
},
|
||||
"owner": {
|
||||
"type": "string"
|
||||
},
|
||||
"status": {
|
||||
"type": "string"
|
||||
},
|
||||
"inputs": {
|
||||
"type": "array",
|
||||
"items": {
|
||||
"type": "string"
|
||||
}
|
||||
},
|
||||
"outputs": {
|
||||
"type": "array",
|
||||
"items": {
|
||||
"type": "string"
|
||||
}
|
||||
}
|
||||
},
|
||||
"required": [
|
||||
"formula_id",
|
||||
"owner",
|
||||
"status",
|
||||
"inputs",
|
||||
"outputs"
|
||||
],
|
||||
"x_formula_inputs": [
|
||||
"price.ret5D",
|
||||
"price.ret20D",
|
||||
"price.ret60D",
|
||||
"price.close",
|
||||
"high52w",
|
||||
"globalKospiRet5D_",
|
||||
"globalKospiRet20D_",
|
||||
"globalKospiRet60D_",
|
||||
"globalKospiDrawdown_"
|
||||
],
|
||||
"x_formula_outputs": []
|
||||
}
|
||||
@@ -1,40 +0,0 @@
|
||||
{
|
||||
"$schema": "https://json-schema.org/draft/2020-12/schema",
|
||||
"$id": "schema://formula/BLANK_CELL_AUDIT_V1",
|
||||
"title": "BLANK_CELL_AUDIT_V1",
|
||||
"type": "object",
|
||||
"properties": {
|
||||
"formula_id": {
|
||||
"const": "BLANK_CELL_AUDIT_V1"
|
||||
},
|
||||
"owner": {
|
||||
"type": "string"
|
||||
},
|
||||
"status": {
|
||||
"type": "string"
|
||||
},
|
||||
"inputs": {
|
||||
"type": "array",
|
||||
"items": {
|
||||
"type": "string"
|
||||
}
|
||||
},
|
||||
"outputs": {
|
||||
"type": "array",
|
||||
"items": {
|
||||
"type": "string"
|
||||
}
|
||||
}
|
||||
},
|
||||
"required": [
|
||||
"formula_id",
|
||||
"owner",
|
||||
"status",
|
||||
"inputs",
|
||||
"outputs"
|
||||
],
|
||||
"x_formula_inputs": [
|
||||
"operational_report_json"
|
||||
],
|
||||
"x_formula_outputs": []
|
||||
}
|
||||
@@ -1,41 +0,0 @@
|
||||
{
|
||||
"$schema": "https://json-schema.org/draft/2020-12/schema",
|
||||
"$id": "schema://formula/BREAKEVEN_RATCHET_V1",
|
||||
"title": "BREAKEVEN_RATCHET_V1",
|
||||
"type": "object",
|
||||
"properties": {
|
||||
"formula_id": {
|
||||
"const": "BREAKEVEN_RATCHET_V1"
|
||||
},
|
||||
"owner": {
|
||||
"type": "string"
|
||||
},
|
||||
"status": {
|
||||
"type": "string"
|
||||
},
|
||||
"inputs": {
|
||||
"type": "array",
|
||||
"items": {
|
||||
"type": "string"
|
||||
}
|
||||
},
|
||||
"outputs": {
|
||||
"type": "array",
|
||||
"items": {
|
||||
"type": "string"
|
||||
}
|
||||
}
|
||||
},
|
||||
"required": [
|
||||
"formula_id",
|
||||
"owner",
|
||||
"status",
|
||||
"inputs",
|
||||
"outputs"
|
||||
],
|
||||
"x_formula_inputs": [
|
||||
"average_cost",
|
||||
"highest_price_since_entry"
|
||||
],
|
||||
"x_formula_outputs": []
|
||||
}
|
||||
@@ -1,42 +0,0 @@
|
||||
{
|
||||
"$schema": "https://json-schema.org/draft/2020-12/schema",
|
||||
"$id": "schema://formula/BREAKOUT_FAILURE_STOP_V1",
|
||||
"title": "BREAKOUT_FAILURE_STOP_V1",
|
||||
"type": "object",
|
||||
"properties": {
|
||||
"formula_id": {
|
||||
"const": "BREAKOUT_FAILURE_STOP_V1"
|
||||
},
|
||||
"owner": {
|
||||
"type": "string"
|
||||
},
|
||||
"status": {
|
||||
"type": "string"
|
||||
},
|
||||
"inputs": {
|
||||
"type": "array",
|
||||
"items": {
|
||||
"type": "string"
|
||||
}
|
||||
},
|
||||
"outputs": {
|
||||
"type": "array",
|
||||
"items": {
|
||||
"type": "string"
|
||||
}
|
||||
}
|
||||
},
|
||||
"required": [
|
||||
"formula_id",
|
||||
"owner",
|
||||
"status",
|
||||
"inputs",
|
||||
"outputs"
|
||||
],
|
||||
"x_formula_inputs": [
|
||||
"prior_high",
|
||||
"close_price",
|
||||
"days_since_breakout"
|
||||
],
|
||||
"x_formula_outputs": []
|
||||
}
|
||||
@@ -1,50 +0,0 @@
|
||||
{
|
||||
"$schema": "https://json-schema.org/draft/2020-12/schema",
|
||||
"$id": "schema://formula/BREAKOUT_QUALITY_GATE_V2",
|
||||
"title": "BREAKOUT_QUALITY_GATE_V2",
|
||||
"type": "object",
|
||||
"properties": {
|
||||
"formula_id": {
|
||||
"const": "BREAKOUT_QUALITY_GATE_V2"
|
||||
},
|
||||
"owner": {
|
||||
"type": "string"
|
||||
},
|
||||
"status": {
|
||||
"type": "string"
|
||||
},
|
||||
"inputs": {
|
||||
"type": "array",
|
||||
"items": {
|
||||
"type": "string"
|
||||
}
|
||||
},
|
||||
"outputs": {
|
||||
"type": "array",
|
||||
"items": {
|
||||
"type": "string"
|
||||
}
|
||||
}
|
||||
},
|
||||
"required": [
|
||||
"formula_id",
|
||||
"owner",
|
||||
"status",
|
||||
"inputs",
|
||||
"outputs"
|
||||
],
|
||||
"x_formula_inputs": [
|
||||
"close",
|
||||
"ma20",
|
||||
"ret_3d",
|
||||
"ret_1d",
|
||||
"disparity",
|
||||
"rsi14",
|
||||
"volume",
|
||||
"avg_volume_5d",
|
||||
"timing_score_exit",
|
||||
"distribution_risk_score",
|
||||
"late_chase_risk_score"
|
||||
],
|
||||
"x_formula_outputs": []
|
||||
}
|
||||
@@ -1,38 +0,0 @@
|
||||
{
|
||||
"$schema": "https://json-schema.org/draft/2020-12/schema",
|
||||
"$id": "schema://formula/CANONICAL_ARTIFACT_RESOLVER_V1",
|
||||
"title": "CANONICAL_ARTIFACT_RESOLVER_V1",
|
||||
"type": "object",
|
||||
"properties": {
|
||||
"formula_id": {
|
||||
"const": "CANONICAL_ARTIFACT_RESOLVER_V1"
|
||||
},
|
||||
"owner": {
|
||||
"type": "string"
|
||||
},
|
||||
"status": {
|
||||
"type": "string"
|
||||
},
|
||||
"inputs": {
|
||||
"type": "array",
|
||||
"items": {
|
||||
"type": "string"
|
||||
}
|
||||
},
|
||||
"outputs": {
|
||||
"type": "array",
|
||||
"items": {
|
||||
"type": "string"
|
||||
}
|
||||
}
|
||||
},
|
||||
"required": [
|
||||
"formula_id",
|
||||
"owner",
|
||||
"status",
|
||||
"inputs",
|
||||
"outputs"
|
||||
],
|
||||
"x_formula_inputs": [],
|
||||
"x_formula_outputs": []
|
||||
}
|
||||
@@ -1,38 +0,0 @@
|
||||
{
|
||||
"$schema": "https://json-schema.org/draft/2020-12/schema",
|
||||
"$id": "schema://formula/CANONICAL_METRICS_V1",
|
||||
"title": "CANONICAL_METRICS_V1",
|
||||
"type": "object",
|
||||
"properties": {
|
||||
"formula_id": {
|
||||
"const": "CANONICAL_METRICS_V1"
|
||||
},
|
||||
"owner": {
|
||||
"type": "string"
|
||||
},
|
||||
"status": {
|
||||
"type": "string"
|
||||
},
|
||||
"inputs": {
|
||||
"type": "array",
|
||||
"items": {
|
||||
"type": "string"
|
||||
}
|
||||
},
|
||||
"outputs": {
|
||||
"type": "array",
|
||||
"items": {
|
||||
"type": "string"
|
||||
}
|
||||
}
|
||||
},
|
||||
"required": [
|
||||
"formula_id",
|
||||
"owner",
|
||||
"status",
|
||||
"inputs",
|
||||
"outputs"
|
||||
],
|
||||
"x_formula_inputs": [],
|
||||
"x_formula_outputs": []
|
||||
}
|
||||
@@ -1,43 +0,0 @@
|
||||
{
|
||||
"$schema": "https://json-schema.org/draft/2020-12/schema",
|
||||
"$id": "schema://formula/CAPITAL_STYLE_ALLOCATION_V1",
|
||||
"title": "CAPITAL_STYLE_ALLOCATION_V1",
|
||||
"type": "object",
|
||||
"properties": {
|
||||
"formula_id": {
|
||||
"const": "CAPITAL_STYLE_ALLOCATION_V1"
|
||||
},
|
||||
"owner": {
|
||||
"type": "string"
|
||||
},
|
||||
"status": {
|
||||
"type": "string"
|
||||
},
|
||||
"inputs": {
|
||||
"type": "array",
|
||||
"items": {
|
||||
"type": "string"
|
||||
}
|
||||
},
|
||||
"outputs": {
|
||||
"type": "array",
|
||||
"items": {
|
||||
"type": "string"
|
||||
}
|
||||
}
|
||||
},
|
||||
"required": [
|
||||
"formula_id",
|
||||
"owner",
|
||||
"status",
|
||||
"inputs",
|
||||
"outputs"
|
||||
],
|
||||
"x_formula_inputs": [
|
||||
"smart_money_flow_signal_v2_json",
|
||||
"fundamental_multifactor_v3_json",
|
||||
"macro_event_ticker_impact_v1_json",
|
||||
"liquidity_flow_signal_v1_json"
|
||||
],
|
||||
"x_formula_outputs": []
|
||||
}
|
||||
@@ -1,45 +0,0 @@
|
||||
{
|
||||
"$schema": "https://json-schema.org/draft/2020-12/schema",
|
||||
"$id": "schema://formula/CASH_CREATION_PURPOSE_LOCK_V1",
|
||||
"title": "CASH_CREATION_PURPOSE_LOCK_V1",
|
||||
"type": "object",
|
||||
"properties": {
|
||||
"formula_id": {
|
||||
"const": "CASH_CREATION_PURPOSE_LOCK_V1"
|
||||
},
|
||||
"owner": {
|
||||
"type": "string"
|
||||
},
|
||||
"status": {
|
||||
"type": "string"
|
||||
},
|
||||
"inputs": {
|
||||
"type": "array",
|
||||
"items": {
|
||||
"type": "string"
|
||||
}
|
||||
},
|
||||
"outputs": {
|
||||
"type": "array",
|
||||
"items": {
|
||||
"type": "string"
|
||||
}
|
||||
}
|
||||
},
|
||||
"required": [
|
||||
"formula_id",
|
||||
"owner",
|
||||
"status",
|
||||
"inputs",
|
||||
"outputs"
|
||||
],
|
||||
"x_formula_inputs": [
|
||||
"composite_verdict",
|
||||
"rs_verdict",
|
||||
"brt_verdict",
|
||||
"excess_drawdown_pctp",
|
||||
"recovery_ratio_20d",
|
||||
"sfg_v1"
|
||||
],
|
||||
"x_formula_outputs": []
|
||||
}
|
||||
@@ -1,42 +0,0 @@
|
||||
{
|
||||
"$schema": "https://json-schema.org/draft/2020-12/schema",
|
||||
"$id": "schema://formula/CASH_FLOOR_V1",
|
||||
"title": "CASH_FLOOR_V1",
|
||||
"type": "object",
|
||||
"properties": {
|
||||
"formula_id": {
|
||||
"const": "CASH_FLOOR_V1"
|
||||
},
|
||||
"owner": {
|
||||
"type": "string"
|
||||
},
|
||||
"status": {
|
||||
"type": "string"
|
||||
},
|
||||
"inputs": {
|
||||
"type": "array",
|
||||
"items": {
|
||||
"type": "string"
|
||||
}
|
||||
},
|
||||
"outputs": {
|
||||
"type": "array",
|
||||
"items": {
|
||||
"type": "string"
|
||||
}
|
||||
}
|
||||
},
|
||||
"required": [
|
||||
"formula_id",
|
||||
"owner",
|
||||
"status",
|
||||
"inputs",
|
||||
"outputs"
|
||||
],
|
||||
"x_formula_inputs": [
|
||||
"total_asset",
|
||||
"settlement_cash_d2_krw",
|
||||
"market_risk_score"
|
||||
],
|
||||
"x_formula_outputs": []
|
||||
}
|
||||
@@ -1,38 +0,0 @@
|
||||
{
|
||||
"$schema": "https://json-schema.org/draft/2020-12/schema",
|
||||
"$id": "schema://formula/CASH_RAISE_PARETO_EXECUTOR_V2",
|
||||
"title": "CASH_RAISE_PARETO_EXECUTOR_V2",
|
||||
"type": "object",
|
||||
"properties": {
|
||||
"formula_id": {
|
||||
"const": "CASH_RAISE_PARETO_EXECUTOR_V2"
|
||||
},
|
||||
"owner": {
|
||||
"type": "string"
|
||||
},
|
||||
"status": {
|
||||
"type": "string"
|
||||
},
|
||||
"inputs": {
|
||||
"type": "array",
|
||||
"items": {
|
||||
"type": "string"
|
||||
}
|
||||
},
|
||||
"outputs": {
|
||||
"type": "array",
|
||||
"items": {
|
||||
"type": "string"
|
||||
}
|
||||
}
|
||||
},
|
||||
"required": [
|
||||
"formula_id",
|
||||
"owner",
|
||||
"status",
|
||||
"inputs",
|
||||
"outputs"
|
||||
],
|
||||
"x_formula_inputs": [],
|
||||
"x_formula_outputs": []
|
||||
}
|
||||
@@ -1,38 +0,0 @@
|
||||
{
|
||||
"$schema": "https://json-schema.org/draft/2020-12/schema",
|
||||
"$id": "schema://formula/CASH_RAISE_VALUE_OPTIMIZER_V3",
|
||||
"title": "CASH_RAISE_VALUE_OPTIMIZER_V3",
|
||||
"type": "object",
|
||||
"properties": {
|
||||
"formula_id": {
|
||||
"const": "CASH_RAISE_VALUE_OPTIMIZER_V3"
|
||||
},
|
||||
"owner": {
|
||||
"type": "string"
|
||||
},
|
||||
"status": {
|
||||
"type": "string"
|
||||
},
|
||||
"inputs": {
|
||||
"type": "array",
|
||||
"items": {
|
||||
"type": "string"
|
||||
}
|
||||
},
|
||||
"outputs": {
|
||||
"type": "array",
|
||||
"items": {
|
||||
"type": "string"
|
||||
}
|
||||
}
|
||||
},
|
||||
"required": [
|
||||
"formula_id",
|
||||
"owner",
|
||||
"status",
|
||||
"inputs",
|
||||
"outputs"
|
||||
],
|
||||
"x_formula_inputs": [],
|
||||
"x_formula_outputs": []
|
||||
}
|
||||
@@ -1,50 +0,0 @@
|
||||
{
|
||||
"$schema": "https://json-schema.org/draft/2020-12/schema",
|
||||
"$id": "schema://formula/CASH_RATIOS_V1",
|
||||
"title": "CASH_RATIOS_V1",
|
||||
"type": "object",
|
||||
"properties": {
|
||||
"formula_id": {
|
||||
"const": "CASH_RATIOS_V1"
|
||||
},
|
||||
"owner": {
|
||||
"type": "string"
|
||||
},
|
||||
"status": {
|
||||
"type": "string"
|
||||
},
|
||||
"inputs": {
|
||||
"type": "array",
|
||||
"items": {
|
||||
"type": "string"
|
||||
}
|
||||
},
|
||||
"outputs": {
|
||||
"type": "array",
|
||||
"items": {
|
||||
"type": "string"
|
||||
}
|
||||
}
|
||||
},
|
||||
"required": [
|
||||
"formula_id",
|
||||
"owner",
|
||||
"status",
|
||||
"inputs",
|
||||
"outputs"
|
||||
],
|
||||
"x_formula_inputs": [
|
||||
"settlement_cash",
|
||||
"reserved_order_amount",
|
||||
"planned_buy_amount",
|
||||
"sell_cash_proceeds_d2",
|
||||
"total_asset"
|
||||
],
|
||||
"x_formula_outputs": {
|
||||
"settlement_cash_ratio": "settlement_cash / total_asset * 100",
|
||||
"total_cash_ratio": "settlement_cash / total_asset * 100",
|
||||
"buy_power_cash": "settlement_cash - reserved_order_amount",
|
||||
"buy_power_ratio": "(settlement_cash - reserved_order_amount) / total_asset * 100",
|
||||
"post_trade_total_cash_ratio": "(settlement_cash - planned_buy_amount + sell_cash_proceeds_d2) / total_asset * 100"
|
||||
}
|
||||
}
|
||||
@@ -1,45 +0,0 @@
|
||||
{
|
||||
"$schema": "https://json-schema.org/draft/2020-12/schema",
|
||||
"$id": "schema://formula/CASH_RECOVERY_OPTIMIZER_V1",
|
||||
"title": "CASH_RECOVERY_OPTIMIZER_V1",
|
||||
"type": "object",
|
||||
"properties": {
|
||||
"formula_id": {
|
||||
"const": "CASH_RECOVERY_OPTIMIZER_V1"
|
||||
},
|
||||
"owner": {
|
||||
"type": "string"
|
||||
},
|
||||
"status": {
|
||||
"type": "string"
|
||||
},
|
||||
"inputs": {
|
||||
"type": "array",
|
||||
"items": {
|
||||
"type": "string"
|
||||
}
|
||||
},
|
||||
"outputs": {
|
||||
"type": "array",
|
||||
"items": {
|
||||
"type": "string"
|
||||
}
|
||||
}
|
||||
},
|
||||
"required": [
|
||||
"formula_id",
|
||||
"owner",
|
||||
"status",
|
||||
"inputs",
|
||||
"outputs"
|
||||
],
|
||||
"x_formula_inputs": [
|
||||
"cash_shortfall_target_krw",
|
||||
"cash_shortfall_min_krw",
|
||||
"sell_candidates_json",
|
||||
"immediate_sell_qty",
|
||||
"sell_limit_price",
|
||||
"holding_qty"
|
||||
],
|
||||
"x_formula_outputs": []
|
||||
}
|
||||
@@ -1,38 +0,0 @@
|
||||
{
|
||||
"$schema": "https://json-schema.org/draft/2020-12/schema",
|
||||
"$id": "schema://formula/CASH_RECOVERY_OPTIMIZER_V4",
|
||||
"title": "CASH_RECOVERY_OPTIMIZER_V4",
|
||||
"type": "object",
|
||||
"properties": {
|
||||
"formula_id": {
|
||||
"const": "CASH_RECOVERY_OPTIMIZER_V4"
|
||||
},
|
||||
"owner": {
|
||||
"type": "string"
|
||||
},
|
||||
"status": {
|
||||
"type": "string"
|
||||
},
|
||||
"inputs": {
|
||||
"type": "array",
|
||||
"items": {
|
||||
"type": "string"
|
||||
}
|
||||
},
|
||||
"outputs": {
|
||||
"type": "array",
|
||||
"items": {
|
||||
"type": "string"
|
||||
}
|
||||
}
|
||||
},
|
||||
"required": [
|
||||
"formula_id",
|
||||
"owner",
|
||||
"status",
|
||||
"inputs",
|
||||
"outputs"
|
||||
],
|
||||
"x_formula_inputs": [],
|
||||
"x_formula_outputs": []
|
||||
}
|
||||
@@ -1,38 +0,0 @@
|
||||
{
|
||||
"$schema": "https://json-schema.org/draft/2020-12/schema",
|
||||
"$id": "schema://formula/CASH_RECOVERY_V1",
|
||||
"title": "CASH_RECOVERY_V1",
|
||||
"type": "object",
|
||||
"properties": {
|
||||
"formula_id": {
|
||||
"const": "CASH_RECOVERY_V1"
|
||||
},
|
||||
"owner": {
|
||||
"type": "string"
|
||||
},
|
||||
"status": {
|
||||
"type": "string"
|
||||
},
|
||||
"inputs": {
|
||||
"type": "array",
|
||||
"items": {
|
||||
"type": "string"
|
||||
}
|
||||
},
|
||||
"outputs": {
|
||||
"type": "array",
|
||||
"items": {
|
||||
"type": "string"
|
||||
}
|
||||
}
|
||||
},
|
||||
"required": [
|
||||
"formula_id",
|
||||
"owner",
|
||||
"status",
|
||||
"inputs",
|
||||
"outputs"
|
||||
],
|
||||
"x_formula_inputs": [],
|
||||
"x_formula_outputs": []
|
||||
}
|
||||
@@ -1,38 +0,0 @@
|
||||
{
|
||||
"$schema": "https://json-schema.org/draft/2020-12/schema",
|
||||
"$id": "schema://formula/CASHFLOW_QUALITY_SIGNAL_V1",
|
||||
"title": "CASHFLOW_QUALITY_SIGNAL_V1",
|
||||
"type": "object",
|
||||
"properties": {
|
||||
"formula_id": {
|
||||
"const": "CASHFLOW_QUALITY_SIGNAL_V1"
|
||||
},
|
||||
"owner": {
|
||||
"type": "string"
|
||||
},
|
||||
"status": {
|
||||
"type": "string"
|
||||
},
|
||||
"inputs": {
|
||||
"type": "array",
|
||||
"items": {
|
||||
"type": "string"
|
||||
}
|
||||
},
|
||||
"outputs": {
|
||||
"type": "array",
|
||||
"items": {
|
||||
"type": "string"
|
||||
}
|
||||
}
|
||||
},
|
||||
"required": [
|
||||
"formula_id",
|
||||
"owner",
|
||||
"status",
|
||||
"inputs",
|
||||
"outputs"
|
||||
],
|
||||
"x_formula_inputs": [],
|
||||
"x_formula_outputs": []
|
||||
}
|
||||
@@ -1,42 +0,0 @@
|
||||
{
|
||||
"$schema": "https://json-schema.org/draft/2020-12/schema",
|
||||
"$id": "schema://formula/CASHFLOW_STABILITY_GATE_V1",
|
||||
"title": "CASHFLOW_STABILITY_GATE_V1",
|
||||
"type": "object",
|
||||
"properties": {
|
||||
"formula_id": {
|
||||
"const": "CASHFLOW_STABILITY_GATE_V1"
|
||||
},
|
||||
"owner": {
|
||||
"type": "string"
|
||||
},
|
||||
"status": {
|
||||
"type": "string"
|
||||
},
|
||||
"inputs": {
|
||||
"type": "array",
|
||||
"items": {
|
||||
"type": "string"
|
||||
}
|
||||
},
|
||||
"outputs": {
|
||||
"type": "array",
|
||||
"items": {
|
||||
"type": "string"
|
||||
}
|
||||
}
|
||||
},
|
||||
"required": [
|
||||
"formula_id",
|
||||
"owner",
|
||||
"status",
|
||||
"inputs",
|
||||
"outputs"
|
||||
],
|
||||
"x_formula_inputs": [
|
||||
"operating_cf_krw",
|
||||
"free_cf_krw",
|
||||
"accrual_ratio_pct"
|
||||
],
|
||||
"x_formula_outputs": []
|
||||
}
|
||||
@@ -1,59 +0,0 @@
|
||||
{
|
||||
"$schema": "https://json-schema.org/draft/2020-12/schema",
|
||||
"$id": "schema://formula/CLA_REGIME_EXIT_CONDITION_V1",
|
||||
"title": "CLA_REGIME_EXIT_CONDITION_V1",
|
||||
"type": "object",
|
||||
"properties": {
|
||||
"formula_id": {
|
||||
"const": "CLA_REGIME_EXIT_CONDITION_V1"
|
||||
},
|
||||
"owner": {
|
||||
"type": "string"
|
||||
},
|
||||
"status": {
|
||||
"type": "string"
|
||||
},
|
||||
"inputs": {
|
||||
"type": "array",
|
||||
"items": {
|
||||
"type": "string"
|
||||
}
|
||||
},
|
||||
"outputs": {
|
||||
"type": "array",
|
||||
"items": {
|
||||
"type": "string"
|
||||
}
|
||||
}
|
||||
},
|
||||
"required": [
|
||||
"formula_id",
|
||||
"owner",
|
||||
"status",
|
||||
"inputs",
|
||||
"outputs"
|
||||
],
|
||||
"x_formula_inputs": [
|
||||
"ticker",
|
||||
"rs_verdict",
|
||||
"brt_verdict",
|
||||
"frg_5d_sh",
|
||||
"volume",
|
||||
"avg_volume_5d",
|
||||
"market_regime"
|
||||
],
|
||||
"x_formula_outputs": [
|
||||
{
|
||||
"field": "cla_exit_status",
|
||||
"unit": "enum [CLA_ACTIVE,CLA_EXIT_WARNING,CLA_EXIT_CONFIRMED]"
|
||||
},
|
||||
{
|
||||
"field": "cla_exit_signals_triggered",
|
||||
"unit": "list"
|
||||
},
|
||||
{
|
||||
"field": "cla_exit_total_weight",
|
||||
"unit": "int"
|
||||
}
|
||||
]
|
||||
}
|
||||
@@ -1,38 +0,0 @@
|
||||
{
|
||||
"$schema": "https://json-schema.org/draft/2020-12/schema",
|
||||
"$id": "schema://formula/COMPLETION_GAP_V1",
|
||||
"title": "COMPLETION_GAP_V1",
|
||||
"type": "object",
|
||||
"properties": {
|
||||
"formula_id": {
|
||||
"const": "COMPLETION_GAP_V1"
|
||||
},
|
||||
"owner": {
|
||||
"type": "string"
|
||||
},
|
||||
"status": {
|
||||
"type": "string"
|
||||
},
|
||||
"inputs": {
|
||||
"type": "array",
|
||||
"items": {
|
||||
"type": "string"
|
||||
}
|
||||
},
|
||||
"outputs": {
|
||||
"type": "array",
|
||||
"items": {
|
||||
"type": "string"
|
||||
}
|
||||
}
|
||||
},
|
||||
"required": [
|
||||
"formula_id",
|
||||
"owner",
|
||||
"status",
|
||||
"inputs",
|
||||
"outputs"
|
||||
],
|
||||
"x_formula_inputs": [],
|
||||
"x_formula_outputs": []
|
||||
}
|
||||
@@ -1,41 +0,0 @@
|
||||
{
|
||||
"$schema": "https://json-schema.org/draft/2020-12/schema",
|
||||
"$id": "schema://formula/COMPOSITE_VERDICT_V1",
|
||||
"title": "COMPOSITE_VERDICT_V1",
|
||||
"type": "object",
|
||||
"properties": {
|
||||
"formula_id": {
|
||||
"const": "COMPOSITE_VERDICT_V1"
|
||||
},
|
||||
"owner": {
|
||||
"type": "string"
|
||||
},
|
||||
"status": {
|
||||
"type": "string"
|
||||
},
|
||||
"inputs": {
|
||||
"type": "array",
|
||||
"items": {
|
||||
"type": "string"
|
||||
}
|
||||
},
|
||||
"outputs": {
|
||||
"type": "array",
|
||||
"items": {
|
||||
"type": "string"
|
||||
}
|
||||
}
|
||||
},
|
||||
"required": [
|
||||
"formula_id",
|
||||
"owner",
|
||||
"status",
|
||||
"inputs",
|
||||
"outputs"
|
||||
],
|
||||
"x_formula_inputs": [
|
||||
"ss001_grade",
|
||||
"rs_verdict"
|
||||
],
|
||||
"x_formula_outputs": []
|
||||
}
|
||||
@@ -1,38 +0,0 @@
|
||||
{
|
||||
"$schema": "https://json-schema.org/draft/2020-12/schema",
|
||||
"$id": "schema://formula/COMPREHENSIVE_PROPOSAL_V1",
|
||||
"title": "COMPREHENSIVE_PROPOSAL_V1",
|
||||
"type": "object",
|
||||
"properties": {
|
||||
"formula_id": {
|
||||
"const": "COMPREHENSIVE_PROPOSAL_V1"
|
||||
},
|
||||
"owner": {
|
||||
"type": "string"
|
||||
},
|
||||
"status": {
|
||||
"type": "string"
|
||||
},
|
||||
"inputs": {
|
||||
"type": "array",
|
||||
"items": {
|
||||
"type": "string"
|
||||
}
|
||||
},
|
||||
"outputs": {
|
||||
"type": "array",
|
||||
"items": {
|
||||
"type": "string"
|
||||
}
|
||||
}
|
||||
},
|
||||
"required": [
|
||||
"formula_id",
|
||||
"owner",
|
||||
"status",
|
||||
"inputs",
|
||||
"outputs"
|
||||
],
|
||||
"x_formula_inputs": [],
|
||||
"x_formula_outputs": []
|
||||
}
|
||||
@@ -1,40 +0,0 @@
|
||||
{
|
||||
"$schema": "https://json-schema.org/draft/2020-12/schema",
|
||||
"$id": "schema://formula/CONSECUTIVE_STREAK_V1",
|
||||
"title": "CONSECUTIVE_STREAK_V1",
|
||||
"type": "object",
|
||||
"properties": {
|
||||
"formula_id": {
|
||||
"const": "CONSECUTIVE_STREAK_V1"
|
||||
},
|
||||
"owner": {
|
||||
"type": "string"
|
||||
},
|
||||
"status": {
|
||||
"type": "string"
|
||||
},
|
||||
"inputs": {
|
||||
"type": "array",
|
||||
"items": {
|
||||
"type": "string"
|
||||
}
|
||||
},
|
||||
"outputs": {
|
||||
"type": "array",
|
||||
"items": {
|
||||
"type": "string"
|
||||
}
|
||||
}
|
||||
},
|
||||
"required": [
|
||||
"formula_id",
|
||||
"owner",
|
||||
"status",
|
||||
"inputs",
|
||||
"outputs"
|
||||
],
|
||||
"x_formula_inputs": [
|
||||
"daily_close_changes"
|
||||
],
|
||||
"x_formula_outputs": []
|
||||
}
|
||||
@@ -1,38 +0,0 @@
|
||||
{
|
||||
"$schema": "https://json-schema.org/draft/2020-12/schema",
|
||||
"$id": "schema://formula/CONTINUOUS_EVALUATION_DASHBOARD_V1",
|
||||
"title": "CONTINUOUS_EVALUATION_DASHBOARD_V1",
|
||||
"type": "object",
|
||||
"properties": {
|
||||
"formula_id": {
|
||||
"const": "CONTINUOUS_EVALUATION_DASHBOARD_V1"
|
||||
},
|
||||
"owner": {
|
||||
"type": "string"
|
||||
},
|
||||
"status": {
|
||||
"type": "string"
|
||||
},
|
||||
"inputs": {
|
||||
"type": "array",
|
||||
"items": {
|
||||
"type": "string"
|
||||
}
|
||||
},
|
||||
"outputs": {
|
||||
"type": "array",
|
||||
"items": {
|
||||
"type": "string"
|
||||
}
|
||||
}
|
||||
},
|
||||
"required": [
|
||||
"formula_id",
|
||||
"owner",
|
||||
"status",
|
||||
"inputs",
|
||||
"outputs"
|
||||
],
|
||||
"x_formula_inputs": [],
|
||||
"x_formula_outputs": []
|
||||
}
|
||||
@@ -1,38 +0,0 @@
|
||||
{
|
||||
"$schema": "https://json-schema.org/draft/2020-12/schema",
|
||||
"$id": "schema://formula/CROSS_SECTION_CONSISTENCY_V1",
|
||||
"title": "CROSS_SECTION_CONSISTENCY_V1",
|
||||
"type": "object",
|
||||
"properties": {
|
||||
"formula_id": {
|
||||
"const": "CROSS_SECTION_CONSISTENCY_V1"
|
||||
},
|
||||
"owner": {
|
||||
"type": "string"
|
||||
},
|
||||
"status": {
|
||||
"type": "string"
|
||||
},
|
||||
"inputs": {
|
||||
"type": "array",
|
||||
"items": {
|
||||
"type": "string"
|
||||
}
|
||||
},
|
||||
"outputs": {
|
||||
"type": "array",
|
||||
"items": {
|
||||
"type": "string"
|
||||
}
|
||||
}
|
||||
},
|
||||
"required": [
|
||||
"formula_id",
|
||||
"owner",
|
||||
"status",
|
||||
"inputs",
|
||||
"outputs"
|
||||
],
|
||||
"x_formula_inputs": [],
|
||||
"x_formula_outputs": []
|
||||
}
|
||||
@@ -1,38 +0,0 @@
|
||||
{
|
||||
"$schema": "https://json-schema.org/draft/2020-12/schema",
|
||||
"$id": "schema://formula/DATA_INTEGRITY_100_LOCK_V1",
|
||||
"title": "DATA_INTEGRITY_100_LOCK_V1",
|
||||
"type": "object",
|
||||
"properties": {
|
||||
"formula_id": {
|
||||
"const": "DATA_INTEGRITY_100_LOCK_V1"
|
||||
},
|
||||
"owner": {
|
||||
"type": "string"
|
||||
},
|
||||
"status": {
|
||||
"type": "string"
|
||||
},
|
||||
"inputs": {
|
||||
"type": "array",
|
||||
"items": {
|
||||
"type": "string"
|
||||
}
|
||||
},
|
||||
"outputs": {
|
||||
"type": "array",
|
||||
"items": {
|
||||
"type": "string"
|
||||
}
|
||||
}
|
||||
},
|
||||
"required": [
|
||||
"formula_id",
|
||||
"owner",
|
||||
"status",
|
||||
"inputs",
|
||||
"outputs"
|
||||
],
|
||||
"x_formula_inputs": [],
|
||||
"x_formula_outputs": []
|
||||
}
|
||||
@@ -1,38 +0,0 @@
|
||||
{
|
||||
"$schema": "https://json-schema.org/draft/2020-12/schema",
|
||||
"$id": "schema://formula/DATA_INTEGRITY_100_LOCK_V2",
|
||||
"title": "DATA_INTEGRITY_100_LOCK_V2",
|
||||
"type": "object",
|
||||
"properties": {
|
||||
"formula_id": {
|
||||
"const": "DATA_INTEGRITY_100_LOCK_V2"
|
||||
},
|
||||
"owner": {
|
||||
"type": "string"
|
||||
},
|
||||
"status": {
|
||||
"type": "string"
|
||||
},
|
||||
"inputs": {
|
||||
"type": "array",
|
||||
"items": {
|
||||
"type": "string"
|
||||
}
|
||||
},
|
||||
"outputs": {
|
||||
"type": "array",
|
||||
"items": {
|
||||
"type": "string"
|
||||
}
|
||||
}
|
||||
},
|
||||
"required": [
|
||||
"formula_id",
|
||||
"owner",
|
||||
"status",
|
||||
"inputs",
|
||||
"outputs"
|
||||
],
|
||||
"x_formula_inputs": [],
|
||||
"x_formula_outputs": []
|
||||
}
|
||||
@@ -1,38 +0,0 @@
|
||||
{
|
||||
"$schema": "https://json-schema.org/draft/2020-12/schema",
|
||||
"$id": "schema://formula/DATA_INTEGRITY_SCORE_V1",
|
||||
"title": "DATA_INTEGRITY_SCORE_V1",
|
||||
"type": "object",
|
||||
"properties": {
|
||||
"formula_id": {
|
||||
"const": "DATA_INTEGRITY_SCORE_V1"
|
||||
},
|
||||
"owner": {
|
||||
"type": "string"
|
||||
},
|
||||
"status": {
|
||||
"type": "string"
|
||||
},
|
||||
"inputs": {
|
||||
"type": "array",
|
||||
"items": {
|
||||
"type": "string"
|
||||
}
|
||||
},
|
||||
"outputs": {
|
||||
"type": "array",
|
||||
"items": {
|
||||
"type": "string"
|
||||
}
|
||||
}
|
||||
},
|
||||
"required": [
|
||||
"formula_id",
|
||||
"owner",
|
||||
"status",
|
||||
"inputs",
|
||||
"outputs"
|
||||
],
|
||||
"x_formula_inputs": [],
|
||||
"x_formula_outputs": []
|
||||
}
|
||||
@@ -1,38 +0,0 @@
|
||||
{
|
||||
"$schema": "https://json-schema.org/draft/2020-12/schema",
|
||||
"$id": "schema://formula/DATA_MATURITY_TRUTH_GATE_V1",
|
||||
"title": "DATA_MATURITY_TRUTH_GATE_V1",
|
||||
"type": "object",
|
||||
"properties": {
|
||||
"formula_id": {
|
||||
"const": "DATA_MATURITY_TRUTH_GATE_V1"
|
||||
},
|
||||
"owner": {
|
||||
"type": "string"
|
||||
},
|
||||
"status": {
|
||||
"type": "string"
|
||||
},
|
||||
"inputs": {
|
||||
"type": "array",
|
||||
"items": {
|
||||
"type": "string"
|
||||
}
|
||||
},
|
||||
"outputs": {
|
||||
"type": "array",
|
||||
"items": {
|
||||
"type": "string"
|
||||
}
|
||||
}
|
||||
},
|
||||
"required": [
|
||||
"formula_id",
|
||||
"owner",
|
||||
"status",
|
||||
"inputs",
|
||||
"outputs"
|
||||
],
|
||||
"x_formula_inputs": [],
|
||||
"x_formula_outputs": []
|
||||
}
|
||||
@@ -1,38 +0,0 @@
|
||||
{
|
||||
"$schema": "https://json-schema.org/draft/2020-12/schema",
|
||||
"$id": "schema://formula/DATA_MATURITY_TRUTH_GATE_VALIDATOR_V1",
|
||||
"title": "DATA_MATURITY_TRUTH_GATE_VALIDATOR_V1",
|
||||
"type": "object",
|
||||
"properties": {
|
||||
"formula_id": {
|
||||
"const": "DATA_MATURITY_TRUTH_GATE_VALIDATOR_V1"
|
||||
},
|
||||
"owner": {
|
||||
"type": "string"
|
||||
},
|
||||
"status": {
|
||||
"type": "string"
|
||||
},
|
||||
"inputs": {
|
||||
"type": "array",
|
||||
"items": {
|
||||
"type": "string"
|
||||
}
|
||||
},
|
||||
"outputs": {
|
||||
"type": "array",
|
||||
"items": {
|
||||
"type": "string"
|
||||
}
|
||||
}
|
||||
},
|
||||
"required": [
|
||||
"formula_id",
|
||||
"owner",
|
||||
"status",
|
||||
"inputs",
|
||||
"outputs"
|
||||
],
|
||||
"x_formula_inputs": [],
|
||||
"x_formula_outputs": []
|
||||
}
|
||||
@@ -1,38 +0,0 @@
|
||||
{
|
||||
"$schema": "https://json-schema.org/draft/2020-12/schema",
|
||||
"$id": "schema://formula/DATA_QUALITY_GATE_V2_PY",
|
||||
"title": "DATA_QUALITY_GATE_V2_PY",
|
||||
"type": "object",
|
||||
"properties": {
|
||||
"formula_id": {
|
||||
"const": "DATA_QUALITY_GATE_V2_PY"
|
||||
},
|
||||
"owner": {
|
||||
"type": "string"
|
||||
},
|
||||
"status": {
|
||||
"type": "string"
|
||||
},
|
||||
"inputs": {
|
||||
"type": "array",
|
||||
"items": {
|
||||
"type": "string"
|
||||
}
|
||||
},
|
||||
"outputs": {
|
||||
"type": "array",
|
||||
"items": {
|
||||
"type": "string"
|
||||
}
|
||||
}
|
||||
},
|
||||
"required": [
|
||||
"formula_id",
|
||||
"owner",
|
||||
"status",
|
||||
"inputs",
|
||||
"outputs"
|
||||
],
|
||||
"x_formula_inputs": [],
|
||||
"x_formula_outputs": []
|
||||
}
|
||||
@@ -1,38 +0,0 @@
|
||||
{
|
||||
"$schema": "https://json-schema.org/draft/2020-12/schema",
|
||||
"$id": "schema://formula/DATA_QUALITY_GATE_V3",
|
||||
"title": "DATA_QUALITY_GATE_V3",
|
||||
"type": "object",
|
||||
"properties": {
|
||||
"formula_id": {
|
||||
"const": "DATA_QUALITY_GATE_V3"
|
||||
},
|
||||
"owner": {
|
||||
"type": "string"
|
||||
},
|
||||
"status": {
|
||||
"type": "string"
|
||||
},
|
||||
"inputs": {
|
||||
"type": "array",
|
||||
"items": {
|
||||
"type": "string"
|
||||
}
|
||||
},
|
||||
"outputs": {
|
||||
"type": "array",
|
||||
"items": {
|
||||
"type": "string"
|
||||
}
|
||||
}
|
||||
},
|
||||
"required": [
|
||||
"formula_id",
|
||||
"owner",
|
||||
"status",
|
||||
"inputs",
|
||||
"outputs"
|
||||
],
|
||||
"x_formula_inputs": [],
|
||||
"x_formula_outputs": []
|
||||
}
|
||||
@@ -1,40 +0,0 @@
|
||||
{
|
||||
"$schema": "https://json-schema.org/draft/2020-12/schema",
|
||||
"$id": "schema://formula/DETERMINISTIC_ROUTING_ENGINE_V1",
|
||||
"title": "DETERMINISTIC_ROUTING_ENGINE_V1",
|
||||
"type": "object",
|
||||
"properties": {
|
||||
"formula_id": {
|
||||
"const": "DETERMINISTIC_ROUTING_ENGINE_V1"
|
||||
},
|
||||
"owner": {
|
||||
"type": "string"
|
||||
},
|
||||
"status": {
|
||||
"type": "string"
|
||||
},
|
||||
"inputs": {
|
||||
"type": "array",
|
||||
"items": {
|
||||
"type": "string"
|
||||
}
|
||||
},
|
||||
"outputs": {
|
||||
"type": "array",
|
||||
"items": {
|
||||
"type": "string"
|
||||
}
|
||||
}
|
||||
},
|
||||
"required": [
|
||||
"formula_id",
|
||||
"owner",
|
||||
"status",
|
||||
"inputs",
|
||||
"outputs"
|
||||
],
|
||||
"x_formula_inputs": [
|
||||
"harness_context"
|
||||
],
|
||||
"x_formula_outputs": []
|
||||
}
|
||||
@@ -1,49 +0,0 @@
|
||||
{
|
||||
"$schema": "https://json-schema.org/draft/2020-12/schema",
|
||||
"$id": "schema://formula/DISTRIBUTION_SELL_DETECTOR_V1",
|
||||
"title": "DISTRIBUTION_SELL_DETECTOR_V1",
|
||||
"type": "object",
|
||||
"properties": {
|
||||
"formula_id": {
|
||||
"const": "DISTRIBUTION_SELL_DETECTOR_V1"
|
||||
},
|
||||
"owner": {
|
||||
"type": "string"
|
||||
},
|
||||
"status": {
|
||||
"type": "string"
|
||||
},
|
||||
"inputs": {
|
||||
"type": "array",
|
||||
"items": {
|
||||
"type": "string"
|
||||
}
|
||||
},
|
||||
"outputs": {
|
||||
"type": "array",
|
||||
"items": {
|
||||
"type": "string"
|
||||
}
|
||||
}
|
||||
},
|
||||
"required": [
|
||||
"formula_id",
|
||||
"owner",
|
||||
"status",
|
||||
"inputs",
|
||||
"outputs"
|
||||
],
|
||||
"x_formula_inputs": [
|
||||
"close",
|
||||
"high52w",
|
||||
"avg_volume_5d",
|
||||
"volume",
|
||||
"ret5d",
|
||||
"flow_credit",
|
||||
"frg_5d_sh",
|
||||
"inst_5d_sh",
|
||||
"rsi14",
|
||||
"obv_slope_20d"
|
||||
],
|
||||
"x_formula_outputs": []
|
||||
}
|
||||
@@ -1,45 +0,0 @@
|
||||
{
|
||||
"$schema": "https://json-schema.org/draft/2020-12/schema",
|
||||
"$id": "schema://formula/DIVERGENCE_SCORE_V1",
|
||||
"title": "DIVERGENCE_SCORE_V1",
|
||||
"type": "object",
|
||||
"properties": {
|
||||
"formula_id": {
|
||||
"const": "DIVERGENCE_SCORE_V1"
|
||||
},
|
||||
"owner": {
|
||||
"type": "string"
|
||||
},
|
||||
"status": {
|
||||
"type": "string"
|
||||
},
|
||||
"inputs": {
|
||||
"type": "array",
|
||||
"items": {
|
||||
"type": "string"
|
||||
}
|
||||
},
|
||||
"outputs": {
|
||||
"type": "array",
|
||||
"items": {
|
||||
"type": "string"
|
||||
}
|
||||
}
|
||||
},
|
||||
"required": [
|
||||
"formula_id",
|
||||
"owner",
|
||||
"status",
|
||||
"inputs",
|
||||
"outputs"
|
||||
],
|
||||
"x_formula_inputs": [
|
||||
"close_price",
|
||||
"ma20",
|
||||
"frg_5d_sh",
|
||||
"inst_5d_sh",
|
||||
"flow_credit",
|
||||
"frg_20d_sh"
|
||||
],
|
||||
"x_formula_outputs": []
|
||||
}
|
||||
@@ -1,41 +0,0 @@
|
||||
{
|
||||
"$schema": "https://json-schema.org/draft/2020-12/schema",
|
||||
"$id": "schema://formula/DRAWDOWN_GUARD_V1",
|
||||
"title": "DRAWDOWN_GUARD_V1",
|
||||
"type": "object",
|
||||
"properties": {
|
||||
"formula_id": {
|
||||
"const": "DRAWDOWN_GUARD_V1"
|
||||
},
|
||||
"owner": {
|
||||
"type": "string"
|
||||
},
|
||||
"status": {
|
||||
"type": "string"
|
||||
},
|
||||
"inputs": {
|
||||
"type": "array",
|
||||
"items": {
|
||||
"type": "string"
|
||||
}
|
||||
},
|
||||
"outputs": {
|
||||
"type": "array",
|
||||
"items": {
|
||||
"type": "string"
|
||||
}
|
||||
}
|
||||
},
|
||||
"required": [
|
||||
"formula_id",
|
||||
"owner",
|
||||
"status",
|
||||
"inputs",
|
||||
"outputs"
|
||||
],
|
||||
"x_formula_inputs": [
|
||||
"win_loss_streak_state",
|
||||
"win_loss_streak_buy_scale"
|
||||
],
|
||||
"x_formula_outputs": []
|
||||
}
|
||||
@@ -1,41 +0,0 @@
|
||||
{
|
||||
"$schema": "https://json-schema.org/draft/2020-12/schema",
|
||||
"$id": "schema://formula/DYNAMIC_HEAT_GATE_V1",
|
||||
"title": "DYNAMIC_HEAT_GATE_V1",
|
||||
"type": "object",
|
||||
"properties": {
|
||||
"formula_id": {
|
||||
"const": "DYNAMIC_HEAT_GATE_V1"
|
||||
},
|
||||
"owner": {
|
||||
"type": "string"
|
||||
},
|
||||
"status": {
|
||||
"type": "string"
|
||||
},
|
||||
"inputs": {
|
||||
"type": "array",
|
||||
"items": {
|
||||
"type": "string"
|
||||
}
|
||||
},
|
||||
"outputs": {
|
||||
"type": "array",
|
||||
"items": {
|
||||
"type": "string"
|
||||
}
|
||||
}
|
||||
},
|
||||
"required": [
|
||||
"formula_id",
|
||||
"owner",
|
||||
"status",
|
||||
"inputs",
|
||||
"outputs"
|
||||
],
|
||||
"x_formula_inputs": [
|
||||
"market_regime",
|
||||
"total_heat_pct"
|
||||
],
|
||||
"x_formula_outputs": []
|
||||
}
|
||||
@@ -1,41 +0,0 @@
|
||||
{
|
||||
"$schema": "https://json-schema.org/draft/2020-12/schema",
|
||||
"$id": "schema://formula/EARNINGS_GROWTH_QUALITY_GATE_V1",
|
||||
"title": "EARNINGS_GROWTH_QUALITY_GATE_V1",
|
||||
"type": "object",
|
||||
"properties": {
|
||||
"formula_id": {
|
||||
"const": "EARNINGS_GROWTH_QUALITY_GATE_V1"
|
||||
},
|
||||
"owner": {
|
||||
"type": "string"
|
||||
},
|
||||
"status": {
|
||||
"type": "string"
|
||||
},
|
||||
"inputs": {
|
||||
"type": "array",
|
||||
"items": {
|
||||
"type": "string"
|
||||
}
|
||||
},
|
||||
"outputs": {
|
||||
"type": "array",
|
||||
"items": {
|
||||
"type": "string"
|
||||
}
|
||||
}
|
||||
},
|
||||
"required": [
|
||||
"formula_id",
|
||||
"owner",
|
||||
"status",
|
||||
"inputs",
|
||||
"outputs"
|
||||
],
|
||||
"x_formula_inputs": [
|
||||
"eps_growth_qoq_pct",
|
||||
"eps_growth_yoy_pct"
|
||||
],
|
||||
"x_formula_outputs": []
|
||||
}
|
||||
@@ -1,38 +0,0 @@
|
||||
{
|
||||
"$schema": "https://json-schema.org/draft/2020-12/schema",
|
||||
"$id": "schema://formula/EARNINGS_QUALITY_SIGNAL_V1",
|
||||
"title": "EARNINGS_QUALITY_SIGNAL_V1",
|
||||
"type": "object",
|
||||
"properties": {
|
||||
"formula_id": {
|
||||
"const": "EARNINGS_QUALITY_SIGNAL_V1"
|
||||
},
|
||||
"owner": {
|
||||
"type": "string"
|
||||
},
|
||||
"status": {
|
||||
"type": "string"
|
||||
},
|
||||
"inputs": {
|
||||
"type": "array",
|
||||
"items": {
|
||||
"type": "string"
|
||||
}
|
||||
},
|
||||
"outputs": {
|
||||
"type": "array",
|
||||
"items": {
|
||||
"type": "string"
|
||||
}
|
||||
}
|
||||
},
|
||||
"required": [
|
||||
"formula_id",
|
||||
"owner",
|
||||
"status",
|
||||
"inputs",
|
||||
"outputs"
|
||||
],
|
||||
"x_formula_inputs": [],
|
||||
"x_formula_outputs": []
|
||||
}
|
||||
@@ -1,41 +0,0 @@
|
||||
{
|
||||
"$schema": "https://json-schema.org/draft/2020-12/schema",
|
||||
"$id": "schema://formula/ECP_RISK_SCALE_V1",
|
||||
"title": "ECP_RISK_SCALE_V1",
|
||||
"type": "object",
|
||||
"properties": {
|
||||
"formula_id": {
|
||||
"const": "ECP_RISK_SCALE_V1"
|
||||
},
|
||||
"owner": {
|
||||
"type": "string"
|
||||
},
|
||||
"status": {
|
||||
"type": "string"
|
||||
},
|
||||
"inputs": {
|
||||
"type": "array",
|
||||
"items": {
|
||||
"type": "string"
|
||||
}
|
||||
},
|
||||
"outputs": {
|
||||
"type": "array",
|
||||
"items": {
|
||||
"type": "string"
|
||||
}
|
||||
}
|
||||
},
|
||||
"required": [
|
||||
"formula_id",
|
||||
"owner",
|
||||
"status",
|
||||
"inputs",
|
||||
"outputs"
|
||||
],
|
||||
"x_formula_inputs": [
|
||||
"total_asset",
|
||||
"total_asset_ma10"
|
||||
],
|
||||
"x_formula_outputs": []
|
||||
}
|
||||
@@ -1,38 +0,0 @@
|
||||
{
|
||||
"$schema": "https://json-schema.org/draft/2020-12/schema",
|
||||
"$id": "schema://formula/EJCE_DIVERGENCE_AUDIT_V1",
|
||||
"title": "EJCE_DIVERGENCE_AUDIT_V1",
|
||||
"type": "object",
|
||||
"properties": {
|
||||
"formula_id": {
|
||||
"const": "EJCE_DIVERGENCE_AUDIT_V1"
|
||||
},
|
||||
"owner": {
|
||||
"type": "string"
|
||||
},
|
||||
"status": {
|
||||
"type": "string"
|
||||
},
|
||||
"inputs": {
|
||||
"type": "array",
|
||||
"items": {
|
||||
"type": "string"
|
||||
}
|
||||
},
|
||||
"outputs": {
|
||||
"type": "array",
|
||||
"items": {
|
||||
"type": "string"
|
||||
}
|
||||
}
|
||||
},
|
||||
"required": [
|
||||
"formula_id",
|
||||
"owner",
|
||||
"status",
|
||||
"inputs",
|
||||
"outputs"
|
||||
],
|
||||
"x_formula_inputs": [],
|
||||
"x_formula_outputs": []
|
||||
}
|
||||
@@ -1,45 +0,0 @@
|
||||
{
|
||||
"$schema": "https://json-schema.org/draft/2020-12/schema",
|
||||
"$id": "schema://formula/EJCE_VIEW_RENDERER_V1",
|
||||
"title": "EJCE_VIEW_RENDERER_V1",
|
||||
"type": "object",
|
||||
"properties": {
|
||||
"formula_id": {
|
||||
"const": "EJCE_VIEW_RENDERER_V1"
|
||||
},
|
||||
"owner": {
|
||||
"type": "string"
|
||||
},
|
||||
"status": {
|
||||
"type": "string"
|
||||
},
|
||||
"inputs": {
|
||||
"type": "array",
|
||||
"items": {
|
||||
"type": "string"
|
||||
}
|
||||
},
|
||||
"outputs": {
|
||||
"type": "array",
|
||||
"items": {
|
||||
"type": "string"
|
||||
}
|
||||
}
|
||||
},
|
||||
"required": [
|
||||
"formula_id",
|
||||
"owner",
|
||||
"status",
|
||||
"inputs",
|
||||
"outputs"
|
||||
],
|
||||
"x_formula_inputs": [
|
||||
"ejce_json",
|
||||
"alpha_lead_json",
|
||||
"breakout_quality_gate_json",
|
||||
"anti_chasing_velocity_json",
|
||||
"heat_concentration_json",
|
||||
"portfolio_alpha_confidence"
|
||||
],
|
||||
"x_formula_outputs": []
|
||||
}
|
||||
@@ -1,42 +0,0 @@
|
||||
{
|
||||
"$schema": "https://json-schema.org/draft/2020-12/schema",
|
||||
"$id": "schema://formula/ENTRY_TIMING_DECILE_FACTOR_V1",
|
||||
"title": "ENTRY_TIMING_DECILE_FACTOR_V1",
|
||||
"type": "object",
|
||||
"properties": {
|
||||
"formula_id": {
|
||||
"const": "ENTRY_TIMING_DECILE_FACTOR_V1"
|
||||
},
|
||||
"owner": {
|
||||
"type": "string"
|
||||
},
|
||||
"status": {
|
||||
"type": "string"
|
||||
},
|
||||
"inputs": {
|
||||
"type": "array",
|
||||
"items": {
|
||||
"type": "string"
|
||||
}
|
||||
},
|
||||
"outputs": {
|
||||
"type": "array",
|
||||
"items": {
|
||||
"type": "string"
|
||||
}
|
||||
}
|
||||
},
|
||||
"required": [
|
||||
"formula_id",
|
||||
"owner",
|
||||
"status",
|
||||
"inputs",
|
||||
"outputs"
|
||||
],
|
||||
"x_formula_inputs": [
|
||||
"buy_timing_score",
|
||||
"t5_ledger",
|
||||
"cut_decile"
|
||||
],
|
||||
"x_formula_outputs": []
|
||||
}
|
||||
@@ -1,44 +0,0 @@
|
||||
{
|
||||
"$schema": "https://json-schema.org/draft/2020-12/schema",
|
||||
"$id": "schema://formula/EXECUTION_CAPACITY_LADDER_V1",
|
||||
"title": "EXECUTION_CAPACITY_LADDER_V1",
|
||||
"type": "object",
|
||||
"properties": {
|
||||
"formula_id": {
|
||||
"const": "EXECUTION_CAPACITY_LADDER_V1"
|
||||
},
|
||||
"owner": {
|
||||
"type": "string"
|
||||
},
|
||||
"status": {
|
||||
"type": "string"
|
||||
},
|
||||
"inputs": {
|
||||
"type": "array",
|
||||
"items": {
|
||||
"type": "string"
|
||||
}
|
||||
},
|
||||
"outputs": {
|
||||
"type": "array",
|
||||
"items": {
|
||||
"type": "string"
|
||||
}
|
||||
}
|
||||
},
|
||||
"required": [
|
||||
"formula_id",
|
||||
"owner",
|
||||
"status",
|
||||
"inputs",
|
||||
"outputs"
|
||||
],
|
||||
"x_formula_inputs": [
|
||||
"planned_order_amount_krw",
|
||||
"avg_trade_value_20d_krw",
|
||||
"intraday_trade_value_krw",
|
||||
"orderbook_top3_depth_krw",
|
||||
"spread_bps"
|
||||
],
|
||||
"x_formula_outputs": []
|
||||
}
|
||||
@@ -1,42 +0,0 @@
|
||||
{
|
||||
"$schema": "https://json-schema.org/draft/2020-12/schema",
|
||||
"$id": "schema://formula/EXECUTION_METHOD_LADDER_V1",
|
||||
"title": "EXECUTION_METHOD_LADDER_V1",
|
||||
"type": "object",
|
||||
"properties": {
|
||||
"formula_id": {
|
||||
"const": "EXECUTION_METHOD_LADDER_V1"
|
||||
},
|
||||
"owner": {
|
||||
"type": "string"
|
||||
},
|
||||
"status": {
|
||||
"type": "string"
|
||||
},
|
||||
"inputs": {
|
||||
"type": "array",
|
||||
"items": {
|
||||
"type": "string"
|
||||
}
|
||||
},
|
||||
"outputs": {
|
||||
"type": "array",
|
||||
"items": {
|
||||
"type": "string"
|
||||
}
|
||||
}
|
||||
},
|
||||
"required": [
|
||||
"formula_id",
|
||||
"owner",
|
||||
"status",
|
||||
"inputs",
|
||||
"outputs"
|
||||
],
|
||||
"x_formula_inputs": [
|
||||
"sell_timing_verdict",
|
||||
"sell_waterfall_gate",
|
||||
"smart_cash_recovery_gate"
|
||||
],
|
||||
"x_formula_outputs": []
|
||||
}
|
||||
@@ -1,42 +0,0 @@
|
||||
{
|
||||
"$schema": "https://json-schema.org/draft/2020-12/schema",
|
||||
"$id": "schema://formula/EXECUTION_PLAN_COMPILER_V1",
|
||||
"title": "EXECUTION_PLAN_COMPILER_V1",
|
||||
"type": "object",
|
||||
"properties": {
|
||||
"formula_id": {
|
||||
"const": "EXECUTION_PLAN_COMPILER_V1"
|
||||
},
|
||||
"owner": {
|
||||
"type": "string"
|
||||
},
|
||||
"status": {
|
||||
"type": "string"
|
||||
},
|
||||
"inputs": {
|
||||
"type": "array",
|
||||
"items": {
|
||||
"type": "string"
|
||||
}
|
||||
},
|
||||
"outputs": {
|
||||
"type": "array",
|
||||
"items": {
|
||||
"type": "string"
|
||||
}
|
||||
}
|
||||
},
|
||||
"required": [
|
||||
"formula_id",
|
||||
"owner",
|
||||
"status",
|
||||
"inputs",
|
||||
"outputs"
|
||||
],
|
||||
"x_formula_inputs": [
|
||||
"order_capacity_krw",
|
||||
"revalidation_snapshot",
|
||||
"baseline_snapshot"
|
||||
],
|
||||
"x_formula_outputs": []
|
||||
}
|
||||
@@ -1,38 +0,0 @@
|
||||
{
|
||||
"$schema": "https://json-schema.org/draft/2020-12/schema",
|
||||
"$id": "schema://formula/EXECUTION_QUALITY_SCORE_V1",
|
||||
"title": "EXECUTION_QUALITY_SCORE_V1",
|
||||
"type": "object",
|
||||
"properties": {
|
||||
"formula_id": {
|
||||
"const": "EXECUTION_QUALITY_SCORE_V1"
|
||||
},
|
||||
"owner": {
|
||||
"type": "string"
|
||||
},
|
||||
"status": {
|
||||
"type": "string"
|
||||
},
|
||||
"inputs": {
|
||||
"type": "array",
|
||||
"items": {
|
||||
"type": "string"
|
||||
}
|
||||
},
|
||||
"outputs": {
|
||||
"type": "array",
|
||||
"items": {
|
||||
"type": "string"
|
||||
}
|
||||
}
|
||||
},
|
||||
"required": [
|
||||
"formula_id",
|
||||
"owner",
|
||||
"status",
|
||||
"inputs",
|
||||
"outputs"
|
||||
],
|
||||
"x_formula_inputs": [],
|
||||
"x_formula_outputs": []
|
||||
}
|
||||
@@ -1,44 +0,0 @@
|
||||
{
|
||||
"$schema": "https://json-schema.org/draft/2020-12/schema",
|
||||
"$id": "schema://formula/EXPECTED_EDGE_V1",
|
||||
"title": "EXPECTED_EDGE_V1",
|
||||
"type": "object",
|
||||
"properties": {
|
||||
"formula_id": {
|
||||
"const": "EXPECTED_EDGE_V1"
|
||||
},
|
||||
"owner": {
|
||||
"type": "string"
|
||||
},
|
||||
"status": {
|
||||
"type": "string"
|
||||
},
|
||||
"inputs": {
|
||||
"type": "array",
|
||||
"items": {
|
||||
"type": "string"
|
||||
}
|
||||
},
|
||||
"outputs": {
|
||||
"type": "array",
|
||||
"items": {
|
||||
"type": "string"
|
||||
}
|
||||
}
|
||||
},
|
||||
"required": [
|
||||
"formula_id",
|
||||
"owner",
|
||||
"status",
|
||||
"inputs",
|
||||
"outputs"
|
||||
],
|
||||
"x_formula_inputs": [
|
||||
"target_price",
|
||||
"entry_price",
|
||||
"stop_price",
|
||||
"bayesian_confidence_multiplier",
|
||||
"execution_cost_rate"
|
||||
],
|
||||
"x_formula_outputs": []
|
||||
}
|
||||
@@ -1,41 +0,0 @@
|
||||
{
|
||||
"$schema": "https://json-schema.org/draft/2020-12/schema",
|
||||
"$id": "schema://formula/FIFTY_TWO_WEEK_HIGH_TRIGGER_V1",
|
||||
"title": "FIFTY_TWO_WEEK_HIGH_TRIGGER_V1",
|
||||
"type": "object",
|
||||
"properties": {
|
||||
"formula_id": {
|
||||
"const": "FIFTY_TWO_WEEK_HIGH_TRIGGER_V1"
|
||||
},
|
||||
"owner": {
|
||||
"type": "string"
|
||||
},
|
||||
"status": {
|
||||
"type": "string"
|
||||
},
|
||||
"inputs": {
|
||||
"type": "array",
|
||||
"items": {
|
||||
"type": "string"
|
||||
}
|
||||
},
|
||||
"outputs": {
|
||||
"type": "array",
|
||||
"items": {
|
||||
"type": "string"
|
||||
}
|
||||
}
|
||||
},
|
||||
"required": [
|
||||
"formula_id",
|
||||
"owner",
|
||||
"status",
|
||||
"inputs",
|
||||
"outputs"
|
||||
],
|
||||
"x_formula_inputs": [
|
||||
"close_price",
|
||||
"high52w"
|
||||
],
|
||||
"x_formula_outputs": []
|
||||
}
|
||||
@@ -1,38 +0,0 @@
|
||||
{
|
||||
"$schema": "https://json-schema.org/draft/2020-12/schema",
|
||||
"$id": "schema://formula/FINAL_JUDGMENT_GATE_V1",
|
||||
"title": "FINAL_JUDGMENT_GATE_V1",
|
||||
"type": "object",
|
||||
"properties": {
|
||||
"formula_id": {
|
||||
"const": "FINAL_JUDGMENT_GATE_V1"
|
||||
},
|
||||
"owner": {
|
||||
"type": "string"
|
||||
},
|
||||
"status": {
|
||||
"type": "string"
|
||||
},
|
||||
"inputs": {
|
||||
"type": "array",
|
||||
"items": {
|
||||
"type": "string"
|
||||
}
|
||||
},
|
||||
"outputs": {
|
||||
"type": "array",
|
||||
"items": {
|
||||
"type": "string"
|
||||
}
|
||||
}
|
||||
},
|
||||
"required": [
|
||||
"formula_id",
|
||||
"owner",
|
||||
"status",
|
||||
"inputs",
|
||||
"outputs"
|
||||
],
|
||||
"x_formula_inputs": [],
|
||||
"x_formula_outputs": []
|
||||
}
|
||||
Some files were not shown because too many files have changed in this diff Show More
Reference in New Issue
Block a user