CircleCI

Tämä opas selittää kuinka integroida LoadFocus JMeter API Client CircleCI:n kanssa automatisoitua suorituskykytestausta varten.

Asennusvaiheet

1. Lisää ympäristömuuttujat

Tallenna LoadFocus API -tunnistetietosi ympäristömuuttujina CircleCI:hin:

1. Siirry projektiisi CircleCI:ssä
2. Siirry kohtaan Project Settings > Environment Variables
3. Lisää seuraavat muuttujat:
   • LOADFOCUS_API_KEY: LoadFocus API -avaimesi
   • LOADFOCUS_TEAM_ID: LoadFocus tiimi-ID:si

2. Konfiguroi CircleCI-työnkulku

Luo tai päivitä .circleci/config.yml-tiedostosi sisältämään suorituskykytestaus:

version: 2.1
jobs:
  performance_test:
    docker:
      - image: cimg/node:16.13
    steps:
      - checkout
      - run:
          name: Install LoadFocus JMeter API Client
          command: npm install -g @loadfocus/loadfocus-api-client
      - run:
          name: Configure LoadFocus API Client
          command: |
            loadfocus-api config set apikey $LOADFOCUS_API_KEY
            loadfocus-api config set teamid $LOADFOCUS_TEAM_ID
      - run:
          name: Run Performance Tests
          command: |
            loadfocus-api jmeter run-test \
              --name "CircleCI_${CIRCLE_PROJECT_REPONAME}_${CIRCLE_BRANCH}" \
              --thresholds "avgresponse<=200,errors==0,p95<=250" \
              --format json > performance_results.json
      - store_artifacts:
          path: performance_results.json
          destination: performance-test-results

workflows:
  version: 2
  build_test_deploy:
    jobs:
      - build_and_test
      - performance_test:
          requires:
            - build_and_test
      - deploy:
          requires:
            - performance_test
          filters:
            branches:
              only: main

3. Estä build suorituskykyongelmien vuoksi

Jotta putkesi epäonnistuu kun suorituskykykynnysarvoja ei saavuteta, muokkaa "Run Performance Tests" -vaihetta:

- run:
    name: Run Performance Tests
    command: |
      loadfocus-api jmeter run-test \
        --name "CircleCI_${CIRCLE_PROJECT_REPONAME}_${CIRCLE_BRANCH}" \
        --thresholds "avgresponse<=200,errors==0,p95<=250" \
        --format json > performance_results.json

      # Check exit code - the command will exit with code 1 if thresholds are not met
      if [ $? -ne 0 ]; then
        echo "Performance test failed to meet thresholds"
        exit 1
      fi

Edistynyt konfigurointi

Rinnakkainen testaus

Useiden suorituskykytestien suorittaminen rinnakkain:

performance_tests:
  docker:
    - image: cimg/node:16.13
  parallelism: 3
  steps:
    - checkout
    - run:
        name: Install LoadFocus JMeter API Client
        command: npm install -g @loadfocus/loadfocus-api-client
    - run:
        name: Configure LoadFocus API Client
        command: |
          loadfocus-api config set apikey $LOADFOCUS_API_KEY
          loadfocus-api config set teamid $LOADFOCUS_TEAM_ID
    - run:
        name: Run Performance Tests
        command: |
          # Get test name based on index
          TESTS=("API_Test" "Frontend_Test" "Database_Test")
          INDEX=$(( $CIRCLE_NODE_INDEX % 3 ))
          TEST_NAME=${TESTS[$INDEX]}

          echo "Running test: $TEST_NAME"

          loadfocus-api jmeter run-test \
            --name "$TEST_NAME" \
            --thresholds "avgresponse<=200,errors==0,p95<=250" \
            --format json > "performance_results_${TEST_NAME}.json"
    - store_artifacts:
        path: performance_results_*.json
        destination: performance-test-results

Vinkkejä CircleCI-integraatioon

1. Resurssien varaus: Varmista, että CircleCI-suunnitelmassasi on riittävästi resursseja suorituskykytestien suorittamiseen, erityisesti jos ne kestävät pitkään.

2. Aikakatkaisuasetukset: Pidempien testien osalta säädä tehtävän aikakatkaisua CircleCI:ssä:

   - run:
       name: Run Performance Tests
       command: loadfocus-api jmeter run-test --name "Test_Name" --waitTimeout 3600
       no_output_timeout: 60m

3. Ehdollinen testaus: Suorita suorituskykytestit vain tietyissä haaroissa tai tietyillä commiteilla:

   performance_test:
     # Only run if commit message contains [PERF-TEST]
     when:
       condition:
         or:
           - equal: [ main, << pipeline.git.branch >> ]
           - matches:
               pattern: ".*\\[PERF-TEST\\].*"
               value: << pipeline.git.commit.message >>

4. Ilmoitukset: Aseta ilmoitukset suorituskykytestin epäonnistumisille:

   - run:
       name: Notify on Performance Test Failure
       command: |
         if [ $? -ne 0 ]; then
           curl -X POST -H "Content-Type: application/json" \
             -d '{"text":"Performance test failed for $CIRCLE_PROJECT_REPONAME"}' \
             $SLACK_WEBHOOK_URL
         fi
       when: on_fail

Lisätietoja löydät CircleCI-dokumentaatiosta ja LoadFocus API Client -dokumentaatiosta.