Azure DevOps

Denne veiledningen forklarer hvordan du integrerer LoadFocus JMeter API-klienten med Azure DevOps for automatisert ytelsestesting.

Oppsettstrinn

1. Lagre legitimasjon i Azure Key Vault

For sikker administrasjon av legitimasjon, lagre LoadFocus API-legitimasjonen din i Azure Key Vault:

  1. Opprett en Key Vault i Azure hvis du ikke allerede har en
  2. Legg til følgende hemmeligheter:
    • loadfocus-api-key: Din LoadFocus API-nøkkel
    • loadfocus-team-id: Din LoadFocus team-ID
  3. Sett opp en tjenesteforbindelse for å få tilgang til Key Vault fra pipelinen din

2. Opprett en Azure Pipeline

Opprett en ny fil kalt azure-pipelines.yml i repositoriet ditt:

trigger:
- main
- develop
pool:
vmImage: 'ubuntu-latest'
variables:
- group: loadfocus-variables # Variable group containing Key Vault references
stages:
- stage: Build
jobs:
- job: BuildAndTest
steps:
# Your existing build and test steps...
- stage: PerformanceTest
dependsOn: Build
condition: succeeded()
jobs:
- job: RunPerformanceTests
steps:
- task: NodeTool@0
inputs:
versionSpec: '16.x'
displayName: 'Install Node.js'
- script: |
npm install -g @loadfocus/loadfocus-api-client
displayName: 'Install LoadFocus JMeter API Client'
- script: |
loadfocus-api config set apikey $(LOADFOCUS_API_KEY)
loadfocus-api config set teamid $(LOADFOCUS_TEAM_ID)
displayName: 'Configure LoadFocus API Client'
- script: |
loadfocus-api jmeter run-test \
--name "AzureDevOps_$(Build.Repository.Name)_$(Build.SourceBranchName)" \
--thresholds "avgresponse<=200,errors==0,p95<=250" \
--format json > $(Build.ArtifactStagingDirectory)/performance_results.json
displayName: 'Run Performance Tests'
continueOnError: false
- task: PublishBuildArtifacts@1
inputs:
pathtoPublish: '$(Build.ArtifactStagingDirectory)'
artifactName: 'performance-test-results'
displayName: 'Publish Performance Test Results'
- stage: Deploy
dependsOn: PerformanceTest
condition: succeeded()
jobs:
- job: DeployApplication
steps:
# Your deployment steps...

3. Sett opp variabelgruppe med Key Vault-integrasjon

  1. Gå til Pipelines > Library > Variable Groups
  2. Opprett en ny variabelgruppe kalt "loadfocus-variables"
  3. Koble den til Azure Key Vault
  4. Legg til følgende variabler, koblet til Key Vault-hemmelighetene dine:
    • LOADFOCUS_API_KEY: Koble til loadfocus-api-key-hemmeligheten
    • LOADFOCUS_TEAM_ID: Koble til loadfocus-team-id-hemmeligheten

Avansert konfigurasjon

Bruk av YAML-maler

For gjenbrukbare ytelsestestingstrinn, opprett en malfil performance-test-template.yml:

parameters:
testName: 'Default_Test'
thresholds: 'avgresponse<=200,errors==0,p95<=250'
waitTimeout: 1800
steps:
- script: |
loadfocus-api jmeter run-test \
--name "${{ parameters.testName }}" \
--thresholds "${{ parameters.thresholds }}" \
--waitTimeout ${{ parameters.waitTimeout }} \
--format json > $(Build.ArtifactStagingDirectory)/performance_results.json
displayName: 'Run Performance Tests'
continueOnError: false

Deretter i hovedpipelinen din:

- template: performance-test-template.yml
parameters:
testName: 'AzureDevOps_$(Build.Repository.Name)_$(Build.SourceBranchName)'
thresholds: 'avgresponse<=150,errors==0,p95<=200'
waitTimeout: 2400

Kjøre flere tester

For å kjøre flere ytelsestester i sekvens:

- script: |
# Run API test
loadfocus-api jmeter run-test \
--name "API_Test" \
--thresholds "avgresponse<=200,errors==0" \
--format json > $(Build.ArtifactStagingDirectory)/api_test_results.json
# Run UI test
loadfocus-api jmeter run-test \
--name "UI_Test" \
--thresholds "avgresponse<=500,errors==0" \
--format json > $(Build.ArtifactStagingDirectory)/ui_test_results.json
displayName: 'Run Multiple Performance Tests'

Integrasjon med Azure Test Plans

For å integrere ytelsestestresultater med Azure Test Plans:

- task: PublishTestResults@2
inputs:
testResultsFormat: 'JUnit'
testResultsFiles: '$(Build.ArtifactStagingDirectory)/test-results.xml'
testRunTitle: 'Performance Tests'
displayName: 'Publish Test Results'
condition: succeededOrFailed()

Du må konvertere JSON-utdataene til JUnit-format:

- script: |
# Run performance test
loadfocus-api jmeter run-test \
--name "AzureDevOps_Test" \
--thresholds "avgresponse<=200,errors==0" \
--format json > $(Build.ArtifactStagingDirectory)/performance_results.json
# Convert JSON to JUnit format (using a custom script)
node convert-to-junit.js \
$(Build.ArtifactStagingDirectory)/performance_results.json \
$(Build.ArtifactStagingDirectory)/test-results.xml
displayName: 'Run Performance Tests and Convert Results'

Tips for Azure DevOps-integrasjon

  1. Parallelle jobber: Hvis du har flere ytelsestester, vurder å bruke parallelle jobber:

    jobs:
    - job: API_Performance_Test
    steps:
    # Run API performance test
    - job: UI_Performance_Test
    steps:
    # Run UI performance test
  2. Distribusjonsporter: Bruk ytelsestestresultater som en distribusjonsport:

    - job: DeploymentGate
    steps:
    - script: |
    # Check if performance tests passed
    if grep -q '"overallResult": "FAILED"' $(Build.ArtifactStagingDirectory)/performance_results.json; then
    echo "##vso[task.logissue type=error]Performance tests failed"
    echo "##vso[task.complete result=Failed;]"
    fi
  3. Tilpasset dashbord: Opprett et tilpasset dashbord for å visualisere ytelsestestresultater over tid.

  4. Varsler: Sett opp varsler for feil i ytelsestester:

    - task: SendEmail@1
    inputs:
    to: 'team@example.com'
    subject: 'Performance Test Failed'
    body: 'Performance tests failed to meet thresholds. See attached results.'
    addAttachment: true
    attachmentPath: '$(Build.ArtifactStagingDirectory)/performance_results.json'
    condition: failed()

For mer informasjon, se Azure DevOps-dokumentasjonen og LoadFocus API-klientdokumentasjonen.