vTESTstudio
당신의 코드는 얼마나 견고합니까? - vTESTstudio로 Fuzz 테스트 정의하기임베디드 시스템을 위한 자동화된 테스트 시퀀스의 편리한 개발
vTESTstudio
vTESTstudio는 자동화된 ECU 테스트를 생성할 수 있는 고성능 개발 환경입니다. 테스트 설계의 효율성을 높이고 재사용을 단순화하기 위해, 프로그래밍 기반 뿐 아니라 테이블 기반의 그래픽 테스트 표기법과 테스트 개발 방법을 제공합니다.
프로그래밍 기반
테이블 기반
그래픽 테스트 표기법 및 테스트 메소드
vTESTstudio는 모델 테스팅부터 시스템 검증에 이르는 모든 제품 개발 단계에서 사용될 수 있습니다. 오픈 인터페이스의 사용으로 vTESTstudio는 기존의 툴체인과 통합이 용이합니다.
장점
다양한 테스트 디자인 에디터를 통한 광범위한 응용
모든 테스트 설계 언어에서 접근 가능한 Scalar value, Test vector 및 Stimulation curve를 통해 테스트 시퀀스의 유연한 파라미터화 가능
범용 배리언트 지원을 통한 테스트의 구조화, 테스트 케이스 구현 및 파라미터화
모듈화된 구조와 라이브러리나 폴더와 같은 다양한 옵션을 통한 손쉬운 테스트 프로젝트 관리
테스트 시퀀스에서 XIL(HIL, SIL, MIL 등) 테스트 환경 변수에 직접 엑세스 가능
테스트 구현 및 테스트 보고서에서 외부에서 정의된 요구사항 및 테스트 사양에 대한 추가성
파라미터 기반의 테스트 케이스 리스트 기능으로 프로그램 변경 없이 높은 테스트 커버리지 확보
오픈 인터페이스 지원으로 기존 상용 툴과의 손쉬운 통합
버전 7의 특징
- 분산 객체(DO)에 대한 접근을 위한 테스트 함수 및 Python 편집기를 포함하여 Python 프로그래밍 언어를 지원
- CANoe4SW Server Edition으로 CI 파이프라인 테스트를 위한 vCDL 파일 구성
- Test unit에서 개별 파일 연결뿐만 아니라 전체 라이브러리를 연결 가능
- 버스 부하 제어를 위해 Execute Waveform 명령에서 샘플링 시간을 사용자가 정의할 수 있음
- J1939 네트워크에서도 Fuzz Testing 가능
- CAPL 인라인 명령에서 사용자 정의 CAPL 함수 지원
- 여러 프로젝트에서 연결된 다이어그램을 재사용하기 위해 다이어그램 ID 할당 기능 추가
응용 분야
vTESTstudio는 모든 개발 단계에서 자동화된 ECU 설계를 지원합니다.
Test Design Editor
사용자는 자동화된 시퀀스 개발을 위해 작업과 요구사항에 따라 vTESTstudio에 통합된 다양한 테스트 설계 기능을 직접 선택할 수 있습니다.
테스트 케이스 개요는 실행된 편집기에 상관없이 테스트 프로젝트에서 사용가능한 모든 테스트 케이스에 대한 개요를 제공합니다.
Test Table Editor
선형적 테스트 시퀀스를 프로그래밍 관련 지식 없이 테이블 형식으로 쉽게 정의하기 위해 Test Table Editor를 사용할 수 있습니다.
이 에디터는 System Under Test에 자극 조건을 인가하고 테스팅 하기 위해 특별한 명령어를 제공합니다. 또한, 익스플로러로부터 Drag & Drop 기능을 이용해 편리하게 명령어를 파라미터화할 수 있으며, 스마트한 입력 지원 기능을 제공합니다.
Test Diagram Editor
Test Diagram Editor는 vTESTstudio의 옵션 “Graphical Test Design”과 함께 사용 가능합니다.
Editor를 통해 그래픽 형식으로 테스트 케이스를 생성할 수 있습니다. vTESTstudio는 다이어그램 상의 각각의 테스트 경로(가지수)에 대해 자동적으로 테스트케이스를 생성합니다. 이해하기 쉬운 그래픽 표기 방식을 통해 복잡한 테스트 로직도 쉽게 검토할 수 있도록 지원합니다.
테이블 기반 표기법의 테스트 코드는 각각의 그래픽 요소에 할당할 수 있습니다. 테스트 코드를 위해서, Test Table Editor처럼 동일한 명령어를 사용할 수 있습니다.
State Diagram Editor
State Diagram Editor는 vTESTstudio의 옵션 “Graphical Test Design”과 함께 사용 가능합니다.
State Diagram Editor로 원하는 SUT의 동작을 상태 이행 다이어그램으로 모델링할 수 있습니다. vTESTstudio는 이 테스트 모델로부터 테스트 케이스를 자동으로 생성합니다. 테스트 케이스 생성을 위해 Chinese Postman 및 너비 우선 검색과 같은 몇 가지 알고리즘 중에서 선택할 수 있습니다.
테이블 기반 표기법에서 테스트 코드를 각 그래픽 요소에 할당할 수 있습니다. 이 테스트 코드에 Test Table Editor에서와 동일한 명령을 사용할 수 있습니다.
Programming Editor
C#과 CAPL을 위한 두 개의 Programming Editor는 현대적인 개발 환경의 기능을 제공합니다. 자동 텍스트 완성, 문법 강조, 에러 인식과 같은 에디터의 기능은 코딩을 하는 작업 임에도 작업을 단순화 할 수 있습니다.
CAPL과 C# 에디터 모두 순차적 테스트 시퀀스 또는 이벤트 기반의 테스트 시퀀스를 정의할 수 있습니다. 이벤트 기반의 테스트 흐름은 특별한 언어 요소를 통해 활성화할 수 있으며, 이는 테스트 환경의 이벤트에 반응하는 데 사용됩니다. (예: 전처리 시그널)
C#으로 테스트를 구현하기 위해 Microsoft Visual Studio를 사용할 수도 있습니다. vTESTstudio와의 전용 통합이 가능합니다.
파라미터 & 파형
Parameter Editor
ECU 파라미터와 테스트 벡터를 별도의 파일로 정의하고 관리할 경우 기능, 테스트 케이스 및 파라미터를 높은 수준으로 재사용할 수 있습니다. vTESTstudio를 사용하면 모든 구현 언어로 테스트 시퀀스의 파라미터에 액세스할 수 있습니다.
파라미터 및 테스트 벡터는 스칼라 및 목록으로 정의할 수 있습니다. 예를 들어, 테스트 중인 시스템과 테스트 벡터의 다른 변형을 실행하려는 경우, 이 목록을 사용하여 테스트 시퀀스 반복을 매우 편리하게 수행할 수 있습니다.
vTESTstudio에서 파라미터 파일 편집을 위한 편리한 에디터를 사용할 수 있습니다. 한편, 다른 편집기에서 파일을 편집할 수도 있습니다. 예를 들어, csv형식으로 파일을 저장하고 Microsoft Excel에서 편집할 수 있습니다.
Waveform Editor
Waveform Editor를 사용해 테스트 중인 시스템에 인가할 신호를 정의할 수 있습니다. 사전 정의 된 세그먼트 유형 (sinus, pulse ...)은 LV124와 같은 ECU 테스트 표준에 따라 전압 커브를 정의할 수 있도록 지원합니다. 같은 에디터 내에서 여러 개의 커브를 쉽게 동기화할 수 있습니다.
또한 커브를 인가하기 위해 GUI에서 체크 포인트를 명확하게 정의할 수 있습니다. 이를 통해 인가된 값과 동기화된 SUT의 예상 결과을 검증할 수 있습니다.
Classification Tree Editor
테스트 케이스 데이터를 찾기 위한 Classification Tree Editor가 지원됩니다. 그래픽 인터페이스를 통해 분류 및 등가 클래스를 정의할 수 있어 필요한 테스트 벡터의 수를 쉽고 빠르게 찾을 수 있습니다.
경계값을 명시적으로 지원하여 사용자가 등가 클래스의 최소값과 최대값을 토대로 임계값을 정하는 데 도움을 줍니다.
배리언트 제어
vTESTstudio는 ECU 배리언트와 테스트 배리언트를 완벽하게 지원합니다. vTESTstudio에서 배리언트는 소위 배리언트 속성으로 표현됩니다. ECU 배리언트 "지역 [US, Europe]"또는 테스트 배리언트 "Coverage[Full, Regression]"와 같이 테스트 프로젝트 내에서 원하는 만큼 많은 배리언트 속성을 정의할 수 있습니다.
테스트를 설계할 때 미리 배리언트 속성의 값을 정의하거나 테스트가 시작되기 전에 설정하십시오. 테스트 구조와 테스트 순서 및 배리언트에 따라 달라지는 파라미터 값을 모두 정의할 수 있습니다. 테스트 기능, 파라미터 및 전체 라이브러리를 여러 제품 라인에서 재사용할 수 있는 이점이 있습니다.
Variant-depending Test Execution Tree
하나 이상의 배리언트 속성에 따라 Test Execution Tree를 구성할 수 있습니다. 예를 들어, 각 테스트 케이스는 ECU의 어떤 특정한 인스턴스에만 관련이 있을 수 있습니다. 또는 전체 테스트 그룹이 특정 테스트 배리언트 (예: 회귀 테스트와 달리 전체 테스트)에서만 실행될 수도 있습니다.
테스트 케이스 및 테스트 그룹의 배리언트 조건은 하나 이상의 배리언트 속성을 기반으로 할 수 있습니다. 논리 연산자를 사용하여 여러 조건을 연결할 수 있습니다.
테스트 케이스 또는 테스트 그룹에 대해 정의된 조건이 충족되지 않으면 CANoe에서 테스트 실행할 때 불러올 수 없습니다.
Variant-depending Test Sequence
하나 이상의 배리언트 속성에 따라 테스트 케이스 내의 실행 시퀀스를 정의할 수 있습니다. 상응하는 If-/Else 문 또는 특수 그래픽 요소를 사용하여 실행 시퀀스를 모델링 할 수도 있습니다.
Variant-depending Parameters
개별 값(예 : ECU의 구성 파라미터)이 배리언트속성에 의해 정해질 경우 이 값을 파라미터 에디터에서 정의할 수 있습니다. 배리언트로부터 독립적인 리스트 파라미터를 정의할 수도 있습니다. 예를 들어, 테스트할 온도 리스트의 값 세트는 배리언트 속성 "테스트 깊이"에 따라 달라질 수 있습니다. 이 경우 전체 테스트 시 스모크 테스트보다 더 많은 횟수로 온도 값을 테스트하게 됩니다.
테스트를 실행할 때 실제 테스트 시퀀스를 (Test Table Test Chart Editor 상에서) 변경할 필요 없이 설정된 배리언트를 위한 적합한 값이 자동으로 사용됩니다.
테스트 영역
테스트 케이스 리스트
프로그래밍 작업 없이 테스트 커버리지를 향상할 수 있습니다. vTESTstudio 에서는 파라미터화된 테스트 케이스 리스트를 이용할 수 있습니다. 테스트 케이스 정의 시 전달된 파라미터들을 위하여 사용자는 다양한 값을 입력하여 테스트 케이스 리스트를 정의할 수 있습니다.
테스트 수행 시 vTESTstudio 는 모든 파라미터 값을 한 번에 이용한 경우 또는 사용자 임의의 파라미터 값 조합을 이용한 경우에 대하여 테스트 케이스 리스트를 자동적으로 생성하여 줍니다.
테스트 데이터
여러 번 실행하게 될 테스트 케이스의 데이터는 여러 방법으로 정의될 수 있습니다. 하지만 이를 Test Table Editor에서 직접 입력하는 것도 가능합니다. 개별 값과 특정 Step Size가 있는 범위를 모두 지정할 수 있습니다. 또한, 테스트 데이터를 Parameter Editor나 Classification Tree Editor에서 정의할 수도 있습니다. 이로써 제한 값을 정하거나 배리언트로부터 독립적인 값 또는 값의 목록을 사용할 수 있습니다.
테스트 실행
CANoe에서의 테스트 실행
vTESTstudio에서 정의된 테스트는 CANoe에 로드 및 설정되어 실시간으로 실행되고 구체적인 테스트 리포트로 문서화됩니다.
Test Trace Window에서 테스트 실행 중 테스트를 관찰 및 분석할 수 있습니다. vTESTstudio의 Test Trace 창에서 확인한 부분을 테스트 설계에서의 해당 위치로 바로 탐색할 수 있습니다. 이로써, 테스트 실행 분석이 추가로 간소화됩니다.
CANoe Test Report Viewer
CANoe에서의 테스트 실행 중 구체적인 리포트 작성이 이루어집니다. 리포트는 CANoe Test Report Viewer로 열고 분석할 수 있습니다. 테스트 데이터에 대한 다양한 보기 형식, 다양한 측면에서의 필터링, 판정에 의한 그룹화, 연결된 추적 아이템에 대한 쿼리 등을 지원합니다. CANoeTest Report Viewer의 테스트 단계에서 vTESTstudio의 테스트 설계로의 탐색도 지원됩니다.
Fuzz 테스트
vTESTstudio의 Fuzz 테스트 기능을 통해 SUT에 대한 견고성 테스트 정의 및 CANoe 실행을 편리하게 진행할 수 있습니다. 통합 Fuzz 테스트 생성기는 신호 컨디셔닝에 사용되는 많은 수의 테스트 벡터를 생성하여 SUT를 자극합니다.
테스트 값에는 두 가지 유형이 있습니다.
- 유형 및 규칙 기반 테스트 값
이 테스트 값을 계산하기 위해 데이터베이스 신호의 특정 속성(예: 비트 길이 및 데이터 유형)이 사용됩니다. 이 정보는 해당 신호의 극한값(최소/최대) 및 특수 값(예 : ± ∞)을 결정하는 데 사용됩니다. - 임의의 값
임의의 값을 사용하여 생성된 테스트 벡터 수를 마음대로 늘릴 수 있습니다. 장기 테스트를 위한 끝없는 생성이 필요할 수 있습니다.
백그라운드 검사에 사전 정의된 테스트 명령을 사용하여 Fuzz 테스트 중에 ECU의 동작을 지속적으로 모니터링할 수 있습니다. 또한 SUT의 특정 반응을 확인하고 평가하기 위해 테스트 시퀀스에 개별 Fuzz 테스트 케이스를 주석으로 추가할 수 있습니다.
CANoe에서는 생성된 각 테스트 벡터에 별도의 테스트케이스가 생성되고 이에 따라 보고됩니다. 각 신호 값과 테스트 결과는 실행 중에 Test Trace 창에서 볼 수 있습니다.
추적성
vTESTstudio 는 외부적으로 정의된 요구사항과 테스트 디자인 시 정의 내용, 테스트 리포트 간의 추적성을 제공합니다. 이는 사전 정의한 개방형 XML 포맷에서 파일 교환을 사용하여 이루어집니다. 결과적으로, 다양한 RQM/TDM 시스템과 vTESTstudio 를 결합하여 사용할 수 있습니다.
RQM/TDM 시스템으로부터 추출된 정보(Trace Item)는 vTESTstudio 로 입력되어 테스트 케이스와 연결됩니다. 연결 요소로서 요구사항과 테스트 설명서가 사용될 수 있습니다. 이 요소들은 추적성 확보를 위해 사용되며, trace item으로 설계 되었습니다.
요구사항 기반 워크플로우
요구사항 기반 테스트 시, REQM 시스템에 정의된 요구사항을 vTESTstudio에서 Trace Item으로 불러와 테스트 케이스 구현으로 연결할 수 있습니다. n:m 연결이 가능합니다.
테스트 케이스 기반 워크플로우
TDM 시스템에 산문 형식의 테스트 케이스 사양이 이미 포함되어있는 경우 테스트 케이스 사양을 vTESTstudio 프로젝트에 Trace Item으로 가져올 수 있습니다. 여기서 각 테스트 케이스의 사양은 테스트 케이스 구현에 1:1로 연결됩니다.
Trace Item Explorer
vTESTstudio로 가져온 모든 추적 아이템은 Trace Item Explorer로 사용 가능합니다. 드래그&드롭을 통해 테스트 케이스로 쉽게 연결할 수 있습니다.
REQM/TDM 시스템에서 요구사항 및 테스트 디스크립션은 계층적 폴더나 비교 가능한 요소로 구조화될 수 있습니다. 이 폴더들은 Trace Item Explorer에 같은 계층으로 표시됩니다. 그러나 폴더를 직접 테스트 케이스에 연결할 수는 없습니다.
Traceability Matrix
vTESTstudio 는 외부적으로 정의된 요구사항과 테스트 디자인 시 정의 내용, 테스트 리포트 간의 추적성을 제공합니다. 이는 사전 정의한 개방형 XML 포맷에서 파일 교환을 사용하여 이루어집니다. 결과적으로, 다양한 RQM/TDM 시스템과 vTESTstudio 를 결합하여 사용할 수 있습니다. RQM/TDM 시스템으로부터 추출된 정보(Trace Item)는 vTESTstudio 로 입력되어 테스트 케이스와 연결됩니다.
각각의 Trace Item은 테스트 케이스에 연결되며, 테스트 리포트는 테스트 케이스를 참조하여 추적 정보를 포함하게 됩니다. 테스트 결과물에서 요구사항 또는 테스트 정의로의 역 추적성을 제공합니다
지원 REQM/TDM 시스템
개요
다음의 시스템을 기본적으로 지원합니다.
벡터 PREEvision TDM
IBM Rational DOORS
IBM Rational DOORS NG, IBM Rational Quality Manager
PTC Integrity
Siemens Polarion ALM
Jama Connect
Intland codeBeamer ALM
공개 교환 포맷을 기반으로 직접 개발을 수행하여 다른 REQM/TDM 시스템에 대한 추적성을 확보할 수 있습니다.
Siemens Polarion ALM
Vector Polarion Connection Utility는 Vector vTESTstudio용 애드온 툴입니다. Siemens Polarion ALM을 벡터의 테스트 툴체인에 통합하는 역할을 수행합니다.
Vector Polarion Connection Utility 개요
Vector Polarion Connection Utility를 사용하여 Siemens Polarion ALM, CANoe 및 vTESTstudio 간의 추적성을 확보하는 방법을 간략히 살펴보십시오.
툴 데모: 요구사항 기반 워크플로우
Polarion Connection Utility가 요구사항 기반 워크플로우를 통해 Siemens Polarion ALM, CANoe 및 vTESTstudio 간의 추적성을 확보하는 방법을 단계별로 배워보세요.
툴 데모: 테스트 케이스 기반 워크플로우
Polarion Connection Utility로 테스트 케이스 기반 워크플로우를 통해 Siemens Polarion ALM, CANoe 및 vTESTstudio 간의 추적성을 확보하는 방법을 알아보세요.
PTC Integrity Lifecycle Manager
Vector Integrity Connection Utility는 Vector vTESTstudio용 애드온 툴입니다. PTC Integrity Lifecycle Manager를 벡터의 테스트 툴체인에 통합하는 역할을 수행합니다.
Vector Integrity Connection Utility 개요
Vector Integrity Connection Utility 를 사용하여 PTC Integrity Lifecycle Manager, CANoe 및 vTESTstudio 간의 추적성을 확보하는 방법을 간략히 살펴보십시오.
툴 데모: 요구사항 기반 워크플로우
Integrity Connection Utility로 요구사항 기반 워크플로우를 통해 PTC Integrity Lifecycle Manager, CANoe 및 vTESTstudio 간의 추적성을 확보하는 방법을 단계별로 배워보세요
툴 데모: 테스트 케이스 기반 워크플로우
Integrity Connection Utility 로 테스트 케이스 기반 워크플로우를 통해 PTC Integrity Lifecycle Manager, CANoe 및 vTESTstudio 간의 추적성을 확보하는 방법을 알아보세요.
제품 정보
- Fact Sheet (PDF)
- 컨셉트 매뉴얼(PDF)
vTESTstudio 및 옵션들의 시스템 요구사항입니다.
| 권장 | 최소 | |
|---|---|---|
운영체제 | Windows 10/8.1/7 | |
프로세서 | Intel Core i5 with 3 GHz | Intel Core Duo with 2.6 GHz |
메모리 (RAM) | 4 GB | 1 GB |
저장 공간 | 1.5 GB | |
해상도 | 1280 x 1024 | 1024 x 768 |
CANoe* | 버전 13.0 | 버전 11.0 SP3 버전 12.0 |
*테스크 실행을 위해 필요합니다. vTESTstudio에서 사용 가능한 기능은 CANoe 버전에 따라 상이합니다.
동영상
아무것도 읽고 싶지 않으세요? 동영상을 시청하세요.
다운로드
교육
vTESTstudio 세미나
vTESTstudio는 임베디드 시스템을 위한 자동화된 테스트 시퀀스 설계에 최적화된 다양한 기능을 제공합니다. 이러한 옵션들이 충분히 친숙하고 활용할 수 있는 소수만이 다양한 기능을 사용하여 시간과 비용을 아낄 수 있었습니다.
벡터의 교육을 통해 일상적인 업무에서 vTESTstudio를 더욱 효율적으로 활용하세요!