;Dim;dZddlZddlZddlZddlZddlmZdddZgdZgdZ d e d e e d e d e fd Z de d e ee effdZde ee efd e ee effdZde ee efde d e ee effdZd'de de de d e fdZde ee efde d e fdZde d e fdZde de de de de d e d!e d"e d ee effd#Z d(d e d e e d e de de d e ee eff d$Zd)d%Zed&k(reyy)*uGscenario_generator.py — LLM 기반 시나리오 YAML 초안 생성기N)Any)r2))smoke regression edge-casesecurity performancee2e) subprocesscurlpytest playwright task_content changed_fileslevelreturnc tj|d\}}djd|D}d|d|d|d|d|d }|S) u1LLM에 전달할 프롬프트를 생성합니다.r c3&K|] }d| yw)z - N).0fs 9/home/jay/workspace/teams/shared/qc/scenario_generator.py zbuild_prompt..s"E!T!:"Esu당신은 QA 엔지니어입니다. 아래 task 내용과 변경 파일 목록을 분석하여 테스트 시나리오 YAML 초안을 생성하세요. ## Task 내용 u ## 변경 파일 목록 u ## 요구사항 - ~u7개의 시나리오를 생성하세요 (작업 레벨: u) - 각 시나리오는 아래 필드를 포함해야 합니다: - id: SC-GEN-{task_id}-{순번:03d} 형식 - category: smoke / regression / edge-case / security / performance / e2e 중 하나 - target: 관련 파일 목록 (리스트) - type: subprocess / curl / pytest / playwright 중 하나 - steps: action과 expect_contains로 구성된 단계 목록 - priority: must / should / nice 중 하나 - automatable: false # 반드시 false로 설정 - description: 시나리오 설명 (한국어) - 모든 시나리오의 automatable은 반드시 false여야 합니다 - YAML 형식으로만 응답하세요 (```yaml ... ``` 블록 사용) ## 카테고리별 가이드 - smoke: 기본 동작 확인 (임포트, 기동, 핵심 API 응답) - regression: 기존 기능 유지 확인 (변경 전 동작과 동일한지) - edge-case: 빈 값, 경계값, 예외 경로 처리 - security: 인증/인가, 입력 검증, 권한 확인 - performance: 응답 시간, 부하 처리 - e2e: 전체 흐름 통합 확인 응답 예시: ```yaml - id: SC-GEN-task-100-001 category: smoke target: ["changed_file.py"] type: subprocess steps: - action: "python3 -c 'import module'" expect_contains: "" priority: must automatable: false description: "모듈 임포트 확인" ``` ) LEVEL_RANGESgetjoin)rrr min_count max_countchanged_files_textprompts r build_promptr(sw'++E8<Iy"E}"EE +QykPQVPW"X,FZ M response_textc~tjdtj}|j|}|r|j dj n|j } t j|}t|tr|St|tr|gSgS#t j$rgcYSwxYw)uLLM 응답(YAML 문자열)을 파싱하여 시나리오 리스트 반환. YAML 블록이 ```yaml ... ``` 안에 있을 수도 있고, 바로 YAML일 수도 있음. 파싱 실패 시 빈 리스트 반환. z```(?:yaml)?\s*\n(.*?)```) recompileDOTALLsearchgroupstripyaml safe_load isinstancelistdict YAMLError)r*code_block_patternmatch yaml_textdatas rparse_llm_responser=Ms$@"))L  % %m 4E*/ A$$&]5H5H5JI ~~i( dD !K d #6MI >> s(&B$B$"B$$B<;B< scenariosc|D]}d|d< |S)u=모든 시나리오에 automatable: false를 강제합니다.F automatabler)r>scs rensure_automatable_falserBes!"!=" r)task_idcl|jdd}t|dD]\}}d|d|d|d<|S)uK시나리오에 고유 ID를 부여합니다. SC-GEN-{task_id}-{순번:03d}.-r,)startSC-GEN-03did)replace enumerate)r>rC safe_task_ididxrAs rgenerate_scenario_idsrOlsL??3,LYa06R\N!C9546 r)projectbase_dircV|sd}tjj|d|d|dS)u출력 YAML 파일 경로를 반환합니다. 기본: {base_dir}/scenarios/{project}/generated/{task_id}.yaml base_dir 미지정 시: /home/jay/workspace/teams/shared/qc z#/home/jay/workspace/teams/shared/qcr> generatedz.yaml)ospathr#)rPrCrQs rget_output_pathrVus/ 8 77<<+w yPUEV WWr) output_pathctjtjj|dt |dd5}t j ||dddddd|S#1swY|SxYw) u/시나리오를 YAML 파일로 저장합니다.T)exist_okwutf-8encodingF) allow_unicode sort_keysdefault_flow_styleN)rTmakedirsrUdirnameopenr3dump)r>rWrs rsave_scenariosres_KK ,t< k3 1_Q )QdeX]^_ _ s A((A2 file_pathc|j}|jds|jdsd|vsd|vryd|vs d|vsd|vsd |vry |jd ry y )u;파일 경로/확장자로 시나리오 type 자동 결정.z.tsxz.jsxfrontenduirapirouterendpointviewr.pyrr)lowerendswith)rfros r_determine_typerqsh OO E ~~f!7:;NRVZ_R_ ~U*jE.AVu_ ~~e r)sc_idcategory target_filesc_typeactionexpect_containspriority descriptionc "|||g|||dg|d|dS)u4단일 시나리오 딕셔너리를 생성합니다.)rvrwF)rJrstargettypestepsrxr@ryrrrrsrtrurvrwrxrys r_make_scenariors0-#HI"  r)cftj|d\}}|r|jddndg}ddtffd }|r|ndg} | D]} t | } t j j| } | jd d jdd } | d k(r d | d}d}n| dk(rd}d}n| dk(rd}d}nd| d}d}|jt|d| | ||d| d| d k(r d | d}d}n| dk(rd}d}n| dk(rd}d}nd| d }d }|jt|d!| | ||d| d"|jt|d#| | d$| d%d&d'| d(|jt|d#| d)d*| d%d+d'| d,|jt|d-| | d.| d%d/d'| d0|d1k\r| D]} t j j| } t | } |jt|d2| | d3| d4d5d6| d7|jt|d8| | d9| d%d:d'| d;|jt|d#| d)d<| d%d=d'| d>|jt|d-| | d?| d%d@d'| dA|jt|d!| | dB| d%dCd6| dDt||krt|t| z}| |} t j j| } t | } tt|ttz}|jt||| | dEdz dF| d%dGd6| dHdz t||kr|dI|S)JuTLLM 없이 템플릿 기반으로 시나리오 초안을 생성합니다. LLM API가 없는 환경에서도 동작하도록, 변경 파일 목록과 task 내용을 기반으로 카테고리별 시나리오 템플릿을 생성합니다. 이 함수가 메인 생성 로직입니다. LLM은 선택적 보강 수단입니다. rrErFtaskr,rc$ddd}dz |S)NrHrFrIr,r)rrcounterrMs rnext_idz1generate_scenarios_from_template..next_ids%,q 61  r)unknownrn_rzpytest z -v --tb=shortpassedrz%curl -sf http://localhost:8000/healthokrzplaywright test --grep smokezpython3 -c 'import z' 2>&1 || echo 'ok'r mustu 기본 동작 확인r~z -v -k 'not slow'z3curl -sf -X GET http://localhost:8000/api/v1/status200z!playwright test --grep regressionzpython3 z --help 2>&1 || truer u 기존 기능 유지 확인r z(python3 -c "print('empty input test for z')"zempty input testshouldu( 빈 값 입력 시 예외 처리 확인rz+python3 -c "print('boundary value test for zboundary value testu 경계값 처리 확인r z"python3 -c "print('auth check for z auth checku 인증/인가 확인r rz=python3 -c "import time; start=time.time(); print('perf test z/'); print(f'elapsed={time.time()-start:.3f}s')"z perf testniceu 응답 시간 확인rz%python3 -c "print('e2e flow test for z e2e flow testu 전체 흐름 통합 확인z'python3 -c "print('null input test for znull input testu None/null 입력 처리 확인z'python3 -c "print('injection check for zinjection checku 인젝션 공격 방어 확인z-python3 -c "print('rollback safety check for zrollback safety checku 롤백 안전성 확인z%python3 -c "print('supplemental test z for zsupplemental testu 보충 시나리오 N) r!r"rKstrrqrTrUbasenameappendrlen CATEGORIES)rrrrPrCr$r%r>rfilesrfru file_name module_name smoke_action smoke_expect reg_action reg_expectfill_idxrsrrMs @@r generate_scenarios_from_templaters(++E8<Iy077??3,VL&(IGS+M EY !),GG$$Y/ ''r2::3D  h $YK~>L#L  BLL  $9L#L0 =PQLL)!($+%:;   h "9+->?J!J  NJJ  $ykN.$+%MN   ) ! A)DQ1$+%=>   )!8 4H($+%:;  aY x z> I((3I%i0G   ^i&%WXaWbcUV +(k)>?     ^i%? {$O /!(k)EF     ^i$%$A)DQ 1!(k)HI     ^i#%A)DQ 1!(k)HI     ^i%%G {RVW 7(k)AB  k> B i.9 $ NSZ/(O GG$$Y/ !),c)ns:>?)!;GAI;eI;VZ[/$+%:7Q;-H   i.9 $& Zi  r)ctjd}|jddd|jddd |jd td d |jddd |jddd |jddd |j }t |j dd5}|j}ddd|jrH|jjdDcgc]#}|js|j%c}ng}t||j|j|j}|jr |jn t!|j|j}t#||t%dt'|t%d|y#1swYxYwcc}w)Nu-LLM 기반 시나리오 YAML 초안 생성기)ryz --task-fileTutask 파일 경로)requiredhelpz--changed-filesru$변경 파일 목록 (콤마 구분))defaultrz--levelru작업 레벨 (3 또는 4))r|rrz --projectu프로젝트명z --task-idztask IDz--outputu+출력 파일 경로 (미지정 시 자동)rr[r\,)rrrrPrC)rPrCu생성된 시나리오 수: u출력 파일: )argparseArgumentParser add_argumentint parse_argsrc task_filereadrsplitr2rrrPrCoutputrVreprintr)parserargsrrrr>rWs rmainr|s  $ $1` aF  ;OP )2GGG __main__)r)rrr)rN)__doc__rrTr-r3typingrr!rTYPESrr6rr(r7r=rBrOrVrerqrrr__name__rr)rrs M   T  72s2492S2S2jcd4S>.B0T#s(^(<d3PS8nAUT$sCx.%9CDQUVY[^V^Q_L`XSX3X#XsXd4S>2 s s        #s(^4 N!N!9N! N! N!  N!  $sCx. N!b(+V zFr)