Ver3.5 ๐ฑ ๋ชจ๋ฐ์ผ ํ ์คํ ๊ณผ ์๋ํ๋ ํ ์คํธ ๋๊ตฌ๋ฅผ ํ์ฉํ ์ฑ ํ์ง ๋ณด์ฆ ์์ ์ ๋ณต

๐ฑ ๋ชจ๋ฐ์ผ ํ ์คํ ๊ณผ ์๋ํ๋ ํ ์คํธ ๋๊ตฌ๋ฅผ ํ์ฉํ ์ฑ ํ์ง ๋ณด์ฆ ์์ ์ ๋ณต
์ผ, ์์งํ ๋งํด๋ด. ์ฑ ๊ฐ๋ฐํ๋ฉด์ "์์ด, ํ
์คํธ๋ ๋์ค์ ํ์ง ๋ญ~" ํ๊ณ ๋์ด๊ฐ ์ ์์ง? ๐
๊ทธ๋ฌ๋ค๊ฐ ์ถ์ ์ง์ ์ ๋ฒ๊ทธ ํญํ ๋ง๊ณ ๋ฐค์ ๋๋ฒ๊น
ํ ๊ฒฝํ, ํ ๋ฒ์ฏค์ ์์ ๊ฑฐ์ผ.
๋ชจ๋ฐ์ผ ์ฑ ๊ฐ๋ฐ์์ ํ
์คํ
๊ณผ ํ์ง ๋ณด์ฆ(QA)์ ์ ํ์ด ์๋๋ผ ํ์์ผ.
ํนํ ์์ฆ์ฒ๋ผ ์ฑ ๋ง์ผ์์ ๋ณ์ 1๊ฐ์ง๋ฆฌ ๋ฆฌ๋ทฐ ํ๋๊ฐ ๋ค์ด๋ก๋ ์๋ฅผ ํ ๋จ์ด๋จ๋ฆฌ๋ ์๋์๋ ๋๋์ฑ.
์ด ๊ธ์์๋ ๋ชจ๋ฐ์ผ ํ
์คํ
์ ๊ฐ๋
๋ถํฐ ์์ํด์, ์๋ํ ํ
์คํธ ๋๊ตฌ๋ค์ ์ด๋ป๊ฒ ํ์ฉํ๋์ง,
๊ทธ๋ฆฌ๊ณ ์ค์ ํ์
์์ ์ฐ์ด๋ QA ์ ๋ต๊น์ง ์น๊ตฌํํ
์ค๋ช
ํ๋ฏ ์ญ ํ์ด๋ณผ๊ฒ. ๐ฏ
์ค๋น๋์ด? ๊ทธ๋ผ ๊ณ ๊ณ !
๋จผ์ ํ์ค์ ์ธ ์ซ์๋ฅผ ์ข ๋ณด์. ๊ตฌ๊ธ ํ๋ ์ด ์คํ ์ด์๋ ํ์ฌ ์ฝ 300๋ง ๊ฐ ์ด์์ ์ฑ์ด ๋ฑ๋ก๋์ด ์๊ณ ,
์ ํ ์ฑ์คํ ์ด์๋ ์ฝ 180๋ง ๊ฐ๊ฐ ๋๋ ์ฑ์ด ์์ด.
์ด ์์ฒญ๋ ๊ฒฝ์ ์์์ ์ด์๋จ์ผ๋ ค๋ฉด? ํ์ง์ด ๋ต์ด์ผ.
์ค์ ๋ก Qualitest์ ์ฐ๊ตฌ์ ๋ฐ๋ฅด๋ฉด, ์ฑ ์ฌ์ฉ์์ 88%๊ฐ ๋ฒ๊ทธ๋ฅผ ๊ฒฝํํ ํ ์ฑ์ ์ญ์ ํ๋ค๊ณ ํด.
๊ทธ๋ฆฌ๊ณ 62%๋ ๋ฒ๊ทธ๊ฐ ์๋ ์ฑ์ ๋ํด ๋ถ์ ์ ์ธ ๋ฆฌ๋ทฐ๋ฅผ ๋จ๊ธด๋ค๊ณ ํ์ง.
์ด๊ฒ ์ผ๋ง๋ ๋ฌด์์ด ์ซ์์ธ์ง ๋๊ปด์ ธ? ๐ฑ
๋ชจ๋ฐ์ผ ์ ํ๋ฆฌ์ผ์ด์ ์ด ๋ค์ํ ๊ธฐ๊ธฐ, ์ด์์ฒด์ , ๋คํธ์ํฌ ํ๊ฒฝ์์ ์ฌ๋ฐ๋ฅด๊ฒ ๋์ํ๋์ง ๊ฒ์ฆํ๋ ๊ณผ์ ์ด์ผ.
๋จ์ํ "๋ฒ๊ทธ ์์ ๊ธฐ"๊ฐ ์๋๋ผ, ์ฌ์ฉ์ ๊ฒฝํ(UX) ์ ์ฒด๋ฅผ ํ์ง ๊ด์ ์์ ๋ณด์ฅํ๋ ๊ฑฐ์ง.
๊ทธ๋ฐ๋ฐ ๋ชจ๋ฐ์ผ ํ
์คํ
์ด ์น์ด๋ ๋ฐ์คํฌํ ํ
์คํ
๋ณด๋ค ํจ์ฌ ๋ณต์กํ ์ด์ ๊ฐ ์์ด.
๋ฐ๋ก ๋จํธํ(Fragmentation) ๋ฌธ์ ์ผ.
1. ๊ธฐ๊ธฐ ๋ค์์ฑ
์๋๋ก์ด๋๋ง ํด๋ ์ผ์ฑ, LG, ์ค์ค๋ฏธ, ํ์จ์ด, ๊ตฌ๊ธ ํฝ์
๋ฑ ์์ฒ ๊ฐ์ง ๊ธฐ๊ธฐ๊ฐ ์์ด.
ํ๋ฉด ํฌ๊ธฐ, ํด์๋, ํ๋ก์ธ์, RAM ์ฉ๋์ด ๋ค ๋ฌ๋ผ.
2. OS ๋ฒ์ ๋ถ์ฐ
์๋๋ก์ด๋๋ ์์ง๋ Android 8.x๋ถํฐ 14๊น์ง ๋ค์ํ ๋ฒ์ ์ด ํ์ญ์ผ๋ก ์ฐ์ด๊ณ ์์ด.
iOS๋ ์๋์ ์ผ๋ก ์
๋ฐ์ดํธ์จ์ด ๋์ง๋ง, ๊ทธ๋๋ iOS 15~17๊น์ง ์ง์ํด์ผ ํ๋ ๊ฒฝ์ฐ๊ฐ ๋ง์ง.
3. ๋คํธ์ํฌ ํ๊ฒฝ
WiFi, 4G, 5G, ์ฌ์ง์ด 2G ํ๊ฒฝ์์๋ ์ฑ์ด ์ ๋๋ก ๋์ํด์ผ ํด.
๋คํธ์ํฌ ๋๊น, ๋๋ฆฐ ์ฐ๊ฒฐ, ์คํ๋ผ์ธ ๋ชจ๋๊น์ง ๊ณ ๋ คํด์ผ ํ๊ฑฐ๋ .
4. ์ผ์์ ํ๋์จ์ด
GPS, ์นด๋ฉ๋ผ, ๊ฐ์๋๊ณ, ์ง๋ฌธ์ธ์, Face ID ๋ฑ ๋ค์ํ ํ๋์จ์ด ๊ธฐ๋ฅ์ ํ
์คํธํด์ผ ํด.
5. ๋ฐฐํฐ๋ฆฌ์ ๋ฉ๋ชจ๋ฆฌ ์ ์ฝ
๋ชจ๋ฐ์ผ ๊ธฐ๊ธฐ๋ ์์์ด ์ ํ์ ์ด์ผ. ์ฑ์ด ๋ฐฐํฐ๋ฆฌ๋ฅผ ๋๋ฌด ๋ง์ด ๋จน๊ฑฐ๋ ๋ฉ๋ชจ๋ฆฌ ๋์๊ฐ ์์ผ๋ฉด ๋ฐ๋ก ํด์ถ์ด์ผ.
ํ
์คํ
์ธ๊ณ์์ ๊ฐ์ฅ ์ ๋ช
ํ ๊ฐ๋
์ค ํ๋๊ฐ ๋ฐ๋ก "ํ
์คํธ ํผ๋ผ๋ฏธ๋(Test Pyramid)"์ผ.
๋ง์ดํฌ ์ฝ(Mike Cohn)์ด ์ ์ํ ์ด ๊ฐ๋
์ ๋ชจ๋ฐ์ผ ๊ฐ๋ฐ์๋ ๊ทธ๋๋ก ์ ์ฉ๋ผ.
ํผ๋ผ๋ฏธ๋๋ฅผ ๋ณด๋ฉด ์๊ฒ ์ง๋ง, ๋จ์ ํ
์คํธ๋ฅผ ๊ฐ์ฅ ๋ง์ด ์์ฑํ๊ณ ,
E2E(End-to-End) ํ
์คํธ๋ ํต์ฌ ์๋๋ฆฌ์ค์๋ง ์ง์คํ๋ ๊ฒ ํจ์จ์ ์ด์ผ.
์๋๊ณ ? E2E ํ
์คํธ๋ ์คํ ์๊ฐ์ด ๊ธธ๊ณ , ์ ์ง๋ณด์ ๋น์ฉ๋ ๋๊ฑฐ๋ .
๋ฐ๋ฉด ๋จ์ ํ
์คํธ๋ ๋น ๋ฅด๊ณ ์ ํํ๊ฒ ๋ฌธ์ ๋ฅผ ์ก์๋ผ ์ ์์ด.
๋จ์ ํ ์คํธ 70%, ํตํฉ ํ ์คํธ 20%, E2E ํ ์คํธ 10%.
์ด ๋น์จ์ ์งํค๋ฉด ํ ์คํธ ์๋์ ์ปค๋ฒ๋ฆฌ์ง ์ฌ์ด์ ๊ท ํ์ ์ก์ ์ ์์ด.
์ด์ ๋ณธ๊ฒฉ์ ์ผ๋ก ๋๊ตฌ ์๊ธฐ๋ฅผ ํด๋ณด์.
๋ชจ๋ฐ์ผ ํ
์คํธ ์๋ํ ๋๊ตฌ๋ ํฌ๊ฒ Android ์ ์ฉ, iOS ์ ์ฉ, ํฌ๋ก์ค ํ๋ซํผ์ผ๋ก ๋๋์ด.
๊ฐ๊ฐ์ ํน์ง๊ณผ ์ฅ๋จ์ ์ ์ ๋๋ก ์์์ผ ํ๋ก์ ํธ์ ๋ง๋ ๋๊ตฌ๋ฅผ ์ ํํ ์ ์์ด.
1. Espresso ๊ตฌ๊ธ ๊ณต์ UI ํ ์คํธ
๊ตฌ๊ธ์ด ์ง์ ๋ง๋ ์๋๋ก์ด๋ UI ํ
์คํธ ํ๋ ์์ํฌ์ผ.
์ฑ์ UI ์์์ ์ํธ์์ฉํ๋ ํ
์คํธ๋ฅผ ์์ฑํ ์ ์์ด.
๊ฐ์ฅ ํฐ ์ฅ์ ์ ๋๊ธฐํ(Synchronization) ๋ฌธ์ ๋ฅผ ์๋์ผ๋ก ์ฒ๋ฆฌํด์ค๋ค๋ ๊ฑฐ์ผ.
์ฆ, ๋ฒํผ ํด๋ฆญ ํ ํ๋ฉด์ด ๋ก๋ฉ๋ ๋๊น์ง ์๋์ผ๋ก ๊ธฐ๋ค๋ ค์ค. ํ์ด๋ฐ ์ด์๊ฐ ๊ฑฐ์ ์์ด.
// Espresso ๊ธฐ๋ณธ ์์
@Test
public void ๋ก๊ทธ์ธ_๋ฒํผ_ํด๋ฆญ_ํ
์คํธ() {
// ์ด๋ฉ์ผ ์
๋ ฅ
onView(withId(R.id.email_input))
.perform(typeText("test@example.com"));
// ๋น๋ฐ๋ฒํธ ์
๋ ฅ
onView(withId(R.id.password_input))
.perform(typeText("password123"));
// ๋ก๊ทธ์ธ ๋ฒํผ ํด๋ฆญ
onView(withId(R.id.login_button))
.perform(click());
// ํ ํ๋ฉด์ด ํ์๋๋์ง ํ์ธ
onView(withId(R.id.home_screen))
.check(matches(isDisplayed()));
}
2. JUnit 5 + Mockito ๋จ์ ํ
์คํธ
์๋๋ก์ด๋ ๋จ์ ํ
์คํธ์ ํ์ค ์กฐํฉ์ด์ผ.
JUnit 5๋ ํ
์คํธ ํ๋ ์์ํฌ๊ณ , Mockito๋ ์์กด์ฑ์ ๊ฐ์ง(Mock)๋ก ๋์ฒดํด์ฃผ๋ ๋ผ์ด๋ธ๋ฌ๋ฆฌ์ผ.
3. Robolectric ์๋ฎฌ๋ ์ดํฐ ์์ด
์๋๋ก์ด๋ ํ๋ ์์ํฌ๋ฅผ JVM์์ ์๋ฎฌ๋ ์ด์
ํด์ฃผ๋ ๋๊ตฌ์ผ.
์ค์ ๊ธฐ๊ธฐ๋ ์๋ฎฌ๋ ์ดํฐ ์์ด๋ ์๋๋ก์ด๋ ์ปดํฌ๋ํธ๋ฅผ ํ
์คํธํ ์ ์์ด์ CI/CD ํ์ดํ๋ผ์ธ์์ ๋งค์ฐ ์ ์ฉํด.
1. XCTest ์ ํ ๊ณต์ ๋จ์+UI
์ ํ์ด ์ ๊ณตํ๋ ๊ณต์ ํ
์คํธ ํ๋ ์์ํฌ์ผ.
Xcode์ ์์ ํ ํตํฉ๋์ด ์์ด์ ๋ณ๋ ์ค์ ์์ด ๋ฐ๋ก ์ฌ์ฉํ ์ ์์ด.
๋จ์ ํ
์คํธ(XCTestCase)์ UI ํ
์คํธ(XCUITest) ๋ชจ๋ ์ง์ํด.
// XCTest ๊ธฐ๋ณธ ์์ (Swift)
class LoginViewControllerTests: XCTestCase {
func test_๋ก๊ทธ์ธ_์ฑ๊ณต_์๋๋ฆฌ์ค() throws {
let app = XCUIApplication()
app.launch()
// ์ด๋ฉ์ผ ํ๋์ ํ
์คํธ ์
๋ ฅ
let emailField = app.textFields["email_field"]
emailField.tap()
emailField.typeText("test@example.com")
// ๋ก๊ทธ์ธ ๋ฒํผ ํญ
app.buttons["login_button"].tap()
// ํ ํ๋ฉด ํ์ธ
XCTAssertTrue(app.otherElements["home_screen"].exists)
}
}
2. Quick + Nimble BDD ์คํ์ผ
BDD(Behavior-Driven Development) ์คํ์ผ๋ก ํ
์คํธ๋ฅผ ์์ฑํ ์ ์๊ฒ ํด์ฃผ๋ ํ๋ ์์ํฌ์ผ.
ํ
์คํธ ์ฝ๋๊ฐ ์์ด ๋ฌธ์ฅ์ฒ๋ผ ์ฝํ์ ๊ฐ๋
์ฑ์ด ํจ์ฌ ์ข์.
1. Appium ์คํ์์ค ๊ฐ์ฅ ์ธ๊ธฐ
๋ชจ๋ฐ์ผ ์๋ํ ํ
์คํธ์ ์ฌ์ค์ ํ์ค(De facto standard)์ด์ผ.
Android์ iOS ๋ชจ๋ ์ง์ํ๊ณ , Java, Python, JavaScript, Ruby ๋ฑ ๋ค์ํ ์ธ์ด๋ก ํ
์คํธ๋ฅผ ์์ฑํ ์ ์์ด.
WebDriver ํ๋กํ ์ฝ์ ๊ธฐ๋ฐ์ผ๋ก ํด์ Selenium์ ์ต์ํ ๊ฐ๋ฐ์๋ผ๋ฉด ์ฝ๊ฒ ๋ฐฐ์ธ ์ ์์ด.
"์ฑ์ ํ ์คํธํ๊ธฐ ์ํด ์ฑ์ ์์ ํ๊ฑฐ๋ ์ฌ์ปดํ์ผํ ํ์๊ฐ ์๋ค"
์ด๊ฒ Appium์ ๊ฐ์ฅ ํฐ ๊ฐ์ ์ด์ผ. ๊ธฐ์กด ์ฑ ์ฝ๋๋ฅผ ๊ฑด๋๋ฆฌ์ง ์๊ณ ์ธ๋ถ์์ ํ ์คํธ๋ฅผ ์คํํ ์ ์์ด.
# Appium + Python ์์
from appium import webdriver
from appium.webdriver.common.appiumby import AppiumBy
desired_caps = {
'platformName': 'Android',
'deviceName': 'emulator-5554',
'appPackage': 'com.example.myapp',
'appActivity': '.MainActivity'
}
driver = webdriver.Remote('http://localhost:4723/wd/hub', desired_caps)
# ๋ก๊ทธ์ธ ๋ฒํผ ์ฐพ์์ ํด๋ฆญ
login_btn = driver.find_element(AppiumBy.ID, 'com.example.myapp:id/login_button')
login_btn.click()
driver.quit()
2. Detox React Native ํนํ
Wix๊ฐ ๋ง๋ React Native ์ฑ ์ ์ฉ E2E ํ
์คํธ ํ๋ ์์ํฌ์ผ.
Appium๊ณผ ๋ฌ๋ฆฌ ์ฑ ๋ด๋ถ์ ํ
์คํธ ์๋ฒ๋ฅผ ๋ด์ฅํ๋ ๋ฐฉ์์ด๋ผ ํจ์ฌ ๋น ๋ฅด๊ณ ์์ ์ ์ด์ผ.
ํนํ ๋น๋๊ธฐ ์ฒ๋ฆฌ๊ฐ ๋ง์ React Native ์ฑ์์ ํ์ด๋ฐ ์ด์๋ฅผ ์ ์ฒ๋ฆฌํด์ค.
// Detox ํ
์คํธ ์์ (JavaScript)
describe('๋ก๊ทธ์ธ ํ๋ฉด', () => {
beforeAll(async () => {
await device.launchApp();
});
it('์ฌ๋ฐ๋ฅธ ์๊ฒฉ์ฆ๋ช
์ผ๋ก ๋ก๊ทธ์ธ ์ฑ๊ณต', async () => {
await element(by.id('email_input')).typeText('test@example.com');
await element(by.id('password_input')).typeText('password123');
await element(by.id('login_button')).tap();
await expect(element(by.id('home_screen'))).toBeVisible();
});
});
3. Flutter Driver / integration_test Flutter ์ ์ฉ
Flutter ์ฑ์ ์ํ ๊ณต์ ํตํฉ ํ
์คํธ ํจํค์ง์ผ.
2021๋
๋ถํฐ flutter_driver ๋์ integration_test ํจํค์ง๊ฐ ๊ถ์ฅ๋๊ณ ์์ด.
์ด๋ค ๋๊ตฌ๋ฅผ ์ ํํด์ผ ํ ์ง ํท๊ฐ๋ฆฌ์ง? ์๋ ํ๋ฅผ ์ฐธ๊ณ ํด๋ด!
| ๋๊ตฌ | ํ๋ซํผ | ์ธ์ด | ์๋ | ๋์ด๋ |
|---|---|---|---|---|
| Espresso | Android | Java/Kotlin | โกโกโก | ์ค๊ฐ |
| XCUITest | iOS | Swift/ObjC | โกโกโก | ์ค๊ฐ |
| Appium | Android+iOS | ๋ค์ | โกโก | ๋์ |
| Detox | RN ์ฑ | JavaScript | โกโกโก | ์ค๊ฐ |
| Flutter Test | Flutter ์ฑ | Dart | โกโกโก | ๋ฎ์ |
| Maestro | Android+iOS | YAML | โกโก | ๋ฎ์ |
- ๋ค์ดํฐ๋ธ iOS ์ฑ โ XCTest + Quick/Nimble
- React Native ์ฑ โ Detox
- Flutter ์ฑ โ integration_test
- ํฌ๋ก์ค ํ๋ซํผ ํ์ โ Appium
- ์ฝ๋ ์์ด ๋น ๋ฅด๊ฒ โ Maestro
์ต๊ทผ ๋ชจ๋ฐ์ผ ํ
์คํธ ์๋ํ ์ปค๋ฎค๋ํฐ์์ ํซํ ๋๊ตฌ๊ฐ ์์ด. ๋ฐ๋ก Maestro์ผ!
2022๋
์ ๋ฑ์ฅํ ์ด ๋๊ตฌ๋ YAML ํ์ผ๋ก ํ
์คํธ๋ฅผ ์์ฑํ ์ ์์ด์ ์ฝ๋ฉ ์ง์์ด ์์ด๋ ์ฌ์ฉํ ์ ์์ด.
# Maestro ํ
์คํธ ์์ (YAML)
appId: com.example.myapp
---
- launchApp
- tapOn: "๋ก๊ทธ์ธ"
- inputText:
id: "email_input"
text: "test@example.com"
- inputText:
id: "password_input"
text: "password123"
- tapOn: "๋ก๊ทธ์ธ ๋ฒํผ"
- assertVisible: "ํ ํ๋ฉด"
- ์๋ ๋๊ธฐํ ์ฒ๋ฆฌ (ํ์ด๋ฐ ์ด์ ์ต์ํ)
- Android, iOS, React Native, Flutter ๋ชจ๋ ์ง์
- ๋ก์ปฌ ์คํ ๋ฐ Maestro Cloud ์ง์
- ๋น ๋ฅธ ์ค์น์ ์ค์ (5๋ถ ์์ ์ฒซ ํ ์คํธ ์คํ ๊ฐ๋ฅ)
"์์ฒ ๊ฐ์ง ๊ธฐ๊ธฐ์์ ํ
์คํธํด์ผ ํ๋ค๊ณ ? ๊ทธ๋ผ ๊ธฐ๊ธฐ๋ฅผ ๋ค ์ฌ์ผ ํด?"
์๋์ผ! ํด๋ผ์ฐ๋ ํ
์คํ
ํ๋ซํผ์ ์ฐ๋ฉด ๋ผ. ๐
ํด๋ผ์ฐ๋ ํ
์คํ
ํ๋ซํผ์ ์ค์ ๋ฌผ๋ฆฌ์ ๊ธฐ๊ธฐ๋ค์ ํด๋ผ์ฐ๋์ ์ฐ๊ฒฐํด๋๊ณ ,
์๊ฒฉ์ผ๋ก ์ ์ํด์ ํ
์คํธ๋ฅผ ์คํํ ์ ์๊ฒ ํด์ฃผ๋ ์๋น์ค์ผ.
1. Firebase Test Lab (๊ตฌ๊ธ)
๊ตฌ๊ธ์ ํด๋ผ์ฐ๋ ํ
์คํ
์๋น์ค์ผ. ์ค์ ์๋๋ก์ด๋ ๊ธฐ๊ธฐ์ iOS ๊ธฐ๊ธฐ์์ ํ
์คํธ๋ฅผ ์คํํ ์ ์์ด.
Robo ํ
์คํธ๋ผ๋ ๊ธฐ๋ฅ์ด ์๋๋ฐ, ํ
์คํธ ์คํฌ๋ฆฝํธ ์์ด๋ ์ฑ์ ์๋์ผ๋ก ํ์ํ๋ฉด์ ํฌ๋์๋ฅผ ์ฐพ์์ค.
Firebase ํ๋ก์ ํธ์ ์ฐ๋๋์ด ์์ด์ ์๋๋ก์ด๋ ๊ฐ๋ฐ์์๊ฒ ํนํ ํธ๋ฆฌํด.
2. BrowserStack App Automate
3,000๊ฐ ์ด์์ ์ค์ ๊ธฐ๊ธฐ๋ฅผ ์ ๊ณตํ๋ ๊ฐ์ฅ ํฐ ํด๋ผ์ฐ๋ ํ
์คํ
ํ๋ซํผ ์ค ํ๋์ผ.
Appium, Espresso, XCUITest ๋ฑ ๋ค์ํ ํ๋ ์์ํฌ๋ฅผ ์ง์ํด.
์ค์๊ฐ ๊ธฐ๊ธฐ ์ ์๋ ๊ฐ๋ฅํด์ ์๋ ํ
์คํ
์๋ ํ์ฉํ ์ ์์ด.
3. Sauce Labs
์ํฐํ๋ผ์ด์ฆ๊ธ ํด๋ผ์ฐ๋ ํ
์คํ
ํ๋ซํผ์ด์ผ.
Appium ํ
์คํธ๋ฅผ ํด๋ผ์ฐ๋์์ ๋ณ๋ ฌ๋ก ์คํํ ์ ์์ด์ ํ
์คํธ ์๊ฐ์ ํฌ๊ฒ ์ค์ผ ์ ์์ด.
4. AWS Device Farm
์๋ง์กด์ ํด๋ผ์ฐ๋ ํ
์คํ
์๋น์ค์ผ. AWS ์ธํ๋ผ๋ฅผ ์ด๋ฏธ ์ฌ์ฉํ๊ณ ์๋ค๋ฉด ์ฐ๋์ด ํธ๋ฆฌํด.
Appium, Espresso, XCUITest, Calabash ๋ฑ์ ์ง์ํด.
์๋ํ ํ
์คํธ์ ์ง์ง ํ์ CI/CD ํ์ดํ๋ผ์ธ์ ํตํฉํ์ ๋ ๋ฐํ๋ผ.
์ฝ๋๋ฅผ ํธ์ํ ๋๋ง๋ค ์๋์ผ๋ก ํ
์คํธ๊ฐ ์คํ๋๊ณ , ๋ฌธ์ ๊ฐ ์์ผ๋ฉด ์ฆ์ ์๋ฆผ์ ๋ฐ๋ ๊ฑฐ์ผ.
์ด๊ฒ ๋ฐ๋ก "Shift Left Testing" ์ ๋ต์ด์ผ. ๋ฌธ์ ๋ฅผ ์ต๋ํ ์ผ์ฐ ๋ฐ๊ฒฌํ๋ ๊ฑฐ์ง.
# .github/workflows/android-test.yml
name: Android CI
on:
push:
branches: [ main, develop ]
pull_request:
branches: [ main ]
jobs:
test:
runs-on: ubuntu-latest
steps:
- uses: actions/checkout@v3
- name: JDK 17 ์ค์
uses: actions/setup-java@v3
with:
java-version: '17'
distribution: 'temurin'
- name: ๋จ์ ํ
์คํธ ์คํ
run: ./gradlew test
- name: ํ
์คํธ ๊ฒฐ๊ณผ ์
๋ก๋
uses: actions/upload-artifact@v3
if: always()
with:
name: test-results
path: app/build/reports/tests/
# .github/workflows/ios-test.yml
name: iOS CI
on:
push:
branches: [ main ]
jobs:
test:
runs-on: macos-latest
steps:
- uses: actions/checkout@v3
- name: ๋จ์ ํ
์คํธ ์คํ
run: |
xcodebuild test \
-scheme MyApp \
-destination 'platform=iOS Simulator,name=iPhone 15' \
-resultBundlePath TestResults.xcresult
- name: ํ
์คํธ ๊ฒฐ๊ณผ ์
๋ก๋
uses: actions/upload-artifact@v3
if: always()
with:
name: ios-test-results
path: TestResults.xcresult
GitHub Actions์์๋
runs-on: macos-latest๋ฅผ ์ฌ์ฉํด์ผ ํ๋๋ฐ,macOS ๋ฌ๋๋ Linux ๋ฌ๋๋ณด๋ค ๋น์ฉ์ด 10๋ฐฐ ์ ๋ ๋น์ธ. ์์ฐ์ ๊ณ ๋ คํด์ ์ ๋ต์ ์ผ๋ก ์ฌ์ฉํด์ผ ํด.
๊ธฐ๋ฅ์ด ์ ๋์ํด๋ ์ฑ์ด ๋๋ฆฌ๋ฉด ์ฌ์ฉ์๋ ๋ ๋.
Google์ ์ฐ๊ตฌ์ ๋ฐ๋ฅด๋ฉด, ์ฑ ๋ก๋ฉ ์๊ฐ์ด 1์ด ๋์ด๋ ๋๋ง๋ค ์ ํ์จ์ด 20% ๊ฐ์ํ๋ค๊ณ ํด.
๊ทธ๋์ ์ฑ๋ฅ ํ
์คํ
์ ์ ํ์ด ์๋๋ผ ํ์์ผ!
1. Android Profiler (Android Studio ๋ด์ฅ)
CPU, ๋ฉ๋ชจ๋ฆฌ, ๋คํธ์ํฌ, ์๋์ง ์ฌ์ฉ๋์ ์ค์๊ฐ์ผ๋ก ๋ชจ๋ํฐ๋งํ ์ ์์ด.
ํนํ ๋ฉ๋ชจ๋ฆฌ ๋์(Memory Leak)๋ฅผ ์ฐพ๋ ๋ฐ ๋งค์ฐ ์ ์ฉํด.
2. Benchmark ๋ผ์ด๋ธ๋ฌ๋ฆฌ
๊ตฌ๊ธ์ด ์ ๊ณตํ๋ ๊ณต์ ์ฑ๋ฅ ์ธก์ ๋ผ์ด๋ธ๋ฌ๋ฆฌ์ผ.
์ฝ๋ ์คํ ์๊ฐ์ ์ ํํ๊ฒ ์ธก์ ํ๊ณ , CI/CD์์ ์ฑ๋ฅ ํ๊ท(Performance Regression)๋ฅผ ๊ฐ์งํ ์ ์์ด.
// Benchmark ์์
@RunWith(AndroidJUnit4::class)
class MyBenchmark {
@get:Rule
val benchmarkRule = BenchmarkRule()
@Test
fun ๋ฆฌ์คํธ_์คํฌ๋กค_์ฑ๋ฅ_์ธก์ () {
benchmarkRule.measureRepeated {
// ์ธก์ ํ ์ฝ๋
runWithTimingDisabled {
// ์ค์ ์ฝ๋ (์ธก์ ์์ ์ ์ธ)
}
// ์ค์ ์ฑ๋ฅ์ ์ธก์ ํ ์ฝ๋
scrollRecyclerView()
}
}
}
3. Macrobenchmark
์ฑ ์์ ์๊ฐ, ์คํฌ๋กค ์ฑ๋ฅ, ์ ๋๋ฉ์ด์
ํ๋ ์ ๋ ์ดํธ ๋ฑ ์ฌ์ฉ์๊ฐ ์ง์ ๋๋ผ๋ ์ฑ๋ฅ์ ์ธก์ ํด.
Jetpack Compose ์ฑ์์ ํนํ ์ ์ฉํด.
1. Instruments (Xcode ๋ด์ฅ)
iOS ์ฑ๋ฅ ๋ถ์์ ํต์ฌ ๋๊ตฌ์ผ. Time Profiler, Allocations, Leaks ๋ฑ ๋ค์ํ ํ
ํ๋ฆฟ์ ์ ๊ณตํด.
2. XCTest Performance Tests
XCTest์์ ์ง์ ์ฑ๋ฅ ํ
์คํธ๋ฅผ ์์ฑํ ์ ์์ด.
// XCTest ์ฑ๋ฅ ํ
์คํธ ์์ (Swift)
func test_์ด๋ฏธ์ง_๋ก๋ฉ_์ฑ๋ฅ() {
measure {
// ์ฑ๋ฅ์ ์ธก์ ํ ์ฝ๋
let image = loadImage(from: "https://example.com/image.jpg")
XCTAssertNotNil(image)
}
}
๋๊ตฌ๋ง ์๋ฉด ๋ฐ์ชฝ์ง๋ฆฌ์ผ. ์ด๋ค ๋ฐฉ๋ฒ๋ก ์ผ๋ก ํ
์คํธ๋ฅผ ์์ฑํ๋๋๋ ์ค์ํด.
๊ฐ์ฅ ๋ง์ด ์ฐ์ด๋ ๋ ๊ฐ์ง ๋ฐฉ๋ฒ๋ก ์ ์์๋ณด์.
TDD๋ ํ
์คํธ๋ฅผ ๋จผ์ ์์ฑํ๊ณ , ๊ทธ ํ
์คํธ๋ฅผ ํต๊ณผํ๋ ์ฝ๋๋ฅผ ๋์ค์ ์์ฑํ๋ ๋ฐฉ๋ฒ๋ก ์ด์ผ.
Red-Green-Refactor ์ฌ์ดํด๋ก ์งํ๋ผ.
TDD์ ์ฅ์ ์ ์ค๊ณ๊ฐ ์์ฐ์ค๋ฝ๊ฒ ๊ฐ์ ๋๋ค๋ ๊ฑฐ์ผ.
ํ
์คํธํ๊ธฐ ์ด๋ ค์ด ์ฝ๋๋ ์ค๊ณ๊ฐ ๋์ ์ฝ๋์ธ ๊ฒฝ์ฐ๊ฐ ๋ง๊ฑฐ๋ .
BDD๋ TDD๋ฅผ ๋ฐ์ ์ํจ ๋ฐฉ๋ฒ๋ก ์ผ๋ก, ์ฌ์ฉ์ ํ๋ ์ค์ฌ์ผ๋ก ํ
์คํธ๋ฅผ ์์ฑํด.
Given-When-Then ํจํด์ ์ฌ์ฉํด์ ๋น๊ฐ๋ฐ์๋ ์ดํดํ ์ ์๋ ํ
์คํธ๋ฅผ ์์ฑํ ์ ์์ด.
// BDD ์คํ์ผ ํ
์คํธ (Kotlin + Kotest)
describe("๋ก๊ทธ์ธ ํ๋ฉด") {
context("์ฌ๋ฐ๋ฅธ ์๊ฒฉ์ฆ๋ช
์ ์
๋ ฅํ์ ๋") {
given("์ด๋ฉ์ผ: test@example.com, ๋น๋ฐ๋ฒํธ: password123") {
`when`("๋ก๊ทธ์ธ ๋ฒํผ์ ํญํ๋ฉด") {
then("ํ ํ๋ฉด์ผ๋ก ์ด๋ํด์ผ ํ๋ค") {
// ํ
์คํธ ์ฝ๋
val result = loginViewModel.login("test@example.com", "password123")
result shouldBe LoginResult.Success
}
}
}
}
context("์๋ชป๋ ๋น๋ฐ๋ฒํธ๋ฅผ ์
๋ ฅํ์ ๋") {
given("์ด๋ฉ์ผ: test@example.com, ๋น๋ฐ๋ฒํธ: wrongpassword") {
`when`("๋ก๊ทธ์ธ ๋ฒํผ์ ํญํ๋ฉด") {
then("์ค๋ฅ ๋ฉ์์ง๊ฐ ํ์๋์ด์ผ ํ๋ค") {
val result = loginViewModel.login("test@example.com", "wrongpassword")
result shouldBe LoginResult.Error("๋น๋ฐ๋ฒํธ๊ฐ ์ฌ๋ฐ๋ฅด์ง ์์ต๋๋ค")
}
}
}
}
}
- ๊ธฐ์ ์ ์ธ ๋จ์ ํ ์คํธ โ TDD
- ์ฌ์ฉ์ ์๋๋ฆฌ์ค ๊ธฐ๋ฐ ํ ์คํธ, ๋น๊ฐ๋ฐ์์ ํ์ โ BDD
- ์ค์ ๋ก๋ ๋ ๋ฐฉ๋ฒ๋ก ์ ํจ๊ป ์ฌ์ฉํ๋ ๊ฒฝ์ฐ๊ฐ ๋ง์
"ํ
์คํธ๋ฅผ ๋ง์ด ์์ฑํ๋๋ฐ, ์ถฉ๋ถํ ๊ฑด์ง ์ด๋ป๊ฒ ์์?"
์ด๊ฑธ ์ธก์ ํ๋ ๊ฒ ๋ฐ๋ก ํ
์คํธ ์ปค๋ฒ๋ฆฌ์ง(Test Coverage)์ผ.
| ์ปค๋ฒ๋ฆฌ์ง ์ ํ | ์ค๋ช | ๊ถ์ฅ ์์น |
|---|---|---|
| ๋ผ์ธ ์ปค๋ฒ๋ฆฌ์ง | ์คํ๋ ์ฝ๋ ๋ผ์ธ์ ๋น์จ | 80% ์ด์ |
| ๋ธ๋์น ์ปค๋ฒ๋ฆฌ์ง | if/else ๋ถ๊ธฐ๊ฐ ๋ชจ๋ ํ ์คํธ๋ ๋น์จ | 70% ์ด์ |
| ํจ์ ์ปค๋ฒ๋ฆฌ์ง | ํธ์ถ๋ ํจ์์ ๋น์จ | 80% ์ด์ |
| ๋ช ๋ น๋ฌธ ์ปค๋ฒ๋ฆฌ์ง | ์คํ๋ ๋ช ๋ น๋ฌธ์ ๋น์จ | 80% ์ด์ |
์ปค๋ฒ๋ฆฌ์ง ์์น๋ฅผ ๋์ด๊ธฐ ์ํด ์๋ฏธ ์๋ ํ ์คํธ๋ฅผ ์์ฑํ๋ ๊ฑด ์คํ๋ ค ํด๋ก์.
ํ์ง ๋์ ํ ์คํธ 70%๊ฐ ์๋ฏธ ์๋ ํ ์คํธ 100%๋ณด๋ค ํจ์ฌ ๊ฐ์น ์์ด.
Android: JaCoCo
Gradle๊ณผ ํตํฉ๋์ด ์์ด์ ์ค์ ์ด ๊ฐ๋จํด. HTML ๋ฆฌํฌํธ๋ฅผ ์์ฑํด์ค.
// build.gradle (app)
android {
buildTypes {
debug {
testCoverageEnabled true
}
}
}
// ์ปค๋ฒ๋ฆฌ์ง ๋ฆฌํฌํธ ์์ฑ
// ./gradlew createDebugCoverageReport
iOS: Xcode Code Coverage
Xcode์ ๋ด์ฅ๋ ์ปค๋ฒ๋ฆฌ์ง ๋๊ตฌ์ผ. ํ
์คํธ ์คํ ํ Report Navigator์์ ํ์ธํ ์ ์์ด.
ํฌ๋ก์ค ํ๋ซํผ: SonarQube
์ฝ๋ ํ์ง ์ ๋ฐ์ ๋ถ์ํ๋ ๋๊ตฌ์ผ. ์ปค๋ฒ๋ฆฌ์ง๋ฟ๋ง ์๋๋ผ ์ฝ๋ ์ค๋ฉ, ๋ณด์ ์ทจ์ฝ์ ๋ ์ฐพ์์ค.
๋ชจ๋ฐ์ผ ์ฑ ๋ณด์์ ์ ๋ง ์ค์ํ ์ฃผ์ ์ผ.
OWASP(Open Web Application Security Project)๋ ๋ชจ๋ฐ์ผ ์ฑ์ ์ฃผ์ ๋ณด์ ์ทจ์ฝ์ 10๊ฐ์ง๋ฅผ ์ ๋ฆฌํด์ ๋ฐํํ๊ณ ์์ด.
์ด๊ฑธ ๊ธฐ์ค์ผ๋ก ๋ณด์ ํ
์คํ
์ ์งํํ๋ฉด ์ฒด๊ณ์ ์ผ๋ก ํ ์ ์์ด.
M1: ๋ถ์ ์ ํ ์๊ฒฉ์ฆ๋ช
์ฌ์ฉ
ํ๋์ฝ๋ฉ๋ API ํค, ๋น๋ฐ๋ฒํธ, ํ ํฐ ๋ฑ์ ์ฝ๋์ ์ง์ ๋ฃ๋ ๊ฒ.
โ ํ๊ฒฝ ๋ณ์๋ ์์ ํ ์ ์ฅ์(Android Keystore, iOS Keychain)๋ฅผ ์ฌ์ฉํด์ผ ํด.
M2: ๋ถ์ ์ ํ ๊ณต๊ธ๋ง ๋ณด์
์๋ํํฐ ๋ผ์ด๋ธ๋ฌ๋ฆฌ์ ์ทจ์ฝ์ ์ด ์ฑ์ ์ํฅ์ ๋ฏธ์น๋ ๊ฒ.
โ ์ ๊ธฐ์ ์ธ ์์กด์ฑ ์
๋ฐ์ดํธ์ ์ทจ์ฝ์ ์ค์บ์ด ํ์ํด.
M3: ์์ ํ์ง ์์ ์ธ์ฆ/๊ถํ ๋ถ์ฌ
์ทจ์ฝํ ์ธ์ฆ ๋ฉ์ปค๋์ฆ, ์ธ์
๊ด๋ฆฌ ๋ฌธ์ .
โ OAuth 2.0, JWT ํ ํฐ ๊ด๋ฆฌ, ์์ฒด์ธ์ฆ ํ์ฉ.
M4: ๋ถ์ถฉ๋ถํ ์
๋ ฅ/์ถ๋ ฅ ๊ฒ์ฆ
SQL ์ธ์ ์
, XSS ๋ฑ ์
๋ ฅ๊ฐ ๊ฒ์ฆ ๋ถ์ฌ.
โ ๋ชจ๋ ์ฌ์ฉ์ ์
๋ ฅ๊ฐ์ ์๋ฒ์ ํด๋ผ์ด์ธํธ ์์ชฝ์์ ๊ฒ์ฆํด์ผ ํด.
M5: ์์ ํ์ง ์์ ํต์
HTTP ์ฌ์ฉ, ์ธ์ฆ์ ๊ฒ์ฆ ๋ฏธํก, ์ค๊ฐ์ ๊ณต๊ฒฉ(MITM) ์ทจ์ฝ์ .
โ HTTPS ๊ฐ์ ์ฌ์ฉ, Certificate Pinning ์ ์ฉ.
1. MobSF (Mobile Security Framework)
์คํ์์ค ์๋ํ ๋ณด์ ๋ถ์ ๋๊ตฌ์ผ. APK, IPA ํ์ผ์ ์
๋ก๋ํ๋ฉด ์ ์ /๋์ ๋ถ์์ ํด์ค.
2. Frida
๋์ ๊ณ์ธก(Dynamic Instrumentation) ๋๊ตฌ์ผ. ๋ฐํ์์ ์ฑ์ ๋์์ ๋ถ์ํ๊ณ ์์ ํ ์ ์์ด.
๋ณด์ ์ฐ๊ตฌ์๋ค์ด ๋ง์ด ์ฌ์ฉํด.
3. OWASP ZAP
API ๋ณด์ ํ
์คํ
์ ์ ์ฉํ ๋๊ตฌ์ผ. ๋ชจ๋ฐ์ผ ์ฑ์ ๋ฐฑ์๋ API ์ทจ์ฝ์ ์ ์ฐพ๋ ๋ฐ ํ์ฉํ ์ ์์ด.
4. Burp Suite
ํ๋ก์ ๋๊ตฌ๋ก, ๋ชจ๋ฐ์ผ ์ฑ์ ๋คํธ์ํฌ ํธ๋ํฝ์ ๊ฐ๋ก์ฑ์ ๋ถ์ํ ์ ์์ด.
์ ๊ทผ์ฑ(Accessibility)์ ์ฅ์ ๊ฐ ์๋ ์ฌ์ฉ์๋ ์ฑ์ ํธ๋ฆฌํ๊ฒ ์ฌ์ฉํ ์ ์๋๋ก ํ๋ ๊ฑฐ์ผ.
์ด๊ฑด ๋จ์ํ "์ฐฉํ ์ผ"์ด ์๋๋ผ, ๋ฒ์ ์๊ตฌ์ฌํญ์ด๊ธฐ๋ ํด.
๋ฏธ๊ตญ์ ADA(Americans with Disabilities Act), ์ ๋ฝ์ EAA(European Accessibility Act) ๋ฑ์ด ์์ด.
๊ทธ๋ฆฌ๊ณ ์ ๊ทผ์ฑ์ ์ ๊ตฌํํ๋ฉด SEO์ ์ ๋ฐ์ ์ธ UX๋ ๊ฐ์ ๋ผ. ์ผ์์ด์กฐ์ผ!
Android: Accessibility Scanner
๊ตฌ๊ธ์ด ๋ง๋ ์ฑ์ด์ผ. ํ๋ฉด์ ์ค์บํด์ ์ ๊ทผ์ฑ ๋ฌธ์ ๋ฅผ ์ฐพ์์ค.
์ฝํ
์ธ ์ค๋ช
๋๋ฝ, ํฐ์น ์์ญ ํฌ๊ธฐ ๋ถ์กฑ, ์์ ๋๋น ๋ฌธ์ ๋ฑ์ ๊ฐ์งํด.
Android: Espresso Accessibility Checks
Espresso ํ
์คํธ์ ์ ๊ทผ์ฑ ๊ฒ์ฌ๋ฅผ ํตํฉํ ์ ์์ด.
// Espresso ์ ๊ทผ์ฑ ๊ฒ์ฌ ํตํฉ
@Before
fun setUp() {
AccessibilityChecks.enable()
.setRunChecksFromRootView(true)
}
@Test
fun ๋ก๊ทธ์ธ_ํ๋ฉด_์ ๊ทผ์ฑ_๊ฒ์ฌ() {
onView(withId(R.id.login_button))
.perform(click())
// ์ ๊ทผ์ฑ ๋ฌธ์ ๊ฐ ์์ผ๋ฉด ์๋์ผ๋ก ํ
์คํธ ์คํจ
}
iOS: Accessibility Inspector (Xcode ๋ด์ฅ)
์๋ฎฌ๋ ์ดํฐ์์ ์ ๊ทผ์ฑ ์์๋ฅผ ๊ฒ์ฌํ ์ ์์ด.
VoiceOver์ ํจ๊ป ์ฌ์ฉํ๋ฉด ์ค์ ์๊ฐ ์ฅ์ ์ธ์ ๊ฒฝํ์ ํ
์คํธํ ์ ์์ด.
ํฌ๋ก์ค ํ๋ซํผ: axe DevTools Mobile
Deque Systems์์ ๋ง๋ ์ ๊ทผ์ฑ ํ
์คํ
๋๊ตฌ์ผ. Android์ iOS ๋ชจ๋ ์ง์ํด.
์ด๋ก ์ ์ถฉ๋ถํ ๋ฐฐ์ ์ผ๋, ์ด์ ์ค์ ์๊ธฐ๋ฅผ ํด๋ณด์.
ํ์
์์ ์ค์ ๋ก ํจ๊ณผ์ ์ธ QA ์ ๋ต๋ค์ ๊ณต์ ํ ๊ฒ.
๋ชจ๋ ๊ธฐ๋ฅ์ ๋์ผํ๊ฒ ํ ์คํธํ๋ ๊ฑด ๋นํจ์จ์ ์ด์ผ.
๊ฒฐ์ , ๋ก๊ทธ์ธ, ํต์ฌ ๊ธฐ๋ฅ์ฒ๋ผ ๋น์ฆ๋์ค ์ํฉํธ๊ฐ ํฐ ๊ธฐ๋ฅ์ ํ ์คํธ ๋ฆฌ์์ค๋ฅผ ์ง์คํด.
์๋ํ ํ ์คํธ๋ก ์ก์ง ๋ชปํ๋ ๋ฒ๊ทธ๋ค์ด ์์ด.
QA ์์ง๋์ด๊ฐ ์์ ๋กญ๊ฒ ์ฑ์ ํ์ํ๋ฉด์ ์์์น ๋ชปํ ๋ฒ๊ทธ๋ฅผ ์ฐพ๋ ๋ฐฉ์์ด์ผ.
ํนํ UX ๋ฌธ์ ๋ ์ฃ์ง ์ผ์ด์ค๋ฅผ ๋ฐ๊ฒฌํ๋ ๋ฐ ํจ๊ณผ์ ์ด์ผ.
์ ๊ธฐ๋ฅ์ ์ถ๊ฐํ ๋๋ง๋ค ๊ธฐ์กด ๊ธฐ๋ฅ์ด ๋ง๊ฐ์ง์ง ์๋์ง ํ์ธํ๋ ๊ฒ ํ๊ท ํ ์คํธ์ผ.
์ด๊ฑธ ์๋ํํ๋ฉด ๋ฆด๋ฆฌ์ฆ๋ง๋ค ๋ฐ๋ณต๋๋ ์๋ ํ ์คํธ ๋ถ๋ด์ ํฌ๊ฒ ์ค์ผ ์ ์์ด.
์๋ฎฌ๋ ์ดํฐ๋ ๋น ๋ฅด๊ณ ํธ๋ฆฌํ์ง๋ง, ์ค์ ๊ธฐ๊ธฐ์์๋ง ๋ฐ์ํ๋ ๋ฒ๊ทธ๋ค์ด ์์ด.
ํนํ ์นด๋ฉ๋ผ, GPS, ๋ธ๋ฃจํฌ์ค ๊ฐ์ ํ๋์จ์ด ๊ธฐ๋ฅ์ ๋ฐ๋์ ์ค์ ๊ธฐ๊ธฐ์์ ํ ์คํธํด์ผ ํด.
ํ ์คํธ๋ ์ถ์ ์ ์๋ง ํ๋ ๊ฒ ์๋์ผ.
Firebase Crashlytics, Sentry ๊ฐ์ ๋๊ตฌ๋ก ์ค์ ์ฌ์ฉ์ ํ๊ฒฝ์์ ๋ฐ์ํ๋ ๋ฌธ์ ๋ฅผ ์ค์๊ฐ์ผ๋ก ๋ชจ๋ํฐ๋งํด์ผ ํด.
์ข์ ํ ์คํธ ์ผ์ด์ค๋ FIRST ์์น์ ๋ฐ๋ผ์ผ ํด.
| ์์น | ์๋ฏธ | ์ค๋ช |
|---|---|---|
| Fast | ๋น ๋ฆ | ํ ์คํธ๋ ๋น ๋ฅด๊ฒ ์คํ๋์ด์ผ ํด |
| Independent | ๋ ๋ฆฝ์ | ํ ์คํธ ๊ฐ ์์กด์ฑ์ด ์์ด์ผ ํด |
| Repeatable | ๋ฐ๋ณต ๊ฐ๋ฅ | ์ด๋ค ํ๊ฒฝ์์๋ ๊ฐ์ ๊ฒฐ๊ณผ๊ฐ ๋์์ผ ํด |
| Self-validating | ์๊ธฐ ๊ฒ์ฆ | ์ฑ๊ณต/์คํจ๋ฅผ ์๋์ผ๋ก ํ๋จํด์ผ ํด |
| Timely | ์ ์์ฑ | ์ฝ๋ ์์ฑ๊ณผ ํจ๊ป (๋๋ ์ง์ ์) ์์ฑํด์ผ ํด |
๋ชจ๋ฐ์ผ ํ ์คํ ๋ถ์ผ๋ ๋น ๋ฅด๊ฒ ๋ณํ๊ณ ์์ด. ์ต์ ํธ๋ ๋๋ฅผ ์์์ผ ๋ค์ฒ์ง์ง ์์!
AI๊ฐ ํ
์คํ
๋ถ์ผ์๋ ํ๋ช
์ ์ผ์ผํค๊ณ ์์ด.
1. AI ๊ธฐ๋ฐ ํ
์คํธ ์์ฑ
GitHub Copilot, ChatGPT ๊ฐ์ AI ๋๊ตฌ๋ฅผ ํ์ฉํด์ ํ
์คํธ ์ฝ๋๋ฅผ ์๋์ผ๋ก ์์ฑํ๋ ๊ฒ ํธ๋ ๋์ผ.
์ฝ๋๋ฅผ ์
๋ ฅํ๋ฉด AI๊ฐ ํ
์คํธ ์ผ์ด์ค๋ฅผ ์ ์ํด์ค.
2. ์๊ฐ์ AI ํ
์คํ
Applitools Eyes ๊ฐ์ ๋๊ตฌ๋ AI๋ฅผ ์ฌ์ฉํด์ UI์ ์๊ฐ์ ๋ณํ๋ฅผ ๊ฐ์งํด.
ํฝ์
๋จ์ ๋น๊ต๊ฐ ์๋๋ผ ์ฌ๋์ฒ๋ผ "์ด๊ฒ ๋ง์ ๋ณด์ด๋?"๋ฅผ ํ๋จํด์ค.
3. ์๊ฐ ์น์ ํ
์คํธ(Self-Healing Tests)
UI๊ฐ ๋ณ๊ฒฝ๋๋ฉด ๊ธฐ์กด ํ
์คํธ๊ฐ ๊นจ์ง๋ ๊ฒฝ์ฐ๊ฐ ๋ง์.
AI ๊ธฐ๋ฐ ์๊ฐ ์น์ ํ
์คํธ๋ ์์์ ์์น๋ ์์ฑ์ด ๋ฐ๋์ด๋ ์๋์ผ๋ก ์ ์ํด์ค.
Healenium, Testim ๊ฐ์ ๋๊ตฌ๊ฐ ์ด ๊ธฐ๋ฅ์ ์ ๊ณตํด.
1. Shift-Left Testing
๊ฐ๋ฐ ์ด๊ธฐ ๋จ๊ณ๋ถํฐ ํ
์คํ
์ ์์ํ๋ ์ ๋ต์ด์ผ.
๋ฒ๊ทธ๋ฅผ ๋ฆ๊ฒ ๋ฐ๊ฒฌํ ์๋ก ์์ ๋น์ฉ์ด ๊ธฐํ๊ธ์์ ์ผ๋ก ์ฆ๊ฐํ๊ฑฐ๋ .
IBM์ ์ฐ๊ตฌ์ ๋ฐ๋ฅด๋ฉด, ์ค๊ณ ๋จ๊ณ์์ ๋ฐ๊ฒฌํ ๋ฒ๊ทธ ์์ ๋น์ฉ์ ์ถ์ ํ ์์ ๋น์ฉ์ 1/100์ด์ผ.
2. ์นด์ค์ค ์์ง๋์ด๋ง(Chaos Engineering)
์๋์ ์ผ๋ก ์ฅ์ ๋ฅผ ๋ฐ์์์ผ์ ์์คํ
์ ๋ณต์๋ ฅ์ ํ
์คํธํ๋ ๋ฐฉ๋ฒ์ด์ผ.
Netflix์ Chaos Monkey๊ฐ ์ ๋ช
ํ ์์ผ.
๋ชจ๋ฐ์ผ ์ฑ์์๋ ๋คํธ์ํฌ ์ง์ฐ, ๊ธฐ๊ธฐ ๋ฐฐํฐ๋ฆฌ ๋ถ์กฑ, ๋ฉ๋ชจ๋ฆฌ ๋ถ์กฑ ์ํฉ์ ์๋ฎฌ๋ ์ด์
ํด๋ณผ ์ ์์ด.
3. ์ปจํธ๋ํธ ํ
์คํ
(Contract Testing)
๋ง์ดํฌ๋ก์๋น์ค ์ํคํ
์ฒ์์ API ๊ณ์ฝ์ ํ
์คํธํ๋ ๋ฐฉ๋ฒ์ด์ผ.
Pact ํ๋ ์์ํฌ๊ฐ ๋ํ์ ์ด์ผ. ๋ชจ๋ฐ์ผ ์ฑ๊ณผ ๋ฐฑ์๋ API ๊ฐ์ ๊ณ์ฝ์ ์๋์ผ๋ก ๊ฒ์ฆํด์ค.
๋ฐ๋๋ก ์์ ์ ํ ์คํ ์คํฌ์ ์ฌ๋ฅ์ผ๋ก ๋ฑ๋กํด์ ์์ต์ ์ฐฝ์ถํ ์ ์์ด.
์๋ํ ํ ์คํธ ๊ตฌ์ถ, ์ฑ๋ฅ ์ต์ ํ, ๋ณด์ ์ทจ์ฝ์ ๋ถ์ ๋ฑ ๋ค์ํ ์๋น์ค๋ฅผ ์ ๊ณตํ ์ ์๊ฑฐ๋ !
์ด์ ๋ฐฐ์ด ๋ด์ฉ์ ๋ฐํ์ผ๋ก ์ค์ ํ๋ก์ ํธ์ ์ ์ฉํ ์ ์๋ QA ์ ๋ต์ ์ธ์๋ณด์.
"ํ
์คํธ ์๋ํ์ ํฌ์ํ ๊ฐ์น๊ฐ ์์ด?"๋ผ๊ณ ๋ฌป๋๋ค๋ฉด, ์ซ์๋ก ๋ตํด์ค๊ฒ.
ํ
์คํธ ์๋ํ ROI ๊ณ์ฐ ์์
- ์๋ ํ
์คํธ 1ํ ์คํ ๋น์ฉ: QA ์์ง๋์ด 8์๊ฐ ร ์๊ธ = ์ฝ 40๋ง์
- ์๋ํ ํ
์คํธ 1ํ ์คํ ๋น์ฉ: ํด๋ผ์ฐ๋ ๋น์ฉ ์ฝ 5,000์
- ์ 10ํ ๋ฆด๋ฆฌ์ฆ ๊ธฐ์ค ์ ๊ฐ์ก: (40๋ง์ - 5,000์) ร 10 = ์ฝ 395๋ง์/์
์๋ํ ๊ตฌ์ถ ์ด๊ธฐ ๋น์ฉ์ด 300๋ง์์ด๋ผ๋ฉด, 1๊ฐ์ ๋ง์ ROI๊ฐ ๋์.
๋ฌผ๋ก ์ด๊ฑด ๋จ์ํ๋ ๊ณ์ฐ์ด์ง๋ง, ๋ฐฉํฅ์ฑ์ ๋ง์.
๋ง์ง๋ง์ผ๋ก, ํ์
์์ ์์ฃผ ๋ณด์ด๋ ์ค์๋ค์ ์ ๋ฆฌํด์ค๊ฒ.
์ด๊ฑธ ์๋ฉด ๊ฐ์ ์ค์๋ฅผ ๋ฐ๋ณตํ์ง ์์ ์ ์์ด!
ํนํ ์ฑ๋ฅ, ๋ฐฐํฐ๋ฆฌ, ์นด๋ฉ๋ผ, GPS ๊ด๋ จ ํ ์คํธ๋ ๋ฐ๋์ ์ค์ ๊ธฐ๊ธฐ์์ ํด์ผ ํด.
๋คํธ์ํฌ ์ค๋ฅ, ๋น ๋ฐ์ดํฐ, ํน์๋ฌธ์ ์ ๋ ฅ, ๊ถํ ๊ฑฐ๋ถ ๋ฑ ์์ธ ์ํฉ๋ ๋ฐ๋์ ํ ์คํธํด์ผ ํด.
ํ ์คํธ ์ฝ๋๋ฅผ ๋ฐฉ์นํ๋ฉด ์ ์ ๊นจ์ง๋ ํ ์คํธ๊ฐ ์์ด๊ณ , ๊ฒฐ๊ตญ ์๋ฌด๋ ํ ์คํธ๋ฅผ ์ ๋ขฐํ์ง ์๊ฒ ๋ผ.
ํญ์ ํ ์คํธ ์ ์ฉ ๋ฐ์ดํฐ์ ํ๊ฒฝ์ ๋ถ๋ฆฌํด์ ์ฌ์ฉํด์ผ ํด.
๋ง์ง๋ง์ ๋ฐ๊ฒฌ๋ ๋ฒ๊ทธ๋ ์์ ๋น์ฉ์ด ํจ์ฌ ํฌ๊ณ , ์ผ์ ์ ๋ง์น ์ ์์ด.
๊ฐ๋ฐ๊ณผ QA๋ ๋์์ ์งํ๋์ด์ผ ํด.
ํ๋ฆฌ๋์ QA ์์ง๋์ด๋ฅผ ๊ณ ์ฉํด์ ํ ์คํธ ์๋ํ ๊ธฐ๋ฐ์ ๊ตฌ์ถํ๋ ๊ฒ๋ ํจ์จ์ ์ธ ์ ํ์ด ๋ ์ ์์ด.
์ฌ๊ธฐ๊น์ง ๋ชจ๋ฐ์ผ ํ
์คํ
๊ณผ ์๋ํ ํ
์คํธ ๋๊ตฌ์ ๋ํด ๊ฝค ๊น๊ฒ ํ๋ดค์ด.
๋ง์ง๋ง์ผ๋ก ๊ฐ์ฅ ์ค์ํ ๋ง์ ํ๋ ํด์ค๊ฒ.
์๋ฌด๋ฆฌ ์ข์ ๋๊ตฌ๋ฅผ ์จ๋, ํ ์ ์ฒด๊ฐ ํ์ง์ ๋ํ ์ฑ ์๊ฐ์ ๊ฐ์ง ์์ผ๋ฉด ์์ฉ์์ด.
๊ฐ๋ฐ์, QA ์์ง๋์ด, PM, ๋์์ด๋ ๋ชจ๋๊ฐ "์ฐ๋ฆฌ ์ฑ์ ํ์ง์ ์ฐ๋ฆฌ ๋ชจ๋์ ์ฑ ์"์ด๋ผ๋
๋ง์ธ๋๋ฅผ ๊ฐ์ ธ์ผ ์ง์ ํ ํ์ง ๋ฌธํ๊ฐ ๋ง๋ค์ด์ ธ.
์ค๋ ๋ฐฐ์ด ๋ด์ฉ์ ์ ๋ฆฌํด๋ณด์๋ฉด:
1 ๋ชจ๋ฐ์ผ ํ
์คํ
์ ๊ธฐ๊ธฐ ๋ค์์ฑ, OS ๋ถ์ฐ, ๋คํธ์ํฌ ํ๊ฒฝ ๋ฑ ๋ณต์กํ ์์๋ฅผ ๊ณ ๋ คํด์ผ ํด
2 ํ
์คํธ ํผ๋ผ๋ฏธ๋: ๋จ์ ํ
์คํธ(70%) โ ํตํฉ ํ
์คํธ(20%) โ E2E ํ
์คํธ(10%)
3 ํ๋ซํผ๋ณ ์ต์ ๋๊ตฌ: Android(Espresso), iOS(XCUITest), ํฌ๋ก์ค(Appium/Detox)
4 ํด๋ผ์ฐ๋ ํ
์คํ
์ผ๋ก ์์ฒ ๊ฐ ๊ธฐ๊ธฐ์์ ๋ณ๋ ฌ ํ
์คํธ ๊ฐ๋ฅ
5 CI/CD ํ์ดํ๋ผ์ธ์ ํ
์คํธ๋ฅผ ํตํฉํด์ ์๋ํ ์คํ
6 ์ฑ๋ฅ, ๋ณด์, ์ ๊ทผ์ฑ ํ
์คํ
๋ ๋น ๋จ๋ฆฌ๋ฉด ์ ๋ผ
7 AI ๊ธฐ๋ฐ ํ
์คํ
์ด ์๋ก์ด ํธ๋ ๋๋ก ๋ถ์ ์ค
8 ํ์ง์ ๋๊ตฌ๊ฐ ์๋๋ผ ํ ๋ฌธํ์์ ๋์จ๋ค
์, ์ด์ ๋๋ ๋ชจ๋ฐ์ผ ํ
์คํ
์ ๋ฌธ๊ฐ๊ฐ ๋ ์ค๋น๊ฐ ๋์ด! ๐
์ฒ์๋ถํฐ ์๋ฒฝํ๊ฒ ํ๋ ค๊ณ ํ์ง ๋ง๊ณ , ์ค๋ ๋ฐฐ์ด ๊ฒ ์ค ํ๋์ฉ ํ๋ก์ ํธ์ ์ ์ฉํด๋ด.
์์ ๊ฒ๋ถํฐ ์์ํด์ ์ ์ ์์๊ฐ๋ค ๋ณด๋ฉด, ์ด๋์ ํํํ QA ์์คํ
์ด ๋ง๋ค์ด์ ธ ์์ ๊ฑฐ์ผ.
ํ์ดํ
! ๐ช
๊ด๋ จ ํค์๋
๋๊ธ ์์ฑ
์ด ๊ธ์ ๋ํ ์ฌ๋ฌ๋ถ์ ์๊ฐ์ ๋ค๋ ค์ฃผ์ธ์
๋ก๊ทธ์ธ์ด ํ์ํฉ๋๋ค
๋๊ธ์ ์์ฑํ๋ ค๋ฉด ๋จผ์ ๋ก๊ทธ์ธํด์ฃผ์ธ์.
๋๊ธ 0
์ง์์ธ์ ์ฒ - ์ง์ ์ฌ์ฐ๊ถ ๋ณดํธ ๊ณ ์ง
์ง์ ์ฌ์ฐ๊ถ ๋ณดํธ ๊ณ ์ง
- ์ ์๊ถ ๋ฐ ์์ ๊ถ: ๋ณธ ์ปจํ ์ธ ๋ ์ฌ๋ฅ๋ท์ ๋ ์ AI ๊ธฐ์ ๋ก ์์ฑ๋์์ผ๋ฉฐ, ๋ํ๋ฏผ๊ตญ ์ ์๊ถ๋ฒ ๋ฐ ๊ตญ์ ์ ์๊ถ ํ์ฝ์ ์ํด ๋ณดํธ๋ฉ๋๋ค.
- AI ์์ฑ ์ปจํ ์ธ ์ ๋ฒ์ ์ง์: ๋ณธ AI ์์ฑ ์ปจํ ์ธ ๋ ์ฌ๋ฅ๋ท์ ์ง์ ์ฐฝ์๋ฌผ๋ก ์ธ์ ๋๋ฉฐ, ๊ด๋ จ ๋ฒ๊ท์ ๋ฐ๋ผ ์ ์๊ถ ๋ณดํธ๋ฅผ ๋ฐ์ต๋๋ค.
- ์ฌ์ฉ ์ ํ: ์ฌ๋ฅ๋ท์ ๋ช ์์ ์๋ฉด ๋์ ์์ด ๋ณธ ์ปจํ ์ธ ๋ฅผ ๋ณต์ , ์์ , ๋ฐฐํฌ, ๋๋ ์์ ์ ์ผ๋ก ํ์ฉํ๋ ํ์๋ ์๊ฒฉํ ๊ธ์ง๋ฉ๋๋ค.
- ๋ฐ์ดํฐ ์์ง ๊ธ์ง: ๋ณธ ์ปจํ ์ธ ์ ๋ํ ๋ฌด๋จ ์คํฌ๋ํ, ํฌ๋กค๋ง, ๋ฐ ์๋ํ๋ ๋ฐ์ดํฐ ์์ง์ ๋ฒ์ ์ ์ฌ์ ๋์์ด ๋ฉ๋๋ค.
- AI ํ์ต ์ ํ: ์ฌ๋ฅ๋ท์ AI ์์ฑ ์ปจํ ์ธ ๋ฅผ ํ AI ๋ชจ๋ธ ํ์ต์ ๋ฌด๋จ ์ฌ์ฉํ๋ ํ์๋ ๊ธ์ง๋๋ฉฐ, ์ด๋ ์ง์ ์ฌ์ฐ๊ถ ์นจํด๋ก ๊ฐ์ฃผ๋ฉ๋๋ค.
์์ง ๋๊ธ์ด ์์ต๋๋ค.