ລາຍການກວດສອບເພື່ອຫລຸດຜ່ອນຄວາມສ່ຽງ OTP ສໍາລັບວິສາຫະກິດທີ່ໃຊ້ຈົດຫມາຍຊົ່ວຄາວໃນ QA/UAT
ລາຍການກວດສອບລະດັບທຸລະກິດເພື່ອຫລຸດຜ່ອນຄວາມສ່ຽງ OTP ເມື່ອທີມໃຊ້ອີເມວຊົ່ວຄາວລະຫວ່າງ QA ແລະ UAT ເຊິ່ງລວມເຖິງຄໍາອະທິບາຍ, ຮູບແບບຄວາມລົ້ມເຫລວ, ນະໂຍບາຍການຫມູນວຽນ, ປ່ອງຢ້ຽມສົ່ງຄືນ, ວັດແທກ, ການຄວບຄຸມຄວາມເປັນສ່ວນຕົວ ແລະ ການຄຸ້ມຄອງ ເພື່ອໃຫ້ຜະລິດຕະພັນ, QA ແລະ ຄວາມປອດໄພສອດຄ່ອງກັນ.
ເຂົ້າ ເຖິງ ໄວ
TL; DR
1) ກໍານົດຄວາມສ່ຽງ OTP ໃນ QA/UAT
2) Model Common Failure Modes
3) ສະພາບແວດລ້ອມທີ່ແຍກກັນ, ສັນຍານທີ່ແຍກກັນ
4) ເລືອກຍຸດທະວິທີການສົ່ງເຂົ້າທີ່ຖືກຕ້ອງ
5) ຕັ້ງ Resend Windows ທີ່ ທໍາ ງານ
6) ປັບປຸງນະໂຍບາຍການຫມູນວຽນ Domain
7) ວັດແທກທີ່ຖືກຕ້ອງ
8) ສ້າງ QA Playbook ສໍາລັບ Peaks
9) ການຈັດການທີ່ປອດໄພ ແລະ ການຄວບຄຸມຄວາມເປັນສ່ວນຕົວ
10) ການ ປົກຄອງ: ໃຜ ເປັນ ເຈົ້າ ຂອງ ລາຍ ຊື່
ຕາຕະລາງປຽບທຽບ - ການຫມູນວຽນ vs ບໍ່ມີການຫມູນວຽນ (QA/UAT)
ວິທີເຮັດ
ຄຳຖາມທີ່ຖືກຖາມເລື້ອຍໆ
TL; DR
- ຖືວ່າຄວາມໄວ້ວາງໃຈຂອງ OTP ເປັນ SLO ທີ່ວັດແທກໄດ້, ລວມທັງອັດຕາຄວາມສໍາເລັດ ແລະ TTFOM (p50/p90, p95).
- ແຍກ QA / UAT traffic ແລະ domain ຈາກ ການ ຜະລິດ ເພື່ອ ຫລີກ ເວັ້ນຈາກ ການ ທໍາລາຍ ຊື່ ສຽງ ແລະ ການ ວິເຄາະ.
- ມາດຕະຖານປ່ອງຢ້ຽມສົ່ງຄືນແລະການຫມູນວຽນ; ຫມູນ ວຽນ ຫລັງ ຈາກ ໄດ້ ທົດ ລອງ ຄືນ ໃຫມ່ ເທົ່າ ນັ້ນ.
- ເລືອກຍຸດທະວິທີການສົ່ງເຂົ້າຕາມປະເພດການທົດສອບ: ໃຊ້ຄືນໄດ້ສໍາລັບການຖອຍຫລັງ; ຊີວິດສັ້ນໆສໍາລັບການລະເບີດ.
- ວັດແທກຜູ້ສົ່ງ× domain ຂອງເຄື່ອງມືທີ່ມີລະຫັດຄວາມຫຼົມແຫຼວແລະບັງຄັບການທົບທວນການຄວບຄຸມແຕ່ລະສາມເດືອນ.
ລາຍການກວດສອບເພື່ອຫລຸດຜ່ອນຄວາມສ່ຽງ OTP ສໍາລັບວິສາຫະກິດທີ່ໃຊ້ຈົດຫມາຍຊົ່ວຄາວໃນ QA/UAT
ນີ້ ຄື ການ ປ່ຽນ ແປງ: ຄວາມ ໄວ້ ວາງ ໃຈ ຂອງ OTP ໃນ ສະພາບ ແວດ ລ້ອມ ການ ທົດ ສອບ ບໍ່ ພຽງ ແຕ່ ເປັນ "ສິ່ງ ທາງ ໄປສະນີ" ເທົ່າ ນັ້ນ. ມັນ ເປັນ ການ ປະ ຕິ ບັດ ລະ ຫວ່າງ ນິ ໄສ ຂອງ ເວ ລາ, ຊື່ ສຽງ ຂອງ ຜູ້ ສົ່ງ, ການ ເລືອກ ເຂດ ແລະ ວິ ທີ ທີ່ ທີມ ຂອງ ທ່ານ ປະ ພຶດ ພາຍ ໃຕ້ ຄວາມ ກົດ ດັນ. ລາຍ ການ ກວດ ສອບ ນີ້ ປ່ຽນ ຄວາມ ສັບ ສົນ ນັ້ນ ໃຫ້ ເປັນ ຄໍາ ອະ ທິ ບາຍ, ຮາວ ເຫລັກ ແລະ ຫລັກ ຖານ ທີ່ ແບ່ງ ປັນ ກັນ. ສໍາລັບຜູ້ອ່ານທີ່ຫາກໍຮູ້ຈັກແນວຄິດຂອງຫີບເຂົ້າຊົ່ວຄາວ, ທ່ານສາມາດອ່ານຂໍ້ມູນສໍາຄັນຂອງ Temp Mail ກ່ອນເພື່ອຄຸ້ນເຄີຍກັບຄໍາສັບແລະພຶດຕິກໍາພື້ນຖານ.
1) ກໍານົດຄວາມສ່ຽງ OTP ໃນ QA/UAT

ຕັ້ງຄໍາສັບທີ່ແບ່ງປັນກັນເພື່ອ QA, ຄວາມປອດໄພ ແລະ ຜະລິດຕະພັນເວົ້າພາສາດຽວກັນກ່ຽວກັບຄວາມເຊື່ອຖື OTP.
"ອັດຕາຄວາມສໍາເລັດ OTP" ຫມາຍຄວາມວ່າແນວໃດ
ອັດຕາຄວາມສໍາເລັດ OTP ແມ່ນອັດຕາສ່ວນຮ້ອຍຂອງຄໍາຮ້ອງຂໍ OTP ທີ່ເຮັດໃຫ້ໄດ້ຮັບແລະໃຊ້ລະຫັດທີ່ຖືກຕ້ອງພາຍໃນປ່ອງຢ້ຽມນະໂຍບາຍຂອງທ່ານ (ຕົວຢ່າງ: ສິບນາທີສໍາລັບຂະບວນການທົດສອບ). ຕິດຕາມໂດຍຜູ້ສົ່ງ (ແອັບ/ເວັບໄຊທີ່ອອກໂປຣແກຣມ) ແລະ ໂດຍກຸ່ມໂດເມນທີ່ຮັບ. ຍົກເວັ້ນກໍລະນີການປະຖິ້ມຜູ້ໃຊ້ຕ່າງຫາກເພື່ອປ້ອງກັນການວິເຄາະອຸບັດຕິເຫດບໍ່ໃຫ້ຫລຸດລົງ.
TTFOM p50/p90 ສໍາລັບທີມ
ໃຊ້ Time-to-First-OTP Message (TTFOM) - ວິນາທີ ຈາກ "Send code" ຈົນ ເຖິງ inbox ເທື່ອ ທໍາ ອິດ. ຕາຕະລາງ p50 ແລະ p90 (ແລະ p95 ສໍາລັບການທົດສອບຄວາມເຄັ່ງຕຶງ). ການແຈກຢາຍ ເຫລົ່ານັ້ນ ເປີດ ເຜີຍ ການ ແຖວ, ການ ຈໍາກັດ ແລະ ການ ປ່ຽນ ແປງ ສີ ຂີ້ ເທົ່າ, ໂດຍ ບໍ່ ຕ້ອງ ເພິ່ງ ອາ ໄສ ເລື່ອງ ເລົ່າ.
False Negatives vs True Failures
"false negative" ເກີດຂຶ້ນເມື່ອໄດ້ຮັບລະຫັດ ແຕ່ການຫຼັ່ງໄຫຼຂອງຜູ້ທົດສອບປະຕິເສດໂປຣແກຣມ ເຊິ່ງຫຼາຍຄັ້ງແມ່ນຍ້ອນ ສະຖານະຂອງແອັບ , ການປ່ຽນແທັບ. ຫຼື ກໍານົດເວລາທີ່ຫມົດອາຍຸ . "ຄວາມ ລົ້ມ ເຫ ລວ ທີ່ ແທ້ ຈິງ" ບໍ່ ໄດ້ ມາ ເຖິງ ໃນ ປ່ອງຢ້ຽມ. ແຍກມັນອອກໃນການຈັດແບ່ງແຍກຂອງເຈົ້າ; ພຽງ ແຕ່ ຄວາມ ລົ້ມ ເຫ ລວ ທີ່ ແທ້ ຈິງ ເທົ່າ ນັ້ນ ທີ່ ເປັນ ເຫດ ຜົນ ສໍາ ລັບ ການ ຫມູນ ວຽນ.
ເມື່ອ ສະ ແດງ ຄວາມ ບິດ ເບືອນ ຄວາມ ສາ ມາດ ຂອງ ການ ສົ່ງ ລໍາ ລຽງ
ຈຸດ ສຸດ ທ້າຍ ແລະ ແບບ ແຜນ ການ ເດີນທາງ ທີ່ ປະສົມ ເຂົ້າກັນ ມັກ ຈະ ກໍ່ ໃຫ້ ເກີດ ການ ປ່ຽນ ແປງ ສີ ຂີ້ ເທົ່າ ຫລື ການ ຫລຸດ ລໍາດັບ ຄວາມ ສໍາຄັນ. ຖ້າ ຫາກ ພື້ນຖານ ຂອງ ທ່ານ ຮູ້ສຶກ ບໍ່ ດີ ກວ່າ ການ ຜະລິດ, ນັ້ນ ກໍ ເປັນ ສິ່ງ ທີ່ ຄາດ ຫວັງ: ການ ເດີນທາງ ທີ່ ບໍ່ ເປັນ ມະນຸດ ຈະ ແບ່ງປັນ ຢ່າງ ແຕກ ຕ່າງ. ການ ຊີ້ ນໍາ ສັ້ນໆ ກ່ຽວ ກັບ ພຶດ ຕິ ກໍາ ສະ ໄຫມ ໃຫມ່ ຈະ ເປັນ ປະ ໂຫຍດ; ຂໍໃຫ້ເບິ່ງພາບລວມຂອງ Temp Mail in 2025 ທີ່ສັ້ນໆສໍາລັບຄໍາອະທິບາຍວ່າແບບແຜນຂອງຫີບເຂົ້າທີ່ໃຊ້ແລ້ວມີຜົນກະທົບແນວໃດຕໍ່ການສົ່ງໃນລະຫວ່າງການທົດສອບ.
2) Model Common Failure Modes

ວາງ ແຜນ ທີ່ ມີ ຜົນ ກະທົບ ຫລາຍ ທີ່ ສຸດ ເພື່ອ ວ່າ ທ່ານ ຈະ ສາມາດ ປ້ອງ ກັນ ມັນ ໄດ້ ດ້ວຍ ນະ ໂຍບາຍ ແລະ ເຄື່ອງມື.
Greylisting ແລະ ຊື່ສຽງຂອງຜູ້ສົ່ງ
Greylisting ຂໍໃຫ້ຜູ້ສົ່ງລອງອີກໃນພາຍຫຼັງ; ຄວາມ ພະຍາຍາມ ເທື່ອ ທໍາ ອິດ ອາດ ຖືກ ຊັກ ຊ້າ. ກຸ່ມຜູ້ສົ່ງໃຫມ່ຫຼື "ເຢັນ" ກໍໄດ້ຮັບຄວາມທຸກທໍລະມານຈົນກວ່າຊື່ສຽງຂອງເຂົາເຈົ້າຈະອົບອຸ່ນຂຶ້ນ. ຄາດ ຫວັງ ວ່າ p90 ຈະ ເພີ່ມ ທະວີ ຂຶ້ນ ໃນ ຊົ່ວ ໂມງ ທໍາ ອິດ ຂອງ ການ ຮັບ ໃຊ້ ແຈ້ງ ບອກ ຂອງ ຕຶກ ໃຫມ່.
ISP Spam Filters ແລະ Cold Pools
ຜູ້ໃຫ້ບໍລິການບາງຄົນໃຊ້ການກວດສອບຢ່າງຫນັກແຫນ້ນຕໍ່ IP ຫຼື domain ທີ່ຫນາວເຢັນ. QA ແລ່ນ ທີ່ ລະ ເບີດ OTP ຈາກ ສະ ນ້ໍາ ໃຫມ່ ທີ່ ຄ້າຍ ຄື ກັນ ກັບ ໂຄງ ການ ແລະ ສາ ມາດ ຊັກ ຊ້າ ຂ່າວ ສານ ທີ່ ບໍ່ ສໍາ ຄັນ. ລໍາດັບການອົບອຸ່ນ (ສຽງຕໍ່າ, ສຽງປົກກະຕິ) ຫລຸດຜ່ອນສິ່ງນີ້.
ການຈໍາກັດອັດຕາການເງິນ ແລະ ຄວາມອັດສະຈັນສູງສຸດ
ຄໍາຮ້ອງຂໍສົ່ງຄືນທີ່ເພີ່ມຂຶ້ນສາມາດຈໍາກັດອັດຕາການເດີນທາງໄດ້. ພາຍໃຕ້ພາລະຫນັກ (ຕົວຢ່າງ: ການຂາຍ, ການເປີດເກມ), ແຖວຜູ້ສົ່ງຈະຍາວນານ, ເຮັດໃຫ້ TTFOM p90 ກວ້າງຂວາງ. ລາຍ ການ ຂອງ ທ່ານ ຄວນ ກໍານົດ ປ່ອງຢ້ຽມ ທີ່ ສົ່ງ ຄືນ ໃຫມ່ ແລະ ພະຍາຍາມ ຈໍາກັດ ຄືນ ໃຫມ່ ເພື່ອ ຫລີກ ເວັ້ນຈາກ ການ ຊ້າ ລົງ ທີ່ ເຮັດ ໃຫ້ ຕົນ ເອງ ຊ້າ ລົງ.
ພຶດຕິກໍາຂອງຜູ້ໃຊ້ທີ່ທໍາລາຍການຫລັ່ງໄຫລ
ການ ປ່ຽນ ແທັບ, ການ ເຮັດ ໃຫ້ ອັບພລິເຄຊັນ ໃນ ມື ຖື ແລະ ການ ສໍາເນົາ ຊື່ ຫລິ້ນ ທີ່ ບໍ່ ຖືກຕ້ອງ ສາມາດ ເຮັດ ໃຫ້ ເກີດ ການ ປະຕິ ເສດ ຫລື ການ ສິ້ນ ສຸດ ລົງ, ເຖິງ ແມ່ນ ວ່າ ຈະ ສົ່ງ ຂ່າວສານ ກໍ ຕາມ. ແປ້ງ "stay on page, wait, resend once" copy into UI micro-text for tests.
3) ສະພາບແວດລ້ອມທີ່ແຍກກັນ, ສັນຍານທີ່ແຍກກັນ

ແຍກ QA / UAT ຈາກ ການ ຜະລິດ ເພື່ອ ຫລີກ ເວັ້ນຈາກ ການ ທໍາລາຍ ຊື່ ສຽງ ແລະ ການ ວິເຄາະ ຂອງ ຜູ້ ສົ່ງ.
ຂອບເຂດການສະແດງ vs ການຜະລິດ
ຮັກສາເຂດຜູ້ສົ່ງທີ່ແຕກຕ່າງກັນແລະເອກະລັກການຕອບສະຫນອງເພື່ອຈຸດປະສົງໃນການຈັດລະບຽບ. ຖ້າ OTP ທົດ ສອບ ເຂົ້າ ໄປ ໃນ ກຸ່ມ ຜະລິດຕະພັນ, ທ່ານ ຈະ ຮຽນ ຮູ້ ບົດຮຽນ ທີ່ ບໍ່ ຖືກຕ້ອງ ແລະ ອາດ ເຮັດ ໃຫ້ ຊື່ ສຽງ ເສື່ອມ ໂຊມ ລົງ ໃນ ເວລາ ທີ່ ການ ຊຸກຍູ້ ຜະລິດຕະພັນ ຕ້ອງການ.
ບັນຊີທົດສອບ ແລະ ຈໍານວນເງິນ
ການຈັດຕຽມຕັ້ງຊື່ບັນຊີທົດສອບແລະກໍານົດຈໍານວນໃຫ້ເຂົາເຈົ້າ. ເອກະລັກ ການ ທົດ ສອບ ທີ່ ມີ ລະບຽບ ວິໄນ ຈໍານວນ ຫນ້ອຍ ຫນຶ່ງ ຈະ ເອົາ ຊະນະ ການ ທົດ ສອບ ພິເສດ ຫລາຍ ຮ້ອຍ ຢ່າງ ທີ່ ເຮັດ ໃຫ້ ການ ທົດ ສອບ ເລື້ອຍໆ.
ປ່ອງຢ້ຽມການຈໍາຫນ່າຍສັງຄົມ
ຂັບ ໄລ່ OTP ໃນ ປ່ອງຢ້ຽມ ທີ່ ບໍ່ ສູງ ສຸດ. ໃຊ້ ການ ລະ ເບີດ ສັ້ນໆ ເພື່ອ ສະ ແດງ ຄວາມ ຊັກ ຊ້າ, ບໍ່ ແມ່ນ ນ້ໍາ ຖ້ວມ ທີ່ ບໍ່ ມີ ວັນ ສິ້ນ ສຸດ ທີ່ ຄ້າຍ ຄື ກັນ ກັບ ການ ຂົ່ມ ເຫັງ.
ການກວດສອບຮອຍຕີນຂອງຈົດຫມາຍ
ບັນຊີ ຂອງ domain, IP ແລະ ຜູ້ ຈັດ ຫາ ທີ່ ການ ທົດ ສອບ ຂອງ ທ່ານ ສໍາ ພັດ. ຢືນຢັນວ່າ SPF/DKIM/DMARC ສອດຄ່ອງກັບການຈັດຕຽມເອກະລັກເພື່ອຫຼີກລ່ຽງການລວມຄວາມລົ້ມເຫລວຂອງການຢືນຢັນກັບບັນຫາການສົ່ງ.
4) ເລືອກຍຸດທະວິທີການສົ່ງເຂົ້າທີ່ຖືກຕ້ອງ

ເຈົ້າສາມາດຕັດສິນໃຈໄດ້ບໍວ່າຈະໃຊ້ທີ່ຢູ່ຄືນໃຫມ່ vs inbox ທີ່ມີຊີວິດສັ້ນໆເພື່ອເຮັດໃຫ້ສັນຍານທົດສອບຫມັ້ນຄົງ?
ທີ່ຢູ່ທີ່ໃຊ້ຄືນໄດ້ສໍາລັບການຖອຍຫລັງ
ສໍາລັບການທົດສອບແບບຍາວ (regression suites, password reset loops), ທີ່ຢູ່ທີ່ໃຊ້ຄືນໄດ້ຈະຮັກສາຄວາມຕໍ່ເນື່ອງແລະຄວາມຫມັ້ນຄົງ. ການເປີດຄືນໂດຍອາໄສ token ຈະຫລຸດຜ່ອນສຽງດັງໃນລະຫວ່າງມື້ແລະອຸປະກອນ, ເຮັດໃຫ້ມັນເຫມາະສົມສໍາລັບການປຽບທຽບຜົນທີ່ຄ້າຍຄືກັນໃນຫຼາຍໆກໍ່ສ້າງ. ກະລຸນາເບິ່ງລາຍລະອຽດການດໍາເນີນງານໃນ 'Reuse Temp Mail Address' ສໍາລັບຄໍາແນະນໍາກ່ຽວກັບວິທີເປີດຫີບຄືນໃຫມ່ຢ່າງປອດໄພ.
ຊີວິດສັ້ນໆສໍາລັບການທົດສອບລະເບີດ
ສໍາລັບ ການ ເພີ່ມ ທະວີ ຂຶ້ນ ເທື່ອ ດຽວ ແລະ QA ທີ່ ຄົ້ນຄວ້າ, ຫີບ ເຂົ້າ ໃນ ໄລຍະ ສັ້ນໆ ຈະ ຫລຸດຜ່ອນ ຄວາມ ເປິະ ເປື້ອນ ແລະ ຫລຸດຜ່ອນ ຄວາມ ເປິະ ເປື້ອນ ຂອງ ລາຍການ. ເຂົາເຈົ້າຍັງຊຸກຍູ້ໃຫ້ມີການຕັ້ງຄືນໃຫມ່ຢ່າງສະອາດລະຫວ່າງສະຖານະການ. ຖ້າການທົດສອບຈໍາເປັນຕ້ອງມີ OTP ດຽວ, ແບບຢ່າງສັ້ນໆເຊັ່ນ 10 Minute Mail ກໍເຫມາະສົມ.
ລະບຽບວິໄນການຟື້ນຟູໂດຍອີງໃສ່ Token
ຖ້າຫີບເຂົ້າທົດສອບທີ່ໃຊ້ຄືນໄດ້ສໍາຄັນ, ໃຫ້ປະຕິບັດກັບເຄື່ອງຫມາຍຄືກັບຂໍ້ມູນ. ທ່ານສາມາດເກັບໄວ້ໃນຜູ້ຈັດການລະຫັດຜ່ານພາຍໃຕ້ລາຍຊື່ຂອງຊຸດທົດສອບທີ່ມີການເຂົ້າເຖິງຕາມບົດບາດ.
ຫຼີກລ່ຽງການຂັດແຍ່ງກັບທີ່ຢູ່.
Alias randomization, ASCII ພື້ນຖານ ແລະ ການກວດສອບຄວາມບໍ່ຄືກັນຢ່າງວ່ອງໄວ ປ້ອງກັນການຂັດແຍ່ງກັບທີ່ຢູ່ທົດສອບເກົ່າ. ມາດຕະຖານວິທີທີ່ທ່ານຕັ້ງຊື່ຫຼືເກັບຊື່ຫລິ້ນໃນແຕ່ລະຊຸດ.
5) ຕັ້ງ Resend Windows ທີ່ ທໍາ ງານ

ຫລຸດຜ່ອນ "ການສົ່ງຄືນຄວາມໂມໂຫ" ແລະ ການຄວບຄຸມທີ່ບໍ່ຖືກຕ້ອງໂດຍການກໍານົດພຶດຕິກໍາຂອງເວລາ.
ລໍຖ້າຫນ້ອຍທີ່ສຸດກ່ອນຈະສົ່ງຄືນ
ຫຼັງຈາກຄໍາຮ້ອງຂໍທໍາອິດ ໃຫ້ລໍຖ້າ 60-90 ວິນາທີກ່ອນທີ່ຈະລອງເຮັດຄືນໃຫມ່. ສິ່ງ ນີ້ ຈະ ຫລີກ ເວັ້ນຈາກ ການ ຜ່ານ ຜ່າ ເທື່ອ ທໍາ ອິດ ຂອງ greylisting ແລະ ຮັກສາ ແຖວ ຂອງ ຜູ້ ສົ່ງ ໃຫ້ ສະອາດ.
ການລອງຄືນທີ່ມີໂຄງສ້າງຄັ້ງດຽວ
ອະນຸຍາດໃຫ້ລອງອີກເທື່ອຫນຶ່ງຢ່າງເປັນທາງການໃນສະບັບທົດສອບ, ແລ້ວຢຸດ. ຖ້າ ຫາກ p90 ເບິ່ງ ຄື ວ່າ ຍາວ ຢຽດ ໃນ ມື້ ໃດ ມື້ ຫນຶ່ງ, ໃຫ້ ປ່ຽນ ຄວາມ ຄາດ ຫວັງ ແທນ ທີ່ ຈະ ສົ່ງ ຂໍ້ ມູນ ຄືນ ໃຫມ່ ທີ່ ເຮັດ ໃຫ້ ຜົນ ສະທ້ອນ ຂອງ ທຸກ ຄົນ ຫລຸດ ຫນ້ອຍ ລົງ.
ການຈັດການກັບການປ່ຽນແປງແທັບແອັບ
ລະຫັດມັກຈະໃຊ້ໄດ້ເມື່ອຜູ້ໃຊ້ເຂົ້າໄປໃນແອັບຫຼືອອກໄປ. ໃນ QA scripts, ໃຫ້ ຕື່ມ "ຢູ່ ໃນ ຈໍ" ເປັນ ຂັ້ນ ຕອນ ທີ່ ແຈ່ມ ແຈ້ງ; ຈັບພຶດຕິກໍາຂອງລະບົບ/ພູມຫຼັງໃນບັນທຶກ.
ການຈັບ Timer Telemetry
ບັນທຶກເວລາທີ່ແນ່ນອນ: ຄໍາຮ້ອງຂໍ, ສົ່ງຄືນ, ການເຂົ້າເຖິງ, ການເຂົ້າເຖິງລະຫັດ, ສະຖານະການຍອມຮັບ/ປະຕິເສດ. Tag events by sender, ແລະ Domainorensics ສາມາດເຮັດໄດ້ໃນພາຍຫຼັງ.
6) ປັບປຸງນະໂຍບາຍການຫມູນວຽນ Domain

ຫມູນວຽນຢ່າງສະຫລາດເພື່ອຫຼີກລ່ຽງ greylisting ໂດຍບໍ່ເຮັດໃຫ້ການສັງເກດການທົດສອບແຕກແຍກ.
ຈໍານວນຫມູນວຽນຕໍ່ຜູ້ສົ່ງ
ການ ຫມູນ ວຽນ ອັດ ຕະ ໂນ ມັດ ບໍ່ ຄວນ ເກີດ ຂຶ້ນ ໃນ ເທື່ອ ທໍາ ອິດ. ກໍານົດຂອບເຂດຕາມຜູ້ສົ່ງ: ຍົກຕົວຢ່າງ, ຫມູນວຽນພຽງແຕ່ຫຼັງຈາກສອງປ່ອງຢ້ຽມລົ້ມເຫລວສໍາລັບຄູ່ຜູ້ສົ່ງ×ໂດເມນດຽວກັນ—ຈໍາກັດພາກທີ່ຫມູນວຽນ ≤2 ເພື່ອປົກປ້ອງຊື່ສຽງ.
ສຸຂະອະນາໄມສະນໍ້າ ແລະ TTLs
ຄວບຄຸມກຸ່ມໂດເມນທີ່ມີການປະສົມຂອງໂດເມນເກົ່າແລະໃຫມ່. ພັກຜ່ອນ domain ທີ່ "ເມື່ອຍ" ເມື່ອ p90 ລອຍ ໄປ ຫລື ຄວາມ ສໍາ ເລັດ ຜົນ ຫລຸດ ລົງ; ຍອມຮັບຄືນຫຼັງຈາກຫາຍດີ. ໃຫ້ສອດຄ່ອງ TTLs ກັບຈັງຫວະການທົດສອບເພື່ອໃຫ້ເຫັນໃນຫີບເຂົ້າສອດຄ່ອງກັບປ່ອງຢ້ຽມການທົບທວນຂອງທ່ານ.
Sticky Routing ສໍາລັບ A / B
ເມື່ອສົມທຽບການສ້າງ, ໃຫ້ຮັກສາເສັ້ນທາງທີ່ຫມັ້ນຄົງ: ຜູ້ສົ່ງແບບດຽວກັນຈະສົ່ງໄປຫາຄອບຄົວ domain ດຽວກັນໃນທຸກຮູບແບບ. ສິ່ງນີ້ປ້ອງກັນການສົກກະປົກຂອງວັດແທກ.
ການວັດແທກປະສິດທິພາບການຫມູນວຽນ
ການ ຫມູນ ວຽນ ບໍ່ ໄດ້ ເປັນ ສັນ ຍານ. ສົມທຽບການປ່ຽນແປງທີ່ມີແລະບໍ່ມີການຫມູນວຽນພາຍໃຕ້ປ່ອງຢ້ຽມການສົ່ງຄືນແບບດຽວກັນ. ສໍາລັບເຫດຜົນທີ່ເລິກເຊິ່ງ ແລະ ຂໍ້ປ້ອງກັນ, ໃຫ້ເບິ່ງ Domain Rotation for OTP ໃນຄໍາອະທິບາຍນີ້: Domain Rotation for OTP.
7) ວັດແທກທີ່ຖືກຕ້ອງ

ເຮັດໃຫ້ຄວາມສໍາເລັດ OTP ສາມາດວັດແທກໄດ້ໂດຍການວິເຄາະການແຈກຢາຍຄວາມຊັກຊ້າແລະກໍານົດລາຍຊື່ສາເຫດ.
ຄວາມ ສໍາ ເລັດ ຜົນ ຂອງ OTP ໂດຍ ຜູ້ ສົ່ງ × Domain top-line SLO ຄວນຖືກແຍກໂດຍຜູ້ສົ່ງ × Domain matrix ເຊິ່ງເປີດເຜີຍວ່າບັນຫາແມ່ນຢູ່ກັບເວັບໄຊ / app ຫຼື Domain ທີ່ໃຊ້.
TTFOM p50/p90, p95
ຄວາມ ຊັກ ຊ້າ ກາງ ແລະ ຫາງ ເລົ່າ ເລື່ອງ ທີ່ ແຕກ ຕ່າງ ກັນ. p50 ບົ່ງບອກເຖິງສຸຂະພາບປະຈໍາວັນ; p90 / p95 ເປີດ ເຜີຍ ຄວາມ ກົດ ດັນ, ການ ຈໍາກັດ ແລະ ການ ລໍຖ້າ.
ສົ່ງ ລະ ບຽບ ວິ ໄນ %
ຕິດຕາມສ່ວນແບ່ງຂອງພາກຕ່າງໆທີ່ປະຕິບັດຕາມແຜນການສົ່ງຄືນຢ່າງເປັນທາງການ. ຖ້າ ບໍ່ ພໍ ໃຈ ໄວ ເກີນ ໄປ, ໃຫ້ ຫລຸດ ການ ທົດ ລອງ ເຫລົ່ານັ້ນ ຈາກ ການ ສະຫລຸບ ທີ່ ສາມາດ ສົ່ງ ໄດ້.
ລະຫັດການແບ່ງປັນຄວາມລົ້ມເຫລວ
ນໍາໃຊ້ລະຫັດເຊັ່ນ GL (greylisting), RT (rate-limit), BL (blocked Domain (user interaction/tab switch) ແລະ OT (other). ຮຽກຮ້ອງໃຫ້ມີລະຫັດໃນບັນທຶກເຫດການ.
8) ສ້າງ QA Playbook ສໍາລັບ Peaks

ຮັບມືກັບການເພີ່ມທະວີຂຶ້ນໃນການເປີດເກມ ຫຼື fintech cutover ໂດຍບໍ່ຕ້ອງສູນເສຍໂປຣແກຣມ.
ການ ອົບ ອຸ່ນ ກ່ອນ ການ ແຂ່ງຂັນ
ໃຫ້ສົ່ງຂໍ້ມູນ OTP ຈາກຜູ້ສົ່ງທີ່ຮູ້ຈັກກັນ 24-72 ຊົ່ວໂມງກ່ອນການສົ່ງຊື່ສຽງທີ່ອົບອຸ່ນ. ວັດ ແທກ ແນວ ໂນ້ມ p90 ຕະ ຫລອດ ການ ອົບ ອຸ່ນ.
Backoff Profiles by Risk
ຕິດ ກັບ curve backoff ໃສ່ ກັບ ປະເພດ ອັນຕະລາຍ. ສໍາ ລັບ ເວ ບ ໄຊ້ ທໍາ ມະ ດາ, ໃຫ້ ລອງ ອີກ ສອງ ເທື່ອ ໃນ ສອງ ສາມ ນາ ທີ. ສໍາລັບ fintech ທີ່ ມີ ຄວາມ ສ່ຽງ ສູງ, ປ່ອງຢ້ຽມ ທີ່ ຍາວ ນານ ແລະ ການ ທົດ ລອງ ຫນ້ອຍ ລົງ ຈະ ເຮັດ ໃຫ້ ມີ ການ ຍົກ ທຸງ ຫນ້ອຍ ລົງ.
Canary Rotations ແລະ Alerts
ໃນລະຫວ່າງເຫດການ, ປ່ອຍ ໃຫ້ 5-10% ຂອງ OTP ຜ່ານຊຸດຍ່ອຍຂອງ canary domain. ຖ້າ ຫາກ canaries ສະ ແດງ ໃຫ້ ເຫັນ ວ່າ p90 ສູງ ຂຶ້ນ ຫລື ລົ້ມ ເຫລວ, ໃຫ້ ຫມູນ ວຽນ ສະ ນ້ໍາ ຕົ້ນ ໄວ.
Pager ແລະ Rollback Triggers
ກໍານົດຕົວເລກທີ່ກະຕຸ້ນ ຕົວຢ່າງ: OTP Success ຫລຸດລົງຕ່ໍາກວ່າ 92% ເປັນເວລາ 10 ນາທີ ຫຼື TTFOM p90 ເກີນກວ່າ 180 ວິນາທີ ເພື່ອສົ່ງຫນ້າພະນັກງານທີ່ເອີ້ນ, ຂະຫຍາຍປ່ອງຢ້ຽມ ຫຼືຕັດໄປຫາສະນໍ້າທີ່ພັກຜ່ອນ.
9) ການຈັດການທີ່ປອດໄພ ແລະ ການຄວບຄຸມຄວາມເປັນສ່ວນຕົວ

ຮັກສາຄວາມເປັນສ່ວນຕົວຂອງຜູ້ໃຊ້ໃນຂະນະທີ່ຮັບປະກັນຄວາມເຊື່ອຖືໃນການທົດສອບໃນອຸດສະຫະກໍາທີ່ຄວບຄຸມ.
ຮັບແຕ່ໄປສະນີທົດສອບ
ໃຊ້ ອີ ເມວ ຊົ່ວຄາວ ທີ່ ໄດ້ ຮັບ ເທົ່າ ນັ້ນ ເພື່ອ ຢັບຢັ້ງ ການ ຂົ່ມ ເຫັງ ແລະ ຈໍາກັດ ການ ສ່ຽງ ອອກ ໄປ. ຖືວ່າຂໍ້ມູນທີ່ຕິດຢູ່ນອກຂອບເຂດສໍາລັບຫີບເຂົ້າ QA/UAT.
ປ່ອງຢ້ຽມ 24 ຊົ່ວ ໂມງ
ຂ່າວສານ ທົດ ສອບ ຄວນ ເຫັນ ໄດ້ ~ 24 ຊົ່ວ ໂມງ ນັບ ແຕ່ ການ ມາ ເຖິງ, ແລ້ວ ມ້ຽນ ມັດ ໂດຍ ອັດຕະ ໂນ ມັດ. ປ່ອງຢ້ຽມ ນັ້ນ ຍາວ ພໍ ສໍາລັບ ການ ທົບ ທວນ ແລະ ສັ້ນໆ ສໍາລັບ ຄວາມ ເປັນ ສ່ວນ ຕົວ. ສໍາ ລັບ ນະ ໂຍ ບາຍ ແລະ ຄໍາ ແນະ ນໍາ ການ ໃຊ້ ເວ ລາ ດົນ ນານ, Temp Mail Guide ຈະ ຮວບ ຮວມ ຂໍ້ ມູນ ພື້ນ ຖານ ສໍາ ລັບ ທີ ມ.
ການພິຈາລະນາກ່ຽວກັບ GDPR/CCPA
ທ່ານສາມາດໃຊ້ຂໍ້ມູນສ່ວນຕົວໃນອີເມວທົດສອບ; ຫຼີກລ່ຽງການຝັງ PII ໃນເນື້ອໃນຂອງຂ່າວສານ. ການເກັບຮັກສາສັ້ນໆ, HTML ທີ່ສະອາດ ແລະ ການເປັນຕົວແທນຂອງຮູບພາບຈະຫລຸດຜ່ອນການເປີດເຜີຍ.
ການດັດແປງບັນທຶກ ແລະ ການເຂົ້າເຖິງ
ລຶບບັນທຶກສໍາລັບເຄື່ອງຫມາຍແລະລະຫັດ; ມັກການເຂົ້າເຖິງໂທລະສັບໂດຍອີງຕາມບົດບາດ. ທ່ານ ສາມາດ ຮັກສາ ເສັ້ນທາງ ກວດ ສອບ ໄດ້ ບໍ ວ່າ ໃຜ ໄດ້ ເປີດ ຈົດຫມາຍ ທົດ ສອບ ໃຫມ່ ແລະ ເມື່ອ ໃດ?
10) ການ ປົກຄອງ: ໃຜ ເປັນ ເຈົ້າ ຂອງ ລາຍ ຊື່
ກໍານົດຄວາມເປັນເຈົ້າຂອງ, ຈັງຫວະ ແລະ ຫຼັກຖານສໍາລັບການຄວບຄຸມທຸກຢ່າງໃນເອກະສານນີ້.
RACI ສໍາລັບຄວາມໄວ້ວາງໃຈຂອງ OTP
ຕັ້ງຊື່ເຈົ້າຂອງທີ່ຮັບຜິດຊອບ (ສ່ວນ QA), ຜູ້ສະຫນັບສະຫນູນທີ່ຮັບຜິດຊອບ (ຄວາມປອດໄພ ຫຼື ຜະລິດຕະພັນ), ທີ່ປຶກສາ (infra/email) ແລະ Informed (ການສະຫນັບສະຫນູນ). ຈັດ ພິມ RACI ນີ້ ໃນ repo.
ການ ທົບ ທວນ ການ ຄວບ ຄຸມ ແຕ່ ລະ ສາມ ເດືອນ
ທຸກໆ quarter, ການ ແລ່ນ ຕົວຢ່າງ ຈະ ຖືກ ດໍາ ເນີນ ຕໍ່ ໄປ ຕາມ ລາຍ ຊື່ ຂອງ ການ ກວດ ສອບ ເພື່ອ ຢືນຢັນ ວ່າ ປ່ອງຢ້ຽມ ທີ່ ສົ່ງ ຄືນ, ຂອບ ເຂດ ການ ຫມູນ ວຽນ ແລະ ລາຍ ຊື່ ຂອງ ວັດ ແທກ ຍັງ ຖືກ ບັງຄັບ ຢູ່.
ຫຼັກຖານ ແລະ ວັດຖຸທົດສອບ
ຕິດ ຮູບ ພາບ, ການ ແຈກ ຢາຍ TTFOM ແລະ ຕາຕະລາງ sender×domain ໃສ່ ກັບ ແຕ່ ລະ ການ ຄວບ ຄຸມ - ເກັບ token ໄວ້ ຢ່າງ ປອດ ໄພ ໂດຍ ອ້າງ ອີງ ເຖິງ ຊຸດ ທົດ ສອບ ທີ່ ເຂົາ ເຈົ້າ ຮັບ ໃຊ້.
ວົງຈອນການປັບປຸງຢ່າງຕໍ່ເນື່ອງ
ເມື່ອ ເຫດ ການ ເກີດ ຂຶ້ນ, ໃຫ້ ຕື່ມ ແບບ ແຜນ ຂອງ ການ ຫລິ້ນ / anti-pattern ໃສ່ ໃນ runbook. ປັບປຸງຂອບເຂດ, ຟື້ນຟູກຸ່ມໂດເມນແລະປັບປຸງສໍາເນົາທີ່ຜູ້ທົດສອບເຫັນ.
ຕາຕະລາງປຽບທຽບ - ການຫມູນວຽນ vs ບໍ່ມີການຫມູນວຽນ (QA/UAT)
ນະໂຍບາຍການຄວບຄຸມ | ດ້ວຍການຫມູນວຽນ | ປາດ ສະ ຈາກ ການ ຫມູນ ວຽນ | TTFOM p50 / p90 | ຄວາມ ສໍາ ເລັດ ຜົນ ຂອງ OTP % | ບັນທຶກຄວາມສ່ຽງ |
---|---|---|---|---|---|
ມີ ຄວາມ ສົງ ໄສ ກ່ຽວ ກັບ Greylisting | ຫມູນວຽນຫຼັງຈາກລໍຖ້າສອງເທື່ອ | ຮັກສາ domaiDomain | / 95 ວິນາທີ | 92% | ການ ຫມູນ ວຽນ ໃນ ຕອນ ຕົ້ນ ໄດ້ ມ້ຽນ ມັດ 4xx backoff |
Peak sender queues | ຫມູນວຽນຖ້າວ່າ p90 | ໃຫ້ ລໍຖ້າ ດົນ ນານ | 40 / 120 ປີ | 94% | Backoff + ການປ່ຽນແປງໂດເມນເຮັດວຽກ |
ກຸ່ມຜູ້ສົ່ງເຢັນ | ອົບອຸ່ນ + ຫມູນວຽນ canary | ອົບ ອຸ່ນ ເທົ່າ ນັ້ນ | 45s / 160s | 90% | ການຫມູນວຽນຊ່ວຍໃນລະຫວ່າງການອົບອຸ່ນ |
ຜູ້ສົ່ງທີ່ຫມັ້ນຄົງ | ການ ຫມູນ ວຽນ ຂອງ cap ທີ່ 0-1 | ບໍ່ມີການຫມູນວຽນ | 25 / 60 ປີ | 96% | ຫຼີກລ່ຽງການປ່ຽນແປງທີ່ບໍ່ຈໍາເປັນ |
Domain flagged | ປ່ຽນຄອບຄົວ | ລອງເຮັດແບບດຽວກັນອີກ | 50 / 170 | 88% | ການ ປ່ຽນ ແປງ ປ້ອງ ກັນ ການ block ຊ້ໍາ ແລ້ວ ຊ້ໍາ ອີກ |
ວິທີເຮັດ
ຂະບວນການທີ່ມີໂຄງສ້າງສໍາລັບການທົດສອບ OTP, ລະບຽບວິໄນຂອງຜູ້ສົ່ງ ແລະ ການແຍກສະພາບແວດລ້ອມ ເຊິ່ງເປັນປະໂຫຍດສໍາລັບ QA, UAT ແລະ ການແຍກຜະລິດຕະພັນ.
ຂັ້ນຕອນທີ 1: ແຍກສະພາບແວດລ້ອມ
ສ້າງເອກະລັກຜູ້ສົ່ງ QA/UAT ແລະ ກຸ່ມໂດເມນທີ່ແຍກກັນ; ຢ່າ ແບ່ງປັນ ກັບ ຜະລິດຕະພັນ.
ຂັ້ນຕອນທີ 2: ກໍານົດເວລາສົ່ງຄືນໃຫມ່
ລໍຖ້າ 60-90 ວິນາທີ ກ່ອນຈະພະຍາຍາມລອງອີກເທື່ອຫນຶ່ງ; ຈໍາກັດຈໍານວນທັງຫມົດຂອງການສົ່ງຄືນຕໍ່ພາກ.
ຂັ້ນຕອນທີ 3: ຕັ້ງຄ່າ caps ການຫມູນວຽນ
ຫມູນ ວຽນ ພຽງ ແຕ່ ຫລັງ ຈາກ ລະ ເມີດ ຂອບ ເຂດ ສໍາ ລັບ ຜູ້ ສົ່ງ × domain ດຽວ ກັນ; ≤2 ຫມູນວຽນ/ພາກ.
ຂັ້ນຕອນທີ 4: ນໍາໃຊ້ຄືນໂດຍອາໄສ Token
ໃຊ້ token ເພື່ອເປີດທີ່ຢູ່ເກົ່າສໍາລັບການຖອຍຫລັງແລະການຕັ້ງຄືນໃຫມ່; ເກັບເຄື່ອງຫມາຍໄວ້ໃນຜູ້ຈັດການລະຫັດຜ່ານ.
ຂັ້ນຕອນທີ 5: ວັດແທກເຄື່ອງມື
ບັນທຶກຄວາມສໍາເລັດ OTP, TTFOM p50/p90 (ແລະ p95), ສົ່ງຄືນລະບຽບວິໄນ% ແລະ ລະຫັດຄວາມລົ້ມເຫລວ.
ຂັ້ນ ຕອນ 6: ແລ່ນ ຝຶກ ຊ້ອມ Peak
ອົບ ອຸ່ນ ຜູ້ ສົ່ງ; ໃຊ້ການຫມູນວຽນ canary ພ້ອມກັບການເຕືອນເພື່ອຈັບ drift ໄວໆ.
ຂັ້ນຕອນທີ 7: ທົບທວນແລະຮັບຮອງ
ຂ້າ ພະ ເຈົ້າ ຢາກ ໃຫ້ ທ່ານ ເບິ່ງ ການ ຄວບ ຄຸມ ແຕ່ ລະ ຢ່າງ ພ້ອມ ດ້ວຍ ຫລັກ ຖານ ທີ່ ຕິດ ຢູ່ ແລະ ລົງ ຊື່.
ຄຳຖາມທີ່ຖືກຖາມເລື້ອຍໆ
ເປັນຫຍັງລະຫັດ OTP ຈຶ່ງມາເຖິງຊ້າໃນລະຫວ່າງ QA ແຕ່ບໍ່ຢູ່ໃນການຜະລິດ?
ການ ເດີນທາງ ເບິ່ງ ຄື ວ່າ ມີ ສຽງ ດັງ ແລະ ຫນາວ ເຢັນ ສໍາລັບ ຜູ້ ຮັບ; Greylist ແລະ Throttling ຈະ ຂະຫຍາຍ P90 ຈົນ ກວ່າ ສະ ນ້ໍາ ອົບ ອຸ່ນ.
ຂ້ອຍຄວນລໍຖ້າດົນປານໃດກ່ອນຈະແຕະຕ້ອງ "ສົ່ງລະຫັດຄືນ"?
ປະມານ 60-90 ວິນາທີ. ແລ້ວ ການ ພະ ຍາ ຍາມ ໃຫມ່ ຢ່າງ ມີ ໂຄງ ຮ່າງ; ການສົ່ງຄືນອີກມັກຈະເຮັດໃຫ້ແຖວຮ້າຍແຮງຂຶ້ນ.
ການຫມູນວຽນຂອງໂດເມນດີກວ່າໂດເມນດຽວສະເຫມີບໍ?
ບໍ່. ຫມູນວຽນຫຼັງຈາກທີ່ສະດຸດຂອບເຂດເທົ່ານັ້ນ; ການ ຫມູນ ວຽນ ຫລາຍ ເກີນ ໄປ ຈະ ທໍາລາຍ ຊື່ ສຽງ ແລະ ເຮັດ ໃຫ້ ວັດ ແທກ ຂີ້ຕົມ.
ຄວາມແຕກຕ່າງລະຫວ່າງ TTFOM ແລະ ເວລາສົ່ງແມ່ນຫຍັງ?
TTFOM ວັດແທກຈົນກວ່າຂ່າວສານທໍາອິດປາກົດໃນຮູບພາບຂອງຫີບເຂົ້າ; ເວລາສົ່ງສາມາດລວມເຖິງການລອງຄືນໃຫມ່ຫຼັງຈາກປ່ອງຢ້ຽມການສອບເສັງຂອງເຈົ້າ.
ການແກ້ໄຂທີ່ໃຊ້ຄືນໄດ້ກໍ່ຄວາມເສຍຫາຍຕໍ່ການສົ່ງອອກໃນການທົດສອບບໍ?
ບໍ່ ແມ່ນ ຕາມ ທໍາ ມະ ຊາດ. ເຂົາເຈົ້າເຮັດໃຫ້ການປຽບທຽບມີຄວາມຫມັ້ນຄົງ, ເກັບເງິນໄວ້ຢ່າງປອດໄພ ແລະ ຫຼີກລ່ຽງການພະຍາຍາມຄືນໃຫມ່ຢ່າງວ່ອງໄວ.
ຂ້ອຍຈະຕິດຕາມຄວາມສໍາເລັດຂອງ OTP ລະຫວ່າງຜູ້ສົ່ງທີ່ແຕກຕ່າງກັນໄດ້ແນວໃດ?
Matrix ວັດແທກຂອງທ່ານຕາມຜູ້ສົ່ງ × Domain ເພື່ອເປີດເຜີຍວ່າບັນຫາເກີດຂຶ້ນກັບເວັບໄຊ / ແອັບຫຼືຄອບຄົວ domain.
ທີ່ຢູ່ອີເມວຊົ່ວຄາວສາມາດສອດຄ່ອງກັບ GDPR / CCPA ໃນລະຫວ່າງ QA ໄດ້ບໍ?
ແມ່ນແລ້ວ - ຮັບເທົ່ານັ້ນ, ປ່ອງຢ້ຽມທີ່ເຫັນໄດ້ສັ້ນໆ, HTML ທີ່ສະອາດ ແລະ ຮູບພາບ proxying ສະຫນັບສະຫນູນການທົດສອບຄວາມເປັນສ່ວນຕົວກ່ອນ.
Greylisting ແລະ warm-up ມີຜົນກະທົບແນວໃດຕໍ່ຄວາມເຊື່ອຖືຂອງ OTP?
Greylisting ຊັກຊ້າໃນການພະຍາຍາມທໍາອິດ; ສະ ນ້ໍາ ເຢັນ ຕ້ອງ ມີ ການ ອົບ ອຸ່ນ ຢ່າງ ສະ ຫມ່ໍາ ສະ ເຫມີ. ທັງ ສອງ ສ່ວນ ຫລາຍ ຈະ ຕີ p90, ບໍ່ ແມ່ນ p50.
ຂ້ອຍຄວນແຍກຫນັງສືໄປສະນີ QA ແລະ UAT ອອກຈາກການຜະລິດບໍ?
ແມ່ນແລ້ວ. ການແຍກສະນໍ້າປ້ອງກັນບໍ່ໃຫ້ສຽງດັງໃນການສະແດງເຮັດໃຫ້ຊື່ສຽງແລະການວິເຄາະຂອງການຜະລິດເສື່ອມລົງ.
ການວັດແທກທາງໂທລະສັບອັນໃດສໍາຄັນທີ່ສຸດສໍາລັບການກວດສອບຄວາມສໍາເລັດ OTP?
OTP Success %, TTFOM p50 / p90 (p95 ສໍາລັບຄວາມເຄັ່ງຕຶງ), Resend Discipline % ແລະ Failure Code with timetamped evidence. ສໍາລັບການອ້າງອີງໄວໆ, ກະລຸນາອ້າງເຖິງ FAQ Temp Mail.