Testing dan Implementasi 1 Seberapa baik sistem yang

Testing dan Implementasi 1

Seberapa baik sistem yang sudah dibangun ? l Dua Aspek yang dipertimbangkan: • Apakah implementasi sudah sesuai dengan spesifikasi ? • Apakah spesifikasi sesuai dengan kebutuhan user ? l Validasi • “Apakah sistem yang dikembangkan sudah benar? ” • Pengujian dimana sistem ketika diimplementasikan sesuai dengan yang iharapkan l Verifikasi • “Apakah sistem dikembangkan dengan cara yang benar ? ” • Pengujian apakah sistem sudah sesuai dengan spesifikasi 2

Proses Testing Unit testing n Pengujian masing-masing unit komponen program untuk meyakinkan bhw sudah beroperasi secara benar Module Testing n Pengujian terhadap koleksi unit-unit komponen yang saling berhubungan. Sub-system Testing n Pengujian terhadap koleksi module-module yang membentuk suatu sub-system (aplikasi) 3

Proses Testing System Testing n Pengujian terhadap integrasi sub-system, yaitu keterhubungan antar sub-system Acceptance Testing n n n Pengujian terakhirs sebelum sistem dipakai oleh user. Melibatkan pengujian dengan data dari pengguna sistem. Biasa dikenal sebagai “alpha test” (“beta test” untuk software komersial, dimana pengujian dilakukan oleh potensial customer) 4

Proses Testing Unit Testing Module Testing Component Testing Sub-system Testing System Testing Integration Testing Acceptance Testing User Testing 5

The testing process Component testing n n Pengujian komponen-komponen program Biasanya dilakukan oleh component developer (kecuali untuk system kritis) Integration testing n n n Pengujian kelompok komponen-komponen yang terintegrasi untuk membentuk sub-system ataupun system Dialakukan oleh tim penguji yang independent Pengujian berdasarkan spesifikasi sistem 6

Rencana Pengujian Proses testing n Deskripsi fase-fase utama dalam pengujian Pelacakan Kebutuhan n Semua kebutuhan user diuji secara individu Item yg diuji n Menspesifikasi komponen sistem yang diuji Jadual Testing Prosedur Pencatatan Hasil dan Prosedur Kebutuhan akan Hardware dan Software Kendala-kendala n Mis: kekuranga staff, alat, waktu dll. 7

Hubungan antara rencana pengujian dan proses pengembangan system Spesifikasi Kebutuhan Acceptance Test plan Service Spesifikasi System Integration Test plan Acceptance test Perancangan System Sub-System Integration Test plan System Integration test Detail Perancangan Module and Unit code and test Sub-System Integration test 8

Failures, Faults Failure: output yang tidak benar/tidak sesuai ketika sistem dijalankan Fault: kesalahan dalam source code yang mungkin menimbulkan failure ketika code yg fault tsb dijalankan Failure Class Deskripsi Transient Muncul untuk input tertentu Permanent Muncul untuk semua input Recoverable Sistem dapat memperbaiki secara otomatis Unrecoverable Sistem tidak dapat memperbaiki secara otomatis Non-corrupting Failure tidak merusak data Corrupting Failure yang merusak sistem data 9

Contoh: Faults, Errors, and Failures l Suppose node 6 should be X: = C*(A+2*B) • Failure-less fault: » executing path (1, 2, 4, 5, 7, 8) will not reveal this fault because 6 is not executed » nor will executing path (1, 2, 3, 5, 6, 8) because C = 0 l Need to make sure proper test cases are selected • the definitions of C at nodes 3 and 4 both affect the use of C at node 6 » executing path (1, 2, 4, 5, 6, 8) will reveal the failure, but only if B /= 0 10

Prioritas Testing Hanya test yang lengkap yg dapat meyakinkan sistem terbebas dari kesalahan, tetapi hal ini sangat sulit dilakukan. Prioritas dilakukan terhadap pengujian kemampuan sistem, bukan masing-masing komponennya. Pengujian untuk situasi yg tipikal lebih penting dibandingkan pengujian terhadap nilai batas. 11

Test data dan kasus test Test data: Input yang direncankan digunakan oleh sistem. Test cases: Input yang digunakan untuk menguji sistem dan memprediksi output dari input jika sistem beroperasi sesuai dengan spesifikasi. 12

Proses defect testing 13

Black-box testing Pendekatan pengujian dimana program dianggap sebagai suatu ‘black-box’ (‘kotak hitam’) Program test case berbasiskan spesifikasi Test planning dapat dimulai sejak awal proses pengembangan sistem 14

Black-box testing 15

Equivalence partitioning Input data dan output hasil terdapat di klas yang berbeda yang sesuai dengan klas inputnya Masing-masing klas equivalensi partition diprosres dimana program akan memproses anggota klas-klas tersebut secara equivale. Test cases dipilih dari masing-masing partisi 16

Equivalence partitioning 17

Equivalence partitioning Partition system inputs and outputs into ‘equivalence sets’ n If input is a 5 -digit integer between 10000 and 99999, equivalence partitions are <10000, 10000 -99999 and > 100000 Choose test cases at the boundary of these sets n 00000, 9999, 10000, 99999, 100001 18

Equivalence partitions 19

Search routine specification procedure Search (Key : ELEM ; T: ELEM_ARRAY; Found : in out BOOLEAN; L: in out ELEM_INDEX) ; Pre-condition -- the array has at least one element T’FIRST <= T’LAST Post-condition -- the element is found and is referenced by L ( Found and T (L) = Key) or -- the element is not in the array ( not Found and not (exists i, T’FIRST >= i <= T’LAST, T (i) = Key )) 20

Search routine - input partitions Inputs yang sesuai dg pre-conditions Inputs yang tidak sesuai pre-condition Inputs dimana key element ada di dalam array Inputs dimana key element tidak terdapat di dalam array 21

Search routine - input partitions 22

Structural testing Disebut juga white-box testing Penentuan test case disesuaikan dengan struktur sistem. Knowledge program digunakan untuk mengidentifikasi test case tambahan. Tujuannya untuk menguji semua statement program (debug). 23

White-box testing 24

Path testing Tujuannya meyakinkan bahwa himpunan test case akan menguji setiap path pada suatu program paling sedikit satu kali. Titik awal untuk path testing adalah suatu program flow graph yang menunjukkan node yang menyatakan program decisions (mis. : if-then-else condition) dan busur menyatakan alur kontrol Statements dengan conditions adalah node dalam flow graf. 25

Program flow graphs Menggambarkan alur kontrol. Setiap cabang ditunjukkan oleh path yg terpisah dan loop ditunjukkan oleh arrows looping kembali ke loop kondisi node. Digunakan sebagai basis untuk menghitung cyclomatic complexity Cyclomatic complexity = Jumlah edges – Jumlah Node +2 Cyclomatic complexity menyatakan jumlah test untuk menguji control statements 26

Binary search flow graph 27

Independent paths 1, 2, 3, 8, 9 1, 2, 3, 4, 6, 7, 2 1, 2, 3, 4, 5, 7, 2 1, 2, 3, 4, 6, 7, 2, 8, 9 Test cases harus ditentukan sehingga semua path tsb tereksekusi. 28

Integration testing Pengujian keseluruhan system atau subsystem yang terdiri dr komponen yg terintegrasi. Test integrasi menggunakan black-box dengan test case ditentukan dari spesifikasi. Kesulitannya adalah menemukan/melokasikan Penggunaan Incremental integration testing dapat mengurangi masalah tersebut. 29

Incremental integration testing 30

Pendekatan integration testing Top-down testing n Berawal dari level-atas system dan terintegrasi dengan mengganti masing-masing komponen secara top-down dengan suatu stub (program pendek yg mengenerate input ke sub-system yg diuji). Bottom-up testing n Integrasi components di level hingga sistem lengkap sudah teruji. Pada prakteknya, kebanyakan test integrasi menggunakan kombinasi kedua strategi pengujian tsb. 31

Top-down testing 32

Bottom-up testing 33

Pendekatan Testing Architectural validation n Top-down integration testing lebih baik digunakan dalam menemukan error dalam sistem arsitektur. System demonstration n Top-down integration testing hanya membatasi pengujian pada awal tahap pengembangan system. Test implementation n Seringkali lebih mudah dengan menggunakan bottom-up integration testing 34

Interface testing Dilakukan kalau module-module dan subsystem terintegrasi dan membentuk sistem yang lebih besar Tujuannya untuk medeteksi fault terhadap kesalahan interface atau asumsi yg tidak valid terntang interface tsb. Sangat penting untuk pengujian terhadap pengembangan sistem dgn menggunakan pendekatan object-oriented yg didefinisikan oleh object-objectnya 35

Interface testing 36

Interfaces types Parameter interfaces n Data dikirim dari satu procedure ke procedure lainnya. Shared memory interfaces n Block of memory dishare diantara procedure Procedural interfaces n Sub-system mengencapsulasi sekumpulan procedure-procedure yang akan dipanggil oleh sub -system lainnya Message passing interfaces n Sub-systems meminta services dari sub-systems lainnya 37

Interface errors Interface misuse n componen pemanggil memanggil component lainnya dan membuat suatu kesalahan dalam penggunaan interfacenya (mis. : parameter dg urutan yg tidak sesuai). Interface misunderstanding n component pemanggil salah dalam mengasumsikan behaviour component yg dipanggil. Timing errors n Component yg memanggil dan yg dipanggil beroperasi pada kecepatan yg berbeda sehingga dimungkinkan mengakses informasi yg tidak uptodate (synchronization problem). 38

Petunjuk melakukan Interface testing Merancang test dimana parameter ke procedure yg dipanggil berada pada nilai batas extrim Test Menggunakan null pointer Perancangan tests sehingga component yg di test akan fail. Menggunakan stress testing pada message passing Pada shared memory systems, variasikan urutan dimana komponen diaktifkan. 39

Stress testing Menguji sistem dengan nilai yg melebihi maksimum load. Stressing suatu system menyebabkan tidak mudah kerusakan. Stressing suatu system test failure behaviour. Systems seharusnya tidak gagal total. Stress testing mencek kehilangan service yg tidak diduga ataupun data yg hilang. Khusus untuk sistem terdistribusi dapat menyebabkan degradasi jaringan sehingga overload. 40

Object-oriented testing Components yang diuji adalah class object yang diinstantiate ke object. Lebih besar dibandingkan pengujian sebuah function sehingga pendekatan white-box testing perlu diperluas. Tidak jelasnya ‘top’ suatu system untuk top-down integration dan testing 41

Testing levels Testing operations pada objects object classes clusters cooperating objects OO system secara lengkap 42

Object class testing Complete test yang menguji class melibatkan n Testing semua operations suatu object Setting dan interrogating semua attribute object Menguji object untuk semua state(keadaan) yg mungkin Inheritance akan mengakibatkan sulitnya perancangan object class tests seperti information yg diuji sulit dilokalisasi. 43

Contoh: Weather station object interface Test cases dibutuhkan untuk semua operations Menggunakan state model untuk mengidentifikasi state transitions testing Contoh testing sequences n Shutdown ® Waiting ® Shutdown n n Waiting ® Calibrating ® Testing ® Transmitting ® Waiting ® Collecting ® Waiting ® Summarising ® Transmitting ® Waiting 44

Integrasi Object Levels integrasi sedikit berbeda untuk sistem yang berorientasi object. Cluster testing digunakan untuk test integrasi and testing clusters terhadap cooperating objects Identifikasi clusters menggunakan knowledge dari operation objects dan system features yang diimplementasikan oleh cluster tersebut. 45

Approaches cluster testing Use-case atau scenario testing n n Testing berdasarkan pada interaksi user dengan sistem. Keuntungannya diujikan oleh user yg berpengalaman. Object interaction testing n Tests barisan interaksi object yang berhenti ketika suatu operation object tidak memanggil service dari object lain. 46

Scenario-based testing Identifikasi scenarios dari use-cases dan menambahkannya dengan diagram interaksi yang menunjukkan object yang terlibat dalam scenario Lihat contoh scenario berikut ini pada sistem weather station ketika suatu report dibuat 47

Collect weather data 48

Weather station testing Thread pengeksekusian methode n Comms. Controller: request ® Weather. Station: report ® Weather. Data: summarise Inputs dan outputs n n n Input report request dengan acknowledge yg sesuai serta output report akhir Dapat diujikan dengan membuat raw data dan meyakinkan bahwa dapat menghasilkan kesimpulan (summarize) yg sesuai. Gunakan raw data yg sama untuk menguji object Weather. Data 49

Testing workbenches Testing merupakan suatu proses yg cukup mahal. Testing workbenches menyediakan tool-tool untuk mereduksi waktu yg dibutuhkan dan total cost pengujian Kebanyakan testing workbenches merupakan open systems karena kebutuhan testing membutuhkan tergantung dr spesifikasi organisasi Sulit diintegrasikan dengan closed design dan analysis workbenches 50

A testing workbench 51

Tetsing workbench adaptation Scripts dibuat untuk user interface simulator dan model test data generator Test outputs harus disiapkan secara manual sebagai pembanding. Special-purpose file comparators harus dibuat 52