and attendance items? What role doe

and attendance items? What role does close inferential reading have to the school setting? Are these educators using it simply to produce difficult items and thus help spread out student ability — perhaps in a bell-shaped curve? The term 'test deconstruction' was coined by Elatia (2003) in her analysis of the history of a major national language test. Parallel RE In some cases, teachers are asked to produce tests according to external influences, what Davidson and Lynch (2002, chapter 5) call the 'man-date. There may be a set of external standards outside the classroom — as, for example, the Common European Framework. Teachers may feel compelled to design tests that adhere to these external standards, and, at the same time, the teachers may not consult fully with one another. If we obtain sample test questions from several teachers which (the teachers tell us) measure the same thing, and then perform straight RE on the samples, and then compare the
SEC PON 1:1
resulting specs, we are using RE as a tool to determine parallelism (Nawal. Ali, personal communication).
Task A4.5
Have you ever done reverse engineering? Of what type? Why?
A4.7 WHERE DO TEST ITEMS COME FROM? WHAT IS THE TRUE GENESIS OF A TEST QUESTION?
Perhaps reverse engineering is at the basis of everything. It is extremely difficult to be truly original in a test question.
The evolving spec in this chapter uses multiple-choice testing — a known and comfortable path with ample general guidelines in the literature (e.g. Kehoe, 1995). And close inferential reading is a familiar high-level language task. If you are asked to produce a difficult item involving close inferential reading of scientific or survey data, might not something like this evolve anyway?
An 'archetype' is a canonical item or task; it is the typical way to measure a particular target skill Specification-driven testing often falls prey to archetypes. If we then step back and look at that item, we will often see echoes of an item or task that we have authored in the past, that we have suffered (as test takers) or that we have studied in a testing textbook or testing lecture. Perhaps all supposed spec-driven testing is actually a form of reverse engineering: we try to write a blueprint to fit item or task types — archetypes — that are already in our experience.
It is often asserted that theory comes first and testing follows. External beliefs drive test creation. We decide — or we are advised to decide — =,7ir beliefs about the target language skills and then, and only then, build tests. Some authors (e.g. Bachman and Palmer, 1996) advocate particular theoretical models of language ability as guides for test creation. Theory before practice may work, and it may work well. And the converse may also be true in some settings: test developers may not have a dear idea of the traits they wish to measure. The

Hasil (Bahasa Indonesia) 1:

dan penonton item? Peran apa yang telah membaca inferential ke pengaturan sekolah? Para pendidik tersebut menggunakannya hanya untuk menghasilkan barang-barang yang sulit dan dengan demikian membantu menyebar kemampuan siswa — mungkin dengan kurva lonceng berbentuk? Istilah 'tes dekonstruksi' diciptakan oleh Elatia (2003) nya analisis sejarah tes bahasa Nasional utama. RE paralel dalam beberapa kasus, guru akan diminta untuk menghasilkan tes menurut pengaruh luar, apa Davidson dan Lynch (2002, Bab 5) sebut ' manusia-date. Mungkin ada satu set standar eksternal di luar kelas — sebagai, misalnya, kerangka Eropa umum. Guru mungkin merasa terdorong untuk desain tes yang mematuhi standar-standar ini eksternal, dan, pada saat yang sama, para guru mungkin tidak berkonsultasi sepenuhnya dengan satu sama lain. Jika kita mendapatkan pertanyaan tes sampel dari beberapa guru yang (guru memberitahu kita) mengukur hal yang sama, dan kemudian melakukan RE lurus pada sampel, dan kemudian membandingkanPON SEC 1:1 dihasilkan spesifikasi, kami menggunakan kembali sebagai alat untuk menentukan paralelisme (Nawal. Ali, komunikasi pribadi). Tugas A4.5 Pernahkah Anda melakukan reverse engineering? Jenis apa? Mengapa? A4.7 MANA ITEM TES DATANG DARI? APAKAH BENAR ASAL-USUL PERTANYAAN TES? Mungkin reverse engineering adalah di dasar segalanya. Hal ini sangat sulit untuk menjadi benar-benar asli dalam sebuah pertanyaan ujian. Spesifikasi berkembang dalam bab ini menggunakan pengujian pilihan ganda-jalan terkenal dan nyaman dengan pedoman umum yang cukup dalam literatur (misalnya Kehoe, 1995). Dan membaca inferential tugas akrab bahasa tingkat tinggi. Jika Anda diminta untuk menghasilkan item yang sulit melibatkan tutup inferential membaca ilmiah atau data survei, mungkin tidak seperti ini berkembang pula? ' Arketipe ' adalah kanonik item atau tugas; ini adalah cara yang khas untuk mengukur keahlian tertentu target berbasis spesifikasi pengujian sering jatuh mangsa ke arketipe. Jika kita kemudian melangkah mundur dan melihat item, kita akan sering melihat gema item atau tugas yang kita menulis di masa lalu, bahwa kita menderita (sebagai pengambil tes) atau bahwa kita pelajari dalam buku pengujian atau pengujian kuliah. Mungkin semua seharusnya spec-driven pengujian adalah sebenarnya bentuk pembalikan Engineering: kita mencoba untuk menulis cetak biru agar sesuai dengan jenis item atau tugas — arketipe — yang telah dalam pengalaman kami. Sering dinyatakan bahwa teori datang pertama dan pengujian berikut. Penciptaan test drive eksternal keyakinan. Kita memutuskan — atau kita disarankan untuk memutuskan — =, 7ir keyakinan tentang keterampilan bahasa target dan kemudian, dan hanya kemudian, membangun tes. Beberapa penulis (misalnya Bachman dan Palmer, 1996) menganjurkan tertentu model teoritis kemampuan bahasa sebagai panduan untuk tes penciptaan. Teori sebelum latihan mungkin bekerja, dan mungkin bekerja baik. Dan Kebalikannya juga bisa benar dalam beberapa pengaturan: tes pengembang mungkin tidak memiliki ide yang sayang ciri-ciri yang mereka ingin mengukur. The

Hasil (Bahasa Indonesia) 2:

dan barang-barang kehadiran? Peran apa dekat membaca inferensial harus lingkungan sekolah? Apakah pendidik tersebut menggunakannya hanya untuk memproduksi barang-barang yang sulit dan dengan demikian membantu menyebar kemampuan siswa - mungkin dalam kurva berbentuk lonceng? Istilah 'test dekonstruksi' diciptakan oleh Elatia (2003) dalam analisis tentang sejarah dari tes bahasa nasional besar. RE Paralel Dalam beberapa kasus, guru diminta untuk menghasilkan tes sesuai dengan pengaruh eksternal, apa Davidson dan Lynch (2002, Bab 5) memanggil 'orang-date. Mungkin ada satu set standar eksternal di luar kelas - seperti, misalnya, Eropa Kerangka Umum. Guru mungkin merasa terdorong untuk merancang tes yang mematuhi standar-standar eksternal, dan, pada saat yang sama, para guru mungkin tidak berkonsultasi sepenuhnya dengan satu sama lain. Jika kita mendapatkan pertanyaan tes sampel dari beberapa guru yang (guru memberitahu kami) mengukur hal yang sama, dan kemudian melakukan RE langsung pada sampel, dan kemudian membandingkan
SEC PON 1: 1
spesifikasi dihasilkan, kita menggunakan RE sebagai alat untuk menentukan paralelisme (Nawal. Ali, komunikasi pribadi).
Tugas A4.5
Pernahkah Anda melakukan reverse engineering? Jenis apa? Mengapa?
A4.7 MANA ITEM TES DATANG DARI? APAKAH BENAR GENESIS OF A PERTANYAAN UJI?
Mungkin reverse engineering adalah di dasar dari segala sesuatu. Hal ini sangat sulit untuk benar-benar asli dalam pertanyaan tes.
Spec berkembang dalam bab ini menggunakan pengujian pilihan ganda - jalan dikenal dan nyaman dengan pedoman umum yang cukup dalam literatur (misalnya Kehoe, 1995). Dan dekat membaca inferensial adalah tingkat tinggi tugas bahasa asing. Jika Anda diminta untuk menghasilkan barang yang sulit yang melibatkan membaca disimpulkan dekat data ilmiah atau survei, mungkin tidak seperti ini berkembang pula?
Sebuah 'pola dasar' adalah barang kanonik atau tugas; itu adalah cara khas untuk mengukur keterampilan sasaran pengujian Keterangan-driven tertentu sering jatuh mangsa arketipe. Jika kita kemudian melangkah mundur dan melihat barang itu, kita akan sering melihat gema dari item atau tugas yang kita telah menulis di masa lalu, bahwa kita telah menderita (sebagai pengambil tes) atau yang telah kita pelajari dalam buku teks pengujian atau pengujian kuliah . Mungkin semua pengujian spesifikasi-driven seharusnya sebenarnya merupakan bentuk reverse engineering: kami mencoba untuk menulis sebuah cetak biru untuk menyesuaikan item atau tugas jenis - arketipe - yang sudah dalam pengalaman kami.
Hal ini sering menegaskan bahwa teori yang lebih dulu dan pengujian berikut. Keyakinan drive eksternal penciptaan tes. Kami memutuskan - atau kita disarankan untuk memutuskan - =, keyakinan 7ir tentang keterampilan bahasa target dan kemudian, dan hanya kemudian, membangun tes. Beberapa penulis (misalnya Bachman dan Palmer, 1996) menganjurkan model teoritis tertentu kemampuan bahasa sebagai panduan untuk pembuatan tes. Teori sebelum latihan dapat bekerja, dan dapat bekerja dengan baik. Dan sebaliknya juga mungkin benar dalam beberapa pengaturan: pengembang tes mungkin tidak memiliki ide Sayang ciri-ciri mereka ingin mengukur. Itu