Testing Flashcards
What is objective item
ข้อสอบปรนัย highly structure/ supply or select word
-short answer
-completion
-two-false
-multiple-choice
-matching
What is subjunctive item?
ข้อสอบอัตนัย วัด critical thinking
-extended response (all free)
-restricted response (limit nature, length, organization)
What is 2 types of testing?
- Typical performance
- Maximum performance
What is norm-referenced?
อิงกลุ่ม
ข้อสอบควรอยู่ปานกลาง
-compare one student with another student
-it provides information on how students perform compare to another
Criterion-referenced
อิงเกณฑ์
ควรอ้างอิงตามวัตถุประสงค์
It is designed to measurestudent’s performance against fixed standard criteria
Explain content word
Meaning
Talk about TYPICAL PERFORMANCE
-concept
-placement evaluation
-formative evaluation
-diagnostic evaluation
-summative evaluation
Typical performance
1. Concept
Measure the attitude, problem solving, and making decision. Cant be judge right or wrong
- Placement evaluation
Pretest
3.Formative evaluation
During instruction period (unit test, quiz during classes) 👀 focus on learning goal
- Diagnostic evaluation
Diagnose student’s problem to develop during studying - Summative evaluation
At the end of instruction for grading 👀focus on achievement
What is placement test and formative test?
Placement = pretest
Formative = during instructional period
Talk about MAXIMUM PERFORMANCE
-meaning
-Achievement test
-Aptitude test
-Intelligent test
MAXIMUM PERFORMANCE
🦋best performance
- Meaning
Measure person’s ability and former knowledge - achievement test
It measures what student has learnt - Aptitude test การวัดความรู้ในอดีต
It measure the student’s ability to learnt in the future - Intelligence test
It measures a person’s ability to cope with problem
What is measurement? Writing
Measurement is a method to gain a numeral result after student took tests.
A must of measurement is testing such as interviewing, examination, query, and etc. for predicting student’s ability in the future.
What is Test/Testing (writing)
Testing is a tool for measure and evaluation student’s ability.
There are many tools for testing such as queries, examination, observation, interviewing, attitude test, and etc.
The important trait of testing is to reach a highest knowledge of student and to encourage them to represent their knowledge.
What is evaluation? (Writing)
Evaluation relate to measurement because it needs numeral result to interpret as grade. Moreover it can be used for discovering student’s competency, developing courses, making prediction, and etc.
Functional+content words
Functional word= completion
Content word = spelling+ reading
ข้อสอบ objective (ปรนัย) แบบ supply มีอะไรบ้าง
-completion
-short answer
ข้อสอบ objective (ปรนัย) แบบselection มีอะไรบ้าง
Selection เลือกตอบ
-true/false
-multiple-choice
-matching
น้อง matching
-premises/stimuli (on the left)
-responses (on the right)
-sequencing matching/arrangement
เรียงลำดับ
-multiple matching
Which test measure Attitude
Typical performance
Aptitude test วัดอะไร
Former knowledge
ข้อสอบที่ widely used 2
Multiple-choice
True/false
Which one should be in vocab test
Content/function words
Content word
หาคำมาออกข้อสอบ vocab จากอะไร
-external book
-lexical errors งานเขียนเด็กแบบ freely
-syllabus
-word frequency used list
-text book
ถ้าจะวัดเด็กวัย elementary สกิลไหนดี
ฟังพูดอ่านเขียน
Speaking (depends on objective)
Skimming หาอะไร
Cursory reading-อ่านแบบคล่าวๆ
หา general idea
Scanning หาอะไร
Cursory reading-อ่านแบบคล่าวๆ
Specific detail
อธิบายการอ่านแบบ intensive / extensive
- Intensive
- ใช้สมาธิ/ เน้นความเจ้าใจ
- short reading ใช้คำศัพท์ยาก ไม่มีคำขยาย
- midterm/final
- Extensive
-เน้นสนุก- เป็น simplify reading
- อ่านนอกเวลา
ตั้งคำถาม reading ควรใช้คำถามแบบ WH Questions
Test of reading
-pronounce reference
-superficial items ควรทำอะไร
ถามไรบ้าง
I/you/we/they
Underlined/ บอกเลข
-ถ้า superficial= paraphrase/ synonym
- ถาม topic , tone, mood, author,, not mentioned
Silent reading vs. read out loud
ข้อสอบสั้น vs ข้อสอบยาว
Incorrect เขียนไงดี
อื่นๆ
Silent reading เพื่อทำความเข้าใจ
ข้อสอบสั้นยากกว่าข้อสอบยาว
-Incworrect = NOT correct
-Only one answer
-Same length
-Text type should be authentic- news, magazine
ประโยคคำสั่งใน reading
ขึ้นด้วยอะไร
Action verb
- read the passage below….
-write the answer in provided space according to the passage
Ready strategies❤️🔥
-skim scan
-reading closely
-ดู context clue เช่น as, can be defined as, means, comma
-word formation : prefixes suffixes, part of speech, synonym, antonyms
types of reading 8
1. Matching test
- initial กี่ types ดี/ไม่ดี
- intermediate- advance ลักษณะเป็นไง
2.True-false : type/ การใช้เยอะpมั้ย/ 50%ถูกทำไง
- Multiple choice
❤️🔥short answer (doing, playing)
-Stem t
- text, blank space
- text reading, stem, choice
❤️🔥longer text: rules เยอะ - Completion item : trait
- Rearrangement ทำยังไงกับ choice เยอะ
- Cloze procedure
- Open ended
- Cursory
Initial
🤙Matching tests
- word matching ควรจับเวลา
- sentence matching
-picture and sentence matching
ดี: มี1รูป ช้อยส์ 4 ทดสอบการอ่านประโยค
แย่: มี1รูป ช้อยส์เป็น 10 ละให้เลือกว่าอันไหนบ้างที่เกี่ยวกับรูปภาพ = true/false
Intermidiate -advanced
1. Matching tests
-มีรูปภาพ visual เป็น stem หลายๆอัน
ละให้ definition จับคู่
🤙True-false
💕most widely used/ class progress test/ guessing
- true +2
- false -2
- no answer 0
- not given choice
- type 1 independent of the text
เป็น general knowledge ไม่ควรออก
เช่น the sun rises in the west.
-type 2 depend of the text
มี text ให้ดู
🤙Multiple-choice
- short text
1. aaaaaaaaaaa learn as much by (doing, playing, watching, practicing) as by listening
วัด reading / vocab
2. มี stem แล้วก็ vertically choice ปกติ
3. มี text reading, stem, choice
4. มี text ละก็ blank space ถามว่าควรเอาไรใส่
- longer text ไปอ่านใน photoshoot
🤙Comlpletion items
ได้ production ไม่ใช่ cognition
-mental block ตามใจคนออกข้อสอบ
🦋 open-ended : เปิด why was the author surprised to meet Dr. short
🦋 completion : ปิด The author was surprised to meet Dr.Short because….
🤙Reearrangement
- ถ้าchoice เยอะควรเรียง 1-2 depends level
-มีช้อย์ N/A (not applicable)
🤙Cloze produce
🤙Open-ended items
🤙Cursory readingg
Type of reading
6. Cloze procedure
7.open-ended items
8. Cursory reading
👻6. Cloze procedure
ข้อสอบ completion item จะสร้างแบบ Subjunctive T. ต้องการทดสอบคำอย่างตั้งใจ
ข้อสอบ cloze test จะสร้างแบบ systematic 7,14,21,28 เริ่มที่ 5-7// ไม่นิยมเริ่ม 2 // ไม่นิยมลลง 10,12
👻open-ended items
- one-word answer ไม่ยาว เช่น name of place
- answer in a few words
-sentence answer
***should provide marking scheme
👻skimming scaning
ถ้าครูออก reading อยากวัดศัพท์ใน unit จะทำแบบ completion item, subjunctive
หรือ cloze test , systematic
แบบ completion item, subjunctive
เพราะตามใจคนออก
Cursory reading skillr
Native
200
200-300
300-500
Non-native
Not more than. 300
Reading ถ้า
- straight forward test
- superficial test
จะดูเป็นข้อสอบอะไร
Matching
ข้อสอบ reading ไม่ควรมีเกณฑ์อะไร หรือควรมีเกณฑ์อะไร และควรมี model asnwer มั้ย
ควรวัด
- communication
- comprehension
ไม่ควรวัด
- grammar
- spelling
ควรมี model answer/ keyword/ the answer will be vary
ชุดข้อสอบควรมี provide marks ให้รึป่าว
ควรมี แต่ไม่ต้องมีซ้ำซ้อมากมาย
Component of a good writing test มีอะไรบ้าง💕
- Language use โครงสร้างภาษา vocab ถูกบริบท / varoious grammar structure/เหมาะสมม
- Mechanical skill การสะกดคำ, วรรคตอน, punctuation, capitalization
- Treatment of content หัวข้อต้องคุ้นเคย, คัดกรองข้อมูลที่ไม่เกี่ยวข้อง take relevant info, creative idea
- Stylistic skill: Intro/body/ conclu/ connector/ active passive
- Judgment skill ยากสุด
- เขียนทำไม
- เขียนถึงใคร ทำให้เลือกกาษาถูก
Academic- formal
Advertisement- informal
ถ้าเกิดสอบ elementary writing ควรวัดองค์ประกอบไหนใน 5 อัน
- Language use
- Mechanical skill สะกดคำ วรรคตอนล
- Treatment of content หัวข้อทีคุ้นเคย และต้องให้บริบท (situational composition)
ไม่ควร
Stylistic, judgement skill
การเขียน writikng ควรมีอะไรให้ before writing 3
- Audience
- Purpose
- Idea/-thoughtes
Cloze procedure มีกี่ระบบ
- Subjunctive ออกศัพท์ cloze test ตามใจคนสอบ
- Systematic ออกศัพท์ตามระบบ 7.14.21.28
ออกข้อสอบ reading แบบไหนที่ตะได้ production ไม่ใช่ cognition
แบบ completion 1. Open ended 2. Close ended
Writing
Situational composition สำคัญยังไง
ต้องมีการกำหนดสถานการณ์ให้เขียน โดยเฉพาะ elementary ถ้าใส่ title เฉยๆมันกว้างไป
สอบเขียนแบบจะเป็น assessment purpose กับ class progress แตกต่างกันยังไง ควรออกข้อสอบแบบไหน
Assessment purpose มันจะวัดว่าเก่ง/ไม่เก่ง ต้องออกแบบห้ามให้ choice หัวข้อ
Class progress จะวัดพัฒนาเฉยๆให้หัวข้อได้
เวลาให้ text ให้2ชิ้นสั้นๆดีกว่า
Register แปลว่าอะไร
รูปแบบการเขียน
Setting of composition เขียนที่ดีีีีี
- A good topic determines the register and styles
- Writing the rubric is difficult
- Right amount of context / simple language/ short and clear
การเขียนตอบ letter
มี letter
แล้วสร้าง situational letter ให้ตอบ
กำหนด register ให้
การเขียนแบบมี dialog มาให้
Now write an account of B’s holiday, using the conversation above as a guide
ให้บรรยายเล่าเรื่องจาก เนื้องเรื่อง
Narrate
การเขียนแบบมีตารางข้อมูลให้
จะค่อนข้าง weak เพราะสามารถ copy ได้
การเขียนแบบ use photo
ดี
-ไม่สามารถ copy ได้
-รู้ weaknees ของนักเรียน
เพราะจะใช้ avoidance strategy
-ให้นูปภาพเป็น stimulus
Scoring method ของการเขียนมี 3
- Impressionistic method
-เป็น biased เพราะใช้ impression
- solve: หาคน assistant มาช่วย
เป็นแค่ความประทับใจภาพรวม no grammar
2.Analytic method
เป็นการให้คะแนนแบบแองค์ประกอบ (feature)
เช่น 1. Content 2. Grammar 3. Language use. หรือจะให้เกณฑ์ 5 components ได้
- Mechanical accuracy (error-count)
นับทุก mistakes ไปเลยจ้า
-จำกัด ability เด็กเกินไป
Testees คนสอบ
เวลาตรวจ writing จะมี error อยู่ 2 จุด คือ
- Local error/ Minor errors
เป็น small mistake ไม่ได้สร้างความงุนงง grammar จุดเล็กๆ เช่น article - Global errors/ Major erros
Meaning ผิดไปเลย ทำให้เกิด misunderstanding ได้
การทำให้ writing test more reliable
- Give the same topic
- Provide the context or situation
- Provide banding system
Banding systems
- American แบ่ง topic ในการให้คะแนน analytic
-content
-organization- vocabulary
- language use
- mechanics
- Britain ให้คะแนนแบบโดยรวม holistic
ประเภทของ validity
- Content validity: Algebra
- Construct validity: cannot be directly observed— behavior, trait, characters
3.Concurrent validity: theory vs. performance // driving license, mechanical, dental
- Predictive validity: has ability to predict the student’s achievement
- Face validity: standard tool, quickly, limit time, poor, should be employed the last option
- Criterion validity: measure how well it can forecast a specific result or how closely from another test
- Factorial validity: แม่นยำสุด ทฤษฎีสถิติ
Reliability มีกี่ประเภท
- Test-retest
- Split-Half—spearman-brown สัมปสิทธิ์สูงความเชื่อมั่นสูง
- Internal stability — KR 20 21, coefficient
- Inter-rater reliability— many observees- team work
- Alpha coefficient เหมาะกับข้อสอบอัตนัย subjective
5.mark-remark — result might not have similar marks เพราะคนตรวจคนเดิม ต่างเวลากัน
Concept ของ reliability
Take test again, get similar score
Precise/ consistency
Concept ของ validity
ตรงกับวัตถุประสงค์ที่ครู intends to measure
จุดอ่อนของ test-retest คืออะไร
Testees’ knowledge can improve during 2 weeks
ควรใช้ข้อสอบ alternative, pararell, equivalent
Factors that will change the score of testees
- Test taker’s temporary psychological
- Environment factor
- Test form
💕💕important things in the test
- Validity
- Reliability
- Difficulty level
- Discrimination
FV Stand for
The index of facility value// the index of difficulty
Item analysis ของข้อสอบ objective สำคัญยังไง
- to inform teacher: how effective of teaching
- to inform student performance
- to inform performance of each item — can compile to use in the future
Make test more reliable
- The test must have enough items
- Items are independent of each other
- Only one correct answer
- Well laid out, write unambiguous item
- Shouldnt made so long
- Do not allow the Testees too much freedom— audience, purpose, leght
More valid
- Use direct testing
- Design the construct and check the content or objective before writing a test
- Write explicit directions
