ets criterion

www.TOEFLtpo.comwww.criterionkorea.co.kr


ETS 소개

ETS (Educational Testing Services) – 비영리 사단법인

1947 년 설립된 미국 교육부 산하 비영리 교육평가 연구기관

TOEIC, TOEFL, SAT, GRE, AP 및 Criterion 개발 및 평가 매년 190 개국 5 천만 회 시험주관 및 평가

미국 뉴저지주 프린스턴시 소재 직원 2,500 여 명 :

(1,100 명의 교육학 , 심리학 , 통계학 , 컴퓨터과학 , 사회학 전문가로 구성 )

2007 년 한국지사 설립

ETS Preferred Network in Korea• YBM 시사 (TOEIC 시행 및 TOEIC 모의고사 )• 디지털조선일보 (TPO)• 이시디코리아㈜ (ETS Writing 학습 솔루션 ) - Criterion® (2009) - ProofWriterTM (2010)


What is Criterion ®?

온라인 영어쓰기 평가 및 자동첨삭 시스템

ETS 개발

웹을 통한 선생님 과제부여 – 선생님과 Criterion 시스템 도움으로 학생들의 영어쓰기 실력 향상

“ 미국에서 10 년동안 이미 검증된 시스템”


기초 배경

학술적 배경

ETS Criterion®

ETS e-rater (Artificial Intelligence System)

Natural Language Processing 알고리즘 적용

레벨과 토픽에 맞는 수천 개의 사전 채점된 에세이와

비교 /채점

3 천만 개의 검증된 Word Pairs 와 비교 진단 /

자동첨삭 제공

( 문법 , 어법 , 철자 )

ETS 전문 채점자의 결과와 비교 : 98% 일치

ETS Research Analysis

60 년간 연구 개발된 Writing Lecture 모델 근간

1970 년도 컴퓨터와 인공지능 기술과 접목한 데이터베이스

기술적 배경


ETS Criterion®

1. 무제한의 토픽 생성 : 맞춤형 Class 설계 가능

2. 8 가지 사전 계획 템플릿 제공

3. 즉각적인 자동 첨삭 제공 : 학생자신의 에세이를 기억하고 있을때 제공 !

4. ETS 데이터베이스 : 방대한 사전 채점된 실제 에세이와 비교

5. 선생님들은 내용위주로 집중해서 교육가능

6. 양방향 커뮤니케이션 제공 : 선생님 & 학생

7. 분할 화면을 통한 재편집 기능 제공

The Criterion® service cannot replace an instructor.The Criterion® service can enhance the instructors’ tutoring role.

Criterion® 특징


Criterion® 토픽

ETS Criterion®

• 초등 4 학년 ~ 고등 3 학년• 대학교 1~2 학년

• TOEFL, GRE• 대학교 준비 (SAT)

437 시스템 토픽 샘플에세이 제공

선생님이 원하는 지문사용점수와 자동 첨삭은 동일하게 제공

무제한 토픽추가 가능

수업목적에 따른 맞춤형 토픽 사용

ETS 선정토픽

선생님 토픽

Classified Topics (437)


Style

ETS Criterion®

Grammar Usage Mechanics

Editing Area Revising Area

ETS e-rater 5 개영역 42 개 세부항목 제공

Errors & Advice Topic Errors & Guidance

자동 첨삭을 바탕으로 수정 후 즉각적인 재평가 가능

Criterion® 자동 첨삭

Organization & Development


Criterion® 자동 첨삭 세부항목

ETS Criterion® Provides Following Editing Information

Grammar Usage MechanicsFragment or Missing Comma( 주어 , 동사의 연결이 불분명한 문장 )Run-on Sentences( 문장의 종료가 불분명한 문장 )Garbled Sentences( 오타로 인해 의미가 불분명한 문장 ) Subject-Verb Agreement( 주어 , 동사의 일치 )Ill-formed Verbs( 동사형태의 오류 )Pronoun Errors( 대명사의 오류 )Possessive Errors( 소유격의 오류 )Wrong or Missing Word( 철자가 틀리는 오류 ) Proofread This ( 그 외 교정 )

Wrong Article( 잘못된 관사 )Missing or Extra Article( 관사 누락 및 오용 )Confused Words( 뜻은 비슷하나 잘못된 단어 )Wrong Form of Word( 단어 형태상의 오류 )Faulty Comparisons( 잘못된 비교표현 )Preposition Error( 전치사 오류 )Nonstandard Word Form( 잘못된 단어 사용 )Negation Error ( 이중 부정 오류 )

Spelling( 철자 오류 )Capitalize Proper Nouns( 고유명사 대문자 오류 )Missing Initial Capital Letter in a Sentence( 문장 첫 글자 대문자 오류 )Missing Question Mark( 물음표 누락 )Missing Final Punctuation( 마침표 누락 )Missing Apostrophe( 어퍼스트로피 누락 )Missing Comma( 쉼표 누락 )Hyphen Error( 하이픈 누락 )Fused Words( 복합어가 아닌데 복합어로 사용한 오류 )Compound Words( 복합어를 잘못 표현한 오류 )Duplicates( 연속된 단어 반복의 오류 )


Criterion® 자동 첨삭 세부항목

ETS Criterion® Provides Following Revising Advice

Style Organization & DevelopmentRepetition of Words( 단어의 반복 )Inappropriate Words or Phrases( 적당하지 않은 단어나 구의 사용 )Too Many Sentences Beginning with Coordinating Conjunctions( 등위 접속사를 이용해 너무 많은 문장을 작성한 경우 )Too Many Short Sentences( 짧은 문장이 너무 많은 경우 )Too Many Long Sentences( 긴 문장이 너무 많은 경우 )Passive Voice( 적절한 수동태 사용인지 확인 )

Introductory Material( 소개의 글로 적당한지 Review)Thesis Statement( 적당한 Thesis 인지 Review)Topic Relationship & Technical Quality( 사용한 어휘와 주제 간의 연관성 판단에 대한 Review)Main Ideas( 적당한 Main idea 인지 Review)Supporting Ideas( 적당한 supporting idea 인지 Review)Conclusion( 적당한 conclusion 인지 Review)Transitional Words and Phrases( 적당한 연결어구인지 Review)Other( 에세이에 사용한 번호나 인명 등을 올바르게 사용했는지 Review)


If…… Result

ETS 는 60 년 간의 국제 교육관련 서비스 연구와 70 년대 이후 컴퓨터기술 이용한 학습의 효율성에 대한 학술 연구를 비교 분석하여 다음과 같은 결과를 얻었습니다 .

학생에게 즉각적이고 , 개별적이며 , 구체적인

평가를 제공

학생이 수업에 집중하고 Writing 학습량을 증가시킴

Computer 정보화 기술을 이용해 수업 진행

교사가 학급 및 학생에게 개별적인 지도를 행할 시간

확보

에세이 작성과 교정 등의 전반적 학습량 증가

에세이 작성 기술 뿐만 아니라 전반적인 글쓰기 능력 향상

Criterion® 학술적 배경 및 근거

• 미국 교육계 최고의 상 수상 - Learning Impact, CODiE,Technology & Learning 2005 Award of Excellence, EDDIE Award


한국 Criterion 적용 /학습효과 ( 실제 자료 )


국내 적용 사례 – 2009 년 3 월 한국 런칭

1. 정규교과 과정 : - 숭실 대학교 ; 교양 영어 쓰기 수업 적용 - 공주교대 ; 영어쓰기 수업 적용 ( 전교생 대상 ) - 총신대학교 ; 영어쓰기 수업 적용 - 고려대학교 ; 교육대학원생 수업 적용 - 아주대학교 ; 인문대학 전공 영어 수업 - 서울여자대학교 ; 교양 영어 수업 - 가톨릭대학교 ; 교양 및 전공 영어 수업 - 충북대학교 ; 교양 영어 수업

2. 배치고사 : - 서강대학교 ; 대학 내 신입생 배치고사 - 연세대학교 ; 대학 내 신입생 영어진단평가

3. 영어 석사 논문 : - 이화여자대학교 ; 각종 영문 리포트 , 에세이 , 논문 등 ( 제 3 국 유학

대학원생 )

4. 테솔 석사학위과정 : - 아주대학교 ; 3 일간 워크샵 ( 아주대 테솔 대학원생 )


국내 적용 사례 – 2009 년 3 월 한국 런칭

5. 영어교사 연수과정 :- 아주대학교 ; 중등 영어교사 심화 연수과정 ( 교과부 /경기도 교육청 )- 서울교육대학 ; 초등 영어 교사 직무연수 과정 - 서울시 교육청 ; 초 . 중등 영어교사 직무연수

( 영어쓰기 능력 향상 및 쓰기 지도법 6 개 반 )- 경기도 외국어 교육 연수원 ; 초 . 중등 영어교사 직무연수

6. 평가 시스템 :- 유네스코 , 대원 국제 중학교 , IEEC 및 IET; 영어 에세이 평가 - 안양외고 /경남외고 ; 특별전형 입시 에세이 평가- 독서 경시대회 ; 영어 독후감 평가 - 서울대학교 언어 교육원

7. 고등학생 영어 쓰기 학습 :- 안양외고 /경남외고 /대원 국제중학교 ; 영어쓰기 수업 적용


Criterion Live Demo