Sh**

評価システムの表記変更と内部評価のご提案

24/04/01 (月) 12:00

カテゴリご意見・ご要望

評価システムの矛盾点の解消方法のご提案です。

それはある程度英語が話せるようになり、友達に近くなった先生の正直な感想を聞くと、
★の数は大変気にしている様です。
これは★のレートが、予約レッスンやいますぐレッスンの数に響いてくる様なのです。

本来Native Campとしては★3はふつう、★4はやや満足という割り当てをしているので、
★3が最も本来最頻で送るものであり、★5は本当に満足した場合のみで問題ないと思うのですが、
ここに生徒(ネイティブキャンプ)と感じ方と先生の感じ方にギャップがあります。

先生側からすると、★3や★4をつけた生徒がなぜ戻ってきて、
同じ先生のレッスンを受けようとするのか、わからない(困っている)様なのです。

そういった背景から個人的に相当ひどいレッスンではない限り、
私は★5を送るのが正解なのかと思い今はそうしています。
つまり私の中では、★5が普通または満足という内部基準を持っています。

この基準は、長年生徒をやっているとみなさんも同じような暗黙の基準になってないでしょうか。
しかし新しく入ってきた人や、ネイティブキャンプの示す基準に素直に従って評価する方にとっては
これは常識ではないのです。

するとこの基準はリピーターでとっている生徒を抱えている先生ほど★5を安定して取得しやすく
いますぐレッスンを抱える生徒をとると、★が低下してしまう危険があるジレンマを抱えています。
まあ結局、満足値と評価の相関があり、機能しているとは言えます。

しかし先生側からすると、
ネイティブキャンプの示す基準に素直に従って評価する方のレッスンの
ババ抜き状態になっている様にも見えます。

また自分としても、本来★3普通のつもりで★5の評価をした先生か、
本当に素晴らしくて★5の評価をした先生かの区別もつきませんし、
これだけ先生がいると過去の評価も覚えられません。


そこで、2つ提案です。

(1)それぞれの評価のコメントを以下の様に現状に合わせた形に変更してはいかがでしょうか?

★1 とても不満
★2 不満
★3 すこし不満
★4 僅かに不満
★5 満足

(2)自分だけの内部★評価システム
+過去自分が評価した★数をプロフィールページで簡単にみることのできる機能

これは自分との相性などを評価するのにあるとよいかもと思いました。

  • 14

  • 15件のコメント

    0コイン

Ak*

No.0001

24/04/02 (火) 08:50

>先生側からすると、★3や★4をつけた生徒がなぜ戻ってきて、
>同じ先生のレッスンを受けようとするのか、わからない(困っている)様なのです。


現状が4.7以上が平均値である以上、
★3のところに「普通」とかどんなキャプションが付いてあろうと、
★3を付けて再受講する生徒は
講師からしたらテロリストにしか見えないと思います。

提案された以下のキャプション
★1 とても不満
★2 不満
★3 すこし不満
★4 僅かに不満
★5 満足

このキャプションは現状の評価に適合していて
今のキャプションよりは格段に良いと思います。

あとはキャプションなど付けずに★だけにして、
生徒は現状の平均点を参考に
点数を付ける仕組みが良いように思います。

★3が「普通」とか余計なキャプションを付けるから
ギャップが生じやすくなるのだと思います。

「DMM英会話 評価」で画像検索したら
DMM英会話の評価画面では★の横に余計なキャプションはついてませんでした。

  • 11

Hi****

No.0002

24/04/02 (火) 15:57

評価の集計方法が変わり、同じ種類の教材であれば、一人1評価となったようです(アナウンスはされていません)。つまり、同じ生徒がデイリーニュースで100回受講して☆5を100回つけた場合、以前は100件の評価として扱われましたが、今は1件の評価として扱われます。

なので、☆3や☆4をつけた生徒が再度受講しても、☆3や☆4が複数回レビューにカウントされることはなくなりました。ただし、一度このような評価がつくと、講師は新しい生徒100人以上とレッスンをして100人以上から☆5をもらわないかぎり☆5未満の評価を集計対象から外すことはできなくなりました。

毎週100名以上の新しい生徒とレッスンをして、100件以上のレビューをもらえる講師は限られます。新しい生徒のうちの何割かは「新基準」での評価を行うので、☆3や☆4がさらについてマイナス2ポイント、1ポイントとなり、それらが蓄積されてどんどん評価が落ちて行っているようです。

評価4.5以上の講師が低評価を理由にアカウント停止になったと聞きました。☆3がふつうなのであれば、4.5は十分良い評価のはず。☆3がふつうと言いつつ、Native Camp自体の評価は☆5からの減点評価のようです(失笑)


>リピーターでとっている生徒を抱えている先生ほど★5を安定して取得しやすく
いますぐレッスンを抱える生徒をとると、★が低下してしまう危険があるジレンマ

>先生側からすると、★3や★4をつけた生徒がなぜ戻ってきて、
同じ先生のレッスンを受けようとするのか、わからない(困っている)様なのです。

>ネイティブキャンプの示す基準に素直に従って評価する方のレッスンの
ババ抜き状態になっている様にも見えます。

  • 7

No***

No.0003

24/04/05 (金) 16:24

こんにちは。
講師の評価が「レッスン満足度アンケート」のようになっていることが、そもそも問題だと思っています。「教え方のみを評価してください」とか「通信状況は評価に加えないでください」とか書いてあるにも関わらず、一向に「通信が不安定だった」「とてもいいレッスンでした。ありがとう!星4」みたいな評価が横行するのはそのせいだと思うのです。
そこで、レッスン後の評価の最初に、満足度を聞く設問を設ける、というのはどうでしょう?

「今回のレッスンは満足いただけましたか?」
星5 満足
星4 やや満足
星3 ふつう
星2 やや不満足
星1 不満足

星4、5 → 今までどおり、通信状況、テキスト、講師の評価へ

星1、2、3 → 満足できなかった要因を3つまで選択可能。コメント欄も併設。
評価はこのページで終了。該当講師は自動的に非表示に。
選択肢の例
「通信不良」「音声・カメラの不具合」「教材音声の不具合」「録音機能の不具合」「教材に難あり」「講師が高圧的/横柄」「講師が話し過ぎ」「チャットボックスを使わない」「リクエストを聞いてくれない」etc

最初の設問で星4以上でないと講師の評価にはたどり着きません(3からでもいいですけど)。なぜなら、レッスンに不満があるような気持ちでは、冷静に「教え方」の評価をできるとは思えないからです。講師のレイティングはここのポイントで決定されます。最初の質問は評価に影響しません。この質問はNCが顧客満足度を知り、改善点を検討するためのものです。
そして星3を「ふつう」としている現在の基準は、講師の教え方を評価するには不適切です。講師の評価は以前のように、星5を基準とした減点方式が良いと思います。そしてここでも「星4以下をつけたら自動的に非表示になる」機能の追加を強く希望します。

  • 5

hI

No.0004

24/04/05 (金) 21:58

意識的、無意識にも、
本質を見失わないことに注意を払うことを忘れないようにしないと足元をすくわれるので要注意

学生の本分は、、
評論家気、、?
他の生徒のため?

ちゃんちゃら、、

  • 3

Hi****

No.0005

24/04/05 (金) 23:55

自分の英語レベルと教材レベルや嗜好が合わないと、レッスンは楽しくないですよね。

例えば、自分にとって初めての教材で初めての講師とレッスンをしてみたらさっぱりわからず、ばつが悪い状況になったとします。これは講師の責任ではありませんが、生徒は気分的に☆5はつけたくないので、☆3がつけられる。この種の評価は他の生徒にとって何の参考にもなりません。

初めての生徒はリスクだ、とお気に入り講師の何人かが言っていました。
私は、その講師と一定回数(例えば5回)の受講歴がない生徒からは評価ができないようにした方がいいと思います。たんなる合う合わないや、いたずらの評価はこれでずいぶん回避できます。

また、現在の集計方法については、結果としてリピーターによる評価よりも一見の生徒がつける評価が講師の評価や処遇に大きな影響を与えて講師を苦しめることとなっており、おかしいと思います。

  • 9

Ra**********

No.0006

24/04/06 (土) 18:24

Hi****さんの意見に同意します。

・該当の講師と一定回数(例えば5回)の受講歴がない生徒からは評価ができないようにした方がいい。
 単なる合う合わない、いたずらの評価はこれで回避

・現在の集計方法については、結果としてリピーターによる評価よりも一見の生徒がつける評価が講師の評価や処遇に大きな影響を与えて講師を苦しめており、おかしい

上記抜粋させて頂きました。本当に同意致します。

  • 5

Ma**

No.0007

24/04/08 (月) 16:14

こんにちは。

私も何人かの先生から、新しい評価基準について、多く愚痴を聞きました。
Sh**さんが仰る通り、

>本来Native Campとしては★3はふつう、★4はやや満足という割り当てをしているので、
★3が最も本来最頻で送るものであり、★5は本当に満足した場合のみで問題ないと思うのですが、
ここに生徒(ネイティブキャンプ)と感じ方と先生の感じ方にギャップがあります。

まさにその通りだと思います。

実は、私は「★3はふつう、★4はやや満足という割り当て」に満足している生徒の1人でもあって、
ですので、先生方にこの新しい評価基準の周知をNCの運営の方からもっと周知していただけたらありがたいと思っています。

と言うのも、
私も長くNCにいるので、何人かのもはやお友達のような先生方の評価がこの度初めて4.9以下に落ちたりと、そしてその先生方の話を聞くと大変心苦しいのですが、
少し前に始まった、長くいる人?頻繁にレッスンを取ってる人に対するフィルター?のようなもので、ここ最近4.95以上の先生はほぼ表示されなくなり、高評価の先生の今すぐレッスンを取れないので、いい機会だからと思って、評価の高い先生方のレッスンを初めましての先生も含めて予約で取ってみることにしました。
もちろん人によって合う合わないはあると思いますが、総じて高評価、納得しました。(色々な点に於いて能力が高め)
そして、以前は今すぐで4.97以上の先生でも・・・あれ?っていう方もいましたが、最近は、本当により分けられている気がします。実際、以前に比べて、4.8台や4.7・・・4.6台の先生、増えましたよね・・・。今はなるべくしてなった人が高評価になっている、という印象です。実際、新評価になってからも高評価をキープしている先生方もいらっしゃいますし。
先生方には大変酷な評価制度ですし、モチベーションの低下で離職される方が多くなってしまわないか、事実、私のお気に入りの先生たちも離職したい、と言い始めています。これは非常に残念だなと思います。

生徒にとっては、「もちろん講師とは人間同士なので合う合わないは勿論ある」のは大前提で、今の★3を普通とする評価基準の方が、以前よりも選びやすいという利点がある一方で、講師の方は辛い思いをされてるので、複雑な心境です・・・そして私は小心者でいつも5つけてます・・

  • 1

Ak*

No.0008

24/04/08 (月) 17:33

評価の星の数に対する 生徒と先生の感じ方のギャップの問題ではないですよね。

問題は 4.7 を基準と考える生徒と 3を基準と考える生徒がいること
つまり生徒間の考え方のギャップがあることだと思います。

現状が4.7以上が平均になっている状況で
講師からしてみたら 3を基準に考える生徒は地雷生徒でしかないわけです。

これは別にネイティブキャンプだけではなくDMM英会話やCamblyにでも
言えることで、5段階評価で3が「平均値」であるべきだなんて
考えている生徒は少ないのは、どこのプラットフォームでも同じ。

もし本当に3を平均値にすべきであるならば、生徒の評価の投票できる★の数を
レッスン数×3に制限して、すべての生徒が月平均で3が中央値になるように
すべきかと思います。

ここだけは強調したい点ですが
あなたが「★3はふつう」だから平均的な講師のレッスンを受けたら
3を付けることに自分の中で満足していても
あなたは100% 講師にとっては地雷生徒です。
この原則は、今のシステムのままであれば永遠に変わりません。

  • 6

hI

No.0009

24/04/08 (月) 19:19

球数制限確かに!
25分で一票とか

ただ、ありそうなのは
お気に入りに5を上げるために、
サドンで一見さんに低い評価を配る?
相対評価の限界

  • 5

MI****

No.0010

24/04/09 (火) 17:35

評価の件とは少し違うかとは思いますが、
評価によってはサドンで新しい生徒等取れる方と、取れない方がいると思いますもちろん評価は大事だと思います。
評価方法を変えたのであれば、その基準にあうように工夫するのもいいと思います。評価が下がってサドンでなかなか生徒を獲得出来ずにいる方はたくさんいると思うので…

  • 0

投稿が制限されています

申し訳ございませんが、
ネイティブキャンプ広場利用ルール 第2条の禁止事項に該当する
投稿が行われたため、当掲示板への投稿が制限されています。