不当な評価の低下について

報告
審査担当者の評価が正当な理由もなく下降してしまいます。私の審査担当者としての評価はプアまで低下してしまいました。これには正当な理由もないと考えています。審査でタイムアウトしてしまったのですが、その数分後に起きたのです。
最近では今朝のことですが、それは素晴らしいプレイグラウンドでサテライトビューでも確認できる公共のパーク内にあり重複もなく判断が容易であったため1分間もかからずに審査を終えましたが、ウエイフェアラーはタイムアウトだと言ってきたのです。その後も1、2件の審査を終えたのですが現状の審査員としての評価はプアだと表示されてしまっています。
数日前に評価がイエローに達したことで、アグリーメントの割合を確認するようになりました。そのときの割合は64.3%となっていました。それが良いのか悪いのかはわかりませんが、過去3日間で見てみると、アグリーメントの割合は82.1%となっています。
したがって、これは不当な評価なのだと考えています。

http://ingress.lycaeum.net/assets_c/2018/09/r2kYuN5e_400x400-thumb-50xauto-16212.jpgNianticCasey-ING
2020/05/13 05:29
この件については、ウエイフェアラーチームからお伝えするまで今少しお待ちください。私からは多くをお伝えすることはできませんが、ここで生じていることを対処する手段については、裏で大きな議論となっています。早急にお伝えできることを願っています。

意見
まず、私たちはあなたの取り組みに感謝しています。しかし、審査担当者の評価に関しては取扱いの機密性が高まっているようにみえることを憂慮しています。私の知る限り、十分な説明は行われたことがありません。最近では審査担当者の評価は大きく変動していますが、その理由に関しては誰も答えられていません。それはこのフォーラムやレディット上で憶測に憶測を呼んでいます。これは酷い状況のように思えます。ナイアンティック社がこのシステムでゲームのように遊ばれたくはないことは承知していますが、審査担当者に対してプロセスのちょっとした洞察を提示した方が良いのかもしれません。1万5千件に及ぶ審査を行ってきて、ある日にログインすると自分の評価が説明も理由もなくイエローになっていたときには愕然とすることでしょう。アルゴリズムの確認を求めているわけではありませんが、誠実なウエイフェアラー審査担当者に対する回答には充分と思えないものもあります。

http://ingress.lycaeum.net/assets_c/2018/09/r2kYuN5e_400x400-thumb-50xauto-16212.jpgNianticCasey-ING
2020/05/13 07:50
ご指摘いただき、ありがとうございます。ウエイフェアラーチームと協議し、この件のわかりやすい説明を検討しているところです。

Pangarban-ING
2020/04/28 18:39(Forum)
Reviewer rating dropped for no good reason
My wayfarer rating has dropped to poor, I believe for no good reason. I have had occasions where the review has timed out, but it happened within a few minutes. The final time was this morning, when I completed a review in less than a minute (it was a good play area, visible on satellite view, in a public park, not a duplicate, so very easy), but the Wayfarer page said I was out of time. One or two reviews later and it said my reviewer rating is now poor.
When my rating went to yellow a few days ago, I started tracking my percentage of agreements every day. At the time my % was 64.3%. I have no idea if that is good or bad, but as of this morning it had gone up to 64.4%. But my percentage of agreements/reviews for the past three days has been 82.1%
So I believe I have been unfairly given a poor Wayfarer rating.

NianticCasey-ING
2020/05/13 05:29(Forum)
Reviewer rating dropped for no good reason
Hi everyone,

I appreciate your patience as I talk to the Wayfarer team about this. While I can't say much, there are larger discussions behind the scenes about how to handle what's happening here.

I hope to have more information to share soon.

BlameJamal-ING
2020/05/11 23:36(Forum)
Red, Yellow, Green Wayfarer rating
@NianticCasey-ING Greetings. let me start by saying that I (we) appreciate you and all you do. However, I am concerned with what appears to be a heightened level of secrecy when it comes to the reviewers rating.
To my knowledge, it has never been fully explained. Lately reviewers rating have fluctuated between the different levels and no one can (or will) answer the question "why". It leaves it up to people here on this forum and on Reddit to guess ans speculate.
I think that's awful. I know NIA doesn't want people to be able to game the system, but giving the reviewers a *little insight* into the process could be a good idea.
It can be disheartening to have north of 15,000 reviews and login one day and see you are in the yellow. With no explanation or reason why. I'm not asking to see your algorithm, but some answers for your loyal wayfarer reviews is not too much to ask.

NianticCasey-ING
2020/05/13 07:50(Forum)
Red, Yellow, Green Wayfarer rating
Thanks for surfacing this, I hear you. I'm talking to the Wayfarer team to see how we can demystify this topic for folks.

 

前へ

ミッション作成ツールの問題(2)

次へ

墓地内建造物の適格性(2)