Hello Explorers,
Thank you all for your continued participation in our AMA’s this year. We’re glad to see your continued curiosity, engagement, and passion for the success of Wayfarer. In total, we got over 250 questions which were summarized into about 30 themes. As mentioned earlier, we’ll be addressing the themes that garnered the most questions and like last time, our Ambassadors will be answering some questions as well and you can find those throughout the comments. Now without further ado, let’s jump into it!
Please note, the responses below are in order from most popular to least. Meaning that the top theme had the most questions asked related to that theme.
Criteria
As stated in our June 2023 AMA we aim to ensure that the community is able to bring unique and significant places we may have never discovered. Niantic is a global company with a diverse workforce and we strive to create a map that reflects the world’s many cultures and perspectives. However, we recognize that we cannot be experts on every location, and we rely on the community to help us identify important places and landmarks that should be included on our map. By not significantly changing our criteria, we are ensuring that we do not impose our own limited view of the world, and that we instead allow the community to help shape the map.
We know that at times our Explorers wonder why we accept and/or reject certain edits, nominations, appeals, etc that some may disagree with when we rely on our community to inform us on areas we are unfamiliar with. This can be for several reasons such as limitations of the tools we regularly use or in an attempt to maintain balance between one report and community reports. We don’t always get it right and we hope to continue improving our processes to ensure that you as our most trusted users feel heard and valued.
Lastly, we have heard your feedback on criteria clarification present in previous AMA’s, forum posts and comments. This information is spread throughout and difficult to find and comprehend. In early 2024 we will work on compiling and updating this information in the Help Center (including translations) to help you all while reviewing a broad array of nominations.
We hope that these tools will provide examples (not exemplars) to our overall approach to criteria.
New Review Flow
A good portion of the questions asked under this category were focused around reviewing under the new review flow. I strongly encourage you to take a look at our tooltips, onboarding videos, and our response in the New Onboarding & Review Flow thread.
Another portion of the questions in this category asked “how do I ensure I rejected a nomination”. Our previous review flow was centered on the main question “Should this be a Wayspot”. It asked your individual opinion of the entirety of the submission. With the new review flow, we broke down that opinion into questions matching our acceptance and eligibility criteria. If you believe that a nomination should not be on the map, make sure you review the nomination and thumbs down Safe, Appropriate, Accuracy, or Permanent and Distinct to have your review reflect a rejection.
Lastly, here are some stats about the positive impact our new review flow has had since its launch:
- Average duration of voting prior to the new review flow launch: 42 days
- We’ve seen about a 50% improvement in turn around time
- We aim to get nominations to resolve within 2 weeks
We look forward to your continued feedback as we work on adopting and improving the new review process and combat years of muscle memory of the 5-star system.
Niantic Appeal Decisions
Thank you for your continued feedback and examples of instances where we didn’t quite hit the mark with your appeals. We know we’re not perfect and our team members working on appeals may have different views however that is not an excuse to not improve based on the feedback. We are in the process of updating our staff training on criteria, removals, etc in hopes to improve the community sentiment around more than just appeals. Please continue to share your feedback on your experiences as we continue improving our performance and hope to reach a good state soon.
Appeals
We have been extremely excited to see our progress in reducing the appeals backlog and glad that the community has noticed the resolution speed in new appeals. We are now caught up on appeals and hope to maintain a healthy turnaround time in the future, ideally looking at around a 2 week max. We don’t intend to apply any changes to the appeals process, our primary goal is to empower our community to use the tools such as tooltips, forum posts, onboarding videos, etc to make high quality decisions and lessen the reliance on appeals. We will be monitoring our resolution time over the next couple of months to ensure it’s sustainable and don’t go back to an overgrown appeals backlog.
- Average Appeal turnaround in early 2023: 245 Days
- Current Appeal turnaround: 2 Days
Contribution Management
Unfortunately we will not be meeting our prior estimate on when we would be delivering the additional capabilities within the Contribution Management page, including adding your edits to the page. As our focus in the first 3 months of 2024 will be on improving our abuse management system and the edits backlog (more below), we cannot currently commit to this work but will keep it on our list of requests to improve your Wayfarer experience. We are hopeful we’ll be able to work on this as we see more and more promising results in our other focus areas.
Machine Learning in Wayfarer
Earlier this year we launched this new system and have been monitoring its successes since. It had a very positive impact on the overall resolution time of your nominations and allowed a reduction in the amount of “coal” each of you reviewed. Check out more on Niantic’s Machine Learning efforts here.
While our automated system isn’t perfect, we will continue collecting examples of where we missed the target. Some of these feedback points were collected through our community forum, samples brought to us by our Ambassadors, and through the appeal rates on our ML decisions; all of these are signals that we use to improve its results. While we recently hit a hiccup in the process (more here) we hope to share more about the changes planned and output in early 2024.
Edits
With our nominations backlog looking better every day, we have started dedicating more time to resolve our Edits backlog. Since our last update in the June AMA, our internal teams have resolved more than 75,000 edits that helped train our automated system. The automated system will work to identify low quality edit contributions made to our map (e.g. blurry or abusive photos, inaccurate location edits, etc). The work on this automated system will continue to improve in the coming months and look forward to your feedback.
Abuse Ladder
It’s been about 2.5 months since the launch of our new Abuse Enforcement Ladder Policy and it’s made quite the splash. But we feel more confident that abusers in our system are now identified, investigated and punished more appropriately and that our ladder acts as a deterrent against those bad actors.
We know there’s always room for improvement and we’ve been spending the time listening to your feedback across multiple platforms, gathering feedback from our Ambassadors, and doing a listening tour from our own game teams who’ve also heard from their players. We also implemented a punishment appeal process and updated some offenses severity following this feedback. As we continue to gather feedback, we are open to making changes that’ll help all of us better understand the need, impact, and outcomes of our policy.
Since the launch of the policy in mid September, we have:
- Blocked 60 bots harming our community and map
- 65% of the cases are regarding coal submissions
- 75% of cases are low impact Warnings
We continue to welcome your feedback as we continue to learn more about our gaps in fighting abuse and where to finetune our policy.
Removals
We’ve heard our community’s pain points in regards to removals. “Why is this Wayspot not removed if it clearly doesn’t meet eligibility criteria”. We agree, our removals process is due for an update and as mentioned in the appeals section above, it is currently being worked on. One of the main focuses in this process is to bring these into alignment to ensure better results of what’s kept on the map. Our goal is to have the removals processes updated by the end of the year, start our staff training in early 2024, and hope that you all will start to notice the difference in removals before the end of our first AMA next year.
Translations
We are incredibly grateful for our localization team (that’s what we call our team who manage all our translations) who along with our Ambassadors help us reach a wider global audience. We understand that our translations don’t always hit the target and are thankful for the instances shared in the community as well as those that our Ambassadors bring to our attention. While language is an interesting challenge to get right with so many nuanced terms specific to Wayfarer, we are committed to making our translations better and better. Some of the improvements we’ve done is to share more of the content we intend to translate and publish with our Ambassadors, started and maintain an open line of feedback with our translation team, and are looking for ways to give our Ambassadors
Challenges
Our Wayfarer Challenges this year were the most successful yet. Thanks to the power of the community, we have made such an amazing impact on our map. Just this year alone, our challenges have:
- Resolved over 265,000 Wayspot nominations
- Engaged around 50,000 different Explorers
- Explored 13 different countries
- Helped contribute to 60% backlog reduction
With such amazing success,this puts us in a position to get creative. We hear your suggestions: edits challenge, nomination challenges, etc. None of these are off the table at the moment and hope to work with our Ambassadors to find a new and just as creative way to engage you all in some communal competition. We are incredibly thankful for all you, our Wayfarer Community has contributed to our goal of reducing our backlog. It’ll truly have a positive impact in nomination resolution speeds moving forward.
Wayfarer App
In our June Roadmap + AMA we shared that we had planned to bring the Wayfarer App to the Explorer community this past summer. Unfortunately, we have decided that the Wayfarer App is not what we need to improve our Wayfarer experience and will no longer be working towards shipping a Wayfarer App for the Explorer community at this time. Our current Wayfarer App, dedicated for the developer experience, will be deprecated and will migrate over to another app focused specifically on scanning.
We apologize for this change and understand that for some it may be disappointing. We understand the convenience that an app could offer, but feel it is not the right thing at this time. We may revisit this decision in the future, but will first prioritize our time and resources to ensure we provide the enhanced and improved Wayfarer experience that you’ve been asking for.
_
冒険者の皆さん
今年もAMAにご協力いただきありがとうございました。 『Wayfarer』を成功に導くために、皆さんが好奇心や貢献の意思、情熱を持ち続けてくださっていることを嬉しく思います。 合計で250以上の質問が寄せられ、これを30個のテーマにまとめました。 以前にもお伝えした通り、最も質問が多かった点については今後対処を行っていく予定です。また、前回同様、一部の質問にはアンバサダーがコメント欄でお答えします。 さて、前置きはこれくらいにして、本題に入りましょう！
なお、以下の回答は質問の多かったものから順に並んでいます。 つまり、最初のテーマは、そのテーマに関連する質問が最も多かったということです。
基準
2023年6月AMAでお伝えした通り、私たちの目標は、これまで発見されていなかったユニークで意義のある場所を、コミュニティが発掘できるようにすることです。 Nianticは多様なスタッフを擁するグローバル企業であるため、世界のさまざまな文化や考え方を反映したマップ作りに努めています。 しかし、私たちはすべての場所を知り尽くすことはできません。マップに掲載すべき重要な場所やランドマークを特定するために、各地域のコミュニティの皆さんにご協力をお願いしています。 基準を大きく変えないことで、Nianticの限られた視点を押し付けず、代わりにコミュニティがマップを形作る手助けになればと考えています。
冒険者の皆さんの中には、Nianticがよく知らない分野についてコミュニティからの情報に頼っている状況の中で、編集内容や候補、異議申し立てなど、一部の人たちが同意できない形でNianticがそれらを受け入れたり、拒否したりすることに疑問を感じる方もいらっしゃることでしょう。 これは普段使用しているツールの限界や、レポート1件とコミュニティレポート複数件とのバランスを保つためなど、いくつかの理由が考えられます。 私たちが常に正しい結論を出せるとは限りません。最も信頼できるユーザーの皆さんが自分の声が届いており、尊重されていると感じられるようにプロセスの改善を続けていきます。
最後に、過去のAMAやフォーラムへの投稿、コメントで示された基準の明確化に関するご意見がありました。 この情報は分散しており、見つけるのも理解するのも難しい状況となっています。 2024年初頭のうちに、ヘルプセンターに（翻訳も含めて）これらの情報をまとめ、更新し、皆さんが幅広い候補を審査できるように取り組んでいく予定です。
これらのツールを、Nianticの基準に対する全体的なアプローチの（模範ではなく）一例としてお役立てください。
新しい審査フロー
このカテゴリーに分類される質問の大部分は、新しい審査フローでの審査に焦点を当てたものでした。 新規オンボーディング&審査フローのスレッドにある新しいツールチップ、オンボーディングビデオ、そしてレスポンスをぜひご覧ください。
このカテゴリの質問には、「どのようにしてノミネートを拒否したか」というものがあります。以前の審査フローは、「これはWayspotになるべきか」と言う主な質問で構成されていました。以前の審査フローは、「これはWayspotになるべきか」という主な質問として構成されていました。そのため、個々の審査はノミネートに対する個人的な意見を確認するものでした。新しい審査フローでは、この意見を、承認基準と適格基準に沿った質問に細分化されました。ノミネートが地図に掲載されるべきでないと思われる場合は、したがって、必ず内容を確認いただき、「適切」、「安全」、「正確」、「永続的で独特な」などのいずれかの項目を「thumbs down /いいえ」マークしていただき、審査結果が拒否であることを確認してください。
最後に、新しい審査フローが始まってからポジティブな影響がありましたので、統計情報をいくつかご紹介します。
- 新しい審査フロー開始前の平均投票期間：42日
- 所要期間が約50%改善しました
- 2週間以内に候補審査を解決することを目指しています
私たちは、新しい審査プロセスの導入と改善に取り組みながら、ハイレベルなシステムに備わっているこれまでの履歴を処理していくために、皆さまからの継続的なご意見をお待ちしています。
Nianticの異議申し立てへの決定
引き続きご意見をお寄せいただき、また、異議申し立てへの対応が正確でなかった例も挙げていただき、ありがとうございました。 こちらの判断が完璧でないことは承知していますし、不服申し立てに取り組んでいるチームメンバーの見解も異なるかもしれませんが、フィードバックに基づいて改善しない理由にはなりません。 私たちは、単なる申し立てだけでなく、コミュニティの皆さんに納得していただけるよう、基準や解任などに関するスタッフトレーニングのプロセスを更新しているところです。 今後もパフォーマンスを改善し続けてより良い状態に到達するようにいたしますので、皆さんの経験について引き続きご意見をお寄せください。
申し立て
未処理の申し立てを減らし、コミュニティの皆さんが新しい申し立ての解決スピードが速くなっていることに皆さんが気づいてくださったことを嬉しく思っています。 現在は、申し立てにおける遅れを取り戻し、今後も所要期間が短い状態を維持したいと考えています。 申し立てのプロセスには変更を行うつもりはありません。第一の目標は、ツールチップ、フォーラムへの投稿、オンボーディング動画などのツールを使用し、申し立てへの依存を減らすことです。 今後数ヶ月間、解決にかかる時間を監視して待ち時間が増えないようにし、申し立てが以前のように滞留しすぎないようにします。
- 2023年初頭の申し立て処理における平均所要期間：245日
- 現在の申し立て処理期間：2日
投稿の管理
ページに自分の編集内容を追加するなど、投稿の管理ページ内への機能追加については、事前に見積もった提供スケジュールには間に合わない見込みです。申し訳ございません。 2024年の最初の3ヶ月間は、不正使用管理システムの改善と編集履歴（詳細は後述）の改善に重点を置いているため、現在のところこの作業にコミットすることはできませんが、『Wayfarer』の体験をより良いものにできるよう、皆さんの要望リストに入れておきます。 他の重点分野で望ましい結果が出れば、これに取り組めるようになるでしょう。
『Wayfarer』の機械学習
今年初めにこの新システムを立ち上げて以来モニターしており、現在のところ成功を納めているようです。 全体的な候補の審査時間に非常に良い影響を与えており、皆さんに審査していただく質の悪い候補の量を減らすことができました。 Nianticの機械学習への取り組みについてはこちらをご覧ください。
自動化システムは完璧ではありませんが、目的外の結果になった事例の収集を続けていきます。 収集されるフィードバックの中には、コミュニティフォーラムやアンバサダーから寄せられたサンプル、機械学習での決定に対する申し立て率などを通じて集められたものもあります。 最近では、そのプロセスで課題にぶつかることもありましたが（詳しくはこちら）、2024年初頭には、計画されている変更とアウトプットについてさらにお知らせできる予定です。
編集
候補の審査時間が日々改善されているため、編集後の審査を解決するためにより多くの時間を割くようになりました。 前回のお知らせ（6月AMA）以来、私たちの内部チームは、自動化システムのトレーニングに使用するため75,000以上の編集内容を審査してきました。 この自動システムは、マップに投稿された低品質の編集（不鮮明な写真や乱暴な写真、不正確な位置の編集など）を識別するために機能します。 この自動システムに関しては今後数ヶ月内で改善を行っていく予定です。皆様からのフィードバックをお待ちしています。
不正行為の段階的処分
不正行為に対する段階的ペナルティのポリシーについて発表してから約2ヶ月半が経ち、大きな反響をいただいています。 システムにおける不正行為者に対して、適切に特定・調査・処分ができていること、そして段階的な措置が不正行為に対する抑止力として機能しているのは確かです。
どんなものにも改善の余地はあります。複数のプラットフォームで皆さんのフィードバックに耳を傾け、アンバサダーからのフィードバックを収集し、また、ゲームを開発するチームもプレイヤーの声を聞く機会を設けていました。 また、このフィードバックを受けて、処分の申し立て手続きを改善し、一部のペナルティの重さに変更を行いました。 今後も引き続きフィードバックを集めながら、このような施策の必要性、影響、成果をよりよく理解するために、私たち全員がメリットを受けられるよう調整していきます。
9月中旬のポリシー発表以来、以下の成果がありました。
- コミュニティとマップを妨害するボット60件をブロック
- ケースの65%は質の悪い候補の提出に関するもの
- ケースの75%は影響が小さい警告
不正行為に対する姿勢のギャップを埋め、ポリシーを微調整していくためにも、引き続き皆さんからのご意見をお待ちしております。
削除
コミュニティからは、削除について様々な意見をいただいています。 「明らかに適格基準を満たしていないのに、このWayspotが削除されないのはなぜ？」 削除プロセスにはアップデートする時期が来ており、上記の申し立てのセクションで述べたように、現在取り組んでいる最中です。 このプロセスにおける主な焦点は、現在の適格基準とWayspotを一致させ、マップによりよいものを残せるようにすることです。 年内に削除のプロセスを更新し、2024年初頭にはスタッフトレーニングを開始して、来年最初のAMAが終了するまでに、削除プロセスの違いにお気づきいただけるようになることが目標です。
翻訳
ローカライズチーム（すべての翻訳を管理するNianticのチームの呼称）のおかげで、アンバサダーとともに、より多くの世界中の人々にリーチできるようになっています。 翻訳が必ずしも正確でないことは理解しており、事例をコミュニティで共有したり、アンバサダーが私たちに注意喚起したりしていることについて感謝しています。 『Wayfarer』には特有のニュアンスの異なる用語が多いため、言語を正しく理解するのは難しい課題となりますが、翻訳をより良いものにするために全力を尽くしていきます。 また、アンバサダーとはさらなるコンテンツを翻訳・展開し、翻訳チームとのオープンな意見交換を開始・維持して、アンバサダーへ
チャレンジ を提供する方法を探しています
今年のWayfarerチャレンジは、これまでで最も大きな成功を収めました。 コミュニティのおかげで、マップに良い影響を与えることができたのです。 今年だけでも、私たちは以下のことを成し遂げています。
- 265,000件以上のWayspot候補を審査しました
- 約50,000人のエクスプローラーが参加しました
- 13ヵ国を探索しました
- 審査遅れを60%削減しました
このような進歩があったことで、さらに創造性を発揮できるようになりました。 編集チャレンジ、提出チャレンジなど、皆さんのご意見をお聞かせください。 アンバサダーの皆さんと協力して、新しいクリエイティブな方法を見つけ、皆さんと一緒にチャレンジに参加したいと思っています。 『Wayfarer』コミュニティの皆さんが、私たちの目標である審査時間削減のために貢献してくださったことに大変感謝しています。 これで候補審査スピードがさらに短縮されるでしょう。
『Wayfarer』アプリ
6月のロードマップ+AMAでは、この夏に冒険者の皆さんへ『Wayfarer』アプリを提供する予定であることをお伝えしました。 申し訳ありませんが、『Wayfarer』アプリは『Wayfarer』の体験を向上させるために必要なものではないとの判断に至ったため、冒険者の皆さん向けの『Wayfarer』アプリを配信する予定は現時点ではありません。 現在の『Wayfarer』アプリは、開発者向けに特化しており廃止予定です。今後はスキャンに特化した別のアプリに移行していきます。
予定の変更についてはお詫び申し上げるとともに、残念に思われる方もいらっしゃるかと思います。 アプリを配信することで利便性を向上できる可能性もありますが、現時点では適切なものではないと感じています。 将来的にはこの決断を見直す可能性もあります。ですが、まずは皆さんからご要望の多かった、より充実した『Wayfarer』体験をご提供できるよう、時間とリソースを優先していきます。
(originally posted December 2023)