Carrières · Programme de vérification
Annotateur, programme de vérification
Le programme de vérification contrôle les entrées dont les réponses d'Ackren sont dérivées. Il paie quinze livres de l'heure, à l'heure vérifiée plutôt qu'à l'item, pour que l'incitation ne soit pas d'expédier les cas incertains. Le régime de qualité est public avant que vous ne postuliez.
Le travail
Ce que vous feriez
- 01
Vérifier les entrées au regard de la consigne
Vous contrôlez des entrées de lexique et de qualia : si un sens est juste, si une relation tient, si un exemple la soutient. Ce sont les parties de la base de connaissances qu'il est sûr de vérifier à grande échelle.
- 02
Marquer l'incertain, et être payé pour cela
« Incertain » est une réponse à part entière, pas un échec. Chaque item incertain part en arbitrage expert plutôt que d'être forcé vers une décision. Vous êtes payé à l'heure vérifiée, en signaler un ne vous coûte donc rien.
- 03
Travailler dans un régime publié
Cinq pour cent des items sont des étalons insérés, notés en continu. Vingt pour cent sont annotés en triple avec le kappa de Fleiss rapporté. Les désaccords et chaque item incertain sont arbitrés par un expert.
- 04
Laisser une trace qui puisse être recontrôlée
Chaque jugement est journalisé avec sa base, de sorte que la base de connaissances puisse être recontrôlée plus tard. La méthodologie est publiée avec le travail plutôt que gardée en interne.
Exigences
Ce que nous recherchons
C'est un travail de lecture qui récompense la patience et l'honnêteté plutôt que la vitesse. Vous n'avez pas besoin d'un parcours en linguistique ou en apprentissage automatique. Vous devez appliquer une consigne de façon cohérente sur des centaines d'items, et résister à l'envie de deviner quand un item est réellement obscur. Si vous lisez bien une deuxième langue, dites-le, mais ce n'est pas exigé.
- Lecture attentive
- Cohérence d'un item à l'autre
- À l'aise pour dire « incertain »
- Une deuxième langue, facultatif
- Aucune expérience d'annotation requise
Conditions
Comment nous travaillons
Entièrement à distance, partout dans le monde. Nous demandons quelques heures de recouvrement avec les horaires britanniques, GMT ou BST, pour que les questions trouvent réponse le jour même. Vous êtes payé à l'heure vérifiée quinze livres, pas à l'item ni à la pièce, parce que le paiement à la pièce paie les gens pour expédier précisément les cas qui demandent le plus de soin. Le travail que vous vérifiez pour Aleten est cédé à Aleten, et nous le disons ici plutôt que dans un e-mail ultérieur.
Ce que ce poste n'est pas
Vous ne rédigez pas la grammaire. Les règles et les cadres restent centralisés auprès d'une seule personne et ne sont pas vérifiés par la foule, car une erreur dans une règle se propage d'une façon qu'une erreur dans une seule entrée lexicale ne connaît pas. Ce poste vérifie les parties qu'il est sûr de vérifier à grande échelle : le lexique et les relations de qualia. Si cette frontière sonne comme une rétrogradation, elle n'en est pas une. Elle est la raison pour laquelle les chiffres veulent dire quelque chose.
Candidature
Un court formulaire, lu par une personne
Parlez-nous un peu de vous et de ce qui vous attire dans une lecture attentive et honnête. Aucun exercice n'est nécessaire pour engager la conversation.
Le formulaire enregistre votre candidature dans notre propre base de données, et une personne la lit ; il n'y a aucun système de suivi tiers. Si vous préférez écrire, écrivez à work@aleten.com en indiquant que vous visez le poste d'annotateur du programme de vérification, et une personne vous répondra.