NER: not all annotations imported?

Hello!
I have an JSONL-File converted from a TEI/XML-File, which already includes annotations. I want to import the annotations to a dataset, cause I want to use this as a goldstandard for evaluating a trained model. The JSONL-File I import looks the following:

{"text": "A l\u2019\u00e2ge de cinq ans, ma\n                        tante perdit son\n                        \u00e9poux d\u2019une blessure qu\u2019il re\u00e7ut \u00e0 une bataille tr\u00e8s fameuse.\n                    Elle redoubla son amour et sa tendresse pour moi et me donna toute son attention\n                    qui jusque l\u00e0 avait \u00e9t\u00e9 partag\u00e9e par l\u2019objet du monde qu\u2019elle avait le plus\n                    ch\u00e9ri. Il mourut \u00e0 Bruxelles et elle y fut pendant sa maladie, et me laissa\n                    entre les mains d\u2019une\n                        gouvernante fran\u00e7aise qui fut choisie entre toutes la plus douce\n                    et la plus complaisante. J\u2019aurais \u00e9t\u00e9 fort heureuse si elle eut \u00e9t\u00e9 ma\u00eetresse\n                    absolue de mon \u00e9ducation\u00a0; mais l\u2019indulgence de mes parents mettait toujours obstacle\n                    quand elle voulait mod\u00e9rer mon amour-propre et ma vanit\u00e9. Au retour de ma tante, elle me contait en\n                    m\u2019embrassant avec des torrents de larmes les b\u00e9n\u00e9dictions que mon oncle lui avait dit\n                    qu\u2019il me donnait. Et \u00e0 ma\n                        gouvernante elle ne pouvait se lasser de lui marquer l\u2019\u00e9tonnement\n                    que lui avaient donn\u00e9 les soins et les services qu\u2019une religieuse avait rendu \u00e0 mon oncle jusqu\u2019\u00e0 lui\n                    fermer les yeux apr\u00e8s sa mort et lui rendre toutes les attentions qu\u2019on doit\n                    chr\u00e9tiennement \u00e0 des malades ou mourants. En v\u00e9rit\u00e9, disait-elle, les gens de\n                    cette religion ont bien plus de charit\u00e9 que nous, qui croyons \u00eatre plus\n                    illumin\u00e9s. Cette parole me frappa toute jeune que j\u2019\u00e9tais, et je ne pus d\u00e8s lors\n                    vaincre la curiosit\u00e9 que j\u2019avais de savoir quelle sorte de gens dont elle\n                    parlait, mais on crut avec raison qu\u2019\u00e0 mon \u00e2ge il \u00e9tait inutile de m\u2019en dire\n                    davantage.", "spans": [{"start": 21, "end": 53, "label": "PERSON"}, {"start": 61, "end": 94, "label": "PERSON"}, {"start": 480, "end": 531, "label": "PERSON"}, {"start": 741, "end": 752, "label": "PERSON"}, {"start": 870, "end": 878, "label": "PERSON"}, {"start": 981, "end": 990, "label": "PERSON"}, {"start": 1048, "end": 1086, "label": "PERSON"}, {"start": 1212, "end": 1226, "label": "PERSON"}, {"start": 981, "end": 990, "label": "PERSON"}]}
{"text": "Ma tante avait\n                    des sentiments dignes d\u2019une h\u00e9ro\u00efne, et il est certain que si son amour pour moi\n                    ne l\u2019e\u00fbt s\u00e9duit elle m\u2019aurait \u00e9lev\u00e9e dans toutes les r\u00e8gles de la mod\u00e9ration et\n                    de l\u2019humilit\u00e9. Lorsque je fus un peu plus avanc\u00e9e elle me faisait des\n                    remontrances dignes de ses vertus et de son m\u00e9rite\u00a0; mais avec une douceur que\n                    ma vivacit\u00e9 naturelle et mes mani\u00e8res \u00e9tourdies ne pouvaient comprendre. J\u2019\u00e9tais\n                    au d\u00e9sespoir quand je devais \u00e9couter ces sages avis, et quelques jouets et\n                    colifichets m\u2019occupaient plus que tous ses sages discours. Cela dura toujours \u00e0\n                    peu pr\u00e8s le m\u00eame train jusqu\u2019\u00e0 l\u2019\u00e2ge de dix ans. Je n\u2019avais jusque l\u00e0, \u00f4 mon\n                    Dieu, aucun bon sentiment que d\u2019aimer \u00e0 me taire plusieurs heures de suite et \u00e0\n                    me cacher pour \u00eatre seule, ce que mes bons parents attribuaient \u00e0 opini\u00e2tret\u00e9 et\n                    caprice\u00a0; mais c\u2019\u00e9tait votre conduite \u00f4 Divin J\u00e9susSauveur sur moi, pour\n                    m\u2019accoutumer de bonne heure \u00e0 la solitude et aux r\u00e9flexions o\u00f9 votre adorable\n                    Providence m\u2019a mise. Le\n                        beau-fr\u00e8re de ma\n                        tante avait les plus belles charges du pays et \u00e9tait estim\u00e9 et\n                    respect\u00e9 d\u2019un chacun. Ceux qui \u00e9taient gouvern\u00e9s par l\u2019int\u00e9r\u00eat me flattaient et\n                    me faisaient la cour pour s\u2019insinuer dans ses gr\u00e2ces. J\u2019\u00e9tais applaudie et\n                    distingu\u00e9e universellement de toutes les autres de mon \u00e2ge, chacun t\u00e2chait de me\n                    gagner pour s\u2019assurer la possession de l\u2019h\u00e9ritage de l\u2019illustre maison qui\n                    m\u2019\u00e9levait puisqu\u2019ils m\u2019en d\u00e9claraient h\u00e9riti\u00e8re\u00a0; mais j\u2019\u00e9tais hautaine et\n                    arrogante, et m\u00e9prisais tout ce qui se pr\u00e9sentait. Le langage, le pays, les gens\n                    que je voyais, tout m\u2019\u00e9tait contraire et j\u2019avais un secret penchant pour le pays\n                    o\u00f9 j\u2019\u00e9tais n\u00e9e.", "spans": [{"start": 0, "end": 8, "label": "PERSON"}, {"start": 1231, "end": 1268, "label": "PERSON"}, {"start": 1272, "end": 1304, "label": "PERSON"}]}

The JSONL-File contains about 33 person annotations, but the db-in command only imports 10 (at least thats said in the terminal). When I then export the annotations from the created dataset (imported annotations), I get an JSONL-File, where the count of the annotations is correct. Why? Is the count in the terminal not correct?

It would be great, if you could help me. Thank you!

Hi @selinagalka1 and welcome to the forum :slight_smile:

When you say the input JSONL has 33 person annotation you mean 33 lines in the input JSONL, right?
It's not immediately obvious to me why the numbers don't match.

Could you run your command with PRODIGY_LOGGING=basic in front and share the output with me? As well as the command.
Thank you!