Hi, I got the following error while running inference on some text s

Error when non-UTF-8 encoding char occurs in a text during inference about arabicner HOT 2 CLOSED

ahmedbr commented on September 2, 2024

Error when non-UTF-8 encoding char occurs in a text during inference

from arabicner.

Comments (2)

mohammedkhalilia commented on September 2, 2024

Hi Ahmed,

I tested inference on the text you provided using the command line below and it worked without errors. it seems you are wrapping the inference with other scripts (ner_inference.py and ner_tester.py) that are not part of the ArabicNER package. To isolate the problem to ArabicNER only, can you please run the command line below and see if it works.

arabicner/bin/python -u arabiner/bin/infer.py \
      --model_path path/to/model 
      --batch_size 16 
       --text "يبدو أن فكر التنظيم الداعشيّ -الذي ينتشر بصورةٍ واسعة عبر وسائل التواصل الاجتماعي، ومقاطع فيديو دعائية بارعة- قد نجح في إلهام موجةٍ من العنف على مدار ما يزيد عن عامٍ: تتضمن إطلاق النار في سان بيرناردينيو بكاليفورنيا، وقتل العديد من رواد مقهى للمثليين بأورلاندو في شهر ‏ ‏‏يونيو/‏‏حزيران، والهجمة القاتلة في أول شهر ‏يوليو/‏تموز 2016 على مقهى آخر ببنغلاديش. يُضاف إليها الهجمات التي يُرجح أن واضعي خططها هم أكبر مُهندسي العمليات في الدولة الإسلامية، مثل هجمات باريس في نوفمبر /‏تشرين الثاني 2015، وتفجيرات بروكسل في مارس/‏آذار ‏2016. ‏"

from arabicner.

mohammedkhalilia commented on September 2, 2024

I will close this issue for lack of response and inactivity.

from arabicner.

Recommend Projects