ahmed/wiqaya
1
0
Fork 0
Code Issues Pull requests Projects Releases Packages Wiki Activity Actions

update db

Browse source
This commit is contained in:
tayf 2026-03-10 13:52:44 +02:00
parent 1d655d32ef
commit fbd872a40a
2 changed files with 4 additions and 2 deletions
Show stats Download patch file Download diff file Expand all files Collapse all files

5
src/wiqaya/data/ar.txt
View file

@ -966,7 +966,7 @@ zwimel
ابو فص ابو فص
ابو قرعة ابو قرعة
اتن اتن
احا *احا*
احترم نفسك احترم نفسك
احتلام احتلام
احلي كث احلي كث
@ -1275,10 +1275,11 @@ zwimel
نكت امه نكت امه
نياكة نياكة
نياكه نياكه
نيك *نيك*
واطي واطي
وسخ وسخ
ولد القحبة ولد القحبة
ولد القحبه ولد القحبه
يا هبيلة يا هبيلة
يلعن يلعن
*كس*

1
src/wiqaya/filter.py
View file

@ -43,6 +43,7 @@ class Wiqaya:
return text return text
def _process(self, text: str) -> list[str]: def _process(self, text: str) -> list[str]:
# حذف التشكيل من الكلمات العربية لتجنب التحايل
if self.lang == "ar": if self.lang == "ar":
text = remove_tashkeel(text) text = remove_tashkeel(text)
return text.lower().split() return text.lower().split()