اللغة العربية وتحديات البحث

[beshoo]

بحثت كثيرا عن موضوع اللغة العربية والبحث في حال كان النص مشكل ام لا . او فية مدود او الهمذات وحتى وجود ال التعريف .
وجدت الكثير من الاراء ولكن لم يتطوع احد بالشرح المفصل . او كودجود خوارزمية لهذا الموضوع حبذا لو احد منكم قد واجه المشكلة مساعتدنا بهذا الخصوص

[Suliman1]

بصراحة، لا أعتقد أن هناك من الأبحاث التي تشبع الباحث، لأنني عانيتُ ما عانيتَ. ولكن دون جدوى.
ولا أعتقد أن هناك من المعلومات تفوق ما وصلت إليه شركة ضخر
ربما هذا الرابط يفيدك في العلم بالشئ لا أكثر
http://www.sakhr.com/Sakhr_a/Product...cts&Sub=Idrisi

[Milad]

لدي قاعدة بيانات لقاموس طبي موحد

والكلمات العربية فيه مشكلة ويوجد حقل مجاور غير مشكّل من أجل البحث فيه

بالنسبة لـ "ال" يمكنك إزالتها أو إضافتها برمجياً وبسهولة

أليس كذلك؟

لا أدري إن كان بالإمكان إضافة wild charts بين كل حرف وآخر بحيث يبحث عن أي حرف موجود بينهما (التشكيل بوصفها محارف)

ما رأيك بهذه الفكرة؟

[beshoo]

وجود حق مشكل واخر غير مشكل موضوع متعب و ممل وياخذ الكثير من الموارد .

افكر بوجود طريقة بتجاهل التشكيل عند البحث
قدم احد الاخوة دالة تساعد الباحث على ان يبحث بالكمات حتى لو كانت بالشكل التالي (القبــــــــطاــــــــــــان نــــــــامق)

وهي :

function abword($word){ 
    for($i=0;$i<strlen($word);$i++){ 
        $abword.=$word{$i}."[_]{0,}"; 
    } 
return($abword);
} 

اود ان اطوريها لتشمل التشكيل ولكن انا جربت ناتج هذة الدالة ولم افلح .

بالنسبمو لموقع صخر .... فهم من رواد هذا المجال ولكن راسلتهم وتجاوبهم جدا بطيء .

[beshoo]

لم افلح ؟
من قال لم افلح ... يا بيشو انت واحد صار لازم لك تغير بروسيسور لساتك على ال DX4
هههههههههه

شوف يا بيشو بما انو انا بيشو وماخد عضوية حالي

اليكم هذة الدالة البسيطة جدا الوقية بنفس الوقت وتبحث عن اي كلمة بالتشكيل

<? 
function abword($word){ 
    for($i=0;$i<strlen($word);$i++){ 
        $abword.=$word{$i}."[َ|ً|ُ|ٌ|ِ|ٍ|ـ]{0,}"; 
    } 
return($abword);
} 
$word = abword("القبطان نامق"); 

print 'SELECT * FROM Users WHERE user_name RLIKE BINARY '."'".trim($word)."';";
?>

جاري التطوير لشمل كل حالات الحروف

[مرشوش بفليت]

بإختصار ... عليك البحث في الحركات والمدات وال التعريف ... وجعل النتائج المطابقة 100% تظهر في البداية ...
في حال كانت النتائج مثلاً أقل من 10 نتائج ... يتم حذف الحركات والمدات وأي "ال" موجود في بداية كلمة وتظهر بقية النتائج ...
هذا من جاب نظري والعملي عليك

[Milad]

تماماً يا بيشو هذا كان قصدي ... وضع wildcharts بين الحروف

لكن ما وضعته أنت نختلف عما وضعته أنا

[beshoo]

الدالة تعمل معي بشكل ممتاز جدا


شباب لو سمحتم ممكن تحطون لي كل حالات حروف اللغة العربية المستعصية لك اصنع لكم كلاس محترم للبحس العربي مع التشكيل ومع الفراغات وايضا مع التحقق من الكلمة المدخلة عربية ام لا .

اتوقع هنا يجب ان ارى قلم استاذي سردال

[beshoo]

تعمل بشكل ممتاز في قاعدة بيانات صغيرة ولكن ان كانت عملاقة القاعدة فهذا يعني زمن مهول جدا .....
بانتظار حل جديد .

[Zizwar]

ممكن جدا أن أساعدك في تحويل محتوى الحقل قبل الإرسال بنفس الطريقة التي طرحت في الكود لكن بالجافاسكربت، هذا سيخفف على السرفر

[Egyptechno]

برأيي ..

لا يجب ان نقوم بتعديل برمجياتنا وابتكار برمجيات لتناسب قاعدة البيانات المحتوية للكلمات ..

ولكن يجب ان يتم ( تهيئة ) قاعدة البيانات جيدة .. ومن ثم ايجاد قاعدة بيانات ( محترمة ) ( منسقة ) للعمل ..

مثال صغير :
بالنسبة للمثال الذي وضعه الاخ بيشو (القبــــــــطاــــــــــــان نــــــــامق) .. هل من المنطق ان نقوم بإضافة الرمز ( _____ ) إلى الكلمة المبحوث عنها .. ام اننا نعدل كلمة ( القبـــــــــطـــــــان ) التي في قاعدة البيانات إلى الكلمة العادية ( القبطان ) ؟


وينطبق المثال على جميع الحالات ..

[Colombo]

هل من المنطق ان نقوم بإضافة الرمز ( _____ ) إلى الكلمة المبحوث عنها .. ام اننا نعدل كلمة ( القبـــــــــطـــــــان ) التي في قاعدة البيانات إلى الكلمة العادية ( القبطان ) ؟

بالظبط أخى Egyptechno

فالأفضل أن نعدل محتوى القاعدة لمرة واحدة فقط عند الإدخال إليها

بدلا من معالجة الكلمة فى كل مرة نقوم فيها بعمل بحث

و خصوصا لكى لا نترك المجال أمام أى مخرب أن ينتقم من السيرفر بعمليات بحث مكثفة و معقدة

[X Sewar X]

أعتقد أن لهذا الدرس علاقة بالموضوع: http://www.daif.net/index.php?app=artical&id=26

[beshoo]

اخي زيزوا الموضوع هذا غير منهك ان تضيف ولكن المنهك عملية البحث .


طيب اذا كان عندك قاعدة البينات مشكلة وليس كمثال القبطان نـــــــــــــامق .
وتريد البحث فيها مثلا كلمة " جُلُنارٍ " لن تجدها اذا كتبت " جلنار "

الموضوع اكبر من هذا .

انا قرات انه يجب اتباع اساليب فهرسة الجدول ولكن لا اعلم اي من هذة الأساليب .

X Sewar X الدالة مستقاة من نفس الدرس.

[سردال]

سبق أن طرحت تصوري في موضوع قديم:
http://swalif.net/softs/showthread.php?t=89010

المشكلة أن كل الحلول التقنية التي لا تعتمد على محرك إملائي نحوي عربي لن تحل المشكلة إلا جزئياً، لدينا الكثير من الحالات التي لن نستطيع التفريق فيها بين كلمتين إلا بمعرفة موقعها ومعناها في الجملة.