ما هو حل مشكلة البحث في النصوص العربية المشكلة

وعليكم السلام ورحمة الله وبركاته

أنشأ جدول جديد يحتوي على النصوص بدون تشكيل، وفيه id للنص الأصلي بالتشكيل، ثم تقوم بالبحث فيه. طبعا تعمل هذا برمجيا.

لإزالة التشكيل باستعمال php، يمكنك استعمال preg_replace ، حيث أن حركات التشكيل في unicode تمتد من 064B إلى 0653، .

<?php
header('Content-Type: text/html; charset=UTF-8');

$text = 'بِسْمِ اللَّهِ الرَّحْمَنِ الرَّحِيمِ (1) الْحَمْدُ لِلَّهِ رَبِّ الْعَالَمِينَ (2) الرَّحْمَنِ الرَّحِيمِ (3) مَالِكِ يَوْمِ الدِّينِ (4) إِيَّاكَ نَعْبُدُ وَإِيَّاكَ نَسْتَعِينُ (5) اهْدِنَا الصِّرَاطَ الْمُسْتَقِيمَ (6) صِرَاطَ الَّذِينَ أَنْعَمْتَ عَلَيْهِمْ غَيْرِ الْمَغْضُوبِ عَلَيْهِمْ وَلَا الضَّالِّينَ';

echo "Before: $text<br />";

$text_no_tachkil = preg_replace('/[\x{064B}-\x{0653}]/u', '', $text);

echo "After: $text_no_tachkil<br />";
?>

ممتاز الحل

لكن الا يوجد دالة في الـ MySql تقوم بعمل preg_replace أثناء البحث وتوفر علينا مشوار إنشاء جدول ثاني

المشكلة يا عزيزي إن عندي في المكتبة أكثر من خمسة آلاف كتاب كثير منها بالتشكيل

طبعا غير نصوص المصحف

خذ لك نظرة على هذي الصفحة انا ما فهمت بالضبط ايش القصود

http://dev.mysql.com/doc/refman/5.1/en/regexp.html

ويا ليت لو تكمل جميلك وتتابع معنا وفقك الله

المشكل أن regular expressions في MySQL بدائية نوعا ما ولا تدعم ال unicode حسب ما فهمت، لذلك لا يمكن عمل شيء مثل preg_replace

الحل الذي أراه هو أن تنشأ جدول جديد بنفس بنية الجدول الذي تستعمله، مع عمود إضافي فيه ال id الخاص بالنص المشكول، ثم تكتب script يقوم بقراءة كل سطر من الجدول القديم، إزالة التشكيل، ووضع الناتج في الجدول الجديد، بالإضافة إلى ال id

بانتظار اقتراحات باقي الأعضاء، ممكن يكون هناك حل أفضل

حل أكثر من رائع وطبقته الآن

يبقى مشكلة الدوران على كل الكتب المحتوية على تشكيل وهي ليست مشكلة كبيرة

شكرا يا أخي الكريم جعلها الله في ميزان حسناتك