[سكربت] - تحويل ترميز قواعد البيانات الإصدار الثاني - Page 2

العندليب · 02-06-2007, 07:19 PM

السلام عليكم

الأخ مدمن وصلت البيانات وتم التحويل بنجاح.

المشكله لديك من محتوى القاعده نفسها
فالترميز المكتوب على القاعده latin1_swidish_ci
ولكن الترميز الحقيقي للموجود بداخل القاعده ليس كالمكتوب على القاعده

فالسكربت الموجود بهذا الموضوع يعتمد على ترميز القاعده الهدف
لذلك كانت عملية التحويل التي تتم داخل السكربت غير صحيحه
لأن الترميز المكتوب على القاعده يختلف عن الترميز الموجود بداخل القاعده.

أما طريقة إصلاح المشكله فكانت بإستخدام أمر Mysqldump

حيث قمت بإضافة الأمر عن طريق الـ Cronjob لأتمكن من سحب القاعده وحفظها في مساحة الموقع حسب التسلسل الأتي بالأمر:

كود:

mysqldump --defalut-character-set=latin1 --compatible=mysql40 --user=USER --password=PASSWORD DATABASE > db.sql

لاحظ أنني حددت نفس الترميز المكتوب على القاعده latin1

بعدها قمت بإدخال القاعده المسحوبه بأمر mysql إلى قاعده جديده NEWDATABASE

كود:

mysql --defalut-character-set=latin1 --user=USER --password=PASSWORD NEWDATABASE < db.sql

القاعده الجديده NEWDATABASE قمت بإعطائها نفس الترميز latin1 عند إنشائها حتى تصبح الحروف مطابقه لجدول ترميز latin1 عند عملية الإدخال.

وبعد هذه العمليه قمت بالدخول على سكربت c2.php واخترت الترميز العربي للتحويل وتمت العمليه بنجاح

موفق.

محب الله ورسوله · 04-06-2007, 09:01 AM

أخي العندليب
هذه مشاركتي لك في الموضوع
http://www.swalif.net/softs/swalif-1434497-15.html

قمت بإستخدام هذا السكربت لإستعراض القاعدة
http://www.swalif.net/softs/swalif-1434388-13.html

قمت بالدخول للقاعدة بترميز ال utf-8 لقيت رموز
خرجت ودخلت مرة أخري بترميز ال cp1256 وجدت علامات إستفهام
خرجت ودخلت مرة أخري بترميز ال latin1 وجدته يظهر عربي ولكن في علامة واحدة بين كل كلمة وأخري إستفهام

الأن محتوي القاعدة utf-8 بعد إستخدام هاك التحويل لميلاد
ولكن الإتصال مازال لاتين

كيف أخلي الإتصال utf-8 ؟

ssamri.net · 04-06-2007, 12:18 PM

شغل 100%

تم التجربه وتحويل من التريميز cp1256 الى UTF-8

أشكرك أخى العندليب

العندليب · 05-06-2007, 11:33 AM

إقتباس:

المشاركة الأصلية بواسطة المجروح

أخي العندليب

الأن محتوي القاعدة utf-8 بعد إستخدام هاك التحويل لميلاد
ولكن الإتصال مازال لاتين

إذن مشكلتك نفس مشكلة الأخ مدمن نت
فمحتوى القاعده يختلف عن الترميز المكتوب على القاعده!
يجب عليك سحب القاعده بنفس الطريقه التي شرحتها بردي الأخير ومن ثم تركيبها على قاعدة بيانات جديده ذات الترميز الصحيح.

الأخ ssamri.net
مبروك وشكراً على إخبارنا بتجربتك.

موفقين أجمعين

Alcomputergy.Com · 05-06-2007, 02:41 PM

شكرا اخي على الاسكريبت

ولكن هل يختلف الوضع في منتديات ipb حيث انني اقوم بترقيتها وتغيير الترميز في الوقت الحالى

واخاف من النتائج السلبيه

مع العمل باني اخذت بيك اب عن طريق سكريبت Nt22backup (من invisionize.com( وسبق وجربته في سحب واسترجاع قواعد

قبل تحويل الترميز هل اقوم بتحويله من لوحة التحكم من windows-1256 الى cp1256

وهل الترميز الجديد cp1256 او cp-1256

وشكرا مرة اخري اخي على الاسكريبت الرائع

Alcomputergy.Com · 05-06-2007, 06:43 PM

اخي الكريم ( العندليب )

قمت بتحويل المنتديات ( بعد اخذ نسخة احتياطية ) إلى الترميز cp1256 وتم اظهار علامات استفهام

بعد ذلك قمت بتغييرها الى utf-8 وهو نفس الحال

ارجو الحل يا اخي

وشكرا على الاسكريبت

مُجَاهِد · 05-06-2007, 08:03 PM

ما شاء الله .. تبارك الله ..

مبدع ..

greeeb · 05-06-2007, 09:27 PM

أخي العزيز:- العندليب

بارك الله فيك على هذا الموضوع القيم والمفيد للجميع ...

أخي العزيز عندي قاعدة بيانات لموقعي وهو عبارة عن دليل .... وكنت سابقاً ازرع القاعدة بدون مشاكل ولكن قبل فترة طلبت من المستضيف ترقية ...

1-MySQL Server
2-phpMyAdmin

وبعد الترقية وعند زرع القاعدة تتحول صفحة الموقع إلى علامات إستفهام ؟؟؟؟؟؟

حاولت زرعها بكذا طريقة ( UTF-8 )(windows-1256)(latin)

ولم تفلح كل المحاولات وبعد الموضوع هذا اتوقع بأن أجد الحل لديكم بارك الله فيك ... والسؤال كيف أعرف ترميز القاعدة عندي ؟؟؟

للمعلومية أخي الكريم حاولت في السكربت الذي في الموضوع هاذا وفعلاً حول القاعدة إلى cp1256

Database: 3ndleeeeeb (converted to cp1256)
Logon

ولم يتغير شئ ما زال الموقع علامات إستفهام وحولتها مرة أخرى إلى UTF8

Database: 3ndleeeeeb (converted to UTF8 )
Logon

ونفس المشكلة ؟؟؟؟؟؟؟؟؟؟؟؟؟؟؟

العندليب · 06-06-2007, 11:17 AM

أخواني الكرام

أغلب المشاكل التي تأتي قبل القيام في التحويل هو محتوى القاعده

فأحيانا يكون محتوى القاعده مختلف تماما عن الترميز المكتوب على القاعده والسبب نظام الاتصال بقاعدة البيانات.

فالسكربت الذي قمت بوضعه في هذا الموضوع يعتمد على الترميز المكتوب على القاعده
فإذا كان محتوى القاعده يونيكوود و الترميز المكتوب على القاعده latin1 فسوف يتم التحويل من latin1 إلى الترميز الذي تحدده عند دخولك الى السكربت.
ولهذا السبب تظهر علامات الاستفهام

لذلك طبقوا الخطوات التي ذكرتها للأخ مدمن نت في مشاركه (26) حتى يتم إصلاح محتوى القاعده
http://www.swalif.net/softs/swalif-1435540-26.html

وفقكم الله لكل خير

BIOs · 06-06-2007, 12:59 PM

عزيزي قمت بتطبيق السكربت في البداية وتم تحويل القاعدة إلى علامات إستفهام ...

ثم قمت بتطبيق شرحك في الرد 26 ولكن لم ينفع أيضاً .. وتحولت القاعدة إلى علامات إستفهام..

مع العلم أنني استخدمت latin1_swidish_ci في ترميز القاعدة ..

الرجاء إفادتنا بالطريقة الصحيحة للتحويل..

ملاحظة: يوجد خطأ في الأمر في ردك 26 وهو أمر تحويل الترميز .. حيث أن الكتابة الصحيحة هي

كود:

--default-character-set=latin1

وأنت قمت بكتابتها هكذا

كود:

--defalut-character-set=latin1

العندليب · 06-06-2007, 01:42 PM

جزاك الله خيراً على تصحيح الخطأ يا أخ BIOs وعذراً على الخطأ الغير مقصود مني
فعلا هناك خطأ في كتابتي لصيغة أمر mysqldump وأمر mysql في مشاركه رقم 26 والصحيح كتابتهم حسب الشكل التالي:

كود:

mysqldump --default-character-set=latin1 --compatible=mysql40 --user=USER --password=PASSWORD DATABASE > db.sql

كود:

mysql --default-character-set=latin1 --user=USER --password=PASSWORD NEWDATABASE < db.sql

طيب يا أخ BIOs
عندي لك أسئله حتى أصل معك للخلل

هل بعد قيامك لسحب قاعدة البيانات بأمر mysqldump الذي ذكرته في المشاركه رقم 26 ظهرت الحقول النصيه في ملف القاعده بحروف عربيه أم علامات إستفهام ؟
طبعا هذا يتطلب منك فتح ملف القاعده بأحد برامج النصوص مثل ultraedit أو ultrastudio
أو سحب جدولاً واحداً فقط بدلاً من القاعده بأكملها بأمر mysqldump حسب الصيغه التاليه:

كود:

mysqldump --default-character-set=latin1 --compatible=mysql40 --user=USER --password=PASSWORD DATABASE TABLE > table.sql

طبعا غير اللازم في صيغة الأمر واختر جدولاً صغيراً في حجمه يحتوي على حروف عربيه في حقوله

بالانتظار

BIOs · 06-06-2007, 04:11 PM

إقتباس:

المشاركة الأصلية بواسطة العندليب

جزاك الله خيراً على تصحيح الخطأ يا أخ BIOs وعذراً على الخطأ الغير مقصوط مني
فعلا هناك خطأ في كتابتي لصيغة أمر mysqldump وأمر mysql في مشاركه رقم 26 والصحيح كتابتهم حسب الشكل التالي:

كود:

mysqldump --default-character-set=latin1 --compatible=mysql40 --user=USER --password=PASSWORD DATABASE > db.sql

كود:

mysql --default-character-set=latin1 --user=USER --password=PASSWORD NEWDATABASE < db.sql

طيب يا أخ BIOs
عندي لك أسئله حتى أصل معك للخلل

هل بعد قيامك لسحب قاعدة البيانات بأمر mysqldump الذي ذكرته في المشاركه رقم 26 ظهرت الحقول النصيه في ملف القاعده بحروف عربيه أم علامات إستفهام ؟
طبعا هذا يتطلب منك فتح ملف القاعده بأحد برامج النصوص مثل ultraedit أو ultrastudio
أو سحب جدولاً واحداً فقط بدلاً من القاعده بأكملها بأمر mysqldump حسب الصيغه التاليه:

كود:

mysqldump --default-character-set=latin1 --compatible=mysql40 --user=USER --password=PASSWORD DATABASE TABLE > table.sql

طبعا غير اللازم في صيغة الأمر واختر جدولاً صغيراً في حجمه يحتوي على حروف عربيه في حقوله

بالانتظار

صحيح عزيزي ..
عندما قمت بأخذ نسخة مثلا من جدول الأعضاء .. وفتحه عن طريق المفكرة .. ضهرت الأسماء باللغة العربية بدون مشاكل ..

أعتقد الآن الحل سهل ..

بإنتظارك

BIOs · 06-06-2007, 04:42 PM

قمت بعمل تجربة بسيطة .. ونجحت

عندما سحبت النسخة من جدول الأعضاء .. قمت بزراعته في قاعدة فارغة ولكن قمت بتحويل القاعدة في البداية إلى cp1256_general_ci ومن ثم زرعتها عن طريق الأمر

كود:

 mysql --default-character-set=cp1256 --user=USERNAME --password=PASSWORD DATABASE < user.sql

ونجحت بدون إستخدام السكربت أيضا ..

وأستضيع الآن مشاهدة أسماء الأعضاء في phpMyAdmin باللغة العربية الصحية

BIOs · 06-06-2007, 07:40 PM

إقتباس:

المشاركة الأصلية بواسطة BIOs

قمت بعمل تجربة بسيطة .. ونجحت

عندما سحبت النسخة من جدول الأعضاء .. قمت بزراعته في قاعدة فارغة ولكن قمت بتحويل القاعدة في البداية إلى cp1256_general_ci ومن ثم زرعتها عن طريق الأمر

كود:

mysql --default-character-set=cp1256 --user=USERNAME --password=PASSWORD DATABASE < user.sql

ونجحت بدون إستخدام السكربت أيضا ..

وأستضيع الآن مشاهدة أسماء الأعضاء في phpMyAdmin باللغة العربية الصحية

الحمد لله.. قمت بالتجربة على القاعدة كاملة ونجحت 100% الطريقة

وبدون إستخدام السكربت المرفق ..
فقط أخذت باك أب للقاعدة مع تغيير الترميز أثناء الباك أب إلى latin1 .. وقمت بزرع القاعدة من جديد ولكن مع تغيير ترميز القاعدة وهي فارغة إلى cp1256_general_ci ومن ثم إستخدام أمر زراعة القاعدة مع تغيير الترميز إلى cp1256

هذه الخطوات بالمختصر ..

للعلم .. حجم القاعدة 1,2 جيجا بايت .. لمنتدى يحتوي على أكثر من 20 ألف مشترك .. وما يزيد عن مليون مشاركة ..

ولكن فااضل الآن مشكلة وحدة .. وهي إنه عند إضافة مشاركة جديدة .. تظهر مشفرة ..

مع العلم عدلت في ملف الكونفيج الترميز للقاعدة وجعلته cp1256

كود:

$config['Mysqli']['charset'] = 'cp1256';

ولكن واجهت مشكلة كبيرة وهي إنه لما ضفت الترميز في ملف الكونفيج وكتبت رد .. تحول المنتدى إلى علامات إستفهام .. مع العلم أنه لازالت البيانات في القاعدة باللغة العربية ..

بإنتظار حل هذه المشكلة يا عندليب

العندليب · 06-06-2007, 08:04 PM

الحمدلله رب العالمين

أخي BIOs مبروك تحويل القاعده ولكن إحذر

ليس دائماً يكون الحل الذي توصلت له في ردك الأخير صحيحاً

لأنه عند سحبك لقاعدة بياناتك بأمر mysqldump الذي ذكرنا صيغته فإن بعض الحقول ذات النوع binary تكون بالترميز الذي سحبتها فيه ولكن بصيغة النظام الرقمي السدس عشري
على سبيل المثال

كود:

0xda0xe40xcf0xe1

لذلك عندما يقوم أمر mysql بإدخالها إلى قاعدة بيانات جديده ذات ترميز مختلف عن ترميز أمر mysqldump فسوف يقوم بتحويل هذا الرقم السدس عشري إلى نص حسب جدول ترميز القاعده الجديده.
وهذا النص المحول ربما يكون عباره عن حروف غير معروفه للترميز الجديد
لذلك سوف تكون النصوص المدخله هي علامة الاستفهام ( ؟؟؟؟ ) وبالشكل هذا ستفقد بعض البايتات داخل الحقول ذات النوع binary .

ولهذا السبب طلبت من الأخ مدمن نت سحبها بترميز latin1 وارجاعها الى قاعده بترميز latin1 أيضاً وبعدها يتم إستخدام السكربت للتحويل.

ولك تجربة ماذكرته لك في هذا الرد

موفق

BIOs · 06-06-2007, 08:08 PM

عزيزي العندليب .. قمت بتعديل ردي وذلك لأنني واجهت مشكلة جديدة ..
يرجى قراءته

العندليب · 06-06-2007, 08:14 PM

إقتباس:

المشاركة الأصلية بواسطة BIOs

عزيزي العندليب .. قمت بتعديل ردي وذلك لأنني واجهت مشكلة جديدة ..
يرجى قراءته

أدخل على إعدادات اللغه وأذكر لي ماهو الترميز المستخدم للصفحه

لأن الأرقام المشفره المذكوره في الجدول الأخير الذي ذكرته عباره عن حروف يونيكود مكتوبه بصيغة html entity .

أما مسألة الترميز المكتوب في ملف الكونفق فأنا أريد أن أعرف لماذا كتبوا إسم المتغير
mysqli ولم يكتبوه mysql
فأريد أن أتحقق من النسخ الأخيره هل هي تستخدم أوامر mysqli دون أوامر mysql
إنتظرني للتحقق منها.

BIOs · 06-06-2007, 08:23 PM

هذا هو ترميز الصفحة

<meta http-equiv="Content-Type" content="text/html; charset=utf-8" />

العندليب · 06-06-2007, 08:26 PM

هذه جعلت محتويات صفحتك مثل اليونيكوود
charset=utf-8

المفروض تكون

charset=windows-1256

عدل ترميز اللغه من خيارات اللغه في لوحة تحكم المنتدى

وتعديل الكونفق صحيح

موفق

BIOs · 06-06-2007, 08:32 PM

إقتباس:

ولهذا السبب طلبت من الأخ مدمن نت سحبها بترميز latin1 وارجاعها الى قاعده بترميز latin1 أيضاً وبعدها يتم إستخدام السكربت للتحويل.

جربت نفس جدول الأعضاء الذي سحبته .. رجعته للقاعدة بترميز latin1 ومن ثم استخدمت سكربت التحويل .. وأيضاً ظهرت أسماء الأعضاء علامات إستفهام ..

BIOs · 06-06-2007, 08:35 PM

إقتباس:

المشاركة الأصلية بواسطة العندليب

هذه جعلت محتويات صفحتك مثل اليونيكوود
charset=utf-8

المفروض تكون

charset=windows-1256

عدل ترميز اللغه من خيارات اللغه في لوحة تحكم المنتدى

وتعديل الكونفق صحيح

موفق

هذا ترميز الذي اعطيتك اياه هو ترميز صفحة phpMyAdmin

هل حل هذه المشكلة هو وضع ترميز التعريب في المنتدى windows-1256 ؟

العندليب · 06-06-2007, 08:39 PM

إعتقدت أنك تقصد ترميز صفحة المنتدى وليس ترميز صفحة الـ phpMyAdmin

يجب وضع ترميز التعريب windows-1256 في المنتدى لأنه يتلائم مع ترميز القاعده cp1256 .

أما عن ردك السابق

إقتباس:

جربت نفس جدول الأعضاء الذي سحبته .. رجعته للقاعدة بترميز latin1 ومن ثم استخدمت سكربت التحويل .. وأيضاً ظهرت أسماء الأعضاء علامات إستفهام .

سأتحقق من السكربت مره أخرى وأتمنى يكون الخطأ من تجربتك

جزاك الله خيراً على النقاش

BIOs · 06-06-2007, 08:47 PM

إقتباس:

المشاركة الأصلية بواسطة العندليب

إعتقدت أنك تقصد ترميز صفحة المنتدى وليس ترميز صفحة الـ phpMyAdmin

يجب وضع ترميز التعريب windows-1256 في المنتدى لأنه يتلائم مع ترميز القاعده cp1256 .

أما عن ردك السابق

سأتحقق من السكربت مره أخرى وأتمنى يكون الخطأ من تجربتك
جزاك الله خيراً على النقاش

أتمنى أن يكون ذلك ..

ولكن بخصوص الترميز .. تظهر القاعدة باللغة العربية بالكامل .. ولكن المشاركات الجديدة التي تضاف .. تظهر في phpMyAdmin بمثل ما أرفقت بالصورة بالرد .. مع العلم ترميز اللغة في تعريب المنتدى هو windows-1256

ما الخلل .. ؟؟

هل من الممكن أن يكون من المتصفح عندي ؟؟

لأني عندما نسخت الكلام ووضعته في رد هنا .. ظهر الكلام باللغة العربية ..

محب الله ورسوله · 07-06-2007, 11:13 AM

أخي العندليب
أتمني توضيح أكثر للخطوات لأننا في القواعد ما لدينا أية خبرة

المشكلة أكتشفت معظم المواقع التي تعمل قبل إصدارة ال phpmyadmin التي تم تعديل التراميز فيها

BIOs · 07-06-2007, 12:17 PM

أخي العندليب ..
أنا عندي ترميز القاعدة الأصلي latin1_general_ci وأعتقد سبب المشكلة منه ..
وأيضا هذا الترميز عامل مشكلة في القاعدة .. وعامل حمل كبير جداً جداً على السيرفر..

هل من الممكن تحويل هذه القاعدة من latin1_general_ci إلى latin1_swedish_ci

لأني حاولت بأكتر من طريقة ولم ينفع ..