الفريق العربي للبرمجةأرشيف المنتديات · 2000 – 2023
نسخة أرشيفية للقراءة فقط — التسجيل والمشاركة مغلقان، والمحتوى محفوظ كما كان.

ما هو الانتروبي في علم المعلومات

بدأه التميمية في 23 نوفمبر 2007 · 9 رد · 7,076 مشاهدة · في منتدى الاتصالات السلكية واللاسلكية و الصوت و الصورة
مشاركة: واتساب X فيسبوك تيليجرام
#1 صاحب الموضوع

في قراءتي حول نظرية المعلومات تردد كثيرا مصطلخ الانتروبي

وأنا لست من اهل الاختصاص

فهل ثمة من يوضح لي هذا المصطلح من وجهة نظر المعلوماتيين ؟

مع جزيل الشكر

#2

وجدت هذا حولها هل من الممكن ترجمته

In Shannon information theory, the entropy is a measure of the uncertainty over the true content of a message, but the task is complicated by the fact that successive bits in a string are not random, and therefore not mutually independent, in a real message. Also note that "information" is not a subjective quantity here, but rather an objective quantity, measured in bits.

#3
اقتباس
Shannon or entropy both of them are a unit of measurement of the quantity of information; as we say 1 kg of ... we say x entropy or x Shannon of information
#4

أستميحك عذرا

أنا أربد ترجمتها للعربية وليس شرحها بالإنجليزية !

#5

نعم ما اريده هو معنى الانتروبي وفقا لنظرية المعلومات فقط

شكرا لك

#6

السلام عليكم

عذرا على ردي بالأنجليزية لأنه أحيانا أجبر على ذلك.

الأنتروبي هي وحدة قيس سرعة وكمية نقل المعلومات. وتعتمد إحصائيات إفتراضيةProbability لمعرفة كميات المعلومات المضافة (المكررة) لتغطية ضياع وتغير جزء منها أثناء الإرسال من المصدر إلى المتقبل.

#7

السلام عليكم و رحمة الله و بركاته.

و اضيف الى ما ذكروه الاخوة الافاضل ان مفهوم الانتروبي هو مفهوم فلسفي شامل و عميق ويحتاج الى التامل الطبيعي للحياة اليومية وللكون ليفهم مضمونه.

عند اليونان , ربما ارادوا بمفهوم ال tropie الاه التغير والتحول او الرجوع الى الاصل او الى الوراء , على العموم هو يحمل هذه المعاني , ويقصدون بذالك كل تحول او تغير الذي لا يمكن الرجوع به الى حالته السابقة"irreversible" , كعمر الانسان مثلا ,فاذا مرت ساعة على عمر الانسان فلا يمكن الرجوع الى تلك الساعة ولو اراد شرائها بمال الدنيا.

و هذا المصطلح يتردد كثيرا ايضا لدى من يدرس الفيزياء والكيمياء , وخاصة في فرع الفيزياء الديناميكية الحرارية بحيث ان مفهوم الانتروبي في الاصل ارتبط بالتحول الحركي والكيميائي و بما يصاحب ذالك بالنبعاث للحرارة كالمحرك مثلا اذا استمر طويلا في الحركة فانه يسخن,او العكس اي انطلاقا من التغير الذي يصاحب درجة الحرارة و ما ينتج عنه من حركة كالقطار الذي كان يعمل بالفحم مثلا, و هذا الفرع من الفيزياء هو اقدم من نظرية النسبية وما يزال لحد الساعة يكتنفه بعض الغموض فيما يخص مصير الانسانية والكون في المستقبل.

اذن فالانتروبي هو مقياس طاقي يتم حسابه بعد تحول نظام معين من حالة بدائية الى حالة نهائية لمعرفة هل كان هناك فقدان للطاقة او كسبها عند هذا التحول و هذا ما يعبر كذالك عن مفهوم الترتيب ومفهوم الفوضى.

مثال

عندما نود " ترتيب " غرفنا فهذا يستدعي ان نبذل مجودا طاقيا لنحول النظام (الغرفة) من حالة فوضى الى حالة ترتيب و مقياس الانتروبي في هذه الحالة يصغر.

والعكس صحيح بحيث ما اسهل بان نتسبب في خلق فوضى في مكان ما بدون مجهود :D ككسر الزجاج ,انفجار قنبلة, فهنا العكس اذن بحيث نحن من نستقبل تلك الطاقة التي كانت "مخزونة" في النظام المرتب وهنا فمقياس الانتروبي يكبر , فيتسائل الفيزيائي النظري عن مصير الانسانية والكون ,اذ ان هناك من يرى بان نظام الكون يتجه نحو الترتيب , وهناك من يرى انه يتجه نحو الفوضى.

باختصار اذن : نظام مرتب = انتروبي صغيرة نظام فوضوي = انتروبي كبيرة.

الان ما علاقة كل ذالك بالمعلوماتية ؟

المعلوماتية هي كمية المعلومات او كمية الاخبار التي تعبر لنا على محتوى ذالك النضام , فانتروبي معلومات الغرفة ذات فوضى سوف تكبر و سوف يصعب علينا " تحديد" كل ما يجول بتلك الغرفة والعكس صحيح.

كيف يمكننا ان نعلم هل هناك فوضى او ترتيب في "نظام " الحرب على العراق او على لبنان؟

بطبيعة الحال بدراسة انتروبي المعلومات سواء الاتية من الصحفيين او الاتية من الاقمار الصناعية , اظن ان انتروبي المعلومات الاتية من الاقمار الاصطناعية ستكون اكثر دقة , طبعا تعرفون لماذا :D

اتمنى بان اكون قد اوضحت بما فيه الكفاية والله ولي التوفيق.

وانا اكتب تلك الاسطر تذكرت قول رب العزة والجلال :

باسم الله الرحمن الرحيم

يا أيها الناس إن كنتم في ريب من البعث فإنا خلقناكم من تراب ثم من نطفة ثم من علقة ثم من مضغة مخلقة وغير مخلقة لنبين لكم ونقر في الأرحام ما نشاء إلى أجل مسمى ثم نخرجكم طفلاً ثم لتبلغوا أشدكم ومنكم من يتوفى ومنكم من يرد إلى أرذل العمر لكيلا يعلم من بعد علم شيئاً.

صدق الله العضيم.

اذن هناك تحول , خلقه الله سبحانه و تعالى في انظمة الخلق ,و في " معرفة " انضمة الخلق , فهل هذا التغير يا ترى هو نحو الترتيب او نحو الفوضى ؟

#8

بجد و الله أنا عجزت عن أى شئ و توقفت عن البحث بعد ردك يا bitofsoul

حقا جزاك الله خيرا

لا إله إلا الله محمد رسول الله

アッラー以外に神はなし。ムハンマドはアッラーの使徒である

#9

مشكوووووور يا بيتو توضيحك جدا قيّم وواضح

#10

اخي تستطيع المعرفة اكثر في هذا الموضوع بالبحث في Source Coding-Channel coding

BEng , Electronics and communications.

Embedded systems engineer.

Graphics Programmer

عالم الكومبيوتر هو من لديه المعرفة في علوم الكومبيوتر ، الرياضيات ، هندسة الالكترونيات -احمد صالح

مواضيع مشابهة