помогите пожалуйста сообщение по теме измерение информации
Ответы
Ответ:
Главная страница
Файлы для загрузки
Алгебра логики
1. Высказывания
2. Логические операции
3. Таблицы истинности
4. Законы преобразования логических выражений
5. Логические схемы
6. Канонические формы логических формул, СКНФ и СДНФ
7. Системы логических уравнений
8. Задачи
Упражнения
Базы данных
1.Классификация баз данных
2.Системы управления базами данных
3.Создание и заполнение баз данных
4.Примеры систем управления баз данных
5.Упражнения
Графические редакторы
Информационные модели
1. Понятие модели
2. Этапы моделирования
3. Модели на графах
4. Блок-схемы
5. Кроссворд
6. Сетка слов.
Табличные информационные модели и моделирование физических процессов
Информация
Измерение информации
Понятие информации
Представление информации
Компьютерные сети
WWW,URL
Адресация в сети, IP-адресация, IP-адрес, маска подсети
Глобальная сеть Интернет, история возникновения и развития
Задание 1
Задание 2
Задание 3
Задание 4
Задание 5
Задание 6 (chat)
Локальные и глобальные компьютерные сети
Понятие компьютерной сети
Система доменных имен DNS
Уровни передачи информации, модель OSI
Офисные технологии
Презентации. Что и как?
Текстовый редактор
Электронные таблицы
Представление информации в компьютере
Вещественные числа
Графическая информация
Звуковая информация
Передача информации по сети
Текстовая информация
Целые числа
Системы счисления
Приложения
Теория алгоритмов
Алгоритмы поиска в массиве данных
Алгоритмы сортировки
Задача на быструю сортировку
Задачи на работу с исполнителями
Оценка сложности алгоритма
Оценка сложности алгоритма
Оценка сложности алгоритма
Понятие алгоритма, свойства алгоритма
Понятие исполнителя
Устройство компьютера
Язык программирования Pascal
Задания на Паскаль
Ключевые слова
Оператор ветвления
Операторы цикла
Программирование ветвящихся и циклических алгоритмов.
Типы переменных
Карта сайта
Информация >
Измерение информации
Измерение информации: содержательный и алфавитный подходы. Единицы измерения информации.
Вопрос: «Как измерить информацию?» очень непростой. Ответ на него зависит от того, что понимать под информацией. Но поскольку определять информацию можно по-разному, то и способы измерения тоже могут быть разными.
Содержательный подход к измерению информации.
Для человека информация — это знания человека. Рассмотрим вопрос с этой точки зрения.
Получение новой информации приводит к расширению знаний. Если некоторое сообщение приводит к уменьшению неопределенности нашего знания, то можно говорить, что такое сообщение содержит информацию.
Отсюда следует вывод, что сообщение информативно (т.е. содержит ненулевую информацию), если оно пополняет знания человека. Например, прогноз погоды на завтра — информативное сообщение, а сообщение о вчерашней погоде неинформативно, т.к. нам это уже известно.
Нетрудно понять, что информативность одного и того же сообщения может быть разной для разных людей. Например: «2x2=4» информативно для первоклассника, изучающего таблицу умножения, и неинформативно для старшеклассника.
Но для того чтобы сообщение было информативно оно должно еще быть понятно. Быть понятным, значит быть логически связанным с предыдущими знаниями человека. Определение «значение определенного интеграла равно разности значений первообразной подынтегральной функции на верхнем и на нижнем пределах», скорее всего, не пополнит знания и старшеклассника, т.к. оно ему не понятно. Для того, чтобы понять данное определение, нужно закончить изучение элементарной математики и знать начала высшей.
Получение всяких знаний должно идти от простого к сложному. И тогда каждое новое сообщение будет в то же время понятным, а значит, будет нести информацию для человека.
Сообщение несет информацию для человека, если содержащиеся в нем сведения являются для него новыми и понятными.
Алфавитный подход к измерению информации.
А теперь познакомимся с другим способом измерения информации. Этот способ не связывает количество информации с содержанием сообщения, и называется он алфавитным подходом.
При алфавитном подходе к определению количества информации отвлекаются от содержания информации и рассматривают информационное сообщение как последовательность знаков определенной знаковой системы.
Все множество используемых в языке символов будем традиционно называть алфавитом. Обычно под алфавитом понимают только буквы, но поскольку в тексте могут встречаться знаки препинания, цифры, скобки, то мы их тоже включим в алфавит. В алфавит также следует включить и пробел, т.е. пропуск между словами.
Полное количество символов алфавита принято называть мощностью алфавита. Будем обозначать эту величину буквой N. Например, мощность алфавита из русских букв и отмеченных дополнительных символов равна 54.
При алфавитном подходе к измерению информации количество информации зависит не от содержания, а от размера текста и мощности алфавита.
При использовании двоичной системы (алфавит состоит из двух знаков: 0 и 1) каждый двоичный знак несет 1 бит информации. Интересно, что сама единица измерения информации «бит» получила свое название от английского сочетания «binary digit» - «двоичная цифра».
от них.