Asymptotic behaviour of the weighted Renyi and Fisher entropies in a Bayesian problem

Mozgunov Pavel; Kelbert Mark

Статья

Asymptotic behaviour of the weighted Renyi and Fisher entropies in a Bayesian problem

Eurasian Mathematical Journal. 2015. Vol. 6. No. 2. P. 6-17.

Mozgunov P., Kelbert M.

Consider a Bayesian problem of success probability estimation in a series of conditionally independent trials with binary outcomes. We study the asymptotic behaviour of the weighted differential entropy for posterior probability density function conditional on x successes after n conditionally independent trials when n tends to infinity. Suppose that one is interested to know whether the coin is approximately fair with a high precision and for large n is interested in the true frequency. In other words, the statistical decision is particularly sensitive in small neighbourhood of the particular value γ = 1/2. For this aim the concept of weighted differential entropy used when the frequency γ is necessary to emphasize. It was found that the weight in suggested form does not change the asymptotic form of Shannon, Renyi, Tsallis and Fisher entropies, but changes the constants. The leading term in weighted Fisher Information is changed by some constant which depends on distance between the true frequency and the value we want to emphasize.

Научное направление: Математика

Приоритетные направления: математика

Язык: английский

Полный текст (PDF, 784 Кб)

Ключевые слова: weighted differential entropy Fisher information Renyi entropy Tsallis entropy

Публикация подготовлена по результатам проекта: Стохастические и функционально-аналитические методы в исследовании сложных динамических процессов в экономике(2014)

Asymptotic analysis of the Renyi, Tsallis and Fisher entropies in a Bayesian problem

Mozgunov P., Kelbert M. In bk.: Proceedings of Information Technology and Systems 2015. Sochi: 2015. P. 614-621.

Добавлено: 5 декабря 2015

Сабейские этюды

Коротаев А. В. М.: Восточная литература, 1997.

Добавлено: 9 марта 2013

Соболевская регулярность транспортировки вероятностных мер и транспортные неравенства

Колесников А. В. Теория вероятностей и ее применения. 2012. Т. 57. № 2. С. 296-321.

В работе изучаются соболевские априорные оценки для оптимальной транспортировки $T = \nabla \Phi$ вероятностных мер $\mu=e^{-V} \ dx$ и $\nu=e^{-W} \ dx$ на $\R^d$.

В предположении равномерной выпуклости потенциала $W$ в работе доказано, что величина $\int \| D^2 \Phi\|^2_{HS} \ d\mu$, где $\|\cdot\|_{HS}$ --- норма Гильберта-Шмидта,

ограничена информацией Фишера меры $\mu$.

Помимо этого доказаны близкие оценки для $L^p(\mu)$-нормы $\|D^2 \Phi\|$ и получены $L^p$-обобщения известной теоремы Каффарелли о сжатии.

Установлены соотношения между результатами настоящей статьи и транспортным неравенством Талаграна.

Также доказаны не зависящие от размерности версии данного неравенства для информации

Фишера относительно гауссовских мер.

Добавлено: 19 февраля 2013

Dynamics of Information Systems: Mathematical Foundations

Iss. 20. NY: Springer, 2012.

Эта публикация представляет собой сборник отдельных статей "Третьей Международной конференции по динамике информационных систем», которая состоялась в университете Флориды, 16-18 февраля 2011 года. Цель данной конференции заключалась в том, чтобы собрать вместе ученых и инженеров из промышленности, правительства и научных кругов, чтобы они смогли обменяться новыми открытиями и результатами в вопросах, имеющих отношение к теории и практике динамики информационных систем. Динамика информационных систем: математическое открытие представляет собой современное исследование и предназначается студентам – аспирантам и исследователям, которые интересуются самыми последними открытиями в информационной теории и динамичных системах. Ученые других дисциплин могут также получить пользу от применения новых разработок в своих областях исследований.

Добавлено: 19 декабря 2012

Full metastable asymptotic of the fisher information

Di Gesù G., Mariani M. SIAM Journal on Mathematical Analysis. 2017. Vol. 49. No. 4. P. 3048-3072.

Добавлено: 8 октября 2018

Generalization of Cram´er-Rao and Bhattacharyya inequalities for the weighted covariance matrix

Kelbert M., Mozgunov P. Mathematical Communications. 2017. Vol. 22. No. 1. P. 25-40.

Добавлено: 10 марта 2017

Model for organizing cargo transportation with an initial station of departure and a final station of cargo distribution

Khachatryan N., Akopov A. S. Business Informatics. 2017. No. 1(39). P. 25-35.

Добавлено: 18 апреля 2017

Nullstellensatz over quasi-fields

Trushin D. Russian Mathematical Surveys. 2010. Vol. 65. No. 1. P. 186-187.

Добавлено: 20 февраля 2018

Деловой климат в оптовой торговле во II квартале 2014 года и ожидания на III квартал

Лола И. С., Остапкович Г. В. Современная торговля. 2014. № 10.

Центр конъюнктурных исследований Института статистических исследований и экономики знаний НИУ «Высшая школа экономики» представляет оценку состояния делового климата организаций оптовой торговли во II и III кварталах 2014 года.

Добавлено: 29 января 2015

Прикладные аспекты статистики и эконометрики: труды 8-ой Всероссийской научной конференции молодых ученых, аспирантов и студентов

Вып. 8. МЭСИ, 2011.

Сборник составлен по результатам исследований молодых ученых, аспирантов и студентов МЭСИ, а также ряда вузов Москвы, Йошкар-Олы, Магнитогорска, Махачкалы, Пензы, Саранска, Саратова, Улан-Удэ. Рассмотренные на конференции (июнь 2011 г.) результаты исследований посвящены вопросам статистической методологии, применению математико-статистических и эконометрических методов в различных отраслях экономики и социальной сфере. Обобщается зарубежный опыт статистического анализа ряда проблем экономической и социальной жизни. Сравнивается эффективность различных методов, формулируются рекомендации по их выбору в зависимости от специфики решаемой задачи.

Добавлено: 13 сентября 2013

Laminations from the Main Cubioid

Timorin V., Blokh A., Oversteegen L. et al. arxiv.org. math. Cornell University, 2013. No. 1305.5788.

Добавлено: 6 октября 2013

Entropy and the Shannon-McMillan-Breiman theorem for beta random matrix ensembles

Bufetov A. I., Mkrtchyan S., Scherbina M. et al. arxiv.org. math. Cornell University, 2013. No. 1301.0342.

We show that beta ensembles in Random Matrix Theory with generic real analytic potential have the asymptotic equipartition property. In addition, we prove a Central Limit Theorem for the density of the eigenvalues of these ensembles.

Добавлено: 21 февраля 2013

Bounded limit cycles of polynomial foliations of ℂP²

Goncharuk N. B., Kudryashov Y. arxiv.org. math. Cornell University, 2015. No. 1504.03313.

Добавлено: 15 апреля 2015

Метод параметрикса для диффузий и цепей Маркова

Конаков В. Д. STI. WP BRP. Издательство попечительского совета механико-математического факультета МГУ, 2012. № 2012.

В основе настоящего учебного пособия лежит специальный курс по выбору студента, прочитанный автором на механико - математическом факультете МГУ им. М.В. Ломоносова в 2010-2012 учебных годах. Пособие знакомит читателя с методом параметрикса и его дискретным аналогом, развитым в самое последнее время автором пособия и его коллегами-соавторами. Оно объединяет воедино материал, который ранее содержался только в ряде журнальных статей. Не стремясь к максимальной общности изложения, автор ставил целью продемонстрировать возможности метода при доказательстве локальных предельных теорем о сходимости марковских цепей к диффузионному процессу и при получении двусторонних оценок типа Аронсона для некоторых вырожденных диффузий.

Добавлено: 5 декабря 2012

Is the function field of a reductive Lie algebra purely transcendental over the field of invariants for the adjoint action?

Colliot-Thélène J., Kunyavskiĭ B., Vladimir L. Popov et al. Compositio Mathematica. 2011. Vol. 147. No. 2. P. 428-466.

Добавлено: 17 марта 2013

Absolutely convergent Fourier series. An improvement of the Beurling-Helson theorem

Vladimir Lebedev. arxiv.org. math. Cornell University, 2011. No. 1112.4892v1.

Добавлено: 12 апреля 2012

Обоснование адиабатического предела для гиперболических уравнений Гинзбурга-Ландау

Пальвелев Р., Сергеев А. Г. Труды Математического института им. В.А. Стеклова РАН. 2012. Т. 277. С. 199-214.

Изучается адиабатический предел в гиперболических уравнениях Ландау-Гинзбурга. С помощью указанного предела устанавливается соответствие между решениями уравнений Гинзбурга-Ландау и адиабатическими траекториями в пространстве модулей статических решений, называемых вихрями. Мэнтон предложил эвристический адиабатический принцип, постулирующий, что любое решение уравнений Гинзбурга-Ландау с достаточно малой кинетической энергией может быть получено как возмущение некоторой адиабатической траектории. Строгое доказательство этого факта найдено недавно первым автором

Добавлено: 23 февраля 2013

Hypercommutative operad as a homotopy quotient of BV

Khoroshkin A., Markaryan N. S., Shadrin S. arxiv.org. math. Cornell University, 2012. No. 1206.3749.

We give an explicit formula for a quasi-isomorphism between the operads Hycomm (the homology of the moduli space of stable genus 0 curves) and BV/Δ (the homotopy quotient of Batalin-Vilkovisky operad by the BV-operator). In other words we derive an equivalence of Hycomm-algebras and BV-algebras enhanced with a homotopy that trivializes the BV-operator. These formulas are given in terms of the Givental graphs, and are proved in two different ways. One proof uses the Givental group action, and the other proof goes through a chain of explicit formulas on resolutions of Hycomm and BV. The second approach gives, in particular, a homological explanation of the Givental group action on Hycomm-algebras.

Добавлено: 29 августа 2012

Cross-sections, quotients, and representation rings of semisimple algebraic groups

V. L. Popov. Transformation Groups. 2011. Vol. 16. No. 3. P. 827-856.

Добавлено: 16 марта 2013

Математическое моделирование социальных процессов

Под науч. редакцией: А. Михайлов Вып. 14. М.: Социологический факультет МГУ, 2012.

Статьи данного сборника написаны на основе докладов, сделанных в 2011 г. на социологическом факультете МГУ им. М.В. Ломоносова на заседании XIV Междисциплинарного ежегодного научного семинара "Математическое моделирование социальных процессов" им. Героя Социалистического труда академика А.А. Самарского.

Издание предназначено для научных сотрудников, преподавателей, учащихся вузов и научных учреждений РАН, интересующихся проблемами, разработкой и внедрением методологии математического моделирования социальных процессов.

Добавлено: 14 марта 2013