Книга
Передача, хранение и обработка больших объемов научных данных
В данном учебном пособии рассматриваются крупные научные проекты и объемы генерируемых ими данных, дается обзор научных компьютерных сетей, позволяющих производить высокоскоростную передачу больших объемов данных для этих проектов. Рассматриваются вычислительные системы, предлагаемые ведущими производителями компьютерной техники для обработки больших объемов данных и предоставляющие как возможности хранения больших объемов данных, в том числе распределенных, так и средства аналитики и параллельной обработки данных в реальном масштабе времени. Особое внимание уделено безопасности передаваемой научной информации.
Соответствует требованиям Федерального государственного образовательного стандарта высшего образования последнего поколения.
Для студентов технических специальностей бакалавриата, магистратуры, специалитета.
Россия, как и весь мир, вступила в новый, постиндустриальный период развития национальной экономики, когда ключевым фактором успеха для многих ее отраслей становится возможность эффективно обрабатывать огромные массивы и потоки информации. Финансы, транспорт, связь, торговля, туризм, здравоохранение и другие области уже не могут существовать без высокоуровневой информатизации, предприятия порождают и потребляют огромные объемы данных, и их функционирование все больше зависит от эффективности систем автоматизированного сбора, хранения и анализа данных. Поиск оптимальных способов обработки огромных массивов информации приобретает важнейшее значение для развития таких перспективных направлений науки и индустрии, как биоинформатика, энергетика нового поколения, экономическое моделирование, социология и др. Сегодня уже очевидно, что Большие Данные (Big Data) — одно из ключевых направлений компьютерной науки, открывающее новые перспективы для исследований в сфере представления, анализа и извлечения полезных знаний из больших объемов данных различной природы. Получив успешный опыт проведения бизнес-форумов, посвященных проблемам промышленного применения платформ Больших Данных, издательство «Открытые системы» впервые организует конференцию, задача которой – предоставить площадку для обсуждения теоретических и прикладных аспектов научных задач обработки и анализа Больших Данных. Цель конференции "Большие данные в национальной экономике» – собрать отечественных экспертов в области анализа данных с тем, чтобы оценить общее состояние дел в этой области, выделить и консолидировать наиболее значимые работы и коллективы, способные сделать вклад в формирование нового научного направления и тем самым способствовать дальнейшему развитию национальной экономики России. Организаторы конференции также видят своей задачей популяризацию наиболее интересных научных работ и исследований, способствующих развитию направления Больших Данных и расширению практических применений методов работы с большими массивами информации. Одной из наиболее острых проблем в решении задач Больших Данных является дефицит специалистов соответствующей квалификации, поэтому особое внимание на конференции будет уделено задачам подготовки кадров (data scientist). Ключевые темы Конференции: Большие Данные как направление computer science; Оптимальные архитектуры для работы с Большими Данными; Методы обработки Больших Данных; Анализ Больших Данных – сферы практического применения; Data Scientists: кадры для работы с Большими Данными. Конференция рассчитана на представителей научного сообщества, молодых исследователей, специалистов предприятий различных отраслей, заинтересованных в том, чтобы поделиться своим опытом и лучше разобраться в задачах, которые встают сегодня в области анализа Больших Данных, и в перспективных подходах к их решению.
Сборник составлен по результатам исследований ведущих ученых в области системной, программной инженерии, а также в области создания информационно-аналитических систем с применением технологии Big Data.
Конференция посвящена анализу состояния, актуальным направлениям развития, научным проблемами практическим результатам, полученным отечественными и зарубежными учеными и специалистами в программной инженерии, а также в области создания информационно-аналитических систем с применением технологии Big Data
В статье рассматриваются возможности и особенности применения сервисно-ориентированного подхода для описания услуг аутсорсинга, предоставляемых центрами обработки данных (ЦОД). Использование моделей сервисов позволит улучшить взаимодействие с заказчиками за счет формализованного и понятного представления услуг ЦОД, обеспечит методическую основу для оперативного и гибкого формирования необходимых заказчикам бизнес-процессов.
В статье рассматривается структура и классификация современных центров обработки и хранения информации. Описаны стандарты отказоустойчивости и жизненный цикл центра данных. Представлена реализация буферного центра данных Пущинской радиоастрономической обсерватории, предназначенного для резервного хранения научных данных, получаемых наземной станцией слежения с космического радиотелескопа в рамках проекта «Радиоастрон».
Резкий рост объема получаемых в эксперименте данных напрямую связан с модернизацией и развитием экспериментальной базы фундаментальных исследований. Прежде всего это относится к физическим, астрономическим и космическим исследованиям. В работе прослеживается история решения проблемы хранения и обработки экспериментальных данных, получаемых на радиоастрономических комплексах Пущинской радиоастрономической обсерватории, от РС и локальных файловых серверов к специализированным и распределенным хранилищам. Показано, что создание и обслуживание хранилищ данных тера и петабайтных объемов требует совершенно иного подхода и нового стиля работы. Хранение данных большого объема требует серьезных аппаратных мощностей, высококвалифицированного персонала и, более того, специального помещения для обеспечения оптимального режима работы оборудования. С другой стороны, нельзя не отметить быстрый рост при разумных ценах пропускной способности любых линий связи. Появление "толстых" каналов связи позволяет рассматривать в качестве оптимального вариант удаленного коллективного научного центра для хранилища и обработки данных. Учитывая, что создание современного центра для хранения и обработки данных является достаточно сложной задачей, требующей привлечения больших финансовых средств, в качестве возможного варианта решения проблемы рассматриваются услуги существующих дата-центров, в частности рассмотрена Stack Data Network (SDN).
Массовое использование мобильных устройств для съема электрокардиограмм (ЭКГ) приводит к количественному росту доступных для исследования ЭКГ множества пациентов. Таким образом, появляются новые возможности исследования колебательных процессов долговременной динамики индивидуального состояния сердечно-сосудистой системы (ССС) любого пациента.
В статье демонстрируются новые возможности долговременного постоянного наблюдения за состоянием ССС массы пациентов, позволяющие выявить закономерности динамики ССС, которые приводят к выдвижению гипотезы о существовании адекватной модели ССС как распределенной нелинейной автоколебательный системы класса моделей возвратов Ферми-Паста-Улама (ФПУ).
Наличие содержательной математической модели ССС возврата ФПУ, как уточнение традиционной модели изучения вариабельности сердечного ритма (ВСР), далее позволяет предложить новые вычислительные методы анализа ЭКГ и прогнозирования динамики ССС для более детальной диагностики и оценки эффективности проводимого лечения.
8-12 апреля 2013 года в Московском финансово-промышленном университете "Синергия" состоялся VIII Международный научный конгресс "Роль бизнеса в трансформации общества - 2013". Это инновационное научное мероприятие, имеющее свою историю и традиции, даёт реальную возможность учёным и исследователям, преподавателям, аспирантам и студентам представить научной общественности свои исследовательские разработки и практико-ориентированные проекты. В программе конгресса порядка 50 конференций, секций, круглых столов и панельный дискуссий.
Основная сложность в области Больших Данных кроется не в масштабах затрат и усилий на работу с ними, а в том, чтобы суметь получить от этих затрат достаточно пользы. Для этого потребуются не только новые технологии, но — главное — новые подходы к формулировке и решению прикладных задач, в которых задействованы большие цифровые массивы.
Журналы событий, сохраняемые современными информационными и техническими системами, как правило, содержат достаточно данных для автоматизированного восстановления моделей соответствующих процессов. Разработано множество алгоритмов для построения моделей процессов, проверки соответствия фактического поведения системы модельному, сравнения моделей процессов, и т.д. Однако возможность быстрого анализа выбираемых пользователями частей журнала до сих пор не нашла полноценной реализации. В статье описан метод многомерного хранения журналов событий для извлечения и анализа процессов, основанный на подходе ROLAP. Результатом анализа журнала является направленный невзвешенный граф, представляющий собою сумму возможных последовательностей событий, упорядоченных по вероятности их возникновения с учетом заданных условий. Разработанный инструмент позволяет выполнять совместный анализ моделей подпроцессов, восстановленных из частей журнала путем задания критериев отбора событий и требуемого уровня детализации модели.
В монографии приведены результаты исследования, посвященного управлению жизненным циклом информационных систем, а также анализу стандартов, сводов знаний и корпоративных методик, использующихся в ИТ-проектах. Приведены характеристики фаз ЖЦИС из практики управления ИТ-проектами, а также практические рекомендации по управлению такими проектами. Книга предназначена для научных работников, сотрудников научно- технических предприятий и работников государственных органов управлений, а также студентов, аспирантов, слушателей бизнес-школ повышения квалификации и переподготовки кадров. Книга содержит практические рекомендации для руководителей ИТ-проектов, а также сотрудников компаний, занимающихся проектной деятельностью в области ИТ-проектов.
The geographic information system (GIS) is based on the first and only Russian Imperial Census of 1897 and the First All-Union Census of the Soviet Union of 1926. The GIS features vector data (shapefiles) of allprovinces of the two states. For the 1897 census, there is information about linguistic, religious, and social estate groups. The part based on the 1926 census features nationality. Both shapefiles include information on gender, rural and urban population. The GIS allows for producing any necessary maps for individual studies of the period which require the administrative boundaries and demographic information.
Учебное пособие предназначено для студентов Департамента компьютерной инженерии МИЭМ НИУ ВШЭ. В основу учебного пособия положены программы курсов «Экономика фирмы» и «Разработка стратегии развития организации». Рассматриваются ключевые концептуальные и методические вопросы теории и практики экономики и планирования развития организации. Использование учебного пособия позволит студентам: проводить анализ основных производственных показателей, а также использовать инструментарий стратегического анализа применительно к конкретным ситуациям современного российского и международного бизнеса. Особое внимание уделяется методам и системам информационной поддержки функций жизнеобеспечения предпринимательских структур и методологии управления инновациями и инвестициями. В Приложении приводятся исходные данные для анализа конкуренции на примере конкретной отрасли.
Документ содержит проект методологических рекомендаций по статистическому измерению технологий. Он включает предложения по формированию операциональных определений технологий, подходы к идентификации классификации новых и возникающих технологий, а также предложения по разработке системы показателей, характеризующих жизненный цикл технологий, и стратегиям сбора данных. Разработанные рекомендации предлагается использовать в качестве методологической основы гармонизированной системы сбора и интерпретации статистических данных о технологиях. В приложении приводятся сведения о доступных определениях технологий и краткие результаты исследования опыта национальных статистических служб в области статистического наблюдения науки и технологий.
Проведено исследование платформ Crossbow, Rbee, Epic, VEK-21ZB1 по параметрам: объем встроенной Flash-памяти , поддерживаемы интерфейсы. В результате выбраны седующие характеристики: объем встроенной Flash-памяти – 128 Кб, дальность передачи данных – до 4 км, поддерживаемы интерфейсы I2C, SPI, RS-232, аппаратная система шифрования данных – AES-128. Результаты исследования могут быть использованы при разработке систем мониторинга оборудования.
Дан обзор теоретических основ построения электронного прототипа пользовательского интерфейса, кратко рассмотрены методы тестирования. Являются составной частью методического обеспечения процесса подготовки студентов и магистров.
This book constitutes the proceedings of the 11th International Conference on Parallel Computing Technologies, PaCT 2011, held in Kazan, Russia on September 19-23, 2011.
The 44 full papers presented together with 2 invited papers were carefully reviewed and selected from 68 submissions. The papers are organized in topical sections on models and languages, cellular automata, parallel programming tools and support, and applications.
В статье рассматриваются современные подходы организации управления автотранспортной деятельностью. Анализируются основные тренды развития мер по повышению эффективности управления процессами перевозок. Показана существенная роль современных информационных технологий в обеспечении конкурентоспособности участников перевозочных процессов, а также рассмотрены характерные примеры построения единого информационного пространства распределенной транспортной компании. Рассмотрены основные бизнес-процессы крупного автопредприятия и показано существенное влияние человеческого фактора на принятие управленческих решений. Подробно рассмотрены современные аспекты совершенствования управления автотранспортным предприятием на основе субъектно-ориентированного подхода к формализации бизнес-процессов и агентно-ориентированных моделей.