Анализ и установка платформы для распределённой обработки больших данных "Apache Hadoop"
Исследование платформы для распределённой обработки больших данных "Apache Hadoop". Описание алгоритма её установки и настройки. Оценка возможности использования "Apache Hadoop" для обработки огромного количества ежеминутно поступающей информации.
Подобные документы
Открытое и свободное программное обеспечение. Сравнение Apache OpenOffice.org Impress и MS Office PowerPoint. Apache OpenOffice.org Impress в деятельности переводчиков. Презентация "Экскурсия по Оренбургской области" (пример использования программы).
курсовая работа, добавлен 29.08.2013Методы проектирования технологических процессов обработки данных. Проектирование технологических процессов обработки данных в пакетном режиме. Характеристика технологических процессов обработки данных в диалоговом режиме. Классификация диалоговых систем.
реферат, добавлен 18.03.2018Анализ схемотехники мультиплексорных логических модулей для обработки многозначных и континуальных данных, разработка принципов их более простой структурной организации. Функциональные возможности, способы настройки, варианты схемной реализации модулей.
автореферат, добавлен 30.01.2018Методы обработки больших объемов данных на основе модели распределенных вычислений MapReduce и Percona server - сборкой MySQL, изначально предназначенной и оптимизированной для работы с большими данными. Преимущества данного программного обеспечения.
статья, добавлен 28.07.2017Оценка эффективности модели распределенной обработки входных данных отраслевой системы мониторинга рыболовства. Суть алгоритма обработки на базе имитационного моделирования с учетом производительности программных средств отраслевой системы мониторинга.
статья, добавлен 30.09.2020Средства обработки структурированных текстовых данных, обработки каталогов. Знакомство с утилитой make, получение навыка написания простейших make-файлов. Пример использования утилиты cat. Утилиты more и less для просмотра содержания больших файлов.
лекция, добавлен 27.11.2013Моделирование абстрактных типов данных для различных реализаций. Поиск информации в файлах данных. Эффективность алгоритмов сортировок для различных структур и размерностей данных. Реализация структур данных типа дерево и типовые алгоритмы их обработки.
курсовая работа, добавлен 12.11.2017Понятие и функции системы управления базами данных (СУБД). Современные СУБД как мощный инструмент для создания и обработки баз данных большого объема. Применение СУБД в сфере экономики. Средства организации баз данных и особенности работы с ними.
реферат, добавлен 02.04.2014Обзор и классификация технических средств обработки данных, характеристика режимов и способов обработки. Комплекс технических средств для работы с информацией, средства подготовки, приема и передачи данных. Анализ информационных технологий управления.
реферат, добавлен 12.05.2010Назначение специальных цепочечных команд, используемых для обработки специальных символьных данных. Команды ассемблера для обработки строковых данных. Алгоритм замены символа. Характер использования команд обработки строк. Разработка листинга программы.
контрольная работа, добавлен 01.02.2020Режимы обработки данных при проектировании технологических процессов. Способы обработки данных: централизованный, децентрализованный, распределенный и интегрированный. Методы хранения данных. Формирование ведомости продаж мобильных телефонов в MS Excel.
контрольная работа, добавлен 02.12.2011Система управления базами данных как один из методов решения задач длительного хранения и обработки информации. Особенности реляционных баз данных, их структура и способы обработки. Взаимодействие с СУБД из Web-приложения, структурированный язык запросов.
доклад, добавлен 28.06.2013Обработка нечисловых данных и снижения их субъективности при проведении федеральных статистических наблюдений. Использование лингвистических шкал для обработки нечисловых данных. Плюсы использования визуального интерфейса нечеткого ввода данных.
статья, добавлен 05.05.2019Описание языков веб-программирования, необходимых для решения поставленной задачи. Возможности использования языков программирования, синтаксис которых лежит в основе создания фрагмента программного обеспечения для автоматизированной обработки данных.
статья, добавлен 06.05.2018Разработка Розенблаттом математической и компьютерной модели восприятия информации мозгом на основе двухслойной обучающейся нейронной сети. Алгоритм параллельной распределённой обработки данных в середине 1980 годов. Основы нейросетевых технологий.
дипломная работа, добавлен 07.08.2018Распознавание параметров командной строки и обработка данных. Выбор четырех вариантов обработки данных. Запрос номера обрабатываемого файла. Построение гистограммы распределения. Смешивание, выравнивание, поиск и статистика как типы обработки данных.
контрольная работа, добавлен 20.05.2015Понятие обработки информации или обработки чисел, сигналов, символьной информации, логической обработки, обработка сигналов. Основные команды ЭВМ. Команды передачи и обработки данных. Команды передачи управления. Команды для работы с подпрограммами.
реферат, добавлен 27.01.2018Способность обработки большого количества информации в короткие сроки как неотъемлемая часть построения бизнес-процессов. Эффект от внедрения технологий больших данных компания SAP. Применение SAP в сфере розничной торговли. Электронная торговая площадка.
статья, добавлен 10.04.2019Сущность и основные компоненты информационной технологии обработки данных. Банки данных, их особенности и этапы разработки. Применение и свойства базы данных. Логическая структура основных моделей баз данных. Функции системы управления базами данных.
реферат, добавлен 12.11.2011Рассмотрение принципов создания системы обработки GNSS данных для задачи охраны периметра. Анализ базового алгоритма работы системы сбора, обработки и хранения GNSS данных, позволяющего отслеживать обработанные GNSS данные на удаленном web-сервисе.
статья, добавлен 16.05.2022Метод Data Mining (извлечения знаний из баз данных). Структуризация и первичная логическая обработка данных. Анализ и прогнозирование статистической обработки данных. Проведение финансово-экономических расчетов. Решение уравнений и оптимизационных задач.
реферат, добавлен 17.10.2011Анализ способов полуконтролируемого обучения нейронных сетей векторного квантования, предназначенных для обработки больших массивов информационных данных. Методы последовательной обработки матриц изображений, их вычислительная простота и быстродействие.
статья, добавлен 22.03.2016Описание разработанных функций конструкторов и деструкторов, вывода данных на экран, добавления и удаления записей, сортировки, сохранения данных в файл. Блок-схемы алгоритмов обработки файловых данных. Листинг программы "Оружейный магазин" на языке С++.
курсовая работа, добавлен 24.10.2012Выявление паттернов в последовательностях категориальных данных для непрерывного производства. Необходимость разработки подходов для анализа больших объемов данных. Главные методы распределенной обработки, позволяющие проводить анализ данных в потоке.
статья, добавлен 25.05.2017Составление мероприятий по совершенствованию процесса обработки информации. Описание технических и программных средств. Расчёт трудоёмкости обработки информации и количества оборудования. Определение величины капитальных вложений и текущих затрат.
курсовая работа, добавлен 18.04.2014