Дом Личные финансы Производительность и большие данные - манекены

Производительность и большие данные - манекены

Видео: Как уничтожить производительность базы данных за 30 минут 2025

Видео: Как уничтожить производительность базы данных за 30 минут 2025
Anonim

Просто иметь более быстрый компьютер недостаточно для обеспечения правильного уровня производительности для обработки больших данных. Вы должны иметь возможность распространять компоненты своей большой службы данных по ряду узлов. В распределенных вычислениях узел является элементом, содержащимся в кластере систем или в стойке.

Узел обычно включает в себя процессор, память и какой-то диск. Однако узел также может быть процессором и памятью blade-серверов, которые полагаются на соседнее хранилище в стойке.

В большой среде данных эти узлы обычно группируются вместе для обеспечения масштабирования. Например, вы можете начать с большого анализа данных и продолжать добавлять дополнительные источники данных. Чтобы обеспечить рост, организация просто добавляет больше узлов в кластер, чтобы он мог масштабироваться для удовлетворения растущих потребностей.

Однако недостаточно просто увеличить количество узлов в кластере. Скорее, важно иметь возможность отправлять часть большого анализа данных в разные физические среды. Там, где вы отправляете эти задачи и как вы ими управляете, разница между успехом и неудачей.

В некоторых сложных ситуациях вы можете выполнять несколько разных алгоритмов параллельно, даже в пределах одного и того же кластера, для достижения требуемой скорости анализа. Почему вы выполняете разные алгоритмы больших данных параллельно в одной стойке? Чем ближе распределены функции, тем быстрее они могут выполняться.

Хотя можно распределить большой анализ данных по сетям, чтобы воспользоваться доступной пропускной способностью, вы должны сделать такой тип распространения на основе требований к производительности. В некоторых ситуациях скорость обработки занимает заднее сиденье. Однако в других ситуациях быстрое получение результатов - это требование. В этой ситуации вы хотите убедиться, что сетевые функции находятся в непосредственной близости друг от друга.

В целом, большая среда данных должна быть оптимизирована для типа задачи аналитики. Таким образом, масштабируемость является отличным примером успешной работы больших данных. Хотя теоретически возможно управлять большой средой данных в одной большой среде, это непрактично.

Чтобы понять потребности в масштабируемости в больших данных, нужно лишь взглянуть на масштабируемость облаков и понять как требования, так и подход. Для облачных вычислений большие данные требуют включения быстрых сетей и недорогих кластеров аппаратного обеспечения, которые могут быть объединены в стойки для повышения производительности. Эти кластеры поддерживаются автоматизацией программного обеспечения, которая обеспечивает динамическое масштабирование и балансировку нагрузки.

Конструкция и реализация MapReduce - отличные примеры того, как распределенные вычисления могут сделать большие данные оперативно видимыми и доступными. По сути, компании находятся в одном из уникальных поворотных моментов в области вычислений, в которых технологические концепции объединяются в нужное время для решения правильных проблем. Объединение распределенных вычислений, улучшенных аппаратных систем и практических решений, таких как MapReduce и Hadoop, существенно изменяет управление данными.

Производительность и большие данные - манекены

Выбор редактора

Знакомства после 50: как ввести свою дату - манекены

Знакомства после 50: как ввести свою дату - манекены

Copyright © 2014 AARP. Все права защищены. Когда вы снова встречаетесь после 50 лет, каков должен быть порядок введения кого-то людям, которых вы волнуете? Вот порядок, который имеет смысл с точки зрения обратной связи, сложности, смысла и цели. Твои лучшие друзья). Ваши ближайшие друзья хотят лучшего для вас и хотят, чтобы вы ...

Знакомства после 50 для чайников Чит-лист - манекены

Знакомства после 50 для чайников Чит-лист - манекены

Захватывающая часть знакомства снова после 50 лет заключается в том, что отношения могут принимать любую форму, которую вы хотите. Там больше общения, более честности и меньше предположений о том, что означает «знакомства» или где оно происходит. Тем не менее вам по-прежнему может понадобиться помощь в навигации по миру знакомств и отношений. Ознакомьтесь с полезными советами по написанию удивительного ...

Знакомства после 50: Сделать безопасность приоритетом - манекены

Знакомства после 50: Сделать безопасность приоритетом - манекены

Copyright © 2014 AARP Все права защищены. Если вы снова встречаетесь после 50 лет, и с тех пор, как вы последний раз встречались, сделайте безопасность приоритетом, освещая некоторые правила здравого смысла. Если вы не полюбите мальчика или девушку по соседству, вашего коллеги или кого-то, кого вы знаете ...

Выбор редактора

Как найти группу LinkedIn - манекены

Как найти группу LinkedIn - манекены

После того, как вы присоединитесь к группе LinkedIn, вы, вероятно, захотите узнать, кто в группе, и как члены группы подключены к вам. В конце концов, суть этих групп - поддерживать связь с единомышленниками и заставить их быть частью вашей расширенной сети. Чтобы выполнить поиск в группе, выполните следующие действия: ...

Как просмотреть LinkedIn Job Applantsants - dummies

Как просмотреть LinkedIn Job Applantsants - dummies

После того, как вы разместили свою вакансию в LinkedIn, вы должны ожидайте получить некоторых претендентов на эту должность. Каждый раз, когда кто-то подает заявку на эту работу, вы получаете электронное письмо от LinkedIn, уведомляющее вас о приложении. Кроме того, LinkedIn записывает приложение на вкладке Заявители окна «Статус работы» рядом с Обзор ...

Как запросить рекомендацию LinkedIn - манекены

Как запросить рекомендацию LinkedIn - манекены

В идеальном мире вы никогда не будете запрашивать рекомендацию. Счастливый коллега или босс просто автоматически опубликует критическую рекомендацию по LinkedIn. Но реальность такова, что, скорее всего, только ваши бредовые поклонники и очень тяжелые пользователи LinkedIn собираются сделать незапрошенные рекомендации. Будьте готовы, хотя: некоторые люди считают, что рекомендации должны только ...

Выбор редактора

Электроника Проекты: как программировать подпрограммы PBASIC - манекены

Электроника Проекты: как программировать подпрограммы PBASIC - манекены

Подпрограммы pBASIC неоценимы в ваших проектах электроники с использованием процессора BASIC Stamp. Подпрограмма - это часть программы, которую можно вызывать из любого места в программе. Когда подпрограмма завершается, управление программой переходит к месту, из которого была вызвана подпрограмма. Подпрограммы полезны, потому что они ...

Электроника Проекты: использование светодиодов для обнаружения полярности - манекены

Электроника Проекты: использование светодиодов для обнаружения полярности - манекены

В этом проекте вы создаете электронный гаджет, который использует два светодиода для обозначения полярности входного напряжения. Напряжение обеспечивается батареей 9 В, подключенной к цепи с помощью переключателя ножа DPDT, который подключен для обратной полярности батареи. Два светодиода и соответствующие им резисторы установлены на ...