Введение в технологии Big Data (темы 1-10). Ответы на тесты. На отлично (100 баллов).
Введение в технологии Big Data
Учебные материалы
Введение в курс
Тема 1. Большие данные: термины, проблемы
Тема 2. Понятие алгоритма и вычислимости
Тема 3. Технологии обработки больших объемов информации
Тема 4. Структурированная информация: визуализация и выявление связей
Тема 5. Слабоструктурированная информация на примере звука и изображения. Понятие шума и сигнала
Тема 6. Разделение звуковых образов на примере отделения голосов людей от эмбиента
Тема 7. Улучшение видимости изображений: представление цвета в разных координатах, эквализация гистограммы яркости
Тема 8. Сегментация изображений
Тема 9. Неструктурированная информация на примере корпуса текстов. Лемматизация, стоп-слова, семантические группы
Тема 10. Аналитика реального времени и основы теории управления на примере системы стабилизации беспилотных летательных аппаратов
Заключение
Итоговая аттестация
Итоговый тест
Компетентностный тест
Ответы на тесты: итоговый + компетентностный.
119 вопросов с правильными ответами. На отлично (100 баллов)
С вопросами вы можете ознакомиться ДО покупки.
Ответы вы сможете скачать сразу после оплаты.
1. … вычисления – это предоставление компьютерных ресурсов и услуг (например, серверов, хранения, баз данных, сетей) через Интернет
2. Большие данные включают в себя … данные
3. Такая характеристика больших данных, как …, связана со способностю данных быть полезными и предоставлять ценные инсайты и знания
4. Установите соответствие характеристик больших данных и их описаний:
5. В … большие данные используются для управления рисками и оптимизации инвестиционных стратегий; анализ больших объемов данных помогает банкам оценивать кредитоспособность клиентов, выявлять мошеннические операции и управлять рыночными рисками
6. … больших данных – это процесс изучения больших объемов данных с целью выявления скрытых закономерностей, неочевидных связей, рыночных тенденций и другой полезной информации
7. Графическое представление данных, упрощающее их понимание и анализ, – это … данных
8. … вычисления – это предоставление компьютерных ресурсов и услуг (например, серверов, хранения, баз данных, сетей) через Интернет
9. Говоря об использовании больших данных в сфере …, следует отметить, что анализ данных о движении транспорта, использовании городских пространств, энергопотреблении и других аспектах городской жизни позволяет планировать более эффективные и удобные города
10. В сфере … большие данные используются для анализа пользовательского поведения и предпочтений – это позволяет рекомендовать пользователю релевантный контент, улучшать интерфейсы и взаимодействие с пользователем, а также оптимизировать таргетированную рекламу
11. В … большие данные используются для оптимизации управления запасами и предоставления персонализированных предложений клиентам; анализ данных о покупках, предпочтениях клиентов и сезонных трендах позволяет ритейлерам эффективно управлять запасами и избегать как дефицита, так и избытка товаров
12. Аналитика реального времени – это …
13. Установите соответствие основных сфер применения больших данных и их характеристик:
14. В информатике основой для программного кода, управляющего обработкой данных, являются …
15. Установите правильную последовательность шагов разработки системы стабилизации беспилотных летательных аппаратов (БПЛА):
16. Расстояние … – это мера различия между двумя строками одинаковой длины, определяемая количеством позиций, на которых соответствующие символы этих строк различны
17. Установите соответствие понятий и их содержания:
18. … – это комплексные программные решения, которые предоставляют разработчикам удобный интерфейс для написания, тестирования и отладки кода
19. … в контексте текстовой информации – это процесс группировки слов или предложений таким на основе их семантической близости или других схожих характеристик
20. Способность системы, сети или процесса эффективно справляться с увеличивающимся объемом работы или увеличивать свою производительность в ответ на возрастающую нагрузку – это …
21. Установите соответствие техник для коррекции контраста и их характеристик:
22. В широком смысле алгоритм можно определить как …
23. Цветового пространства, где цвет описывается через оттенок, насыщенность и яркость, – …
24. Для разработки систем стабилизации беспилотных летательных аппаратов (БПЛА) важны такие технологии, как …
25. Установите элементы применения лемматизации в анализе текстов и их характеристики:
26. Наборы данных, которые из-за своего объема, скорости генерации и разнообразия не могут быть обработаны традиционными методами баз данных, – это …
27. … – это процесс преобразования входных данных в выходные в контексте алгоритмов
28. Говоря о том, как временные окна фильтров влияют на аудиосигнал, можно утверждать, что они …
29. … летательный аппарат – это летательный аппарат, который управляемый автоматически или дистанционно
30. … интернет вещей представляет собой сеть взаимосвязанных устройств и машин в промышленной среде, использующих передовые технологии для сбора, обмена и анализа данных в реальном времени
31. Установите соответствие алгоритмов сортировки и их характеристик:
32. Сегментация изображений – это …
33. … – это раздел компьютерных наук, посвященный созданию машин, способных выполнять задачи, требующие человеческого интеллекта
34. … нейросети – это класс глубоких нейронных сетей, специализированных на анализе визуальных данных, способных автоматически и эффективно извлекать важные признаки из изображений
35. Установите соответствие понятия и его определения:
36. Расположите шаги оптимизации системы в логическом порядке:
37. Говоря об основных вызовах и проблемах, связанных с использованием больших данных, следует упомянуть … данных – большие данные часто представлены в различных форматах, от структурированных данных, таких как таблицы и базы данных, до неструктурированных данных, включая текст, изображения и видео
38. Упорядочьте шаги создания HDR-изображения:
39. Установите соответствие характеристик больших данных и их описаний:
40. Основной принцип распараллеливания в вычислениях – …
41. Установите соответствие подходов к уменьшению влияния проклятия размерности и их характеристик:
42. … объектов – это линии или границы, которые обозначают края объектов на изображении и помогают отделить объекты друг от друга и от фона
43. … – это разделение звуковых образов, которое применяется для восстановления записей с мест преступлений или инцидентов, где важно изолировать речь или другие звуки из фонового шума для дальнейшего анализа
44. Преобразование … – это математический инструмент, позволяющий переходить между временным и частотным представлениями звукового сигнала, выявляя составляющие его частоты.
45. Установите соответствие понятий и их определений:
46. Говоря об основных вызовах и проблемах, связанных с использованием больших данных, следует упомянуть … данных, так как с ростом объемов данных увеличивается и риск их утечки или неправомерного использования
47. Говоря о кластеризации, можно утверждать, что она … (укажите 2 варианта ответа)
48. Установите правильную последовательность этапов процесса разделения звуковых образов:
49. Установите соответствие областей и примеров использования морфологической операции открытия для улучшения сегментации:
50. Расположите шаги сегментации изображения в порядке их выполнения:
51. Теория … – это раздел прикладной математики, изучающий поведение динамических систем и способы их управления для достижения желаемых результатов
52. Системы … находят широкое применение в различных типах беспилотных летательных аппаратов (БПЛА), используемых для коммерческих и военных целей, например, в сфере аэрофотосъемки эти системы позволяют дронам снимать высококачественные изображения и видео даже при сильном ветре
53. Диаграмма разброса – это …
54. … цветовая модель – это модель, в которой цвета создаются путем поглощения (вычитания) некоторых волн света, отражая другие; примером является CMYK-модель
55. … – это процесс группировки пикселей или точек данных на основе их схожести, который используется в сегментации для разделения изображения на смысловые области
56. Разделение … – это процесс извлечения или выделения определенных звуковых компонентов из комплексного аудиосигнала
57. Установите соответствие областей, в которых находят применение сверточные нейросети (CNN), и соответствующих примеров применения CNN:
58. … – это подраздел искусственного интеллекта, фокусирующийся на разработке алгоритмов, которые позволяют компьютерам учиться на основе данных
59. … – это распределенная база данных, разработанная для обработки больших объемов данных на множестве серверов без единой точки отказа; обеспечивает высокую доступность и масштабируемость
60. Такая характеристика больших данных, как …, связана с надежностью и качеством данных, эта характеристика важна для обеспечения точности анализа и выводов
61. …, или элемент изображения, является базовой единицей, определяющей визуальное представление изображения на экране или в цифровом файле. Каждый пиксель содержит информацию о цвете и яркости, что позволяет создавать сложные и многоцветные изображения
62. Устаноите соответствие понятий и их определений:
63. … операции (эрозия, дилатация, открытие и закрытие) – это набор инструментов для обработки изображений, основанных на форме или структуре объектов
64. Установите соответствие основных применений преобразования Фурье и их характеристик:
65. Данные, не имеющие заранее определенной структуры или формата, включая тексты, изображения, аудио и видео, – это …
66. Установите соответствие методов и их характеристик:
67. … подход – это метод, сочетающий несколько различных техник или технологий для достижения оптимального результата, например, сочетание масштабируемости и распараллеливания для повышения производительности системы
68. Аддитивная цветовая модель, основанная на смешивании красного, зеленого и синего света для воспроизведения широкого спектра цветов, – …
69. В сфере … большие данные используются для анализа угроз, предупреждения и реагирования на чрезвычайные ситуации
70. Установите соответствие морфологических операций и их характеристик:
71. Процесс определения эмоционального оттенка текста, например, определение того, является ли отзыв положительным, негативным или нейтральным, – это …
72. … области – это группы пикселей, которые обладают схожими характеристиками (например, цветом или текстурой) и формируют единый объект или часть изображения
73. Установите правильную последовательность действий при использовании метода главных компонент (PCA) для разделения звуковых образов:
74. Установите соответствие основных сфер применения больших данных и их характеристик:
75. Проклятием размерности в анализе данных называют …
76. Сокращение «ПИД-регуляторы» расшифровывается как «пропорционально-…-дифференциальные регуляторы»
77. … анализ – это исследование, при котором одновременно учитываются влияния нескольких различных переменных или факторов
78. Установите соответствие терминов и их значений:
79. … – это статистическая мера, отражающая степень взаимосвязи между двумя или более переменными
80. Расположите события в хронологическом порядке:
81. Установите соответствие методов визуализации и их характеристик:
82. … – это процесс разделения цифрового изображения на множество сегментов (или областей), чтобы упростить его анализ или изменить его представление; сегменты могут представлять отдельные объекты, границы или области с однородными атрибутами
83. Существуют различные программы для обработки звука, в частности, … – это бесплатная и открытая программа для записи и редактирования аудиофайлов, которая поддерживает множество форматов файлов, имеет инструменты для обрезки, наложения эффектов, изменения скорости воспроизведения и многое другое
84. … – это примеры использования временных рядов в области экономики и финансов
85. Область искусственного интеллекта, занимающаяся разработкой алгоритмов, способных обучаться и делать предсказания или решения на основе данных, – это …
86. … – это использование статистических алгоритмов и машинного обучения для прогнозирования будущих событий на основе прошлых и текущих данных
87. Установите соответствие понятий и их определений:
88. … является восприятием света, возникающим в человеческом мозге и опосредованном глазом; физически он связан с длиной волны электромагнитного излучения в видимом диапазоне, которое воспринимается фоторецепторами в сетчатке глаза
89. Расстояние … – это метрика, измеряющая разницу между двумя строками текста как минимальное количество односимвольных изменений (вставки, удаления, замены), необходимых для преобразования одной строки в другую
90. … информация – это данные, организованные в четком и упорядоченном формате, часто хранящиеся в таблицах или базах данных, где каждая запись имеет одинаковую структуру
91. Установите соответствие цветовых пространств и их особенностей:
92. … обучение – это подраздел машинного обучения, в котором используются нейронные сети с множеством уровней (слоев) для извлечения высокоуровневых признаков из данных
93. … – это метод, используемый в теории множеств и вычислимости для доказательства существования размерностей или функций, которые не могут быть перечислены или реализованы в виде алгоритмов
94. Вопрос: Существуют различные инструменты и библиотеки для создания и обучения моделей искусственного интеллекта (ИИ). Примером может служить библиотека машинного обучения для Python, которая предоставляет простые и эффективные инструменты для анализа данных и построения моделей.
Назовите данную библиотеку.
95. Вопрос: Интегрированные среды разработки (IDE) – это комплексные программные решения, которые предоставляют разработчикам удобный интерфейс для написания, тестирования и отладки кода.
В числе наиболее популярных IDE – распространенная среда для разработки на Java, Kotlin и других языках. Она известна своими продвинутыми возможностями анализа кода и удобством использования.
Назовите данную среду разработки.
96. Вопрос: Существуют различные инструменты и платформы для работы с большими данными.
В качестве примера можно назвать популярный фреймворк для обработки больших данных, который обеспечивает высокую скорость обработки за счет использования в памяти вычислений и оптимизированных алгоритмов. Он поддерживает различные типы задач, включая пакетную обработку, потоковую передачу данных, машинное обучение и графовые вычисления. Это делает его идеальным выбором для задач, требующих быстрой обработки и анализа данных в реальном времени.
О какой программной платформе говорится в данном примере?
97. Вопрос: Одним из ключевых преимуществ тепловых карт является их способность наглядно представлять плотность и распределение данных. Цвета на карте могут варьироваться от холодных до теплых тонов, где теплые цвета обычно представляют более высокие значения, а холодные – более низкие.
Например, тепловые карты могут демонстрировать распределение населения по городам или регионам, показывая более плотно населенные районы в более теплых цветах
К какой области применения тепловых карт относится данный пример?
98. Вопрос: Существуют различные методы визуализации и анализа данных
Какие из этих методов вы будете использовать для наиболее эффективного представления результатов исследования?
99. Вопрос: Сегментация изображений, ключевой этап в обработке визуальных данных, требует применения специализированных инструментов и языков программирования для эффективной обработки и анализа.
В частности, есть библиотека для глубокого обучения от Google, позволяющая эффективно реализовывать и тренировать сверточные нейронные сети (CNN), которые являются основой для многих современных методов сегментации изображений. Эта библиотека обеспечивает не только возможность обучения моделей на высоком уровне, но и их быстрое применение для обработки изображений в реальном времени.
О какой библиотеке идет речь?
100. Вопрос: Вы работаете аналитиком данных в компании, которая занимается исследованием рыночных тенденций. Ваша задача – анализировать большие объемы данных из различных источников, чтобы предсказывать изменения на рынке.
Какой подход следует использовать для обработки и анализа этих данных?
101. Вопрос: Существуют различные программы для обработки звука. Примером является популярное программное обеспечение для создания музыки на платформе macOS. Оно включает в себя инструменты для записи, редактирования и микширования музыкальных композиций, а также широкий выбор виртуальных инструментов и эффектов.
Назовите данную программу.
102. Вопрос: Одной из наиболее распространенных и важных задач в области аудиообработки является отделение голосов людей от фоновых звуков или эмбиента. Используя методы разделения звуковых образов, можно эффективно изолировать голосовые сигналы от фоновых шумов.
Разделение звуковых образов используется для множества целей, включая ремикширование и мастеринг треков. Например, технология разделения позволяет инженерам извлекать вокальные партии из существующих записей для их последующего использования в ремиксах или для создания новой музыки. Также это применяется для улучшения качества записи путем отделения и детальной обработки инструментальных и вокальных дорожек.
Какую область использования разделения звуковых образов иллюстрируют эти примеры?
103. Вопрос: Для создания HDR-изображений требуются как специализированный софт, так и аппаратные средства.
Какие аппаратные требования предъявляются к оборудованию для создания исходных снимков для HDR-изображений?
104. Вопрос: Сегментация изображений, ключевой этап в обработке визуальных данных, требует применения специализированных инструментов и языков программирования для эффективной обработки и анализа.
В частности, в этой области используют язык программирования, который является является одним из наиболее популярных в сфере вычислительной фотографии и обработки изображений, благодаря своей гибкости и доступности большого количества научных библиотек. Этот язык позволяет разработчикам быстро реализовывать сложные алгоритмы сегментации, обеспечивая тем самым ускорение исследований и разработок.
Назовите данный язык программирования.
105. Вопрос: Основным принципом работы таких систем является непрерывный мониторинг состояния беспилотного летательного аппарата (БПЛА) с помощью датчиков (гироскопов, акселерометров, магнитометров) и применение корректирующих мер через исполнительные механизмы (например, моторы и сервоприводы) для поддержания заданной ориентации и высоты полета.
О каких системах идет речь?
106. Вопрос: Разработчиками беспилотных летательных аппаратов (БПЛА) была создана система, использующая комбинацию гироскопических сенсоров и алгоритмов машинного обучения для мгновенной коррекции полетного пути. Благодаря этому беспилотник способен эффективно противостоять воздействию ветра, сохраняя заданную траекторию и высоту. Тестирование в экстремальных условиях показало высокую эффективность системы, подтвердив ее способность адаптироваться к резким изменениям внешней среды.
Применение какой системы описано в этом примере?
107. Вопрос: В данном процессе учитывается контекст и имеет место полное преобразование слова до его канонической формы. Особенно важен этот процесс в языках с богатой морфологией и сложной системой склонений, где одно и то же слово может иметь множество различных форм. Это требует глубокого понимания языка и доступа к обширным лексическим базам данных.
О каком процессе идет речь?
108. Вопрос: Этот процесс в контексте текстовой информации включает группировку слов или предложений на основе их семантической близости или других схожих характеристик. Эта задача позволяет структурировать большие объемы текстовых данных, выявляя в них скрытые паттерны и темы.
Данный метод может использоваться для идентификации синонимов или тематически связанных терминов в больших корпусах текста. Например, слова «автомобиль», «машина» и «транспортное средство» могут быть сгруппированы в одну группу – это значительно упрощает анализ текста, позволяя системам обработки естественного языка (NLP) лучше понимать контекст и смысл текстов.
О каком процессе идет речь?
109. Вопрос: Одной из наиболее распространенных и важных задач в области аудиообработки является отделение голосов людей от фоновых звуков или эмбиента. Используя методы разделения звуковых образов, можно эффективно изолировать голосовые сигналы от фоновых шумов.
Например, разделение звуковых образов используется для улучшения ясности голосовых вызовов и видеоконференций в шумной среде. Алгоритмы, способные изолировать голос от шума, улучшают качество связи и повышают удобство использования телефонов, гарнитур и конференц-систем.
Какую область использования разделения звуковых образов иллюстрируют эти примеры?
110. Вопрос: Прикладные программные решения для разделения звуковых образов играют важную роль в множестве сфер, от музыкальной индустрии до улучшения аудио в образовательных и корпоративных презентациях. Программное обеспечение предоставляет специализированные инструменты для изоляции вокала и отделения фоновых шумов или музыки от основного аудиопотока.
Приведите примеры таких программных продуктов.
111. Вопрос: Разработчики систем стабилизации, несмотря на их значительные достижения и предложенные усовершенствования, сталкиваются с рядом технических и физических ограничений.
Что требуется для преодоления существующих ограничений систем стабилизации и управления беспилотных летательных аппаратов (БПЛА)?
112. Вопрос: Эта библиотека является одной из наиболее известных и широко используется для обработки изображений и компьютерного зрения. Она предоставляет разработчикам комплексный набор алгоритмов и функций. Это включает в себя не только улучшение видимости изображений, но и более сложные процессы, такие как распознавание объектов и трекинг движения. Эта библиотека поддерживает разработку высокопроизводительных приложений для реального времени, что делает ее незаменимой для проектов, связанных с автоматической обработкой визуальной информации.
Назовите описанную библиотеку.
113. Вопрос: Ваша команда разработчиков работает над созданием алгоритма для оптимизации логистических операций в крупной розничной сети.
Что необходимо предпринять для разработки этого алгоритма, чтобы обеспечить его эффективность и точность?
114. Вопрос: Данный отраслевой стандарт для звукозаписи и аудиопроизводства предоставляет возможности для многоканальной записи и сведения, использования виртуальных инструментов и эффектов, а также совместной работы над проектами в реальном времени.
Приведите название этого стандарта.
115. Вопрос: Базы данных NoSQL предназначены для хранения, обработки и анализа больших объемов неструктурированных данных. Они отличаются от традиционных реляционных баз данных гибкостью схем, масштабируемостью и возможностью обработки большого количества запросов в реальном времени.
В качестве примера можно привести хранилище данных с открытым исходным кодом, которое используется в качестве базы данных, кеша и брокера сообщений. Она обеспечивает высокую скорость чтения и записи данных.
О какой базе данных говорится в данном примере?
116. Вопрос: Интегрированные среды разработки (IDE) – это комплексные программные решения, которые предоставляют разработчикам удобный интерфейс для написания, тестирования и отладки кода.
Например, специализированная IDE для Python от JetBrains, предоставляет широкий набор инструментов для разработки на Python, включая фреймворки для веб-разработки и научных вычислений
Назовите данный продукт.
117. Вопрос: Анализ временных рядов включает в себя несколько ключевых аспектов. Например, временные ряды используют для обнаружения неожиданных изменений в данных, которые могут указывать на важные события или проблемы, требующие дальнейшего исследования.
Назовите данный аспект.
118. Вопрос: Существует специальный софт для создания HDR-изображений. Эти программы позволяют автоматически объединять снимки с разной экспозицией в одно HDR-изображение и предоставляют инструменты для дальнейшей тоновой коррекции и настройки контрастности.
Приведите пример программы для создания HDR-изображений.
119. Вопрос: Интегрированные среды разработки (IDE) – это комплексные программные решения, которые предоставляют разработчикам удобный интерфейс для написания, тестирования и отладки кода.
В числе наиболее популярных IDE – мощная среда от Microsoft для разработки на C#, VB.NET, C++ и других языках. Поддерживает разработку приложений для Windows, мобильных платформ и веба.
Назовите данный продукт.
