Ошибка!

Показать Ошибка!

Забыли пароль?

Ошибка!

Ошибка!

Скрыть Ошибка!

Скрыть Ошибка!

Забыли пароль? Напишите ваш email и мы отправим письмо с инструкциями.

Ошибка!

Обратно

Закрыть

Новая программа решит проблему обработки большого потока данных в астрономии

Новая программа решит проблему обработки большого потока данных в астрономии
Это почти обряд посвящения в физике и астрономии. Ученые проводят годы, строя фантастический новый инструмент. Затем, когда долгожданное устройство, наконец, приближается к завершению, начинается паника: а как будет обрабатываться поток данных?


Подобная ситуация возникла и сейчас с радиотелескопом Square Kilometer Array (SKA), строительство которого планируется в Африке и Австралии, который будет иметь беспрецедентную возможность передавать данные - много точек, с большим количеством деталей о местоположении и свойствах звезд, галактик и гигантских облаков газообразного водорода.

В исследовании, опубликованном в The Astronomical Journal, команда ученых из Университета Висконсин-Мэдисон разработала новый, более быстрый подход к анализу всех этих данных.

Водородные облака могут показаться менее привлекательными, чем другие цели радиотелескопов, такие как вспышки звездообразования в галактике. Но водород имеет фундаментальное значение для понимания космоса, как самое распространенное вещество во Вселенной, наполняющее собой звезды и галактики.

Пока астрономы ожидают заполучить готовый SKA, который будет введен в эксплуатацию в середине 2020-х годов, ведутся дискуссии о том, что делать с обработкой данных. "Мы не имеем достаточно серверов для хранения данных. Нам даже не хватает электроэнергии для питания серверов. И никто не имеет четкого представления, как обрабатывать эту волну данных, чтобы суметь разобраться в ней", говорит Роберт Линднер.

Во многих отношениях, данные о водороде от SKA будут напоминать значительно более быстрый поток, чем поступающий из существующих радиотелескопов. Наименьшая единица, или пиксель, будет хранить каждый бит информации о всем водороде непосредственно на крошечном участке неба. Во-первых, не ясно, этот пиксель регистрирует одно облако водорода или многие, но ответ на этот вопрос является основой для понимания фактического расположения всего водорода.

Люди визуально способны это растолковать, но на интерпретацию каждого пикселя требуется от 20 до 30 минут, используя лучшие существующие модели и программное обеспечение. Таким образом, Линднер спрашивает: как будут астрономы интерпретировать  миллионы пикселей данных водорода, которые будет предоставлять SKA?

В новом исследовании, Линднер и его коллеги представили вычислительный подход, который решает проблему местоположения водорода только за секунду машинного времени.

В исследовании помог Карлос Вера-Сиро из UW-Madison с программным обеспечением, которое может быть обучено интерпретировать проблему "сколько облаков за пикселем?" Программное обеспечение компьютерной сети с высокой пропускной способностью в UW-Madison под названием HTCondor. Аспирант Клэр Мюррей представила ручной анализ для сравнения.

Эти сравнения показали, что новая система сможет поглотить потоп данных SKA, и результат будет достаточно точным, чтобы заменить ручную обработку.

В конечном счете, цель состоит в том, чтобы исследовать формирование звезд и галактик, говорит Линднер. "Мы пытаемся понять начальные условия образования звезд - как, где, когда они начинаются? Как понять, что звезда собирается образоваться здесь, а не там? С автоматической обработкой данных мы не будем ограничены во времени".

"Давайте все исследования через SKA. Даже если каждый пиксель будет распознан не столь точно как при человеческом расчете, мы можем сделать в тысячу и миллион раз больше пикселей, что в среднем пойдет в нашу пользу".

Комментарии:

Еще нет комментариев, станьте первым коментатором!
Войдите на зайт или зарегистрируйтесь, чтобы оставлять комментарии!
0
Сера поможет обнаружить признаки жизни

Сера поможет обнаружить признаки жизни

Новое открытие исследователей позволяет предположить, что сера может указывать на признаки жизни.

Результаты лабораторных исследований показывают, что сера может значительно повлиять на наблюдения далеко расположенных планет за пределами Солнечной системы. Результаты имеют значение для использования серы в качестве знака внеземной жизни, а также влияют на то, как исследователи должны интерпретировать данные о планетарной атмосфере. «Мы обнаружили, что небольшое присутствие серы в атмосфере, м...
06.04.20 23:00
0
2
Марсоход Настойчивость получил колеса и парашют

Марсоход Настойчивость получил колеса и парашют

В Космическом центре Кеннеди продолжается финальная сборка и испытания марсохода НАСА Настойчивость в связи с приближением июльского окна запуска.

На последних стадиях готовности, необходимых перед установкой компонентов космического аппарата в конфигурации, в которой они будут на вершине ракеты Atlas V, были установлены колеса и парашют. Настойчивость (Perseverance) получил шесть колес 30 марта 2020 года. В декабре прошлого года марсоход проходил тест-драйв на «запасных частях», которые не отправятся на Марс. Предназначенные для внедорожны...
05.04.20 20:32
0
1
Клинические испытания иммунотерапии рака обнадеживают

Клинические испытания иммунотерапии рака обнадеживают

Новая форма иммунотерапии рака показала исключительную перспективу в новом клиническом исследовании.

Лечение включает улучшение иммунных клеток пациента для борьбы с раком, а затем повторное введение их в организм, и 93 % участников последнего испытания положительно отреагировали на терапию. Но под поверхностью все еще скрываются серьезные побочные эффекты. Иммунная система обычно хорошо борется с болезнями, но известно, что рак использует все виды хитрых уловок, чтобы избежать обнаружения. Т-...
04.04.20 14:06
0
2
Новые процессоры Intel работают на частоте 5 ГГц

Новые процессоры Intel работают на частоте 5 ГГц

Intel представила новейшее поколение процессоров для ноутбуков, которые первыми вышли за отметку 5 ГГц.

Процессоры Intel Core серии H 10-го поколения, которые раньше устанавливались только на настольных ПК, позволяют запускать более сложные игры и творческие задачи. Партия процессоров, которую Intel назвала Comet Lake-H, делится на три класса. Топовая часть линейки - Intel Core i9, которая может работать на максимальной частоте до 5,3 ГГц на своих 8 ядрах и 16 потоках. Средним диапазоном является i...
03.04.20 16:56
0
0
Сера поможет обнаружить признаки жизни

Сера поможет обнаружить признаки жизни

Новое открытие исследователей позволяет предположить, что сера может указывать на признаки жизни.

Результаты лабораторных исследований показывают, что сера может значительно повлиять на наблюдения далеко расположенных планет за пределами Солнечной системы. Результаты имеют значение для использования серы в качестве знака внеземной жизни, а также влияют на то, как исследователи должны интерпретировать данные о планетарной атмосфере. «Мы обнаружили, что небольшое присутствие серы в атмосфере, м...
06.04.20 23:00
0
2
Марсоход Настойчивость получил колеса и парашют

Марсоход Настойчивость получил колеса и парашют

В Космическом центре Кеннеди продолжается финальная сборка и испытания марсохода НАСА Настойчивость в связи с приближением июльского окна запуска.

На последних стадиях готовности, необходимых перед установкой компонентов космического аппарата в конфигурации, в которой они будут на вершине ракеты Atlas V, были установлены колеса и парашют. Настойчивость (Perseverance) получил шесть колес 30 марта 2020 года. В декабре прошлого года марсоход проходил тест-драйв на «запасных частях», которые не отправятся на Марс. Предназначенные для внедорожны...
05.04.20 20:32
0
3
COVID-19: как могут помочь спутники

COVID-19: как могут помочь спутники

Пандемия коронавируса COVID-19 фактически парализовала повседневную жизнь.

Даже когда распространение этой инфекционной болезни будет остановлено, мир столкнется с огромными проблемами, чтобы вернуться к нормальной жизни. Чтобы помочь экспертам, работавшим в европейских исследовательских центрах и технических организациях в эти беспрецедентные времена, ЕКА выдвинула две новые инициативы, связанные с пониманием воздействия COVID-19 на общество, экономику и окружающую сред...
03.04.20 16:28
0
2
SpaceX готова начать тестирование третьего прототипа Starship

SpaceX готова начать тестирование третьего прототипа Starship

Уже почти год SpaceX строит серию прототипов Starship, которым предстоит тестирование работы системы при запуске на орбиту.

Вслед за успешными испытаниями эти испытания позволят проверить космический корабль и его двигатели Raptor в космосе. К сожалению, компания столкнулась с некоторыми сбоями с этими прототипами, так как первые два взорвались во время теста. Первый прототип, Starship Mk1, взорвался на стартовой площадке 20 ноября 2019 года во время испытания на герметичность. Второй прототип, SN1, также взорвался во...
02.04.20 16:58
0