Ошибка!

Показать Ошибка!

Забыли пароль?

Ошибка!

Ошибка!

Скрыть Ошибка!

Скрыть Ошибка!

Забыли пароль? Напишите ваш email и мы отправим письмо с инструкциями.

Ошибка!

Обратно

Закрыть

Новая программа решит проблему обработки большого потока данных в астрономии

Новая программа решит проблему обработки большого потока данных в астрономии
Это почти обряд посвящения в физике и астрономии. Ученые проводят годы, строя фантастический новый инструмент. Затем, когда долгожданное устройство, наконец, приближается к завершению, начинается паника: а как будет обрабатываться поток данных?


Подобная ситуация возникла и сейчас с радиотелескопом Square Kilometer Array (SKA), строительство которого планируется в Африке и Австралии, который будет иметь беспрецедентную возможность передавать данные - много точек, с большим количеством деталей о местоположении и свойствах звезд, галактик и гигантских облаков газообразного водорода.

В исследовании, опубликованном в The Astronomical Journal, команда ученых из Университета Висконсин-Мэдисон разработала новый, более быстрый подход к анализу всех этих данных.

Водородные облака могут показаться менее привлекательными, чем другие цели радиотелескопов, такие как вспышки звездообразования в галактике. Но водород имеет фундаментальное значение для понимания космоса, как самое распространенное вещество во Вселенной, наполняющее собой звезды и галактики.

Пока астрономы ожидают заполучить готовый SKA, который будет введен в эксплуатацию в середине 2020-х годов, ведутся дискуссии о том, что делать с обработкой данных. "Мы не имеем достаточно серверов для хранения данных. Нам даже не хватает электроэнергии для питания серверов. И никто не имеет четкого представления, как обрабатывать эту волну данных, чтобы суметь разобраться в ней", говорит Роберт Линднер.

Во многих отношениях, данные о водороде от SKA будут напоминать значительно более быстрый поток, чем поступающий из существующих радиотелескопов. Наименьшая единица, или пиксель, будет хранить каждый бит информации о всем водороде непосредственно на крошечном участке неба. Во-первых, не ясно, этот пиксель регистрирует одно облако водорода или многие, но ответ на этот вопрос является основой для понимания фактического расположения всего водорода.

Люди визуально способны это растолковать, но на интерпретацию каждого пикселя требуется от 20 до 30 минут, используя лучшие существующие модели и программное обеспечение. Таким образом, Линднер спрашивает: как будут астрономы интерпретировать  миллионы пикселей данных водорода, которые будет предоставлять SKA?

В новом исследовании, Линднер и его коллеги представили вычислительный подход, который решает проблему местоположения водорода только за секунду машинного времени.

В исследовании помог Карлос Вера-Сиро из UW-Madison с программным обеспечением, которое может быть обучено интерпретировать проблему "сколько облаков за пикселем?" Программное обеспечение компьютерной сети с высокой пропускной способностью в UW-Madison под названием HTCondor. Аспирант Клэр Мюррей представила ручной анализ для сравнения.

Эти сравнения показали, что новая система сможет поглотить потоп данных SKA, и результат будет достаточно точным, чтобы заменить ручную обработку.

В конечном счете, цель состоит в том, чтобы исследовать формирование звезд и галактик, говорит Линднер. "Мы пытаемся понять начальные условия образования звезд - как, где, когда они начинаются? Как понять, что звезда собирается образоваться здесь, а не там? С автоматической обработкой данных мы не будем ограничены во времени".

"Давайте все исследования через SKA. Даже если каждый пиксель будет распознан не столь точно как при человеческом расчете, мы можем сделать в тысячу и миллион раз больше пикселей, что в среднем пойдет в нашу пользу".

Комментарии:

Еще нет комментариев, станьте первым коментатором!
Войдите на зайт или зарегистрируйтесь, чтобы оставлять комментарии!
0
Запуск вертолета на Марсе отложен для технической проверки

Запуск вертолета на Марсе отложен для технической проверки

НАСА отложило как минимум на несколько дней первый полет мини-вертолета на Марсе после возникшей проблемы во время испытаний роторов, сообщило агентство.

Полет Ingenuity, который должен был стать первым в истории управляемым полетом на другой планете, был назначен на понедельник по московскому времени, но сейчас отложен как минимум до 14 апреля. Скоростное испытание винта четырехфунтового (1,8 кг) вертолета в пятницу закончилось раньше, чем ожидалось, из-за предупреждения о потенциальной проблеме. «Команда вертолета изучает телеметрию, чтобы диаг...
12.04.21 20:37
0
1
Переработанные отходы целлюлозных заводов придают цементу прочность и эластичность

Переработанные отходы целлюлозных заводов придают цементу прочность и эластичность

Целлюлозные заводы производят значительное количество отходов, и ученые довольно творчески подходят к тому, как их можно использовать.

Последний пример исходит от исследователей Университета Британской Колумбии (UBC), которые использовали отходы целлюлозного завода в качестве наполнителя для цемента, который оказался более прочным и устойчивым. Отходы, лежащие в основе этого прорыва, известны как зола уноса целлюлозных заводов (PFA), которую целлюлозно-бумажная промышленность Северной Америки производит более миллиона тонн ежего...
11.04.21 16:09
0
0
Вертолет Ingenuity готов к первому полету на Марсе

Вертолет Ingenuity готов к первому полету на Марсе

Летательный аппарат НАСА может совершить свой первый полет над Красной планетой в течение двух дней после успешного первоначального испытания роторов, сообщило в пятницу космическое агентство США.

Текущий план первой в истории попытки управляемого полета на другой планете заключается в том, чтобы 1,8 килограммовый вертолет Ingenuity взлетел с марсианского кратера Джезеро в воскресенье в 22:54 по восточному времени США (05:54 по мск в понедельник) и зависнуть на высоте 3 метров над поверхностью в течение получаса, сообщило НАСА. «С вертолетом все хорошо», - сказал Тим Кэнхэм, руководитель о...
10.04.21 16:05
0
-1
Ежегодно на Землю падает более 5000 тонн внеземной пыли

Ежегодно на Землю падает более 5000 тонн внеземной пыли

Ежегодно наша планета сталкивается с пылью комет и астероидов. Частицы межпланетной пыли проходят через атмосферу и порождают падающие звезды. Некоторые из них достигают земли в виде микрометеоритов.

Международная программа, проводимая в течение почти 20 лет учеными из CNRS, Университета Париж-Сакле и Национального музея естественной истории при поддержке Французского полярного института, определила, что 5200 тонн микрометеоритов в год достигают земли. Исследование будет опубликовано в журнале Earth & Planetary Science Letters. Микрометеориты всегда падали на нашу планету. Частицы межплан...
09.04.21 16:41
0
0
Запуск вертолета на Марсе отложен для технической проверки

Запуск вертолета на Марсе отложен для технической проверки

НАСА отложило как минимум на несколько дней первый полет мини-вертолета на Марсе после возникшей проблемы во время испытаний роторов, сообщило агентство.

Полет Ingenuity, который должен был стать первым в истории управляемым полетом на другой планете, был назначен на понедельник по московскому времени, но сейчас отложен как минимум до 14 апреля. Скоростное испытание винта четырехфунтового (1,8 кг) вертолета в пятницу закончилось раньше, чем ожидалось, из-за предупреждения о потенциальной проблеме. «Команда вертолета изучает телеметрию, чтобы диаг...
12.04.21 20:37
0
0
Вертолет Ingenuity готов к первому полету на Марсе

Вертолет Ingenuity готов к первому полету на Марсе

Летательный аппарат НАСА может совершить свой первый полет над Красной планетой в течение двух дней после успешного первоначального испытания роторов, сообщило в пятницу космическое агентство США.

Текущий план первой в истории попытки управляемого полета на другой планете заключается в том, чтобы 1,8 килограммовый вертолет Ingenuity взлетел с марсианского кратера Джезеро в воскресенье в 22:54 по восточному времени США (05:54 по мск в понедельник) и зависнуть на высоте 3 метров над поверхностью в течение получаса, сообщило НАСА. «С вертолетом все хорошо», - сказал Тим Кэнхэм, руководитель о...
10.04.21 16:05
0
-1
Ежегодно на Землю падает более 5000 тонн внеземной пыли

Ежегодно на Землю падает более 5000 тонн внеземной пыли

Ежегодно наша планета сталкивается с пылью комет и астероидов. Частицы межпланетной пыли проходят через атмосферу и порождают падающие звезды. Некоторые из них достигают земли в виде микрометеоритов.

Международная программа, проводимая в течение почти 20 лет учеными из CNRS, Университета Париж-Сакле и Национального музея естественной истории при поддержке Французского полярного института, определила, что 5200 тонн микрометеоритов в год достигают земли. Исследование будет опубликовано в журнале Earth & Planetary Science Letters. Микрометеориты всегда падали на нашу планету. Частицы межплан...
09.04.21 16:41
0
1
Химический отпечаток первой транзитной экзопланеты показал ее далекое место рождения

Химический отпечаток первой транзитной экзопланеты показал ее далекое место рождения

Астрономы нашли доказательства, что первая экзопланета, идентифицированная как проходящая перед звездой, могла мигрировать на близкую орбиту со звездой от своего первоначального места рождения.

Анализ атмосферы планеты, проведенный группой ученых из Университета Уорвика, позволил идентифицировать химический отпечаток планеты, которая сформировалась гораздо дальше от своего солнца, чем она находится в настоящее время. Это подтверждает предыдущее мнение о том, что планета переместилась в свое текущее положение после формирования, всего на 7 миллионов км от своего Солнца или эквивалент 1/20...
08.04.21 14:55
0