Я не предлагаю новый стандарт. Это дело такое, сам понимаешь.
SPASE сюда по твоим объяснениям это некий промежуточный формат представления, метаданные описывающие что и где находится. Все данные сами по себе надо будет выдергивать из других форматов HDF, FITS или просто ASCII файлов. Та еще задача надо сказать.
Оно само по себе не так интересно, метаданные никто по сути не видит.
В моем комплексе такой промежуточный формат тоже есть. Главное там это то что пользователь может получить не ссылку а конечные данные и там же их бработать и созранить результат в подходящем формате.
Я кстати по первой версии программы диплом защищал ;) Правда первая версия была совсем страшная. :)
Я искренне рад, что ты проникся идеей ;) Но, согласись, мы не являемся авторитетной организацией для продвижения своего нового формата. А вот если сделаем нормальное ПО для поддержки имеющегося и если создадим полностью инфраструктуру для хранения там данных, это будет о-ой как неплохо. В качестве "обкатки" инфраструктуры сможем перетащить данные по "Татьянам" на этот формат, если НИИЯФовцы позволят.
Кроме того, создание своего полноценного формата - это отдельная большая задача. Надо предусмотреть все, что есть. Завтра я тебе продемонстрирую стопку листов, в которых просто перечислены поля, доступные в формате spase.
Кроме того, в этом деле действительно лучше иметь один единый формат, чем кучу разных. А то получится все та же байда, что и с HTML: каждый браузер трактует как ему удобнее.
>А если серьезно, то я сомневаюсь, что твой формат позволяет поддерживать _все_ имеющиеся типы >данных (численные значения, изображения, каталоги и пр.)
работает только с численными значениями. остальное пока не позволяет. задач не было. да и формализовать довольно сложно. выборку скажем из набора сделать без проблем.
>Кроме того, ребята из НАСА и ЕСА с 99-го года потихоньку перетаскивают свои базы на spase. >Представь, какой это огромный набор данных. Стоит ли сейчас велосипед изобретать?
ну дык я раньше делать начал ;) примерно на год ;)
Ну и кроме того моя софтинка для наши задач должны быть удобнее.
Сразу оговорюсь, что я никому ничего не навязываю и моя разработка еще довольно сырая. Но для наших задач я думаю она лучше будет подходить.
Я бы не стал так откровенно сомневаться в профессионализме товарищей и ESA. (ц) :o)
А если серьезно, то я сомневаюсь, что твой формат позволяет поддерживать _все_ имеющиеся типы данных (численные значения, изображения, каталоги и пр.)
Кроме того, ребята из НАСА и ЕСА с 99-го года потихоньку перетаскивают свои базы на spase. Представь, какой это огромный набор данных. Стоит ли сейчас велосипед изобретать?
Не совсем. Это формат, который о-о-ой как облегчает чтение данных программно. Т.е. тебе не нужно изучать формат файлов для каждого типа данных (ну там плотность потока рентгена, плотность потока СКЛ и т.п). Формат един. Берешь бибилиотеку, которая парсит этот формат, и через 5 минут получаешь набор данных в виде, например массива, в своей программе. Примерно так.
Ну типа это тулза, которая spase использует "внутри". А вообще, должен быть туда доступ извне к самим данным. Получить доступ можно через spase-клиент. Но где ж его взять: то, что предоставляет spase-group.org не работает :(
Данные по GOES, например, хранятся в формате SPASE.
Но, как я сказал, сам стандарт находится в стадии "детства". Так что, судить о его востребованности будем позже. А ребята из ESA сами принимают активное участие в его разработке.
Что же касается студентов, это да, проблемы есть. У тебя есть какие-то предложения?
P.S. Критика должна быть конструктивной. Неконструктивная критика = нытье ;)
Этот SPASE кто-нибудь реально использует?
Я бы не стал так откровенно сомневаться в профессионализме товарищей и ESA.
А со студентами куча проблем и крайне редко что-то можно ждать человеческое, разве что кто-то из программеров захочет диплом делать. Но их не заставишь в большинстве случаев.
Хочу взять пару толковых студентов и посадить за работы по разработке "окружения" для поддержки SPASE. Причем толкового ПО, а не того, которое распространяется авторами SPASE и которое на их же серверах не работает =( Если будет возможность этим студентам еще немного приплачивать - будет совсем хорошо.
SPASE - Space Physics Archive Search and Extract. То, о чем я буду докладывать в субботу. Направление перспективное и в настоящее время находится в стадии "детства". В нашей стране, насколько я вижу, работ в этом направлении не ведется, к сожалению. Мы вполне можем возглавить эти работы. Можем создать собственное ПО - инфраструктуру для работы с данным форматом. И т.д. и т.п. Подробнее объясню в субботу.
SPASE. Мы имеем все необходимые навыки и опыт для работы в этом направлении. Подробности - в субботу. Если будет финансирование, будет проще привлечь студентов для этой работы.
Думаю имело бы смысл включить в комплекс многомерную авторегрессию и, возможно, нелинейное прогнозирование. Можно интерполяцию, но я пока не знаю, к каким задачам ее прикрутить.
Ты меня не понял!
Я не предлагаю новый стандарт. Это дело такое, сам понимаешь.
SPASE сюда по твоим объяснениям это некий промежуточный формат представления, метаданные описывающие что и где находится. Все данные сами по себе надо будет выдергивать из других форматов HDF, FITS или просто ASCII файлов. Та еще задача надо сказать.
Оно само по себе не так интересно, метаданные никто по сути не видит.
В моем комплексе такой промежуточный формат тоже есть. Главное там это то что пользователь может получить не ссылку а конечные данные и там же их бработать и созранить результат в подходящем формате.
Я кстати по первой версии программы диплом защищал ;) Правда первая версия была совсем страшная. :)
Поясни, пожалуйста, cвязь между роликом и сопроводительным текстом.
Причем тут стиль подачи информации. Тем более научной.
Хотя ролик надо признать достаточно оригинальным.
Я искренне рад, что ты проникся идеей ;) Но, согласись, мы не являемся авторитетной организацией для продвижения своего нового формата. А вот если сделаем нормальное ПО для поддержки имеющегося и если создадим полностью инфраструктуру для хранения там данных, это будет о-ой как неплохо. В качестве "обкатки" инфраструктуры сможем перетащить данные по "Татьянам" на этот формат, если НИИЯФовцы позволят.
Кроме того, создание своего полноценного формата - это отдельная большая задача. Надо предусмотреть все, что есть. Завтра я тебе продемонстрирую стопку листов, в которых просто перечислены поля, доступные в формате spase.
Кроме того, в этом деле действительно лучше иметь один единый формат, чем кучу разных. А то получится все та же байда, что и с HTML: каждый браузер трактует как ему удобнее.
>А если серьезно, то я сомневаюсь, что твой формат позволяет поддерживать _все_ имеющиеся типы >данных (численные значения, изображения, каталоги и пр.)
работает только с численными значениями. остальное пока не позволяет. задач не было. да и формализовать довольно сложно. выборку скажем из набора сделать без проблем.
>Кроме того, ребята из НАСА и ЕСА с 99-го года потихоньку перетаскивают свои базы на spase. >Представь, какой это огромный набор данных. Стоит ли сейчас велосипед изобретать?
ну дык я раньше делать начал ;) примерно на год ;)
Ну и кроме того моя софтинка для наши задач должны быть удобнее.
Сразу оговорюсь, что я никому ничего не навязываю и моя разработка еще довольно сырая. Но для наших задач я думаю она лучше будет подходить.
Я бы не стал так откровенно сомневаться в профессионализме товарищей и ESA. (ц) :o)
А если серьезно, то я сомневаюсь, что твой формат позволяет поддерживать _все_ имеющиеся типы данных (численные значения, изображения, каталоги и пр.)
Кроме того, ребята из НАСА и ЕСА с 99-го года потихоньку перетаскивают свои базы на spase. Представь, какой это огромный набор данных. Стоит ли сейчас велосипед изобретать?
Ну так я такую штуку и писал. Только не саму по себе а как средство обработки данных. парсер готов и инфраструктура тоже.
там конечно кое чего надо будет переделать и доделать, но в целом оно работало и не только с GOES, но и с Коронасом и Татьяной
Вот, кстати, Серега. Можно мою софтину до ума довести как вариант.
наш ответ Чемберлену. А плестись за буржуинами не наш метод ;)
Не совсем. Это формат, который о-о-ой как облегчает чтение данных программно. Т.е. тебе не нужно изучать формат файлов для каждого типа данных (ну там плотность потока рентгена, плотность потока СКЛ и т.п). Формат един. Берешь бибилиотеку, которая парсит этот формат, и через 5 минут получаешь набор данных в виде, например массива, в своей программе. Примерно так.
Пробовал. Написал в воскресенье. Все еще не ответили. Думаю, и не ответят :(
Да! Уж! Кто бы доделал?
Вообще это тогда нечто другое... Формат для промежуточного хранения.
Интересно конечно посмотреть, но это не формат конечного представления.
Я тож промежуточный формат создавал. у меня даже софтина рабочая есть которая умеет GOES и ACE парсить и отдавать в готовом формате ;)
Уж 5 лет как есть
Писать им не пробовал? ;)
Ну типа это тулза, которая spase использует "внутри". А вообще, должен быть туда доступ извне к самим данным. Получить доступ можно через spase-клиент. Но где ж его взять: то, что предоставляет spase-group.org не работает :(
Только данные они почему-то отдают в HDF/CDF :)
Вот, кстати, пример он-лайн сервиса, основанного на spase.
Данные по GOES, например, хранятся в формате SPASE.
Но, как я сказал, сам стандарт находится в стадии "детства". Так что, судить о его востребованности будем позже. А ребята из ESA сами принимают активное участие в его разработке.
Что же касается студентов, это да, проблемы есть. У тебя есть какие-то предложения?
P.S. Критика должна быть конструктивной. Неконструктивная критика = нытье ;)
Этот SPASE кто-нибудь реально использует?
Я бы не стал так откровенно сомневаться в профессионализме товарищей и ESA.
А со студентами куча проблем и крайне редко что-то можно ждать человеческое, разве что кто-то из программеров захочет диплом делать. Но их не заставишь в большинстве случаев.
Хорошо! Обсудим в субботу!
Хочу взять пару толковых студентов и посадить за работы по разработке "окружения" для поддержки SPASE. Причем толкового ПО, а не того, которое распространяется авторами SPASE и которое на их же серверах не работает =( Если будет возможность этим студентам еще немного приплачивать - будет совсем хорошо.
Сюда-то оно каким боком относится?
SPASE - Space Physics Archive Search and Extract. То, о чем я буду докладывать в субботу. Направление перспективное и в настоящее время находится в стадии "детства". В нашей стране, насколько я вижу, работ в этом направлении не ведется, к сожалению. Мы вполне можем возглавить эти работы. Можем создать собственное ПО - инфраструктуру для работы с данным форматом. И т.д. и т.п. Подробнее объясню в субботу.
Сережа! Расшифруй!
SPASE. Мы имеем все необходимые навыки и опыт для работы в этом направлении. Подробности - в субботу. Если будет финансирование, будет проще привлечь студентов для этой работы.
В описание я вставлю, но как перспективное направление. Это же все разрабатывать еще надо и доводить до ума.
Думаю имело бы смысл включить в комплекс многомерную авторегрессию и, возможно, нелинейное прогнозирование. Можно интерполяцию, но я пока не знаю, к каким задачам ее прикрутить.