МЕНЮ ≡

Вход на сайт

Открытые данные инфраструктуры - неизбежное зло?

Аватар пользователя RomanSmirnov
Современные информационные технологии дают иллюзию возможности быстрого создания "моделей всего" хотя бы отраслевых, например если делать реальную технико-экономическую модель энергосистемы, выделив несколько блоков:
 
- первый уровень физический
 
 
распределенное в пространстве "железо" генерации, электросетей со всем оборудованием, немного компьютеров в системном операторе 
 
- второй уровень - права собственности и четырехмерная картинка по их постоянному перераспределению (+время)
 
- третий уровень  так называемая договорная конструкция с обязательствами - выяснение отношений в их рамках 
 
- четвертый уровень - денежный это собственно фактические "перетоки" денег между субъектами
 
Все это не очень большая поляна и при желании можно ее описать небольшим коллективом, в том числе с искусственно созданными укромными уголками.
 
Англичане вместе с местными шестерками в 1990-2000ых набросили нам убогую схему для второго третьего уровня перераспределения прав собственности и соответственно денежных потоков в отрасли, которая до сих пор практически без существенных изменений "работает", порождая по ходу пьесы кучу проблем, которые к собственному удовольствию решают толпы достаточно шустрых персонажей уже третье десятилетие.
 
То, чем раньше с дичайшей эффективностью занималась пара отделов старичков в стоптанных ботинках в советских министерствах, институтах, академиях, без всяких SAP'ов, бигдаты и highload технологий, сейчас занимаются тысячи, иногда более чем конкретно, высокооплачиваемых людей без технического образования (советы рынка, атс + несколько наращенных слоев менеджмента).
+  всякие бессмысленные (а иногда и вредные) в современных "телекоммуникационных" реалиях структуры вроде "энергосбытов"...
 
Понятно, что весь этот праздник жизни рано или поздно закончится и второй-третий-четвертый уровень просто отсохнет или трансформируется в один под напором логики исторического процесса, поэтому меня конечно иногда подмывает на досуге начать строить "базовую" модель, чтобы понять куда мы на самом деле движемся, ну и перспективы так сказать.  Консолидированные правильным образом данные по инфраструктуре моментально покажут реальную "инфраструктурную перекрестку"...
 
Благо стараниями энтузиастов первичные данные для реально важного первого уровня можно сейчас собрать пускай и без стопроцентной достоверности, но и без особых трудозатрат - например с удивлением узнал, что достаточно детальное физическое расположение энергообьектов можно взять не только у курируемых иностранцами коммерсов вроде "нп атс", но и с проекта openstreetmap и его "веток":
 
20190516224134_mceclip1.png
 
 
Так вот кстати условное "минэнерго" как обычно недорабатывает, там где мог бы всяких допзатрат элементарно  наведен порядок не двигаются - если бы они четко описали формат, в котором всех размеров "электросети" должны публичить информацию (а еще лучше дали несложный интерфейс оным), которую они итак публичат, то можно было бы несколько в несколько кликов собрать "модель" всей России, далее посчитать реальные затраты, даже вывести "тарифы"  и прч прч прч, но ... нет.
 
Сейчас люди (плохо понимаю мотивацию) шарятся по отдельным сайтам, вытаскивают данные и мучаясь делают полудостоверную версию "модели всего", вот с форума энтузизастов.
 
 
Есть еще упоминаемый ранее energybase.ru и еще куча проектов, что их все объединяет? Если не голый энтузиазм, то абсолютно микроскопический, по сравнению с придворными "системными интеграторами" или "пиар проектами" размер бюджета.
 
При том, что "продукты" порой получаются действительно интересные, а иногда и Системно полезные.
 
Кстати примечательно, что OpenStreetMap, на базе которого залита карта - тесно условно связан с белорусами... интересно почитать про историю с mapbox - http://shtosm.ru/
 
Как заграницей? (дальней)
 
Там этой "ерундой" с открытыми инфраструктурными данными занимаются за гос деньги например - "бюджетный" европейский системный оператор, причем выкладывает в открытый доступ все данные для загрузки в вычислительные блоки наших ракеты, сам, бгг.
 
 
и прч
 
 
У америкосов все в одной системе (причем детализация по генераторам очень очень серьезная, вот тебе и "либерализм" бгг)
 
 
 
Безусловно есть аспект "безопасности" в этом стеклянном мире, где все всё про всех, 
 
Но есть еще один момент - посмотрите как выглядит открытая карта мировой инфраструктуры
 
20190516225406_mceclip0.png
 
 
 
20190516225441_mceclip1.png
 
У американцев даже подземная лэп к пентагону вместе с подстанциями на карту нанесена - у китайцев наоборот очень отрывочные данные.
 
20190516225832_mceclip2.png
 
Индия и Великобритания просто помешаны на "открытости" в этой части https://data.gov.uk/dataset/a5b0ed13-c960-49ce-b1f6-3a6bbe0db1b7/renewable-energy-planning-database-repd 
 
У нас ни рыба не мясо, там где надо чтобы было закрыто (закупки военных например) - открыто, а где надо чтобы было открыто - черте как все представлено, что и не разберешь, даже если кому надо.
 
 
Полупринудительные хакатоны или скольковские потуги в этом направлении не особо впечатляют увы.
Авторство: 
Авторская работа / переводика
Фонд поддержки авторов AfterShock

Комментарии

Аватар пользователя oxegenium
oxegenium(6 лет 8 месяцев)(04:05:02 / 17-05-2019)

Не понял вопроса в заголовке: почему открытость данных зло? Потому что ракету можно навести точней?

Аватар пользователя RomanSmirnov
RomanSmirnov(5 лет 1 месяц)(07:19:28 / 17-05-2019)

Почему китайцы не наносят свои объекты на карты? Или вообще прячут статистику? У меня лично четкой позиции нет поэтому вопросу с одной стороны вроде как безопасность в т.ч. экономическая, с другой стороны возможность замылить неэффективность.

Аватар пользователя olegNb12
olegNb12(3 года 1 месяц)(20:17:07 / 18-05-2019)

Потому что в Китае централизм: кому надо - данные получат, а остальным просто незачем. Тем более чужим странам и конторам...

 
 
G
M
T
Y
 
 
  Определить языкАзербайджанскийАлбанскийАмхарскийАнглийскийАрабскийАрмянскийАфрикаансБаскскийБелорусскийБенгальскийБирманскийБолгарскийБоснийскийВаллийскийВенгерскийВьетнамскийГавайскийГаитянскийГалисийскийГолландскийГреческийГрузинскийГуджаратиДатскийЗулуИвритИгбоИдишИндонезийскийИрландскийИсландскийИспанскийИтальянскийЙорубаКазахскийКаннадаКаталанскийКиргизскийКитайский ТрадКитайский УпрКорейскийКорсиканскийКурманджиКхмерскийКхосаЛаосскийЛатинскийЛатышскийЛитовскийЛюксембургскийМакедонскийМалагасийскийМалайскийМалаяламМальтийскийМаориМаратхиМонгольскийНемецкийНепальскийНорвежскийПанджабиПерсидскийПольскийПортугальскийПуштуРумынскийРусскийСамоанскийСебуанскийСербскийСесотоСингальскийСиндхиСловацкийСловенскийСомалийскийСуахилиСунданскийТаджикскийТайскийТамильскийТелугуТурецкийУзбекскийУкраинскийУрдуФилиппинскийФинскийФранцузскийФризскийХаусаХиндиХмонгХорватскийЧеваЧешскийШведскийШонаШотландский (гэльский)ЭсперантоЭстонскийЯванскийЯпонский
 
АзербайджанскийАлбанскийАмхарскийАнглийскийАрабскийАрмянскийАфрикаансБаскскийБелорусскийБенгальскийБирманскийБолгарскийБоснийскийВаллийскийВенгерскийВьетнамскийГавайскийГаитянскийГалисийскийГолландскийГреческийГрузинскийГуджаратиДатскийЗулуИвритИгбоИдишИндонезийскийИрландскийИсландскийИспанскийИтальянскийЙорубаКазахскийКаннадаКаталанскийКиргизскийКитайский ТрадКитайский УпрКорейскийКорсиканскийКурманджиКхмерскийКхосаЛаосскийЛатинскийЛатышскийЛитовскийЛюксембургскийМакедонскийМалагасийскийМалайскийМалаяламМальтийскийМаориМаратхиМонгольскийНемецкийНепальскийНорвежскийПанджабиПерсидскийПольскийПортугальскийПуштуРумынскийРусскийСамоанскийСебуанскийСербскийСесотоСингальскийСиндхиСловацкийСловенскийСомалийскийСуахилиСунданскийТаджикскийТайскийТамильскийТелугуТурецкийУзбекскийУкраинскийУрдуФилиппинскийФинскийФранцузскийФризскийХаусаХиндиХмонгХорватскийЧеваЧешскийШведскийШонаШотландский (гэльский)ЭсперантоЭстонскийЯванскийЯпонский
 
 
 
 
 
 
 
 
 
Звуковая функция ограничена 200 символами
 
 
 
Настройки : История : Обратная связь : Donate Закрыть
Аватар пользователя AlexandrBCN
AlexandrBCN(2 года 5 дней)(06:02:45 / 17-05-2019)

Посчитать можно только: в килограммах, литрах, джоулях, киловаттах. Считать в деньгах, глупость неимоверная. Деньги не имеют чёткой объективной привязки к материи. Никакие деньги, никакой привязки, вообще.

Аватар пользователя Dimitriys
Dimitriys(7 месяцев 1 неделя)(07:02:42 / 17-05-2019)

У нас ни рыба не мясо, там где надо чтобы было закрыто (закупки военных например) - открыто

Боюсь спросить где это у вас? 

В РФ уже действую ряд ограничений,  причем существенных. 

http://zakupki-portal.ru/novosti/novosti-dlya-zakazchikov/razyasneniya-o...

Это прям на первой странице запроса. 

Аватар пользователя RomanSmirnov
Аватар пользователя Dimitriys
Dimitriys(7 месяцев 1 неделя)(08:04:08 / 17-05-2019)

Посколь­ких лет "от­кры­то­сти"  на­ко­нец

Так "партнеры" В 90-х изначально формировали у нас такую систему.  И поменять ее быстро и без последствий было невозможно. 

Кроме закупок тоже полно мест - соцсети , сколько было скандалов с вч в одноклассниках...

1. Я даже не знаю.  Автор темы провоцирует оффтоп. 

2. Вы уверены,  что данные утекшие в указанной вами публикации попадают под категорию "секретных"? 

3. Когда началась цифровизация умные люди говорили,  что такие события неизбежны.  И как показывает международный опыт,  они были правы. 

Аватар пользователя RomanSmirnov
RomanSmirnov(5 лет 1 месяц)(08:24:25 / 17-05-2019)

В том то и дело, что международный опыт очень разный - попробуйте весь егрюл немецкий скачать например, "промышленный" доступ в европейские коллекторские или прав собственности базы получить. А у нас условно "100 рублей" выписка на любой объект.

На сайт "китайстата" зайдите посмотрите как выглядит "цифра" у одной из крупнейших экономик планеты - http://www.stats.gov.cn/english/ - (слабовато как то выглядит что по содержательности, что по техническому оформлению... ).

Аватар пользователя Dimitriys
Dimitriys(7 месяцев 1 неделя)(07:26:13 / 17-05-2019)

У американцев даже подземная лэп к пентагону вместе с подстанциями на карту нанесена

И к секретным тюрьмы тоже? Можно найти их на этих картах,  узнать как они подключены к сети? 

Аватар пользователя RomanSmirnov
RomanSmirnov(5 лет 1 месяц)(07:55:50 / 17-05-2019)

ну свои "андроид" телефоны в том числе китайские их охранники вряд ли выключают...

Аватар пользователя Dimitriys
Dimitriys(7 месяцев 1 неделя)(08:10:32 / 17-05-2019)

Ясно. Значит на этих картах нет секретной информации,  и они показывают не открытость властей данных стран,  а лишь способы и методы обмена информации. Их системе управления информация в данном виде нужна. Китайкой и нашей системе управления данная информация менее актуальна. 

охранники вряд ли выключают...

Как показывают публикации в СМИ,  что во власти (Клинтон и ко),  что военные,  что в крупном бизнесе далеко не все готовы жертвовать удобством, комфортом и личной надживой во имя сохранения государственной или коммерческой тайны. 

Но это не проявление открытости их системы,  отнюдь. 

Повелитель Ботов (без обсуждения)
Аватар пользователя Повелитель Ботов

Перспективный чат детектед! Сим повелеваю - внести запись в реестр самых обсуждаемых за последние 4 часа.

Комментарий администрации:  
*** Это легальный, годный бот ***
Аватар пользователя Ivanovich
Ivanovich(7 лет 6 месяцев)(08:29:53 / 17-05-2019)

 

Аватар пользователя Корректор
Корректор(2 года 2 месяца)(11:15:38 / 17-05-2019)

В условиях открытой информационной системы, а теперь могут существовать только открытые, единственным гарантированным способом сохранения инфраструктуры является ее гарантированная стойкость на основе избыточности. Более того, только так можно обеспечивать и развитие. Но сегодня у нас "оптимизация", и избыточность противоречит сложившейся структуре экономики. Вот и с развитием проблемы, и устойчивость под большим вопросом. Что в наших геополитических реалиях и климатической зоне означает чертовки высокую цену за подобные ошибки. Кроме того, современные средства космического наблюдения делают принципиально невозможным скрыть любую информацию об инфраструктуре. Так что военным все давно известно.

Да и вопрос даже не в этом, а опять в том, что инфраструктура это всегда "сервитут". Она не для кого лично, она для всех, и базис социально-экономического развития общества и государства.

Аватар пользователя Советчик
Советчик(1 год 4 недели)(17:48:56 / 17-05-2019)

Все эти схемы в "открытом доступе" сделаны в самом первом приближении. Причем наверняка с преднамеренными искажениями дабы тот кто не погружен в тематику не смог нанести добро.

Аватар пользователя RomanSmirnov
RomanSmirnov(5 лет 1 месяц)(17:58:35 / 17-05-2019)

проверил некоторые моменты, достаточно точно - они же на openstreet все с фотоснимков спутниковых рисуют, "погрешность" - максимум десятки метров...но тут важнее последовательности соединений, резервы и прч

Аватар пользователя Советчик

То что можно получить из открытых источников - особо и не прячут (хотя maskirovku никто не отменял). Но вот реальные мощности и порядок реакции на нештатную ситуацию выложить в открытый доступ.... ФСБ тут же посадит за разглашение ГТ.

Аватар пользователя RomanSmirnov
RomanSmirnov(5 лет 1 месяц)(21:51:59 / 17-05-2019)

Да у каких нить маккинзи и мощности и все остальное наше все есть, для специалистовс это не проблема, вопрос больше в экономике - англосаксы как бы двигают тему полной прозрачности ( и финансов и физики) и геоинформационные данные лишь часть общей стратегии... 

Аватар пользователя Советчик

1. Маккинзи и прочие KPMG занимаются подтверждением БУХГАЛТЕРСКОЙ отчетности. Специалистов для технического аудита у них тупо нет.

2. Любой специалист работает с предоставленной информацией. Если её нет или она ложная, то никакой специалист ничего сделать не может.

3. Англосаксы могут продвигать, что угодно. В ФСБ никто не откажется от дополнительной звездочки на погоны за отлов дебила разглашающего ГТ.

Аватар пользователя RomanSmirnov
RomanSmirnov(5 лет 1 месяц)(06:19:46 / 18-05-2019)

1. нет

это не только аудит, но и стратегический консалтинг - работа с кадрами и прч, плюс модели у них тоже есть, порой даже лучше, чем у тех у кого они должны быть, что позволяет закладывать такие "закладки" в экономические системы, что может не хуже технических отрабатывать.

2. да

3. да

Аватар пользователя e-motion83
e-motion83(3 года 10 месяцев)(22:27:27 / 17-05-2019)

Автору респект за дельный материал! Меня тоже все время мучает вопрос касательно избыточности информации о паразитарных секторах экономики и недостаточности информации о реальном секторе и инфраструктуре. Ну бардак же откровенный в ЖКХ. Деньги туда уходят как в бездонную бочку. Ну кто мешает создать федеральную базу граждан по ИНН и привязать к ИНН все остальные вопросы социальной жизни граждан, начиная от рождения и заканчивая похоронами? К этой базе привязывать имущественные вопросы типа недвижимости, машины, доходов и т.д. На основании этого взимать налоги на инфраструктуру и т.д. меня вообще умиляет ситуация когда деньги на оплату инфраструктуры идут сначала каким то ЖКХ мук жук и прочей лабуде которая мало того что отношения к той самой инфраструктуре никакого не имеет так и ещё и зарегена где нибудь в оффшорах и собрав деньги теряется только в путь.