Последние посты
Ivan Begtin
22 сент., 10:41
Молдова: каталоги данныхВ реестре 31 каталог по Молдове, 30 из них действуют. Четыре типа: открытые данные, геопорталы, статистические индикаторы и научные репозитории.Открытые данные (6)Правительственный портал открытых данных - https://dataset.gov.md, на CKAN. Второй CKAN ведёт Агентство электронного управления: https://dataset.live.egov.md.Тематические витрины: - госзакупки MTender в формате OCDS: https://mtender.gov.md -внешняя помощь, платформа AMP: https://amp.gov.md/portal/ реестры интеллектуальной собственности AGEPI (патенты, - товарные знаки, промышленные образцы): https://db.agepi.md официальный монитор: https://monitorul.gov.md/Геоданные (12)Ядро национальной инфраструктуры пространственных данных у Агентства геодезии, картографии и кадастра: - геопортал GEODATA (MapStore): https://www.geodata.gov.md - каталог метаданных (GeoNetwork):Ivan Begtin
22 сент., 07:26изменён
Каталоги данных о мобильностиВ реестре dataportals-registry европейская тема Transport стоит у 2337 активных каталогов: 1537 геопорталов и 641 портал открытых данных. Большая часть - общие витрины, где дороги, остановки или ДТП оказываются одним из разделов.Отдельный слой - специализированные каталоги mobility: национальные точки доступа, порталы операторов и глобальные сборники фидов. География темы перекошена в сторону США: 692 записи, в основном ArcGIS-хабы дорожных ведомств штатов.Европейские точки доступаNational Access Point по директиве ITS в реестре делится на два типа данных.Дорога и трафик, обычно DATEX II: немецкая Mobilithek, датский Dataudveksleren, финский каталог Digitraffic, испанский NAP DGT, хорватский promet-info.hr, словенский nap.si, румынский pna.cestrin.ro, бельгийский transportdata.be, кипрский traffic4cyprus.org.cy, чешский registr.dopravniinfo.cz,Ivan Begtin
21 сент., 15:59
В рубрике как это устроено у них NeTEx стандарт Евросоюза по публикации данных о транспорте, расписании и инфраструре. Публикуется в таких каталогах данных как Open Data Portal for Belgian Public Transport наряду с данными в формате GTFS и другими. А также используемый в системах автоматизированного управления транспортом в Евросоюзе наряду со многими другими стандартами.#opendata #eu #transport #datacatalogs #standardsGitHubGitHub - TransmodelEcosystem/NeTEx: NeTEx (Network Timetable Exchange) - CEN/TS 16614 series dedicated to the exchange of Public…NeTEx (Network Timetable Exchange) - CEN/TS 16614 series dedicated to the exchange of Public transport static data - TransmodelEcosystem/NeTExIvan Begtin
21 сент., 09:54
Яндекс выпустил AliceAI-Foundation-80B-A3B-Base базовую языковую модель с открытыми весами и акцентом на лучшую поддержку русского языка.Пишут что модель была обучена полностью с нуля и приводят множество результатов бенчмарков в сравнении с: - Qwen3.5-35B-A3B-Base - GLM-4.5-Air-Base (106B-A12B) - Nemotron-3-Super-120B-A12B-Base - DeepSeek-V4-Flash-Base (284B-A13B)Это хорошая новость, больше открытых моделей, больше конкуренции!Важно чтобы релизов было больше, потому что конкуренты работают очень быстро выпуская новые модели чуть ли не еженедельно.#ai #opensource #yandexhuggingface.coyandex/AliceAI-Foundation-80B-A3B-Base · Hugging FaceWe’re on a journey to advance and democratize artificial intelligence through open source and open science.Ivan Begtin
19 сент., 16:13
На сайте экосистемы CKAN опубликовали дашборд с каталогом инсталляций CKAN в мире там есть 732 каталога данных, их текущий статус (живые или нет), версии и так далее.Для тех кто не знает, CKAN - это один из наиболее популярных продуктов с открытым кодом для создания порталов открытых данных.С одной стороны полезный список, а с другой...Я довольно таки зол на сообщество и ребят которые этим занимаются потому что я постоянно тыкаю их носом в то что в реестре порталов данных Dateno есть информация о 2021 каталоге данных на базе CKAN и это почти в 3 раза больше чем то что ребята перечисляют на сайте экосистемы.Но повторно использовать чужие наработки им не хочется, даже если они сильно более полные и под свободными лицензиями. Очень странные люди.#opendata #datacatalogs
Ivan Begtin
19 сент., 10:23
Свежая статья (ссылка на вариант без пэйволла) в The Economist о том что ИИ впервые выиграл Metaculus Cup, соревнование среди предсказателей событий. Причем в 2024 году результаты работы ИИ агентов были совсем слабые, а в 3-м квартале 2026 ИИ агенты обогнали почти всех людей участников.Причем я так понимаю что в лидерах там стартап Mantic которые как раз параллельно (или по итогам?) подняли $25 миллионов венчурного финансирования на продукт по AI Forecasting.Вспоминаются фильмы вроде Особое мнение и многочисленная литература о ИИ предсказывающем будущее на годы вперед.Такие продукты могут повлиять не только на рынки предсказаний, фондовые рынки и тд., но и на прогнозирование многих глобальных и менее глобальных событий.#ai #thoughts #forecasting
Ivan Begtin
18 сент., 19:19изменён
Я наверняка не единственный кто это подмечает, но одно из наблюдений за средами и приложениями вроде Cursor, Z.ai, Kimi, ChatGPT, Claude и многими другими остальными построенными вокруг работы с AI агентами - это непрерывность изменений и развития. Понятно что у их команд много ресурсов, финансовых, интеллектуальных, инфраструктурных, но тут ещё и явно культура разработки с помощи ИИ ассистентов (не путаем с вайб-кодингом).Буквально в считанные месяцы и недели они эволюционируют из простых инструментов во всё более продвинутые, как с точки зрения управления множествами субагентов, так и способами представления промежуточных и итоговых результатов.Для софтверной разработки - это новая планка качества, сильно контрастирующая со всеми предыдущими разнообразными подходами, не предполагающими частотных и даже сверхчастотных (ежесуточных) обновлений.В удивительное время живём.#thoughtsIvan Begtin
18 сент., 16:41
🇷🇺 Новые российские геопорталы в реестре: сентябрь 2026За последние две недели в dataportals-registry добавлено 45 геопорталов из России — от спутниковых архивов ScanEx до районных карт Москвы. Это продолжение обзора от 9 сентября: здесь только то, что ещё не попадало в канал.🛰 Семейство «Космоснимки» (ScanEx, платформа GeoMixer) • Космоснимки — главный геопортал платформы: мозаики снимков, базовые карты, тематические слои и JS/REST API, на котором построены десятки сторонних карт. https://www.kosmosnimki.ru • Каталоги ДЗЗ — поиск по архивам сверхвысокого разрешения: GeoEye, Ikonos, QuickBird, WorldView-1/2, Eros-A/B. Контуры сцен, метаданные съёмки, заказ онлайн. https://search.kosmosnimki.ru • Kosmosnimki Fires — оперативный спутниковый мониторинг пожаров: термоточки, гари и пожарная погода почти в реальном времени. https://fires.ru • WarFly — волонтёрская карта немецкойIvan Begtin
18 сент., 14:55
Меня в последнее время не покидает соблазн сделать какой-нибудь небольшой пэт-проект с анализом и визуализацией данных что-то вроде "Армения в цифрах" или "[Какой-то другой регион] в цифрах" или каталог данных какой-нибудь экзотической страны в которой он никогда иначе бы не появился. Благо с помощью ИИ ассистентов делать такое стало очень просто и недолго.Но слишком много текущих рабочих задач и много тех кто об этом мне напомнят обязательно.В целом же я совсем не уверен что надо эти пэт-проекты делать самому. Как мне рядом говорят, стоит сфокусироваться на бизнес задачах, а все хобби вполне можно было бы организовать через конкурсы или хакатоны.#thoughtsIvan Begtin
18 сент., 06:06
Какие данные по странам существуют в почти реальном времени? В Кении местное космическое агентство публикует данные погодных наблюдений через публичный экземпляр визуализации данных на базе Grafana который отображает на карте и в графиках данные с погодных станций по стране.Тут надо отменить что Grafana - это продукт по визуализации данных с открытым кодом экземпляры которого редко публично и чаще используются для внутренних задач по отображению данных, например, ИТ инфраструктуры.Но иногда его используют и для отображения данных публичных. Ещё один пример, это Saskatchewan Electricity Mix общественный проект собирающий ежесуточно данные с сайта компании SaskPower канадской провинции Саскачеван.Таких примеров немного и вообще ежесуточных и более частотных данных не так много доступно, особенно по развивающимся странам.#opendata #dataviz #statistics #data #datacatalogs
Ivan Begtin
17 сент., 17:18
В реестре каталогов данных Dateno, с которым я вожусь вот уже долгое время, больше всего порталов с геоданными. Что, в общем-то, только подтверждает тезис о том что геоданные в мире повсюду, что их больше всего количественно, хотя объёмно среди них велики только данные спутниковых снимков.К этому можно добавить и огромное разнообразие продуктов на которых геопорталы создаются. Некоторые из них, созданные на базе Geonetwork, GeoNode, ArcGIS Hub - это полноценные каталоги данных имеющие все необходимые характеристики такого каталога: наличие возможности выгрузки, документиированное API, определенные лицензии на использование и поддержку стандартов DCAT, Schema.org и других.Другие геопорталы - это множество продуктов большого числа вендоров, часто охватывающих от нескольких до сотен геопорталов местного значения. Например, e-mapa.net в Польше, охватывающий более сотни муниципалитетов.GitHubGitHub - datenoio/dataportals-registry: Registry of data portals, catalogs, data repositories including data catalogs dataset and…Registry of data portals, catalogs, data repositories including data catalogs dataset and catalog description standard - datenoio/dataportals-registryIvan Begtin
17 сент., 15:55
В рубрике как это устроено у них открытые данные города Sieam Reap в Камбоджа. Наборов данных там немного, всего 7 штук и это статистические данные которые ещё и отображаются в виде интерактивных визуализаций. Сайт позиционируется как портал данных умного города, каталог данных весьма экзотичен, отображает данные в виде таблиц и поддерживает экспорт в Excel формат. Плюс часть данных представлены в разделе карт, но без экспорта данных из слоев, но их можно скачать через недокументированное API.И никаких упоминаний об условиях использования данных. В целом ничего невероятного, как пример портала данных можно рассматривать его скорее как делать не надо, но знать про него полезно. Что-то для пользователей может быть и полезно, например, визуализация.#opendata #cambodia #datasets #datacatalogs
Ivan Begtin
16 сент., 16:51
FAIRDOM-SEEK: каталоги научных данных, моделей и протоколовFAIRDOM-SEEK — открытая платформа для описания, публикации и связывания научных активов: датасетов, моделей, SOP и вычислительных пайплайнов. Под капотом ISA-структура (investigation → study → assay), JSON API, DOI и форматы вроде RO-Crate. Сайт проекта: https://seek4science.org Флагман сообщества — FAIRDOMHub: публичный хаб системной биологии, который ведут консорциум FAIRDOM и ELIXIR Germany. https://fairdomhub.org/Рядом стоят специализированные инстансы того же стека: • WorkflowHub — реестр вычислительных workflows (CWL и не только) https://workflowhub.eu/ • DataHub (ELIXIR Belgium) — метаданные экспериментов и брокеринг в репозитории EBI https://datahub.elixir-belgium.org/ • IBISBA Knowledge Hub — промышленная биотехнология https://hub.ibisba.eu/ • LiSyM SEEK — системы медицины печени https://seek.lisym.org/ • Leipzigseek4science.orgFAIRDOM-SEEKProduct website for the FAIRDOM-SEEK platformIvan Begtin
16 сент., 14:20
переслано из @opendataam
🇦🇲 Каталоги данных Армении: где искать цифры, карты и микроданныеУ Армении нет официального государственного open data-портала. Зато есть сильная официальная статистика, живой гражданский CKAN и довольно зрелая геоинфраструктура. Ниже — что реально работает и куда идти в первую очередь.📊 Официальная статистика — главная опора Ядро публикует Statistical Committee (Armstat). Это классический «скандинавский» стек, а не витрина PDF. • ArmStatBank — национальный банк таблиц на PxWeb: население, экономика, сельское хозяйство, транспорт, экология. Есть API (EN/HY). https://statbank.armstat.am • SDG Armenia — национальный OpenSDG. 306 индикаторов ЦУР, 85% уже выложены онлайн (261 из 306). Слабое место — цель 14 «жизнь под водой»: онлайн только 31%. https://sdg.armstat.am • NSDP — страница макропоказателей по стандарту МВФ SDDS, с выгрузками SDMX. https://armstat.am/nsdp/ • ArmStatIvan Begtin
16 сент., 13:09
🇬🇪 Открытые данные Грузии: где искать?Разбираем экосистему грузинских каталогов данных — от национального портала до городских карт.Вот главные источники: 📊 Data.gov.ge — национальный портал открытых данных Официальный портал, запущенный в рамках инициативы Open Government Partnership. Ведёт Агентство цифрового управления при Минюсте. Наборы данных госорганов, интерфейсы на грузинском и английском. 🔗 data.gov.ge 📈 GEOSTAT Data Catalog — статистика Грузии Официальная база Национального статистического управления (Geostat) на платформе PxWeb. Демография, экономика, сельское хозяйство, экология — многомерные таблицы с открытым API (PxWeb API). 🔗 https://pc-axis.geostat.ge/PXWeb/pxweb/ka/Database 🗺 NSDI.gov.ge — национальный геопортал Геопортал национальной инфраструктуры пространственных данных от Национального агентства публичного реестра (NAPR). Поиск, просмотр и скачиваниеIvan Begtin
16 сент., 05:28
В рубрике как это устроено у них Rwanda Data Sharing Platform платформа обмена данными Руанды, де-факто портал открытых данных страны. Содержит 265 наборов данных, в первую очередь статистических показателей и микроданных. Имеет весьма продуманный интерфейс с документированными схемами данных, прегенрированным кодом Python, Curl, JS и тд. для выгрузки данных, возможностью их предпросмотра, подробным описанием и так далее.Из минусов: - сейчас данные только одного ведомства, статслужбы, видимо оно функциональный заказчик у непосредственного заказчика разработки RISA - агентства информационного общества страны - портал адаптирован под отображение табличных данных и там сейчас только плоские таблицы.Видно что его заказывали статистики, он построен полностью вокруг таблиц и, тоже, по модели что один набор данных = один файл = одна таблица. Архитектурно - это ошибка, но если там будет
Ivan Begtin
15 сент., 16:13
Полезные ссылки про данные, технологии и не только: - mnemiq - текст-в-SQL движок с открытым кодом и подробным рассказом почему его сделали, как он устроен и чем отличается от ранее существующих. Если кратко, то создатели сфокусировались на разных SQL диалектах и преодолении ограничения в 30 таблиц у движка Genie от Databricks. Полезно для всех кто работает с большими корпоративными хранилищами данными, сложно устроенными и с большим числом таблиц. - Pandas Should Go Extinct текст где автор рассуждает о том что давно уже не надо использовать Pandas в разработке и аналитике потому что альтернативы Polars и DuckDB лучше настолько что непонятно почему ими не пользуются. - Tau ещё один терминальный кодирующий агент, пока не могу сказать чем он лучше других, но он есть и его можно попробовать - Cline Desktop настольное приложение для запуска моделей с открытыми весами. Обещают много разногоAgentic FabriqAgentic Fabriq — Identity and Permissioning for AI AgentsAgentic Fabriq is the identity and permissioning layer for AI agents. Per-agent identity, least-privilege access, full audit logs, and one-click revocation across MCP, OAuth, and agent frameworks. Drop-in with Okta, Azure AD, and Google Workspace.Ivan Begtin
15 сент., 09:07
Разные мысли вслух: 1. Я раньше не обратил внимание, а оказывается возглавляемая Китаем World Artificial Intelligence Cooperation Organization (WAICO) активно растет и в конце июля туда ещё 8 стран присоединилось и 1 страна стала наблюдателем. Все, конечно, страны 3-го и 2-го мира, например, туда вступила Грузия. Думаю что туда вступят все страны с где сильно влияние Китая. А вот Армения вступит врядли учитывая что на её территории уже строится ЦОД FireBird с чипами Nvidia. Скорее интересно пустят ли и вступит ли Армения в Pax Silica организованный США и противостоящий WAICO де-факто.2. Госрегулирование "замедления разработки ИИ" мне с самого начала казалось совершенно нереалистичным. Учитывая прогресс китайских компаний то все попытки самоограничений ведущих ИИтехов в США приведут лишь к тому что китайские открытые модели станут лучше и более востребованными. Я вообще не понимаю какIvan Begtin
15 сент., 06:38
🔻 Каталоги данных Всемирной организации здравоохраненияУ WHO нет одного «главного открытого портала». Это целое семейство каталогов: глобальные индикаторы, микроданные обследований, региональные хабы, карты и реестр клинических исследований. Все перечисленные ниже — открытый доступ.Глобальная статистика📊 WHO Data — основной публичный портал индикаторов. Заменил старый интерфейс Global Health Observatory как главную точку входа: здоровье 194 стран-членов, ЦУР, эпидемии, системы здравоохранения. Есть API. https://data.who.int📈 Global Health Observatory (GHO) — классический репозиторий: больше 1000 индикаторов по смертности, бремени болезней, питанию детей, иммунизации, ВИЧ, туберкулёзу, малярии, НИЗ, экологии и неравенству. https://www.who.int/data/gho/data/indicators🪦 WHO Mortality Database — смертность по стране, году, полу, возрасту иdatadotWHO DataHealth data statistics and trends from the World Health Organization.Ivan Begtin
14 сент., 22:12
HaitiDocs один из примеров проектов о которых я ранее рассказывал, в формате one-man-project, когда явно какой-то разработчик одиночка с помощью кодирующего ИИ превратил базы документов, статистики и карт в единый портал с официальными материалами по Гаити. Отображая документы для поиска, данные для визуализации и слои карт непосредственно на картографической основе. Всё это нагляднее чем официальные сайты Гаити, но, конечно же, имеет неофициальный статус.Таких проектов я наблюдаю уже не один и не два, их реально много, благо делать их стало просто. Большая часть статистики собирается из крупных международных источников вроде WorldBank, ILO, WHO и тд. Документы с официальных сайтов госорганов, а карты из серверов официальных геопорталов.Такое можно сделать практически по любой стране или субрегиону.#opendata #statistics #haiti #data
