Category: it

Веселый

Новый инструмент

Развитие идей и подходов остановить невозможно.
Не исключаю даже, что задача восстановления хронологии в принципе этим уже решена.
Вот этот сверхважный комментарий.

che2019
"Выложив серию глав, снова уткнулся в нерешенность проблемы со сдвигами"

Возможно, Вам подойдет программа «Deductor Studio Academic» для решения этой проблемы?

Collapse )
Веселый

Искусственный разум Википедии

Даю перепост двух комментариев отсюда:
https://chispa1707.livejournal.com/3151296.html?view=37140160#t37140160

alpsrife

Есть анимация с очень интересной волной в конце. Её надо объяснить.
Совершенно случайно построил график, который на 100% перекликается с этим постом, но уже на реальных данных (русская Википедия). Оказалось, что этот мифический «Гутенберг» (что бы он ни изобрёл) живёт в 1750 году. И его экспонента включает в себя все остальные (но снизу), включая Маркса, ТВ и интернет.

Collapse )
Веселый

База данных на 15 мая 2019 года

Выкладываю рабочую базу данных как она есть. Файл Excel 2007. Вес 29,1 Мб.
Хранилище: гугл-диск. Скачивается свободно.

https://drive.google.com/file/d/10WInnME--7qDs55TjT3NTX_-lrNuQQZs/view?usp=sharing
152828 датированных исторических свидетельств.
189760 индексаций по типу события (столбец "U", легенда на листе "Легенда"), самих индексов 934.
403763 индексаций по месту события (столбцы "E-H", легенда на листе "Страны"), самих индексов 674.
63342 события датированы с точностью до дня (столбцы "K-M", легенда на листе "Дни"), самих индексов более 365.
Ссылки на источники есть в 118 тысячах случаев.
***
Если есть навык работы с фильтрами, можно за считанные секудны сделать любую выборку:
- землетрясения на острове Ява, с 1775 по 1914 год;
- извержения в Закавказье с 1830 по 1860 год;
- голод в Новгородской области за всю историю города;
- пожары в Западной Европе за любой период;
- отмена феодализма - в любом регионе;
- любой тип событий, происшедших 1 ноября (День Всех Святых).
Если эти данные в базе есть, выборка это показывает, на графики вывести легко.
Веселый

Текущее. Все срастается

Последняя версия 6-летнего шаблона работает как часики.
Скачивается свободно, выложена вместе с базой данных здесь:
https://drive.google.com/file/d/12vTqA5p6oySiaFXhYvpUk0M8LMga2H6h/view?usp=sharing
На листе "Шаблон" и в колонке "Реко-1-3" на листе "База".
Сопоставляю историю Испании и зависящей от нее Мексики. Фрагмент уложу под кат.
Сотни лишенных логических связей, а потому бессмысленных фактов укладываются в свои ячейки, как шелковые, - ровно туда, куда надо, и тут же обрастают связями и наполняются смыслом. И я уже понимаю, что и Египет совместится с этим идеально.
***
Я бы так сказал, что историкам пора прекращать чесать зады и начинать чесать репы.
Имитировать незаинтересованность - великое умение. Если под тобой не качается, а над тобой не каплет.
***
А мне пора делать общую сводную, не застревая на частностях.
Collapse )
Веселый

База данных в графическом виде

Пока я тут падаю духом и судорожно ищу новых путей, френд выдал результат на основании того, что уже есть.


it4history
Путь, предложенный @curiousmole, который говорил про графы - приводит к картинкам.

Вот, например, свежий файл сводная.xlsx , созданный из 00_База_2018_10_14.xlsx в Gephi после разбивки на 3 кластера (показаны цветом вершин) и обработки ForceLayout (он притягивает связанные вершины-типы событий на основании количества совпадений в одном году ) мне видится так:
Collapse )
Веселый

О предстоящих технических задачах

Пост для желающих знать, чем я озабочен.
Предстоит следующий набор работ:

Вот есть у меня в Экселе табличка:
1-й столбец - год
2-й столбец - двухбуквенный индекс места события
3-й столбец - двухбуквенный индекс типа события
Индексы места можно пока не рассматривать. Оставлю на сладкое.
Типов событий у меня сейчас 879.
Свидетельств в базе - 145 тысяч строк

Первая задача.
Требуется выяснить, например, как часто разные события встречаются в одном и том же году году. Для 85 индексов я это в Экселе сделал, но для 879 мне не потянуть. В итоге должна получиться табличка 879 строк на 879 столбцов, а на пересечении в ячейке - цифра, говорящая, сколько раз индекс столбца встретился в одном году с индексом строки.
Если все получится, то для тех же 879 индексов сверяем совпадения со сдвигом в год, два, три, четыре и пять. Но это - задача-максимум.
Вторая задача.
Берем эту таблицу 879 на 879, и выводим процент совпадений. Например, если индекс столбца всего встречается 100 раз, а с выбранным индексом строки он встретился 14 раз, то частота совпадений именно с этим индексом - 14 %. Это сделать легко.
Третья задача, важная. Некоторые индексы будут тяготеть один к другому, встречаться часто. В итоге индексы, на деле, составят несколько групп с высоким процентом совпадений внутри группы и с малым процентом совпадений с индексами из других групп. Число этих групп отразит число разных этапов развития цивилизации.
Четвертая задача несложная. Я добавлю в базу столько столбцов, сколько вышло групп-этапов, и в каждом столбце размещу те индексы, что относятся к выбранной группе - напротив тех дат, которым они отвечают. И моя база данных покажет, какие блоки данных каким иным блокам родственны, и как именно сделан хронологический подлог, и как, соответственно, его исправлять.
Никак не могу привыкнуть к состоянию победы. Словно не со мной это случилось )
Веселый

Иммиграционные записи США

Оригинал взят у serj_aleks в Иммиграционные записи США
Иммиграционные записи, также известные как "ship passenger arrival records", содержат следующую информацию:

- гражданство, место рождения
- название судна и дата прибытия в США
- возраст, рост, цвет глаз и волос
- профессия
- последнее место жительства
- имена и адреса родственников в США
- количество денег и т.д.

Нет списков пассажиров, прибывающих до 1 января 1820 года, хотя есть небольшой лист, прибывших в порт Филадельфии в начале 1800-х годов и в порт Нью-Орлеан, точнее, 1813-1819.

Ancestry.com проиндексировал списки пассажиров, прибывших в Нью-Йорк из иностранных портов с 1820 по 1957.

Остров Эллис имеет онлайн поисковую базу данных 22,5 млн прибытий в Нью-Йорк между 1892 - 1924.

Форт Гарден имеет базу данных для онлайн поиска 10 млн иммигрантов от 1830 до 1892 года. С 1855 по 1890 форт был первым или единственным (?) официальным иммиграционным центром Америки.

AAD база данных содержит список из 604,596 человек, которые прибыли в порт Нью-Йорк с 1846 по 1851 (например, во время ирландского голода). База создана в 1977-1989 г.г.

http://www.archives.gov/research/immigration/
Веселый

Статистика всякая разная и ссылки

Оригинал взят у genby в Статистика всякая разная и ссылки
Статистика ростата 1991-2011 http://www.gks.ru/free_doc/doc_2012/year/pril_year2012.xls
База данных ВОЗ http://apps.who.int/healthinfo/statistics/mortality/whodpms/
ВОЗ 1950-2010 без регистрации http://www.euro.who.int/ru/what-we-do/data-and-evidence/databases
http://www.gapminder.org/world/ здоровье наций
Производство автомобилей в разных странах по годам http://oica.net/category/production-statistics/
СССР и страны мира в цифрах http://www.kaig.ru/ussr.html
Базы данных ООН http://unstats.un.org/unsd/snaama/dnllist.asp
http://faostat3.fao.org/home/index.html#DOWNLOAD ООН про еду
Агенство ООН по делам беженцев, ежегодники http://www.unhcr.org/pages/4a02afce6.html
Еще ООН популяции http://esa.un.org/wpp/
ООН продовольствие http://faostat3.fao.org/faostat-gateway/go/to/download/C/CC/E
Различные подсчеты по всяким разным агрегатам http://www.nationmaster.com/index.php
Презентация по демографии Вишневского http://www.slideshare.net/rdlj/vishnevski-presentation
Единая межведомственная ИСС http://www.fedstat.ru/indicators/start.do
Росправосудие http://rospravosudie.com/
Национальные демографии http://www.census.gov/population/international/links/stat_int.html
ВВП за последние 2000 лет http://www.ggdc.net/MADDISON/oriindex.htm
Мировой банк показатели http://data.worldbank.org/indicator/NY.GNP.PCAP.PP.CD/countries/1W?page=3&display=default
Показатели стран ОЭСР http://stats.oecd.org/Index.aspx
Евростат http://epp.eurostat.ec.europa.eu/portal/page/portal/eurostat/home/
Графики гугля http://www.google.ru/publicdata/directory
Фактбуки ЦРУ за 27 лет http://www.theodora.com/wfb/
Китайская статистика за 2010 год http://www.stats.gov.cn/tjsj/ndsj/2010/indexeh.htm
Японская статистика http://www.stat.go.jp/english/data/nenkan/
Китай в цифрах http://chinalist.ru/facts/index.php?p_param=1062&p_lang=0 http://www.stats.gov.cn/english/
Грузиястат http://www.geostat.ge/index.php?action=0&lang=eng
Цены и зарплаты разных государств в разное время http://www.iisg.nl/hpw/data.php#russia
Россия в больших цифрах. Часть 1. Структура ВВП http://holyreverend.livejournal.com/1179.html
Россия в больших цифрах. Часть 2-А http://holyreverend.livejournal.com/2828.html
100 лет промышленности в России http://www.rus-stat.ru/stat/7042002-1.pdf
Белая книга. Экон. реформы в России 1991—2001 http://situation.ru/app/rs/books/whitebook/whitebook_content.htm
Историческая демография http://dmo.econ.msu.ru/Biblio/Docs/Sbornik-14.pdf
Страны БРИК статистика http://gloriaputina.livejournal.com/313471.html
Исследование про убийства в мире http://www.unodc.org/documents/data-and-analysis/statistics/Homicide/Globa_study_on_homicide_2011_web.pdf
Аналитика журнала Демоскоп http://demoscope.ru/weekly/arc/archiveanalitika.php
Приложения статистических таблиц Демоскопа http://demoscope.ru/weekly/pril.php
Экономические показатели России http://rusimpex.ru/index1.htm?varurl=Content/Economics/index.htm
Россия в цифрах http://www.sci.aha.ru/map/rus/index.htm
СССР 100 вопросов и ответов http://www.situation.ru/app/rs/lib/ussr100/ussr100_content.htm
Историческая статистика http://www.historicalstatistics.org/
Библиотека Казиханова http://sklib.ru/libetc/page/3/
Статистика больших городов и агломераций по населению http://www.world-gazetteer.com/
Статистика от мирового банка с построением графиков http://databank.worldbank.org/ddp/home.do?Step=1&id=4
Разные индикаторы http://www.kireev.info/court/vector/#4
Еще индикаторы http://hdrstats.undp.org/en/indicators/default.html
Экономические индикаторы http://www.tradingeconomics.com/
http://www.cgdev.org/initiative/commitment-development-index  Индекс недвижимости
http://www.fao.org/worldfoodsituation/wfs-home/foodpricesindex/ru/ продовольственный индекс
http://warmingworld.newscientistapps.com/ изменения климата
http://berkeleyearth.lbl.gov/city-list/ Изменения температуры по городам по сравнению с 1960 годом
http://dic.academic.ru/dic.nsf/ruwiki/1415954  2000-е годы в экономике России по отраслям
http://data.euro.who.int/hfadb/shell_ru.html Европейское региональное бюро Всемирной организации здравоохранения
http://www.economist.com/blogs/buttonwood/2013/02/credit-ratings Кредитные рейтинги стран на конец февраля 2012
http://www.fms.gov.ru/about/statistics/data/ Статистика мигрантов в России
http://belstat.gov.by/links/statsluzhby/ Прямые ссылки на сайты статистических служб разных стран и международных организаций.
[Spoiler (click to open)]
Официальный сайт Всемирного банка (World Bank) - оперативная информация о проектах Банка. www.worldbank.org
Статистический портал Всемирного банка - базы данных индикаторов социально-экономической статистики - более 200 стран мира, свыше 300 индикаторов. http://data.worldbank.org/
Официальный сайт Международного валютного фонда (International Monetary Fund) - оперативная информация о проектах Фонда. www.imf.org
Архив ежегодных баз данных World Economic Outlook - социально-экономическая статистика более чем 200 стран мира. http://www.imf.org/external/ns/cs.aspx?id=28
Проект IMF DataMapper - интерактивная карта мира, наглядно отражающая социально-экономическую ситуацию в различных странах и регионах. http://www.imf.org/external/datamapper/index.php
Проект IMF Financial Access Survey ("Доступ к финансам") - база данных по доступности финансовых услуг позволяет проводить межстрановые сравнения и анализ состояния доступности финансовых услуг. http://fas.imf.org/
Официальный сайт Организации экономического сотрудничества и развития (Organisation for Economic Co-operation and Development) - оперативная информация о проектах Организации и социально-экономическом развитии стран мира. www.oecd.org
Статистический портал ОЭСР (показатели социально-экономического развития стран-участниц ОЭСР и некоторых других государств, включая РФ). http://stats.oecd.org/Index.aspx
Официальный сайт Банка международных расчетов (Bank For International Settlements) - оперативная информация о взаимодействии ЦБ стран мира, а также банковская статистика. www.bis.org
Официальный сайт Европейской экономической комиссии ООН (United Nations Economic Commission for Europe) - оперативная информация о проектах Комиссии. http://www.unece.org/
Статистическая база данных ЕЭК ООН - содержит подробную статистическую информацию по странам Европы, Северной Америки и Центральной Азии. В основе базы данных лежит макроэкономическая, гендерная и социальная статистика. http://w3.unece.org/pxweb/Dialog/
Официальный сайт Европейского центрального банка (The European Central Bank) - оперативная информация о состоянии банковского сектора Евросоюза и Еврозоны, а также стран-членов этих объединений. Статистика по денежно-кредитной политике и индикаторы банковского сектора. www.ecb.int
Статистическая база данных ЕЦБ (статистика по денежно-кредитной политике, индикаторы банковского сектора и бюджетная статистика Евросоюза и Еврозоны). http://sdw.ecb.int/home.do
Информационный портал Eurostat - база данных социально-экономических индикаторов Евросоюза, оперативная информация о состоянии экономики Евросоюза. http://epp.eurostat.ec.europa.eu/portal/page/portal/eurostat/home/
Информационный портал Europe's Energy Portal - оперативная информация и статистические базы данных показателей энергетического сектора стран Евросоюза, тарифы, энергосбережение, цены на топливо. http://www.energy.eu/
Официальный сайт Совета управляющих Федеральной резервной системы США (Board of Governors of the Federal Reserve System) - статистика денежно-кредитной политики, банковского сектора США. http://www.federalreserve.gov/
Официальный сайт Бюро экономического анализа США (Bureau of Economic Analysis) - макроэкономическая статистика, национальные счета, мониторинг промышленности США. http://www.bea.gov/
Официальный сайт бюро Census (U.S. Census Bureau) - показатели социально-экономической статистики США и некоторых стран мира. Прогнозы социально-экономического развития. http://www.census.gov/
Официальный сайт Внутренней налоговой службы США (U.S. Internal Revenue Service) - налоговая статистика корпораций и населения. http://www.irs.gov/
Официальный сайт Администрации энергетической информации США (U.S. Energy Information Administration) - статистика энергетического сектора и прогнозы. http://www.eia.doe.gov/
Официальный сайт Банка Японии (Bank of Japan) - индикаторы денежно-кредитной политики, банковского сектора. Показатели платежного баланса Японии. http://www.stat-search.boj.or.jp/index_en.html
Официальный сайт Министерства финансов Японии (Ministry of Finance Japan) - показатели государственных и корпоративных финансов. http://www.mof.go.jp/english/index.htm
Официальный сайт Бюро статистики Министерства внутренних дел и коммуникаций Японии (Ministry of Internal Affairs and Communications, Statistics Bureau) - оперативная информация о состоянии японской экономики и социально-экономическая статистика. http://www.stat.go.jp/english/index.htm
Официальный сайт Организации внешней торговли Японии (Japan External Trade Organization) -  статистика торгового баланса Японии. http://www.jetro.go.jp/
Официальный сайт Банка Германии (Deutsche Bundesbank) - статистика денежно-кредитной политики, банковского сектора Германии и стран Евросоюза. http://www.bundesbank.de/index.en.php
Официальный сайт Федерального офиса статистики Германии (Statistischen Bundesamt) - база данных показателей социально-экономического развития Германии. http://www.destatis.de/jetspeed/portal/cms/Sites/destatis/Internet/EN/Navigation/Homepage__NT.psml
Официальный сайт Банка Англии (The Bank of England) - статистика денежно-кредитной политики, банковского сектора Великобритании. http://www.bankofengland.co.uk/
Официальный сайт Офиса национальной статистики (The Office for National Statistics) - макроэкономическая статистика, национальные счета, показатели социально-экономического развития. http://www.statistics.gov.uk/default.asp
Официальный сайт Казначейства Ее Величества (HM Treasury) - показатели государственных и корпоративных финансов, налоговая статистика. http://www.hm-treasury.gov.uk/
Официальный сайт Банка Франции (Banque de France) - статистика денежно-кредитной политики, банковского сектора Франции. http://www.banque-france.fr/home.htm
Официальный сайт Национального института статистики и экономических исследований (INSEE - Institut National de la Statistique et des Études Économiques) - показатели социально-экономического развтития Франции. http://www.insee.fr/en/default.asp
Официальный сайт Банка Италии (Banca d'Italia) - статистика денежно-кредитной политики, банковского сектора Италии. http://www.bancaditalia.it/
Официальный сайт Национального института статистики (Istat - Istituto nazionale di statistica) - показатели социально-экономического развтития Италии. http://en.istat.it/
Официальный сайт Министерства экономики и финансов Италии (Ministero dell'Economia e delle Finanze) - оперативная информация и статистические данные о государственных финансах и налогах Италии. http://www.tesoro.it/en/
Официальный сайт Банка Канады (Bank of Canada) - статистика денежно-кредитной политики, банковского сектора Канады. http://www.bankofcanada.ca/en/index.html
Официальный сайт "Статистика Канады" (Statistics Canada) - показатели социально-экономического развития Канады. http://www.statcan.gc.ca/start-debut-eng.html
Официальный сайт Департамента финансов Канады (Department of Finance Canada) - показатели национального баланса, налоговая статистика. http://www.fin.gc.ca/fin-eng.asp


Ссылки на другие подборки

Статистика по РИ, СССР, РФ http://lost-kritik.livejournal.com
Статистика по алкоголизме в СССР http://alcdata.narod.ru/index.html
Полезные и умные ресурсы и ссылки http://map1983.livejournal.com/12984.html
Библиотека коммуниста Коммари http://www.aleksandr-kommari.narod.ru/
Кирилл Панкратов Избранное http://neznaika-nalune.livejournal.com/213145.html
Виртуальные библиотеки http://afanarizm.livejournal.com/tag/%D0%A1%D1%81%D1%8B%D0%BB%D0%BA%D0%B8
Архив Александра Яковлева http://www.alexanderyakovlev.org/db-docs
Старые СМИ http://obsrvr.livejournal.com/1336764.html
43 электронных библиотеки http://nilsky-nikolay.livejournal.com/13790.html