15 массивных онлайн-баз данных, о которых вы должны знать

Подумайте о ваших любимых открытых базах данных.

Я уверен, что Википедия и IMDb сразу приходят на ум, но вам, возможно, не понадобятся все эти знания или обширная база данных обо всех развлечениях. Иногда вам нужно немного VLDB (очень большая база данных). Что-то, что оживит ваш анализ данных

, Кое-что, чтобы поместить «большой» в ваши большие данные. Дракончик, хороший человек, ты в правильном месте.

Вот 15 крупных онлайн баз данных

Вы можете получить доступ и анализировать бесплатно

или просто внимательно на досуге.

1000 геномов

Завершение 2003 года Проект генома человека (HGP) было только начало. С тех пор достижения в технологии секвенирования значительно сократили затраты на человека, что позволило значительно расширить HGP с его первоначальной исследовательской базы в двадцать университетских лабораторий в обширную глобализированную сеть взаимосвязанных картографических средств генома.

Вы можете загрузить часть проекта «1000 геномов», содержащую информацию о последовательности для более чем 2600 человек из 26 групп населения по всему миру. Это файл размером 200 ТБ, так что будьте готовы. Мы предлагаем использовать его в сочетании с мощной платформой облачных вычислений.

Смотрите также: База данных размеров генома животных для данных генома, относящихся к 5635 видам.

авиалайнеры

Planespotters рай. Обширная база данных изображений, включающая 2 532 457 фотографий всех типов самолетов, от самых маленьких индивидуальных самолетов до огромных летающих крепостей.

Авиалайнеры также имеют обширный раздел, посвященный данным о самолетах и ​​истории, который постоянно обновляется в сотрудничестве с изданиями Aerospace Publications для обеспечения достоверности фактов. Это сделало его одной из самых подробных авиационных баз данных в Интернете.

Смотрите также: Попробуйте Planespotters.net для другого диапазона изображений или SeatGuru для схем размещения самолетов.

Интернет-архив

Сайт, ранее известный как Интернет-архив, претерпел масштабную переработку. Сайт не сильно изменился с 2002 года, но много изменилось с тех пор. Интернет-архив сделал еще более растущий с первых дней.

Архивируя все в Интернете, сайт предоставляет вам бесплатный доступ к цифровым медиа, включая книги, музыку, игры

, видео и многое другое. Коллекция в настоящее время оценивается примерно в 10 петабайт

и поскольку их веб-сканеры продолжают ползти, он будет продолжать расти.

Freebase

Freebase — это «созданная сообществом база данных известных людей, мест и вещей», хранящаяся в структуре данных, называемой графом. График состоит из узлов, связанных своими краями, что позволило Freebase быстро расширить свой контент, не нарушая существующие записи.

К сожалению, Freebase, принадлежащая Google, перешла в режим только для чтения в начале этого года, прежде чем автономная база данных службы была передана в Фонд Викимедиа для интеграции.

в проекте Wikidata (конец июня 2015 года). В настоящее время разработчики могут по-прежнему получать доступ к Freebase с использованием существующих API, но после переключения разработчики должны будут использовать API-интерфейсы Викимедиа для доступа к данным.

Найти могилу

Из домашней базы команды мечты об интернет-знаниях Google и Викимедиа мы переходим к патологии. Найти могилу это огромное, 121 миллион записей базы данных захоронений по всему миру.

Наиболее полные записи поступают из США, но есть небольшие страны с большими данными. В комплекте с фотографиями, интересными памятниками и множеством интересных эпитафий … если вам нужно вдохновение?

GameRankings

База данных, поддерживаемая вездесущей командой рецензентов в Gamespot. GameRankings дает всестороннее представление о популярности игры, освещая обзоры игр в автономном режиме и в автономном режиме из авторитетных источников.

,

Большая Мультипликационная База Данных

В том же духе, что и в массивной IMDb, The Big Cartoon Database сосредоточена исключительно на анимации: мультфильмах, фильмах, телевизионных шоу, рекламе и многом другом. Если это анимация, вы найдете ее здесь, а если нет, зарегистрируйтесь как участник этой постоянно растущей базы данных.

База данных больших мультфильмов имеет дочерний сайт в базе данных больших комиксов, где хранятся еще 100 000 или более записей комиксов

, охватывающий около 5000 серий, с более чем 35 000 сканов. Он также содержит комплексную функцию поиска, в том числе руководство по ценам для комиксов с подробным описанием текущих цен при перепродаже на различных уровнях оценки.

Смотрите также: База данных Grand Comics, некоммерческая база данных комиксов по всему миру.

CiteSeerX

Бесценный инструмент для студентов

CiteSeerX — это общедоступная поисковая система и электронная библиотека научных и научных работ. Часто рассматриваемая как первая автоматизированная система индексации цитирования, она послужила источником вдохновения для Google Scholar и Microsoft Academic Search. Хотя последний с тех пор был интегрирован в поисковую систему Bing.

CiteSeerX занимается индексацией общедоступных научных документов. Если ваш исследовательский документ открыто распространяется, у него больше шансов появиться в поисковой системе. CiteSeerX является отличным примером силы обмена знаниями, доступной для гораздо более широкой аудитории.

Смотрите также: Google Scholar для различного диапазона книг и цитат.

WorldCat

К сожалению, нет базы данных каждой фотографии кота в Интернете. Теперь это будет что-то! WorldCat гораздо полезнее, чем это. Справочный сайт документирует коллекции более 72 000 библиотек по всему миру, охватывает 170 стран и территорий. Это полезно, если вы проводите исследования в другой стране или просто хотите лично прочитать редкие книги.

Единственным недостатком является метод обновления. WorldCat использует модель пакетной обработки, а не позволяет пользователям получать доступ к данным в режиме реального времени. Таким образом, WorldCat не указывает статус ссуды для каталогизированных книг, независимо от того, принадлежит ли библиотека нескольким экземплярам одной книги или является ли данная книга непосредственно доступной для желающих посетить. Это все еще очень полезный инструмент, особенно когда используется в сочетании с CiteSeerX.

Архив Симпсонов

«Интернет-центр справочников, новостей и информации Симпсонов». Я не мог бы выразиться лучше. Давний фаворит поклонников начался в далеком 1994 году и до сих пор набирает силу даже без каких-либо интерактивных мультимедиа, хотя бы для того, чтобы скрыться от бдительного взгляда юридического отдела Фокса.

WinCustomize

Вы найдете одну из крупнейших баз данных инструментов настройки для Windows

здесь, начиная с XP до Windows 8.1

, Я уверен, что Windows 10 не займет много времени, чтобы начать делать раунды. Его огромная популярность проистекает из сочетания сил. Владелец Stardock, субсидирует сайт, что означает, что их мало или нет. Это также выигрывает от количества людей, направляемых на сайт из Stardock.

Ultimate Гитарный Архив

Ах, путешествие по переулку ностальгии к базе данных, напоминающей мне, что я никогда не стану Роджером Уотерсом. На самом деле, я все еще могу едва играть, но это другая история.

Ultimate Guitar Archive, или просто Ultimate-Guitar (UG), имеет более 1 500 000 зарегистрированных пользователей по всему миру, наблюдая за смехотворно большим количеством контента сообщества. Это почти ошеломляет, как много информации, связанной с гитарой, рассеяно из одного источника. Сообщество просто не поддерживает огромную базу данных, оно также часто сотрудничает друг с другом для создания разветвленных музыкальных проектов.

Растения на будущее

Растения на будущее документы экологически устойчивого садоводства. Он имеет большое значение в распространении знаний о видовом разнообразии и важности пермакультуры. То, что начиналось как небольшой проект в недрах Корнуолла, постепенно превратилось в мировую базу данных.

Рост несколько медленный и в основном сосредоточен на пермакультуре в Великобритании и ЕС, но многие записи можно поменять местами в США, если у вас есть данные о видах.

Quandl

Включите эту надстройку Excel для обработки и анализа данных

, Основной сайт Quandl действует как поиск по базе данных, находя базы данных со всего мира, которые соответствуют вашим условиям поиска. Попробуйте, если вам нужно поскорее получить дополнительные данные или просто поиграть с большими наборами данных (честно, кто не знает ?!).

Смотрите также: Поисковая система базы данных Enigma.

Крошечные изображения

Набор данных Tiny Images выступает в качестве визуального словаря. Нажмите в любом месте изображения, и появится поисковый запрос с дополнительной информацией. Вы также можете использовать конкретные термины для просеивания 80 миллионов изображений.

База данных является частью более широкого проекта машинного обучения

основное внимание уделялось обучению компьютеров «видеть» и «читать» смысловые поля в изображениях.

Бонусный источник: / r / наборы данных

«Главная страница Интернета» — это надежный дом для энтузиастов интеллектуального анализа данных по всему миру. Существуют подразделы, предназначенные для машинного обучения, интеллектуального анализа данных, преобразования текста в данные и наборов данных. Если вам нужно что-то конкретное, сделайте запрос. Новые наборы данных появляются каждую неделю.

Следите за опубликованными интересными наборами данных, такими как уровни иммунизации в детских учреждениях и школах для Калифорнии.

Используете ли вы богатство?

Интернет создал единственную ясную возможность для людей объединиться и сосредоточить свои знания в единой базе данных. Мы доблестно пытаемся документировать все о чем угодно. Некоторые из этих баз данных предназначены для ознакомления, другие — для обучения.

, но мы надеемся, что вам понравится их все.

Какие ваши любимые базы данных? Есть ли какие-нибудь открытые массивные справочные источники, которые я должен был бы включить в этот список?

Image Credits: сетевой сервер через Shutterstock, библиотека через Shutterstock