Статьи Скрытые интернет ресурсы США

Discussion in 'Статьи' started by Egor_drug, 13 Feb 2015.

  1. Egor_drug

    Egor_drug Banned

    Joined:
    31 Jan 2012
    Messages:
    0
    Likes Received:
    13
    Reputations:
    -10
    Internet2

    [​IMG]

    Интернет2 ( англ. Internet2 ) —
    некоммерческий консорциум из 230
    американских университетов , создающий
    передовые сетевые приложения и
    технологии , чтобы ускорить появление
    « Интернета будущего». Консорциум
    активно сотрудничает с правительственными организациями и
    ведущими частными компаниями компьютерной индустрии.
    Консорциум также поддерживает собственную
    экспериментальную высокоскоростную сеть Абилин ( англ.
    Abilene Network ). Когда говорят «Интернет2», то зачастую
    подразумевают именно сеть Абилин , а не сам консорциум.
    Отличительные особенности «Интернет2» — использование
    протокола передачи данных IPv6 и средств multicast
    (широковещательной передачи данных нескольким абонентам
    одновременно), поддержка QoS (средства обеспечения
    приоритетного качества в передаче видео- и голосовой информации), а также использование высокоскоростных (10 Гбит/с) магистральных каналов.

    GEANT

    GÉANT — образовательный проект
    мульти-гигабитной интернет сети,
    соединяющий в себе более 3500
    образовательных учреждения в Европе
    (более 30 стран). Кроме
    образовательных нужд сеть GÉANT
    предоставляет услуги IP Quality of Service
    QoS, Multicast , виртуальной частной
    сети . Скорость передачи данных от 1 до
    12 гигабит в секунду.

    Оф.сайт:www.geant.net

    NSFNet

    (от англ. N ational S cience
    F oundation Network ) — компьютерная
    сеть Национального фонда науки США ,
    образованная в 1984 году и служившая
    каркасом Интернета в начале 1990-х
    годов . Заметьте, что NSFNet и
    NSFNET — это разные сети, не имеющие
    прямого отношения друг к другу.

    NSFNet сегодня

    Несмотря на потерю своего былого
    могущества, сеть NSFNet продолжает
    существовать. Она служит своей
    изначальной цели объединения научного
    потенциала и вычислительных
    мощностей суперкомпьютеров. В
    настоящее время на базе NSFNet
    развивается известный проект Internet2 ,
    обеспечивающий цифровую связь на
    невероятно больших скоростях. К
    Internet2 имеют подключение многие
    университеты по всему миру, в России к
    Internet2 подключён МГУ

    ARPANET

    ARPANET (от англ. A dvanced R esearch
    P rojects A gency Network ) —
    компьютерная сеть, созданная в 1969
    году в США Агентством Министерства
    обороны США по перспективным
    исследованиям ( DARPA) и явившаяся
    прототипом сети Интернет . 1 января
    1983 года она стала первой в мире
    сетью, перешедшей на маршрутизацию
    пакетов данных. В качестве
    маршрутизируемого протокола
    использовался TCP/IP , который и по сей
    день является основным протоколом
    передачи данных в сети Интернет.
    ARPANET прекратила своё
    существование в июне 1990 года .

    MILNET

    MILNET (от англ. Military Network ; с
    англ. Военная сеть ) — название сети,
    являвшейся частью ARPANET ,
    выделенной для обмена несекретным
    трафиком Министерства обороны США .
    MILNET был отделен от ARPANET в 1983
    году: ARPANET остался доступным лишь
    для академического сообщества
    исследований, однако прямой связи
    между сетями не было, так как они были
    разорваны в целях безопасности.
    Электронные сообщения между двумя
    сетями передавали сетевые шлюзы[1] . И
    APRANET, и MILNET разработала
    компания BBN Technologies, поэтому обе
    сети очень похожи и выстроены на TCP/
    IP[2] .
    В 1980-х MILNET стала частью Defense
    Data Network — военных сетей США в
    пределах страны и за границей. В 1990-
    х MILNET был преобразован в NIPRNet

    DARPA

    DARPA (англ. Defense Advanced Research
    Projects Agency — агентство передовых
    оборонных исследовательских
    проектов) — агентство Министерства
    обороны США , отвечающее за
    разработку новых технологий для
    использования в вооружённых силах[3] .
    Миссией DARPA является сохранение
    технологического превосходства
    вооруженных сил США, предотвращение
    внезапного для США появления новых
    технических средств вооруженной
    борьбы, поддержка прорывных
    исследований, преодоление разрыва
    между фундаментальными
    исследованиями и их применением в
    военной сфере.

    CSNET

    CSNET (научная компьютерная сеть) —
    компьютерная сеть, которая начала
    свою работу в 1981 году в Соединенных
    Штатах [1] . Её целью было обеспечить
    сетевые преимущества для академий и
    исследовательских учреждений, которые
    не могли быть непосредственно
    подключены к ARPANET из-за
    финансовых трудностей или
    ограничений подключений. Она сыграла
    значительную роль в распространении
    информации и обеспечении доступа к
    национальной сети и была важной вехой
    на пути развития глобальной сети
    Интернет . CSNET финансировалось
    Национальным научным фондом США с
    1981 по 1984 год.

    Usenet

    Юзнет (англ. Usenet сокр. от User Network) — компьютерная
    сеть , используемая для общения и публикации файлов . Usenet
    состоит из новостных групп , в которые пользователи могут
    посылать сообщения. Сообщения хранятся на серверах , которые
    обмениваются ими друг с другом.
    Usenet оказал большое
    влияние на развитие современной веб-культуры, дав начало
    таким широко известным понятиям, как ники , смайлы, подпись,
    модераторы , троллинг, флуд, флейм, бан, FAQ и спам.
    Юзнет основан на протоколе NNTP , который является
    протоколом прикладного уровня модели OSI . Таким образом,
    Юзнет является частью Интернета , а не отдельной от него
    сетью.

    Вот интернесный сайт http://usenethub.com/

    BITNET

    BITNET — это сеть электронных коммуникаций, связывающая
    компьютеры более 560 организаций — членов CREN в США ,
    включая университеты, колледжи, школы, исследовательские
    центры, финансируемые правительством, и правительственные
    агентства. Вместе с объединением с сетями в других странах
    BITNET является единой логической сетью, соединяющей более
    1500 организаций в 52 странах, обеспечивающей электронный
    обмен информацией для поддержки научных исследований и
    образования. Кроме того, многочисленные шлюзы позволяют
    передавать электронную почту между BITNET’ом и Интернетом ,
    NSFNET 'ом и другими сетями.

    Обозрение BITNET/EARN

    BITNET (Because It’s Time — потому что пришло время)
    EARN (European Academic & Research Network)

    Общее описание:
    Пользователи BITNET совместно используют информацию с
    помощью электронной почты , пересылаемой между
    конкретными пользователями, подписываясь на списки
    рассылки по интересам, передавая документацию, программы,
    данные от обслуживающих машин BITNET и обмениваясь
    короткими интерактивными сообщениями. Свыше 3000 списков
    рассылки активно в настоящее время в BITNET. Каждый
    отдельный список может насчитывать до нескольких тысяч
    участников. Кроме того, отдельные сегменты сети
    предоставляют средства для интерактивного доступа к
    удалённым компьютерам и доступа к удалённым базам
    данных. Помощь пользователям и сетевые информационные
    службы обеспечиваются информационным центром BITNET —
    BITNIC. BITNIC обеспечивает помощь в управлении, связи и
    распределении информации пользователям и обслуживающему
    персоналу сети как через сеть с помощью пересылки файлов и
    интерактивных сообщений, так и обычной почтой, и по
    телефону во всём мире. Обеспечивает документацию как
    напечатанную, так и хранимую на машинных носителях.
    Практически все сервисы сети BITNET бесплатные. Для того,
    чтобы подключиться к сети, необходимо оплачивать линию
    связи до ближайшего узла. В сети запрещено заниматься
    коммерческой, политической и религиозной деятельностью.

    GLORIAD

    За последние 12 лет это совместное американо-российское
    видение будущего практически охватило всю планету. С 18
    миллионами долларов финансирования от Национального
    научного фонда США и около 200 миллионами долларов
    инвестиций от других международных партнёров начальная сеть
    МИРнета с 6 Мб/с трансформировалась в ГЛОРИАД с
    несколькими 10 мегабайтными кольцами световолоконной связи
    которые обвивают северное полушарие соединяя США и Россию с
    Китаем, Южной Кореей, Западной Европой, Скандинавией и
    Канадой. Эта сеть в скором времени дополнится Индией,
    Египтом, Сингапуром и Вьетнамом с планами продвижения на
    Ближний Восток, в Африку, Юго-западную Азию, Среднюю Азию и
    Закавказье.

    ГЛОРИАД предоставляет условия для растущей глобализации
    науки и образования соединяя более 40 миллионов
    пользователей представляющих различные области научных
    исследований начиная с телемедицины и заканчивая
    усовершенствованными моделями атмосферных погодных
    явлений или от сейсмических наблюдений до физики высоких
    энергий и исследований новых видов энергии. Опытные учёные
    наравне с молодыми студентами используют ГЛОРИАД для
    участия в глобальном дистанционном обучении, в
    высококачественных видео- и аудио-конференциях, делятся
    огромными базами данных на значительном удалении, совместно
    и одновременно используют дорогостоящее научное
    оборудование, участвуют в совместных научных проектах.
    Сотрудничество такого масштаба было невозможно в прошлом
    даже при наличии сегодняшнего уровня развития обычного
    интернета.

    ГЛОРИАД также преобразует будущее интернетов. Исследователи
    изучающие интернетные сети используют возможности ГЛОРИАДа
    для дизайна масштабированых продвинутых защищённых сетей
    следующего поколения включая коммуникации, протоколы и
    услуги. Примером этого является поддержанный Национальным
    научным фондом США проект GENI (Глобальная среда для
    сетевых инноваций - http://www.geni.net ) виртуальная
    лаборатория совместно используемая учёными,
    промышленностью и общественностью.
    Намеренно трансформировавшись в глобальный проект,
    ГЛОРИАД остаётся американо-российским информационным
    мостом в своём сердце. Руководство академика Евгения
    Велихова и продвинутые коммуникационные технологии
    претворяемые в жизнь общероссийским консорциумом «e-Arena»
    переводят российскую программу в следующую фазу – фазу
    крупномасштабных отечественных программ совершенствования
    отечественной инфраструктуры которые составляют интернет
    сервисы третьего поколения на национальном, региональном и
    местном уровнях.
    Большое количество 10-гигабайтных соединений
    распространяющихся по всему миру должно сейчас вырасти в 40-
    и 100-гигабайтные мощности и соединить компьютеры
    пользователей и лаборатории.
     
    #1 Egor_drug, 13 Feb 2015
    Last edited: 13 Feb 2015
  2. Egor_drug

    Egor_drug Banned

    Joined:
    31 Jan 2012
    Messages:
    0
    Likes Received:
    13
    Reputations:
    -10
    Цели проектов

    Цели проекта ARPANET

    проведение экспериментов в области компьютерных
    коммуникаций;
    объединение научного потенциала исследовательских
    учреждений;
    изучение способов поддержания устойчивой связи в условиях
    ядерного нападения;
    разработка концепции распределённого управления военными
    и гражданскими структурами в период ведения войны.

    Наследие

    Многие существующие протоколы Интернета берут своё начало
    в ARPANET. Например, протокол обратного поиска DNS до сих
    пор использует доменное имя верхнего уровня «.arpa»: чтобы
    найти записи, относящиеся к IP-адресу 1.2.3.4 , надо
    послать запрос об адресе 4.3.2.1.in-addr.arpa .
    Основной протокол передачи данных сети Интернет — TCP/IP ,
    тоже берет начало в ARPANET, где с 1983 года он сменил NCP в
    качестве стандарта сетевого протокола.

    [​IMG]

    Структура управления DARPA

    [​IMG]
    Структуру агентства составляют 7 подразделений:
    1. Адаптивного управления (AEO) — исследования в области
    построения адаптивных платформ и архитектур, включая
    универсальные программные платформы, модульные
    аппаратные средства, многофункциональные информационные
    системы и средства разработки и проектирования;
    2. Оборонных исследований (DSO) — исследования в области
    фундаментальной физики, новых технологий и приборов на
    новых физических принципах, энергетики, новые материалы и
    биотехнологии, прикладной и вычислительной математики,
    медико-биологические средства защиты, биомедицинские
    технологии .
    3. Инноваций в информационных технологиях (I2O) —
    информационные системы мониторинга и управления,
    технологии высокопроизводительных вычислений,
    интеллектуальный анализ данных, системы распознавания
    образов, когнитивные системы машинного перевода ;
    4. Микросистемных технологий (MTO) — технологии
    электроники, фотоники, микромеханических систем,
    перспективной архитектуры интегрированных микросхем и
    алгоритмов распределенного хранения данных;
    5. Стратегических технологий (STO) — системы связи, средства
    защиты информационных сетей, средства радиоэлектронной
    борьбы (РЭБ), устойчивость систем к кибератакам, системы
    обнаружения замаскированных целей на новых физических
    принципах, энергосбережение и альтернативные источники
    энергии ;
    6. Тактических технологий (TTO) — современные высокоточные
    системы вооружения, лазерное оружие, беспилотные средства
    вооружений на базе воздушных, космических, наземных и
    морских платформ, перспективные космические системы
    мониторинга и управления.
    7. Биологических технологий (BTO) — исследования в области
    инженерной биологии, включая омиксные технологии,
    синтетическую биологию, метаболическую инженерию, генную
    терапию (включая искусственную хромосому человека), и
    прикладные аспекты нейронаук.

    ARPA-E

    ARPA-E ( англ. Advanced Research Projects Agency-Energy —
    Агентство передовых исследований в области энергетики ) —
    новое агентство Соединённых Штатов, созданное в целях
    финансирования научных исследований и разработок
    перспективных энергетических технологий. Оно создано по
    образцу DARPA.
    ARPA-E было создано как внутреннее отделение Департамента
    энергетики США в 2007 году , однако не было
    профинансировано. Первоначальный бюджет составил около
    400 миллионов долларов, которые были получены только в
    феврале 2009 по указу о стимуляции экономики. Целью ARPA-E
    является междисциплинарное исследование проблем
    энергетики. Как и DARPA, проекты ARPA-E финансируются
    государством, частным сектором и университетами. Арун
    Маджумдар , бывший заместитель директора Lawrence Berkeley
    National Laboratory, был назначен первым директором ARPA-E в
    сентябре 2009 года, после шести месяцев со дня первого
    финансирования.

    Interner2 цель

    Цели консорциума
    Создать самую совершенную сеть для
    американских исследовательских
    сообществ
    Разработать революционные
    интернет-приложения
    Обеспечить быстрое распространение
    новых сетевых служб и приложений для
    широких кругов пользователей
    Интернета.

    Основные рабочие группы и
    проекты консорциума
    Протокол IPv6 (IPv6 Working Group)
    Связь один-со-многими (Multicast
    Working Group)
    Качество сервиса (Quality of Service
    Special Interest Group, QoS)
    Связующее программное обеспечение
    ( Middleware Initiative)
    K20 (K20 Initiative)
    Производительность из-конца-в-
    конец (End-to-End Performance Initiative,
    E2Epi)
    Гибридная оптическая и пакетная
    инфраструктура (Hybrid Optical and
    Packet Infrastructure, HOPI)
    Горожане Internet2 (The Internet2
    Commons)
    Распределённое хранилище (Distributed
    Storage Initiative, DSI)
    Цифровое видео (Digital Video
    Initiative, DVI)
    Голос по протоколу IP (Voice over IP
    Working Group)

    Официальный сайт консорциума ТЫК
     
    #2 Egor_drug, 13 Feb 2015
    Last edited: 14 Feb 2015
    Bezlishke likes this.
  3. Egor_drug

    Egor_drug Banned

    Joined:
    31 Jan 2012
    Messages:
    0
    Likes Received:
    13
    Reputations:
    -10
    ЗАТЕРЯННЫЙ
    web

    Очередной феномен Интернет

    Оказывается в Глобальной паутине информации куда больше, чем это можно себе представить. Чаще всего пользователь находит на необходимые ему новые источники в Сети через информационно-поисковые системы, такие как Google, Yahoo! или "Яндекс", которые для многих стали "де-факто" стандартными. Однако кроме видимой для поисковых систем части вэб-пространства существует огромное количество страниц, которые ими не охватываются. При этом доступ пользователя к таким ресурсам в принципе возможен (хотя иногда "слегка прикрыт" паролями). Как правило, эти вэб- страницы доступны в Интернет, однако выйти на них трудно, а порой невозможно, если не знать точного адреса. Эти ресурсы уже десять лет как имеют собственное название - "скрытый" (deep) вэб, которое ввел Джилл Иллсворт (Jill Ellsworth) в 1994 году, обозначив им источники, недоступные для обычных поисковых систем. Сегодня такие ресурсы называют также невидимым (invisible) вэб. Они чаще всего охватывают динамически формируемые вэб-страницы, содержание которых хранится в базах данных и доступно лишь по запросам пользователей.

    В 2000 году американская компания BrightPlanet (www.brightplanet.com) опубликовала сенсационный доклад, в котором утверждается, что в вэб-пространстве в сотни раз больше страниц, чем их удалось проиндексировать самыми популярными поисковыми системами. Эта же компания разработала программу LexiBot, которая позволяет сканировать некоторые динамические вэб-станицы, формируемые из баз данных, и запустив ее получила неожиданные данные. Выяснилось, что для традиционных поисковых систем огромная часть Сети попросту невидима. Топология паутины - "галстук-бабочка"

    В отличие от данных из обычного хранилища информации, документы из вэб- пространства характеризуется большим количеством неявно включенных в них экспертных оценок, реализованных в виде взаимных гипертекстовых ссылок. Именно гиперссылки оказались в свое время основой для построения модели вэб-пространства (или, попросту, вэба). И именно их остутствие порождает скрытые области в этом пространстве.

    В ноябре 1999, Андрей Бредер (Andrei Broder) и его соавторы из компаний AltaVista, IBM и Compaq совершили прорыв, математически описав "карту" реасурсов и гиперсвязей вэба. Исследования опровергли расхожее мнение, будто Интернет - это единое густое пространство. Проследив с помощью поискового механизма AltaVista свыше 200 млн. вэб-страниц и несколько млрд. ссылок, размещенных на этих страницах, ученые пришли к следующим выводам о структуре вэб-пространства, котороая соответствует, по их мнению, ориентированному графу с топологией "галстука-бабочки" (Bow Tie), в котором вершины соответствуют страницам, а ребра - соединяющим страницы гиперссылкам. В рамках этой модели задача анализа структуры связей между отдельными вэб-страницами было обнаружено наличие:

    - центральное ядро (28% вэб-страниц) - компоненты сильной связности (SCC) или узел галстука, составляют вэб-страницы, взаимосвязанные так тесно, что,следуя гиперссылкам, из любой из них в конечном счете можно попасть на любую другую.

    - 22% вэб-страниц - это "отправные вэб-страницы" (IN). Они содержат гиперссылки, которые в конечном счете ведут к ядру, но из ядра к ним попасть нельзя.

    - столько же - 22% - "оконечных вэб-страниц" (OUT), к которым можно прийти по ссылкам из ядра, но нельзя вернуться назад.

    - 22% вэб-страниц - отростки - полностью изолированы от центрального ядра: это либо "мысы", связанные гиперссылками со страницами любой другой категории, либо "перешейки", соединяющие две вэб-страницы, не входящие в ядро.

    Четыре основных множества - более 90% исследуемых вэб-страниц, топологически относящихся к одной компоненте связности - обусловили название модели - "галстук- бабочка" (Bow tie).

    Существующие "острова" вообще не пересекаются с остальными ресурсами Сети. Единственный способ обнаружить ресурсы этой группы - знать их адрес. Поисковые машины в принципе не находят этих островов, если они в прошлом каким-то образом не соединяли.

    Типы скрытых ресурсов

    Для того, чтобы определить, какие из ресурсов невидимы для поисковых систем, следует рассмотреть принцип работы типового индексатора - робота таких систем. Эти программы, как правило, посещают вэб-страницы по известным заранее адресам, анализируют их содержание и выделяют гиперссылки, идущие от них. Обычно, обработав текущую страницу, выделив ключевые слова и некоторые поля, робот переходит по адресам, найденным на ней, сканирует последующие страницы, выделяет новые адреса и. т.д. Обычно, как только робот определяет, что он обращается к динамической странице, он останавливает свою работу, так как чаще всего для получения осмысленного ответа из баз данных требуется осмысленный запрос, а большинству из роботов чужды элементы интеллекта, даже искусственного. Т.е. "скрытый" вэб охватывает в первую очередь содержимое онлайновых баз данных. Динамической является и быстро обновляемая информация - новости, конференции, онлайновые журналы.

    Конечно, есть и явные "острова" по Брёдеру, на которые не ведут никакие гиперссылки, и от которого гиперссылки не исходят. Защищенные паролями коммерческие вэб-сайты также попадают в категорию "скрытого" вэба - о материалах этих сайтов большинство пользователей никогда не узнают с помощью поисковых систем. Однако относительное количество таких сайтов невелико. Например, среди крупнейших сайтов "скрытого" вэбв, платными являются только 10% ресурсов, хотя именно они включают важнейшие издательства и базы данных.

    Основатель BrightPlanet Майкл Бергмана (Michael K. Bergman) выделил 12 разновидностей "скрытых" вэб-ресурсов (www.leidenuniv.nl/ub/biv/specials.htm), относящихся к классу онлайновых баз данных. В списке оказались как традиционные базы данных (патенты, медицина и финансы), так и публичные ресурсы - объявления о поиске работы, чаты, библиотеки, справочники. Бергман причислил к "скрытым" ресурсам и специализированные поисковые системы, которые обслуживают определенные отрасли или рынки, базы данных которых не включаются в глобальные каталоги традиционных поисковых служб.

    К "скрытому" вэб также относятся многочисленные системы интерактивного взаимодействия с пользователями - помощи, консультирования, обучения, требующие участия людей для формирования динамических ответов от серверов. К ним также можно отнести и закрытую (полностью или частично) информацию, доступную, пользователям Сети только с определенных адресов, групп адресов, иногда городов или стран. К "скрытой" части Сети многие причисляют и вэб-страницы, зарегистрированные на бесплатных серверах, которые индексируются, в лучшем случае, лишь частично - поисковые системы во избежание рекламного спама не стремятся обходить их в полном объеме.

    Недавно появилась категория так называемых "серых" сайтов, функционирующих на основе динамических систем управления контентом (Dynamic Content Management Systems). В поисковых системах обычно ограничивается глубина индексирования таких сайтов во избежание возможного циклического просмотра одних и тех же страниц.

    И конечно же, "скрытыми" оказываются вэб-сайты, создатели которых не оповещают кого-либо о создании этих ресурсов.

    Безусловно, основной формат данных, с которым работают традиционные поисковые системы в Интернет - это HTML, причем статическая его часть. С другими форматами у многих поисковых систем имеются различные проблемы. К примеру, различные версии формата PDF (Adobe Portable Document Format), а также особенности хранения инкапсулированных графических изображений, заставляют считать сетевые ресурсы, представленные в этом формате, "скрытыми". Тем не менее, некоторые современные поисковые системы уже вполне сносно индексируют документы в этом формате. К "скрытым" форматам принято относить также и Flash, широко использующийся для обеспечения визуальных эффектов на вэб-сайтах.

    Кроме того, например, для нашего пользователя, наверняка "скрытой" можно признать большую часть гигантского китайского сегмента Интернет
     
  4. iwantpipi

    iwantpipi New Member

    Joined:
    3 Sep 2015
    Messages:
    1
    Likes Received:
    0
    Reputations:
    0
    Интересная статья. Познавательно, спасибо
     
  5. altblitz

    altblitz Elder - Старейшина

    Joined:
    5 Jun 2009
    Messages:
    3,694
    Likes Received:
    3,149
    Reputations:
    236
    Журнализд сраный метнулся чтобы покрасоватся.

    Поц, Егор_друг, быстро показал свои личные настройки Usenet.
    Нет их у тебя и не будет, шапокляк ссаный. Не знаешь брода - не суйся в воду.

    Статья, копи/пейст неоригинальная - гавно, и на сегодня смысла не имеет никакого.