Как мы хостинг создавали / Хабр

Что такое vds/vps?

Этот вид хостинговых услуг эволюционировал вместе с программными средствами виртуализации. Термины

(Virtual Dedicated Server) или

(Virtual Private Server), обозначающие виртуальный выделенный сервер, функционирующий на физическом, появились почти десятилетие назад, еще в «дооблачную» эпоху, хотя сегодня VDS/VPS считается облачным сервисом, да обычно и является таковым в соответствии с классическими определениями.

По сути оба термина означают одно — виртуальный выделенный сервер: на одном физическом сервере работает несколько виртуальных, при этом сбой в работе одного виртуального сервера не влияет на функционирование соседних. Хотя некоторые считают, что между этими сервисами все же есть отличия.

Каждый виртуальный сервер эмулирует работу физического, и заказчик VPS получает его в свое полное распоряжение: имеет права администратора для установки ОС и программного обеспечения, может устанавливать приложения, работать с файлами и выполнять другие действия, как владелец обычного сервера. Возможности ограничиваются только выделенными ресурсами. В России услуги VPS получили распространение еще

Альтернативы VPS – виртуальный и физический хостинг.

Archive.org

Archive.org — всемирный архив интернета, периодично сохраняет вид сайтов на протяжении всей его работы. Можно посмотреть, как выглядели популярные интернет-гиганты ранее и менялись с момента создания.

В шкале сверху показываются все года и количество сохранений. А в календаре — обведённые и выделенные жирным цифры, когда был сохранён архив. При нажатии на них вы можете его посмотреть. Так выглядел мой блог, когда я его только запустил в 2022 году.

Данными крайними двумя способами можно определить, что за сайт находился на домене, и нарушал ли он какие-либо нормы интернета.

Microsoft hyper-v: преимущества и особенности

Технология виртуализации Hyper-V доступна в качестве самостоятельного бесплатного ПО Microsoft Hyper-V Server, либо в составе ОС Windows Server 2022. Она базируется на 64-разрядном гипервизоре, отделенном от основной ОС Windows Server 2022. Каждая гостевая ОС работает с собственным ядром и с выделенными гипервизором виртуальными ресурсами, что позволяет запускать на одном физическом сервере разные операционные системы.

Данная технология гарантирует, что все заявленные ресурсы будут доступны клиенту в любой момент времени вне зависимости от активности соседей по серверу. Главное отличие Hyper-V хостинга от обычного VPS — полностью изолированные от других виртуальных машин аппаратные ресурсы.

Права администратора позволяют владельцу виртуального сервера настраивать систему, создавать пользователей и устанавливать ПО, как на физическом сервере. Hyper-V VPS является полным аналогом «железного» сервера в плане администрирования и настройки. Можно устанавливать любые ОС, Windows или Linux, настраивать их по своему усмотрению.

Точно так же можно инсталлировать любое дополнительное ПО, конфигурировать его, настраивать такие аппаратные ресурсы как объем оперативной памяти, емкость дискового пространства или IP-адреса. В отличие от VPS-хостинга, хостинг Hyper-V гарантирует возможность масштабирования ресурсов для сайтов или приложений, причем масштабирование происходит «на лету», без остановки сервиса.

Использование такого виртуального сервера не ограничивается размещением сайтов. Он может обслуживать и любые другие сервисы, такие как сервер баз данных, сервер терминалов, DNS, FTP и др., использоваться как удаленное рабочее место. С помощью Microsoft Hyper-V VPS можно сэкономить на покупке лицензий на Windows Server 2022, т.к. она уже идет в комплекте с хостингом.

Кроме того, такой вариант позволяет уменьшить затраты на лицензии для стороннего ПО при коллективной работе — можно установить на виртуальном сервере одну лицензионную копию, доступную для удаленной работы. Наконец, хостеры предлагают аренду дополнительного ПО Microsoft — SQL Server, SharePoint и пр.

Можно легко управлять всей виртуальной инфраструктурой, используя стандартную консоль управления серверами, применять инструменты для аварийного восстановления данных, консолидации серверов и приложений. Возможность резервного копирования данных обеспечивает круглосуточную бесперебойную работу.

Hyper-V подходит для веб-хостинга (включая высоконагруженные сайты) и хостинга приложений, тестирования и разработки ПО, консолидации серверов, развертывания виртуальных рабочих мест (VDI). Все это — по привлекательной цене, без покупки физических серверов и капитальных вложений в инфраструктуру.

Rds bar

RDS bar — это расширение для браузера, помогающее вебмастерам быстро получить доступную информацию о сайте. Даже если сайт по нужному доменному имени не открывается, он всё равно покажет статистику.

Для этого устанавливаете расширение. В браузерной строке вводите нужный адрес и пытаетесь его открыть. Когда выдаст ошибку о недоступности, нажимаете на значок.

Если цифры не по нулям, то значит он использовался ранее и индексировался. Нажимая на цифры, увидите подробные данные.

Варяги российского рынка

Сам факт появления на нашем рынке зарубежных компаний весьма показателен. Естественно,
на начальном этапе им придется работать с отрицательным или в лучшем случае
— то есть при достижении некоторого минимума клиентов — с почти нулевым балансом.
По большому счету, на начальном этапе идет долгосрочное вложение капитала в
отечественный рынок.

Виртуальный хостинг

Так называемый виртуальный (shared) хостинг в отличие от

предоставляет ограниченные возможности настройки и управления, а пользователю выделяется емкость на заранее подготовленном сервере. Он не может изменять выделенные ресурсы, устанавливать дополнительное ПО, менять настройки сервера. Разрешено изменять только свой контент.

Ресурсы физического сервера разделяются между его пользователями, поэтому может возникать дефицит ресурсов во время пиковых нагрузок. Обычно виртуальный хостинг подходит для небольших проектов и задач, не требующих значительных ресурсов и высокого уровня безопасности.

В отличие от обычного виртуального хостинга, на виртуальном сервере VPS/VDS обычно предусматривается защита от DDoS-атак, резервное копирование данных, каждый виртуальный сервер имеет свой IP-адрес, а при необходимости можно получить дополнительные IP-адреса, в то время как при виртуальном хостинге несколько сайтов нередко используют один IP-адрес.

Виртуальный выделенный сервер не имеет ограничений, свойственных виртуальному хостингу. Можно создавать любое количество сайтов, баз данных, доменных зон и пр. Есть ограничение на физические ресурсы, но VPS их гарантированно получит, в то время как на виртуальном хостинге такой гарантии нет.

Однако стоимость аренды виртуального выделенного сервера обычно выше стоимости виртуального хостинга, но значительно ниже аренды сопоставимого физического сервера.

Зачем проверять историю?

Если вы новичок и не знакомы с тем, что такое фильтры поисковых систем, репутация домена, индексация и ранжирование сайта, то давайте вкратце объясню простыми словами.

В интернете и в любой поисковой системе существует масса алгоритмов, анализирующих каждый ресурс по многим показателям. За время работы сайта он проходит тысячи проверок. Так как на сами данные ресурса не наложить никакие показатели, из-за того, что они постоянно меняются, все параметры проверок закрепляются за его адресом, то есть доменом.

В случае если на сайте долгое время находился неуникальный контент, вирусы, запрещающие материалы (для взрослых, экстремизм, пропаганда наркотиков и другое), покупались или продавались некачественные ссылки, публиковались переоптимизированные статьи, спам и т. д., то скорее всего доменное имя такого сайта находится под фильтрами и заблокировано.

Встречали в социальных сетях, когда переходите по ссылке, пишет, что сайт небезопасный и не даёт перейти на сайт? Вот это один из примеров блокировки сайта.

Поэтому, когда вы покупаете подобный домен с плохой историей, будьте готовы, что возникнут проблемы с индексацией и продвижением. Такую ситуацию в онлайне можно сравнить с тюремным заключением, статус “ранее судимый” на имени останется надолго, возможно даже, навсегда, и будет мешать в развитии.

Узнать про все фильтры и блокировки нереально, можно лишь догадываться, анализируя данные, сохранившиеся в истории на некоторых специальных сервисах. Разберём подробно как ими пользоваться.

История домена, история сайта

Как мы хостинг создавали

Национальные

Наверное, на «Хабре» нет ни одного человека, кто бы не слышал о доменной зоне.РФ, в которой

878 144 домена. Между тем это далеко не единственная «национальная фракция» доменных имён на родном языке. ICANN позиционирует создание доменных имён на национальных языках едва ли не основной задачей формирования по-настоящему глобального Интернета.

Поэтому организация принимает все меры для обеспечения полного функционирования как имён сайтов, так и электронной почты, привязанной к таким доменам. На данный момент дальше всего дело продвинулось для арабского сегмента, однако существуют домены для испанских, немецких, японских, китайских и прочих символов.

Кроме того, домены с начертанием на национальном языке появляются уже и среди новых доменов верхнего уровня new gTLDs (generic Top-Level Domain). Например, в китайском .网址 (.URL) — 338 008 доменов, китайском же .商城 («торговый центр») — 12 782 домена и т. д.

Но как же их понимает DNS?

Всё просто: многоязычные домены передаются в систему DNS в преобразованном виде. На стороне клиента происходит преобразование из UNICODE в ASCII совместимый код (ACE — ASCII Compatible Encoding) — строки, состоящие из символов набора UNICODE, представляются с помощью латинских букв нижнего регистра и цифр. То есть как раз в виде тех символов, которые с лёгкостью воспринимает DNS и в дальнейшем возвращает IP-адрес клиента.

Такое преобразование необходимо, поскольку не все DNS-серверы поддерживают обработку доменных имён в формате IDN. Сам метод преобразования последовательностей Unicode-символов в ACE-последовательности называется алгоритмом Punycode (пуникод для.РФ  — xn--p1ai).

Короткие факты о национальных доменах

Наш ответ керзону

Необычные имена и новые домены

Очевидно, что за время существования Интернета в существующих зонах были зарегистрированы миллионы доменов. Шансов получить нужное и/или звучное имя становилось всё меньше. Мир не мог без них обойтись, и они появились — new gTLDs, новые домены со значимыми, коммерческими и даже шутливыми наименованиями. В список

входят около 1000 доменных зон верхнего уровня. Всего в них зарегистрировано свыше 15 млн адресов, среди которых лидируют имена в зонах .XYZ, .TOP, .WANG, .WIN (это для победителей по жизни, а не то, что вы подумали), .CLUB. Можно встретить неожиданные или, напротив, очень ожидаемые имена: .ONLINE, .XXX, .PARTY, .RED, .SPACE, .LOL, .SEX, .OOO, .COFFEE и др.

Вот ещё несколько примеров из списка новых доменных зон, в котором можно найти необычные и цепляющие внимание наименования:

Напоследок — несколько интересных полных доменных имён (адресов сайтов), которые явно порадуют читателей:

Вот он, настоящий шестиуровневый домен

Мы принципиально не стали публиковать пошлые и двусмысленные доменные имена, о которых и так все давно знают. Кстати, факт существования многочисленных постов и статей на эту тему говорит лишь об одном: имя сайта сегодня столь же важно, как логотип, слоган и название компании.

Практика хостинга

Проблема выбора

Автор выражает благодарность Ирине Трухлиной (Zenon N.S.P., пресс-секретарь)
и Марине Болдыревой (DEMOS Интернет) за помощь в подготовке этого материала.

КомпьютерПресс 2’2002

Проверка в поиске

Не помешает также спросить Яндекс и Гугл, что они помнят о бывшем веб-сайте, расположенном на выбранном вами домене. Для этого в поисковой строке вбиваете доменное имя полностью и смотрите результаты.

Теория хостинга

Прежде всего большое количество посетителей вашего сайта (то, о чем вы мечтали,
создавая его) приводит к росту нагрузки на ваш канал. Соответственно, чем больше
посетителей одновременно работают с ним, тем медленнее каждый из них получает
ответ сервера.

Следовательно, снижается скорость работы пользователей. В результате
многие не станут дожидаться загрузки странички, а значит не получат информацию
о вашей компании. Таким образом, сервер не выполнит той задачи, для решения
которой он создавался.

Очевидным выходом будет расширение пропускной способности
канала доступа в Интернет, что, однако, стоит немалых денег даже сегодня. Кроме
того, не следует забывать, что провайдеры последней мили имеют привычку проводить
профилактические работы на канале в удобное для них время и, как правило, забывают
предупредить об этом пользователей.

В результате ваш сервер может быть некоторое
время недоступен. Кроме того, в случае повреждения канала на физическом уровне
(что не редкость в крупных городах с их гигантскими сетями коммуникаций) на
его восстановление может уйти довольно много времени (от пары часов до нескольких
дней — в зависимости от типа канала).

Помимо этого вам потребуется выделить
специального сотрудника для контроля работы программной и аппаратной составляющих
вашего сайта и пополнения его содержимого. Естественно, на него же возлагаются
задачи контроля канала доступа в Интернет и решение всех связанных с ним проблем.

Даже в самом простом случае (если этим будет заниматься начинающий «кул хацкер»,
обладающий необходимыми знаниями и навыками) это обойдется компании минимум
в 150-200 долл. в месяц без учета стоимости выделенного канала. Дороговато,
господа присяжные заседатели, я бы даже сказал, чересчур дороговато — и не только
для частного лица, но и для организации.

Отметим, что мы оценили самый примитивный
вариант сайта — ни ASP, ни баз данных, ни поддержки почтового домена. Кроме
того, если вам повезет с сотрудником, то через год вам придется или распрощаться
с ним, или существенно увеличить его оклад, или смириться с его постоянным и
явным «левачеством».

Именно по причине высокой стоимости владения собственным сервером и каналом
доступа к Интернету многие счастливые обладатели собственных Web-серверов пустились
на поиски путей снижения этих расходов. В результате многие компании начали
специализироваться именно на предоставлении услуг размещения Web-сайтов на своих
мощностях, что позволило значительно снизить стоимость владения сайтом для конечного
пользователя.

В итоге всю работу по поддержанию работоспособности аппаратной
и программной составляющих сайта и канала доступа к нему берет на себя компания-хостер,
оставляя за пользователем только своевременную оплату этой услуги и обновление
содержимого сайта.

И все оставались довольны: и компании-хостеры, поскольку
на одном физическом сервере могли «жить» несколько сотен сайтов, что давало
ощутимый доход; и пользователи, поскольку за поддержку они платили в несколько
раз меньше, чем тратили на выделенный канал. Полная идиллия — богатеющие хостеры
и радостные пользователи.

Физический хостинг

Компания, предоставляющая услуги хостинга (хостер), отвечает за надежность и качество подключения серверов к сети, их техническую поддержку, обслуживание, модернизацию оборудования, резервное копирование данных, безопасность и т. д. Многих пользователей устраивает подобный сервис, но как быть, если заказчику понадобится инсталлировать специальное ПО, управлять им и вообще быть полным хозяином своего сайта?

Выход — аренда серверного оборудования с частичным управлением или хостинг с установкой сервера клиента на площадке провайдера. При высоких требованиях к ресурсам проектов до определенного времени существовал один вариант — размещение на выделенных физических серверах: арендованном, выделенном (Dedicated) или на установленном на площадке провайдера оборудовании заказчика (Colocation).

В Москве построено несколько крупных центров обработки данных с поддержкой бесперебойного питания, выбором необходимого оборудования, системами охлаждения, мониторинга и безопасности. Этот вид сервиса предлагают многие крупные провайдеры, но он достаточно дорог.

Выделенный сервер представляет собой отдельный физический сервер в ЦОД. Его владельцу доступны все ресурсы сервера и возможности его настройки. Он может установить на него любое ПО, имеет доступ ко всем устройствам сервера, может менять операционную систему.

Но вернемся к VDS/VPS. Этот вид услуг уже много лет активно развивается и пользуется популярностью у клиентов, чьи сайты или проекты переросли возможности виртуального хостинга, но не требуют выделенного сервера.

Появление на рынке хостинга услуги VPS дало многим пользователям возможность выбрать более подходящий для их задач вариант по более приемлемой цене.

Хотели как лучше?

Возможность на одном физическом сервере размещать сотни Web-сайтов породила
огромное количество компаний-хостеров. Элементарный расчет показал, что их прибыль
может достигать баснословных величин. Действительно, если на сервере стоимостью
в 1500 долл. (собран из комплектующих с Савеловского рынка)

разместить 50 Web-сайтов
и назначить ежемесячную плату в размере 50 долл., то месячный доход составит
2500 долл. На оплату канала доступа к Интернету положим ежемесячно 500 долл.
В результате уже за первый месяц прибыль составит 500 долл.

Естественно, никакие
налоги с этой деятельности никогда никем не платились и платиться не будут.
«Ура!» — закричали десятки вчерашних «кул хацкеров» и бросились создавать компании
Pupkin’s hosting. Обрадовались и пользователи и, прельщенные низкой стоимостью
размещения по сравнению с крупными игроками российского рынка, валом повалили
в эти компании.

И все было прекрасно: вчерашние «кул хацкеры» пересели на иномарки
и перешли с пива на виски, а их клиенты рапортовали руководству о снижении стоимости
хостинга сайта и получили премии и поощрения. Однако продолжалась эта идиллия
недолго, поскольку всему есть предел.

В данном случае пределом стали аппаратные
возможности сервера и пропускная способность выделенного канала. На практике
это проявилось как все более замедляющееся время ответа сервера на запрос и
соответственно большее время, необходимое для отображения странички.

Как правило,
такие эффекты становятся явными при наличии на сервере порядка 300-400 Web-сайтов.
Эта цифра заведомо оценочная, поскольку в каждом конкретном случае все определяется
типом содержимого каждого сайта и количеством обращений на них.

Например, нам
известен «независимый» хостер, на сервере которого размещено порядка 650 сайтов,
и проблемы с доступом к ним не существует, поскольку эти сайты относятся к типу
«Я и моя собака» и посещаются исключительно их создателями и роботами поисковых
систем.

Естественно, наличие таких «самоделкиных» не могло не отразиться на общем состоянии
рынка услуг хостинга. За последние два года стоимость сопровождения сайта упала
до 40-60 долл. При этом наибольшие убытки понесли, как всегда, пользователи,
поскольку далеко не все оказались настолько предусмотрительными, чтобы отдать
предпочтение известному и уважаемому (правда, отнюдь не дешевому) провайдеру
услуг хостинга.

Зато сейчас все их первоначальные расходы окупились качеством
услуг и бесперебойной работой сайта, привлекшего не одного клиента. Примечательно,
что в этой непростой ситуации российские компании-хостеры проявили себя с наилучшей
стороны: вместо того чтобы уйти с этого сегмента рынка, они спокойно и неторопливо
готовились (в начале в ущерб себе) к тому радостному моменту, когда пользователь
разочаруется в качестве полупиратского хостинга и вернется к ним.

Примерно год
назад инициатива полностью перешла в руки «легальных» хостеров, и теперь именно
они определяют уровень цен на предоставляемые услуги хостинга. Как нам неофициально
сообщили представители одного из лидеров российского хостинга, наличие пиратов
их компании очень даже на руку, поскольку после полугода работы с ними пользователь
начинает воспринимать минимальный сервис компании-хостера как нечто потрясающее
(особенно их воображение поражают круглосуточная техническая поддержка и реальное
разрешение возникших проблем по телефонному звонку) и вопрос об обоснованности
абонентской платы даже не возникает.

Кроме того, общее снижение цен на размещение виртуальных серверов, как ни странно,
благоприятным образом сказалось на росте клиентской базы именно крупных хостеров.
Сегодня разница в цене на аналогичные услуги у крупного стабильного хостера
и у «нелегала» составляет не более 100 долл. в год, что даже для компаний «малого
бизнеса» существенной суммой не является. И предпочтение в большинстве случаев
отдается гарантированно качественному и надежному хостингу.

Заключение

Я перечислил все основные способы проверки истории, которыми пользуюсь. Есть ещё и другие, аналогичные этим, но они не покажут больше информации.

Можно ещё прогнать адрес по общим анализаторам, например, этим: