Машин Learning

Карта интернета

Всем привет!

Совсем недавно я задумалась вот над какой вещью. Когда мы совершаем покупки в интернет-магазинах, читаем новости на разных сайтах или просто ищем решение какой-либо проблемы в интернете, наши перемещения по сайтам далеко не хаотичны. В этих перемещениях есть логика. Так вот, я решила проверить, возможно ли составить карту интерната. То есть такую карту, из которой будет понятно как разные сайты связаны между собой.

Ответ на этот вопрос я начала искать на Хабре. И нашла несколько интересных статей: тут и тут :). Результаты ребята получили впечатляющие, поэтому я тоже решила попробовать что-нибудь подобное.

В моём распоряжении были данные о том как перемещаются пользователи рунета от одного сайта к другому (так называемый,  surfing the internet — привет Ксюше). Так вот в этих данных я нашла все сайты, которые посещали пользователи в течении одного дня:

А затем составила из них пары, такие чтобы каждый сайт имел пару с каждым отличным от него сайтом:

Для каждой из этих пар я посчитала, сколько пользователей рунета посетили оба сайта в течение дня.  И в принципе, на этом моя работа закончилась. В игру вступил Питон. Нет, нет, дома пресмыкающихся мы не держим. Это язык программирования такой —  Python. Так вот с его помощью я получила вот такую вот увлекательную карту:

Здесь узлы графа — это сайты, а длина связи между двумя узлами определяется количеством людей посетивших эту пару сайтов.

На ней мы видим несколько скоплений, которые должны представлять из себя сайты схожей тематики. Давайте рассмотрим поближе некоторые из них. Первое скопление это группа, которую я бы назвала кино онлайн:

Ещё одна группа — магазины: ulmart.ru, dns-shop.ru, eldorado.ru и даже e-katalog.ru (активно рекламируемый всеми блогерами в данный момент).

Третью группу я бы назвала новости. Здесь  tass.ru, intermix.ru, vedomosti.ru, komersant.ru и т.д.

Ещё одно скопление сайтов, не знаю как назвать, скажем «домохозяйсвенные«: koolinar.ru, womanadvice.ru, povarenok.ru, edimdoma.ru.

Вот такая вот у меня получилась карта рунета. Думаю, это достаточно интересные результаты, и возможно продолжение последует. Ну а вы теперь знаете, на что я потратила один день своих рождественских каникул :).  Всех с Новым годом и хороших выходных! Желаю вам провести это время с пользой для себя.

Ну и конечно же не забудьте подписаться на мой телеграмм канал и рассказать о нём друзьям.

 

Добавить комментарий

Ваш адрес email не будет опубликован.