Карта сайта
Пишется парсер собственного сайта
выполняется в крон для снижения нагрузки
Начиная с с главной
Собираются ссылки и пишутся в базу
ссылка СЕО(title+description+аш1) Число_исходящих Число_входящих Ответ(200, 404, 301)
Каждая ссылка проверяется и анализируется, возможно, проверяется ее анкор (текст, картинка - пример Главная, домой)
Т.е по сути такая фоновая задача для последующего анализа, то что делают пауки
Но это даст возможность иметь актуальную карту сайта
Пишется парсер собственного сайта
выполняется в крон для снижения нагрузки
Начиная с с главной
Собираются ссылки и пишутся в базу
ссылка СЕО(title+description+аш1) Число_исходящих Число_входящих Ответ(200, 404, 301)
Каждая ссылка проверяется и анализируется, возможно, проверяется ее анкор (текст, картинка - пример Главная, домой)
Т.е по сути такая фоновая задача для последующего анализа, то что делают пауки
Но это даст возможность иметь актуальную карту сайта