Дублированные новости

StronG · 2009-11-25 21:03:09

Возникла проблема! Есть сайт на NG около 1000 страниц контента. Как показал анализ встречаются полностью дублированные новости. Может кто подскажет, как автоматически удалить полностью одинаковые новости?

Nushaba · 2009-11-25 22:18:15

Я бы с помощью гугла сделал это, в гугле на своём сайте ищешь новости по контенту и удаляешь, но надо знать какой контент повторяется, а так хз, новости в НГ могут дублироваться в силу твоей организации сайта, Если создавал новость и прикреплял её к нескольким разделам, она так или иначе будет дублирована в нескольких местах. Попробуй погуглить что то вроде: поиск повторяющихся страниц. Хотя список будешь иметь, не зная какой именно контент повторяется. В самой НГ я такой функции не встречал, хоть и знаком с нею не долго.

StronG · 2009-11-25 23:05:42

Nushaba, дублироваться не будут просто будет добавляться название категории в которой размещена еще эта новость! Если на сайте 4000 новостей прикинь сколько надо времени убить на проверку дублирования!

vitaly · 2009-11-25 23:38:19

StronG, насколько задублированные новости похожи друг на друга? Одинаковы с точностью до байта или всё-таки нет?

StronG · 2009-11-26 06:17:16

vitaly, да идентичны на 100% (ну заголовки точно)

Amarelius · 2009-11-26 10:29:48

StronG, Ссылки можешь дать?

vitaly · 2009-11-26 15:42:32

StronG пишет:

vitaly, да идентичны на 100% (ну заголовки точно)

Если совсем идентичны (не буду спрашивать откуда такое взялось), то это можно сделать через SQL - обычный оператор group by с правильным order'ом позволит найти заголовки по которым есть более 1 вхождения.

Ну а дальше - через тот же SQL (и чуть-чуть руками) вывести список ID ненужных новостей и грохнуть.
Есс-но всё без помощи двига (только потом не забудь в управлении БД восстановить индексы, а если используешь плагины tags, similar - то и в них всё восстановить).

asus · 2009-11-26 22:33:15

robots.txt юзай, т.е. закрывай от индексации категории, теги, и страницы (pages)

Как минимум, 2 раза есть дубли каждой новости.

StronG · 2009-11-27 06:20:28

vitaly, спс почти все удалил! всего-то 40 дублей!

PIT3R · 2014-02-23 13:07:18

Пример:
Несколько журналистов наполняют ресурс новостями... и постят одинаковые новости, на одну тему, почти с одинаковым название и содержанием.
В DLE этот вопрос решается в момент написания новости, т.е. выводится сообщение о том, что уже существует некая новость содержащая похожий заголовок.
Можно нечто похожее реализовать для NGCMS?

ahatomik · 2014-04-14 09:51:55

Не стал новую тему создавать . Так тут то и спрошу ..
Случаем кто то знает как сделать !? :
Вот добавил ты новость . Прошла неделя эта новость уже на 5-10 странице , но есть "update" этой новости и тебе нужно об этом сообщить .
Да конечно можно в редакторе нажать "прикрепить новость" и она снова будет на главной странице и все что тебе нужно это изменить заголовок , типа "новость обновлена" . Окда ?
А если сделать всплывающее окно типа "Уважаемый , прошу просмотреть новость обновление !" Ты такой "клац" и перешёл в полную новость . Это вообще реально !? :|

infinity237 · 2014-04-15 01:46:22

Ответ: реально. И?

irbees2008 · 2014-04-15 06:07:23

Ему надо как это сделать

ahatomik · 2014-04-15 16:07:43

Совершенно верно !
Очень нужно , так как даже прикрепив новость на "неделю" многие по возвращению на сайт не знаю о обновлении !

infinity237 · 2014-04-15 22:28:10

Ну берешь и делаешь.

ahatomik · 2014-04-16 09:51:01

infinity237, настроения нет ? я же спросил как сделать !? ..

Отредактировано ahatomik (2014-04-16 09:51:59)

irbees2008 · 2014-04-19 05:49:38

ahatomik пишет:

infinity237, настроения нет ? я же спросил как сделать !? ..

Толян грамотно T3 составь

irbees2008 · 2014-05-02 05:41:14

Вот доработанный плагин xnews https://cloud.mail.ru/public/80cfc9928d06/xnews.zip.
Добавлена выборка новостей по update.
подключение

{{ callPlugin('xnews.show', {'order' : 'editdate', 'count': '6', 'template' : 'xnews1'}) }}

за выборку отвечает - 'order' : 'editdate'

Отредактировано irbees2008 (2014-05-02 07:28:46)

ahatomik · 2014-05-05 09:57:35

irbees2008, + пивасик с меня :)

irbees2008 · 2014-05-05 12:01:31

не пью эту гадость :P

ahatomik · 2014-05-05 12:22:05

irbees2008, ну ты всё равно понял о чем я ;)

Next Generation CMS :: Форум поддержки

Объявление

#1 2009-11-25 21:03:09

Дублированные новости

#2 2009-11-25 22:18:15

Re: Дублированные новости

#3 2009-11-25 23:05:42

Re: Дублированные новости

#4 2009-11-25 23:38:19

Re: Дублированные новости

#5 2009-11-26 06:17:16

Re: Дублированные новости

#6 2009-11-26 10:29:48

Re: Дублированные новости

#7 2009-11-26 15:42:32

Re: Дублированные новости

#8 2009-11-26 22:33:15

Re: Дублированные новости

#9 2009-11-27 06:20:28

Re: Дублированные новости

#10 2014-02-23 13:07:18

Re: Дублированные новости

#11 2014-04-14 09:51:55

Re: Дублированные новости

#12 2014-04-15 01:46:22

Re: Дублированные новости

#13 2014-04-15 06:07:23

Re: Дублированные новости

#14 2014-04-15 16:07:43

Re: Дублированные новости

#15 2014-04-15 22:28:10

Re: Дублированные новости

#16 2014-04-16 09:51:01

Re: Дублированные новости

#17 2014-04-19 05:49:38

Re: Дублированные новости

#18 2014-05-02 05:41:14

Re: Дублированные новости

#19 2014-05-05 09:57:35

Re: Дублированные новости

#20 2014-05-05 12:01:31

Re: Дублированные новости

#21 2014-05-05 12:22:05

Re: Дублированные новости

Подвал форума