тысячекратный респект и спасибо

куда пропал?

жду номера кошелька

как успехи?

могу предложить эквивалент 5WMZ в Яндекс.Деньгах - устроит? у меня нет вебманей.

> разве кто оплатить захочет такую работу?

твои примерные трудозатраты и стоимость?

такое понятие есть как минимум у меня в голове если вопрос отсеченния одних от других ещё не встал, то рано или поздно он встанет. сейчас же отсекать можно по сайтам - например на ИТАР-ТАСС новости все свои (я так думаю, не проверял), а на Яндекс.Новости - агрегированные.

спасибо за развернутый ответ.

> в логах иногда попадаются сообщения о дубликатах

я тоже заметил, не понял только, удаляются они или нет.

> при отправке смотреть ближайшие по номерам ноды

тут скорее по времени смотреть надо.

по поводу аггрегации новостей - мне кажется сайты делятся на 1) производителей контента 2) распространителей контента. когда сайт "подсасывает" новости с другого сайта - он должен брать только уникальные новости. иначе может дойти до абсурда - перекрестной аггрегации.