Я пробовал написать именно такую прогу, получилось что-то, но очень смутное))
Если найдшь, сообщи. Есть програ не для выборки, а для генерации с заданной уникальностью.
Не помню как называется, на сёрчэнджинсах есть тема про неё.

Вообщем написал я прогу о которой говорилось в 1м посте)) Теперь другая проблема - сабмитер даже 50тыс. вариантов не хочет генерировать, что для статьи в 3000 символов очень мало (даже наиболее уникальные статьи похожи на 90%
Есть еще какие-нибудь проги или сайты которые могут справиться с этой задачей?

Нужно как можно больше вариантов брать, а выводить к примеру каждую 50-ую статью, пусть их будет 100, но уникальность будет замечательная

Юзай SEO Anchor Generator.
Алгоритм не подскажешь как написал нахождение самых непохожих друг на друга?)

в пхп функции similar_text и levenshtein (точно не помню названия), пользовался первой. Просто по циклу сравниваем первый элемент массива с последующими, задаем уровень похожести, например 90% вначале и удаляем из массива тексты которые не подходят под этот уровень, массив пересобираем) Потом берем второй элемент и т.д. Вчера таким образом из 1000 отобрал 8 штук наиболее отличающихся.
Прога Анкор генератор съел всю память где-то на 300тыс. вариантов )) Попробую седня их запихнуть в прогу, должен получиться гораздо больший процент отличий.

300 тыщ ужос )) Это ж сотни метров файлик получится.
Я в своей проге сделал твой алгоритм, но сравнение по методу шинглов.
Выборку из 50 000 вариантов считатет 7 минут на схожести 60%
И в результате выбралось 3 уникальных. По Shingles Expert их схожесть около 40%
Думаю, если поставить порог слишком большой, то может и сутки будет считать, т.к. мало отбрасывает и получается куча итераций)))

Для метода шинглов есть какие-то стандартные функции? Как ты шинглы получил?
Файлик получился в 560Мб, причем далеко не все варианты просчитал...))) придется похоже меньше вариантов делать. Что касается порога - согласен, просто та тысяча была "сверху" выданных вариантов сабмитера и более чем на 90% они не отличаются))

Сообщение отредактировал Anshir - 17.7.2008, 17:15

Функцию сравнения шинглами я переписал из PHP функции в паскаль. Стукни 230-490, дам PHP код.

Есть прога, но она платная.
Могу предложить свои услуги по размножению статей.

Сообщение отредактировал Salmar - 21.11.2008, 9:26