>>/110380/
На самом деле даже сетки тут не нужны. От копипасты из других тредов поможет простое хеширование. Как только добавляется новый пост в базу, вычисляется его хэш и кладётся в отдельную таблицу. Потом просто ищем уже существующий, это совсем быстро должно быть.
Если будет как-то изменять текст, то тут можно вычислять корреляцию по символам, но это уже медленней будет. Но я думаю бордовнер не станет со всем этим пердолиться.