similar_text — Вычисляет степень похожести двух строк


Содержание

similar_text()

���������:

similar_text (first_str, second_str[, percent ])

�������������� ���������� �������� PHP:

�������� �������:

������� similar_text () ���������� ���������� ���������� �������� (��� ������� ���������� ��������) ����� ����� ��������.

������������ ��������. ������ ������.

string second_str

������������ ��������. ������ ������.

string percent �������������� ��������. ��� ���������� ��� ���������� ���������� ��������� ����� � ���������. float

������� levenshtein() �������� ������� ��� ������� similar_text() , ������ ������� similar_text() ���� ����� ������ ���������.

�������:

������ 1:

echo similar_text(«������ ����»,»������ ����»);
?>

������ 2:

echo similar_text(«������ ����»,»������ ����», $similar);
echo «
«;
echo $similar;
?>

������� ��� ��������� ����� � PHP

������� � ����� ����� �� � ���� ��������� ����� ����������� �������� ��� ��������� ��������� ������.
� ������� ���� ������� �����, ��������, �������� ������, ���������� ������, �������� ����� ������ � ����� ������. ��� ����� �������� ���������� � �� ��������� ������ ������������ ��� ��� ������� ��� ���������� ����� ��������.

��� ������� ��� ��������� ����� ����������� ����:

chr ���������� ������ �� ��� ���� ASCII
chunk_split ��������� ������ �� ��������� �������� �����
crypt ������������� ������ � �������������� ������ �� ����������
echo ������� ���� ��� ��������� �����
explode ��������� ������ �� ���������, ������������ �������� ������������, � ����������� �� ��� ������
html_entity_decode ���������� ��� HTML-������������� � ��������������� �������. ������� ������� �� ��������� � htmlentites
htmlentites �������� ��� ����������� ������� � �� HTML-�������������
htmlspecialchars �������� ��� ������� � �� HTML-�������������
implode ��������� ������ �� ��������� �������
ltrim ������� ��������� ������� �� ������
rtrim ������� �������� ������� �� ������
number_format ������������ ����� � ���� ������ � ��������� ��������
ord ���������� ASCII-��� �������
parse_str ��������� ������ URL � ����������� �������� ����������
print ������� ������
printf ������� ������ � ���������������
sprintf ���������� ������ � ���������������
setlocale ������������� ���������� � ������� ��������
similar_text ��������� ������� ��������� ���� �����
sscanf ��������� ������ �� ������� � ����������� ���������� �������� ����������
str_ireplace �� �� �����, ��� � str_replace, �� ��� ����� �������� � �������� ��������
str_pad ��������� ������ �� �������� ����� ������ �������
str_repeat ��������� ������ �������� ���������� ���
str_replace ���� � ������ ��� ��������� ��������� � ������ �� �������� ������
str_shuffle ��������� ������� ������������ ��� ������� � ������
str_split ��������� ������ �� �������� ������
str_word_count ������������ ���������� ���� � ������
strcasecmp ��������� ���������� ��������� ����� ��� ����� �������� ��������
strcht �� �� ����� ��� strstr
strcmp ��������� ���������� ��������� ����� � ������ �������� ��������
strip_tags ������� �� ������ ��� HTML-� PHP-����
stripos ���� ������ ��������� ��������� � ������ ��� ����� �������� ��������
stristr �� �� ����� ��� strstr, �� ��� ����� �������� ��������
strlen ���������� ����� ������
strnatcasecmp �� �� ����� ��� strnatcmp, �� ��� ����� �������� ��������
strncmp ��������� ���������� ��������� ������ n �������� �����
strpos ���� ������ ��������� ��������� � ������
strrchr ���� ��������� ��������� ������� � ������
strrev ����������� ������ — ����������� �� ������ ������
strripos ���� ��������� ��������� ��������� � ������ ��� ����� �������� ��������
strrpos ���� ��������� ��������� ��������� � ������
strspn ���������� ����� ������� ������, ���������� �� �������� ��������
strstr ���������� ����� ������ �� ������� ��������� ��������� �� �����
strtolower ����������� ��������� ����� � ��������
strtoupper ����������� �������� ����� � ���������
strtr ����������� �������� ������� � ������
substr_compare ���������� ��� ������, ������� � ��������� ��������
substr_count ������������, ������� ��� �������� ��������� ����������� � ������
substr_replace ���� � �������� ������� ������ ��� ��������� ��������� � ������ �� ������ ������
substr ���������� �������� ����� �������� ������
trim ������� ��������� � �������� ������� �� ������
ucfirst ����������� ������ ����� ������ � ���������
Илон Маск рекомендует:  Php и взаимодействие с файловой системой web сервера

����� ��������� ���������� ��� ��� ��������� ������� �� ������ ����� �� �������� ����������� ������������.

Similar_text — ��������� ������� ��������� ���� �����

(PHP 3>= 3.0.7, PHP 4 , PHP 5)

similar_text — Вычисляет степень похожести двух строк


Описание int similar_text ( string first, string second [, float percent] )

Вычисляет степень похожести двух строк по алгоритму, описанному Oliver [1993]. Эта реализация алгоритма не использует стэка, использованного в оригинале, вместо этого применяются рекурсивные вызовы, что в некоторых случаях может ускорить процесс. Сложность алгоритма составляет O(N**3), где N — длина более длинной из двух строк.

При передаче по ссылке третьего аргумента, ему присваивается степень похожести двух строк в процентах. Возвращается количество совпадающих символов в двух строках.

Note that this function will calculate the percentage blindly, without regard to the LENGHT of the string.

This may become important if you try to print similar names to SMALL strings :
e.g.
I want to print out the value if it is 90 percent similar to the other one : the value is HE, the correct value is HEC

The similar_text() function will return approximately 66.7 %, and it will not print it because it is smaller than 90 %, although almost all of the string was matched.

In PHP4+, you don’t need to pass the percent variable as reference..
Instead, use this way:
( $string1 , $string2 , $p );
echo «Percent: $p%» ;
?>

In PHP5, you’ll get a ugly warning message when passing this variable as reference.. But it’s configurable in php.ini (allow_call_time_pass_reference = Off)

That’s it. Another great function! :)

If you have reserved names in a database that you don’t want others to use, i find this to work pretty good.
I added strtoupper to the variables to validate typing only. Taking case into consideration will decrease similarity.

$query = mysql_query(«select * from $table») or die(«Query failed»);

while ($row = mysql_fetch_array($query)) <
similar_text(strtoupper($_POST[‘name’]), strtoupper($row[‘reserved’]), $similarity_pst);
if (number_format($similarity_pst, 0) > 90) <
$too_similar = $row[‘reserved’];
print «The name you entered is too similar the reserved name «».$row[‘reserved’].»»»;
break;
>
>

Well, as mentioned above the speed is O(N^3), i’ve done a longest common subsequence way that is O(m.n) where m and n are the length of str1 and str2, the result is a percentage and it seems to be exactly the same as similar_text percentage but with better performance. here’s the 3 functions i’m using..

function LCS_Length($s1, $s2)
<
$m = strlen($s1);
$n = strlen($s2);

//this table will be used to compute the LCS-Length, only 128 chars per string are considered
$LCS_Length_Table = array(array(128),array(128));

//reset the 2 cols in the table
for($i=1; $i = $LCS_Length_Table[$i][$j-1])
$LCS_Length_Table[$i][$j] = $LCS_Length_Table[$i-1][$j];
else
$LCS_Length_Table[$i][$j] = $LCS_Length_Table[$i][$j-1];
>
>
return $LCS_Length_Table[$m][$n];
>

function str_lcsfix($s)
<
$s = str_replace(» «,»»,$s);
$s = ereg_replace(«[��������]»,»e», $s);
$s = ereg_replace(«[������������]»,»a», $s);
$s = ereg_replace(«[��������]»,»i», $s);
$s = ereg_replace(«[���������]»,»o», $s);
$s = ereg_replace(«[��������]»,»u», $s);
$s = ereg_replace(«[�]»,»c», $s);
return $s;
>

function get_lcs($s1, $s2)
<
//ok, now replace all spaces with nothing
$s1 = strtolower(str_lcsfix($s1));
$s2 = strtolower(str_lcsfix($s2));

$lcs = LCS_Length($s1,$s2); //longest common sub sequence

$ms = (strlen($s1) + strlen($s2)) / 2;

you can skip calling str_lcsfix if you don’t worry about accentuated characters and things like that or you can add up to it or modify it for faster performance, i think ereg is not the fastest way?
hope this helps.
Georges

Илон Маск рекомендует:  FloatToStrF - Функция Delphi

$i = similar_text($first_word, $second_word, &$p);
echo(«Matched: $i Percentage: $p%»);

Don’t forget your passing the double as a reference. If you use this and soundex() together you can get a pretty good guess as to how well two words match. Is useful for simple bot-like programs.

����� PHP ������������� > PHP ��������� > PHP ��� ��������


������� ��������!

�������
������: ������������
���������: 28
������������ �: 32581
�� ������:
�����:

������� ���, �������!

����� ������ � ������� ��� ����� ������:

��� ��������� ��������� 1000 ������� �� ������� ����������. ��� ������ �������� �����

90% �������� ��������� ���� ��� �������������, �������� ������� ��������. �.�. ����� ��, ��� ������ �������:

��� ���������� $dup_per ������������� �������� �������� ��������.

� ������ � ����� �������� � ���� ��������� «��������»: ������ � ������� ������ �� 1000 ����� � MySQL-������� � ��������� � ������� � ������ �� ���������� 999.
� ����������, ������, ���������� �����, �� ������ ������ ��� ������������.

� �������� ���� �� ������������� ������� similar_text, ������� � �������������� ������� MySQL:

��� ������ �� 1000 ������ �������� ������ ����:

�� ��� �� ������� ��� ��������, ���������� �������� MATCH �������� � �������� «��������», ����������� �������� similar_text.

������ ����� �������������� ����� ��� ������ ��, ��� ��� �����, �� ��� ����������� ��� ������� ����, ��� ��� ������ similar_text � �������� �� �� ��������?

������ ���������� ��� ���������� �������� 2 �������

������� ������� �����!

� ���� ����� ������ ��������� ��������� ��� ������ ������-���������� �������� ������.

������� � ���� ����������� ������:
Python Junior, ������ �������� �������� ��������� ��������, ���� �������� � �����������, ���� �������� data science �����������: numpy, sklearn, tensorflow. � NLP ������ ������ �� ������� ����������: ����, ���� ������������ ��������� ������������ � sklearn, ���� � word2vec, ����, ��� ���� ������� ���������� ���������, ����������� � ������������� �������.

��������� ������ ������� ������ � ������������ ������ � ������ ��, ������� ��������� �������� ������. ��� ����� ������ � ������ ������ ��������, �������� ����� �������, �������� �� ������ ����� ������ �������� ������ ��� ���. ���� �� ����� ������, ���� �� ���� ��������� ����� ������ �� ���������� ������� � ������� ������������� (���� ����������� ������� ���������)

������ ���������� � ���������:

  1. ��������� ����� ���������� (�� �� �����������) ��������� 1-�-1, �.�. �������� ������-��������� �����
  2. �������� �������� RNN, LSTM — �� �������, �.�. �� ������ ������ ������� ��� ��������� ������ ������������ ������� ��������� (���������, ���� �� ����)
  3. ������ ������������ False Positive ���������
  4. ��������� ����� ����� ������������� �����������, ������. ����� ������� ������ — �������� �����������������.

� �������, ��� �� �������� ���������� �� ����� ����������� � ��������� ������ ��������, �� ����� ������� ���������� �������� ��� ��������� ��������.

� ��� �������� ����� ���������:

  1. ������� ����-�����
  2. ������� ������������� ������� word2vec � ���������� ������ �� �� ������������ �� ���� ������ �������
  3. ����������� ������ � ���� �������� ���� � �������� ��
  4. �������� ����������� ���������� ������� (30-50), ������������ �� tf-idf � ����� �������� ��������, ��� � word2vec

���� ����� �� ������ ��������� ������� �������� ����, �� �� ���� ������.
��� �� ����� �������� �������� ������ �� ������ ������� � �������� ������, �������� ��� ����� �������.
������ �� python, �������� ������������� ������ ����� ��������� ������.

PHP ������� similar_text() — ����� ���������� � ���������

PunBB.INFO > PHP / SQL > PHP ������� similar_text() — ����� ���������� � ���������


You must login or register to post a reply

Posts: 2

1 Topic by PunBB 2015.07.16 17:51

  • PunBB
  • Admin
  • Offline
  • More info

    Topic: PHP ������� similar_text() — ����� ���������� � ���������

    ������� similar_text() ��������� ������ ������ �������� ��������� ���� ���������� � ������ � �������� ��������� ���������� � ���������.

    ��������� ������� ��������� ���� ����� �� ���������, ���������� � Programming Classics: Implementing the World’s Best Algorithms by Oliver (ISBN 0-131-00413-1). ��� ���������� ��������� �� ���������� �����, ��������������� � ���������, ������ ����� ����������� ����������� ������, ��� � ��������� ������� ����� �������� �������. ��������� ��������� ���������� O(N**3), ��� N — ����� ����� ������� �� ���� �����.

    2 Reply by PunBB 2015.07.16 18:46

    • PunBB
    • Admin
    • Offline
    • More info

      Re: PHP ������� similar_text() — ����� ���������� � ���������

      �� ����� �������� ����� ��������� ��������� ������� ��� �����, �������� ������� ���� ��� ���������.

      ��� ���������� ������� �������� ���� �������?

      ��������, ����� �������� �����, ��� ������. � ��� ����� ������ ��������� ��������� �����������, �������� ����� ������ ���-�� � ������, �������� ���� ���������, � �������� ���� ���� �� ��������.

      ����� ��������, ����� ���������� «��� ������ ������ �� 65%. ������ �����, ����� �������������»? ���� �� ���-�� ����� ������� ������� ��� �������?

      5-7% �� ����� �����. ��� ��������� ������ ������ ��� ��������, ���������������� ����� ������� �����. � Costantino Rupert 2 ��� ’12 � 8:58

      3 ������ 3

      � �������������� �������� ������� — ����������� �������� ���� ������ ������������������� ����������� ������ ��� ��������� (����� — �������) — ���������� �������� ��������. �������� ��� � ������� ������ ���������� ������������. � ����� ������ ����� ��������� ����� ����������� ������������ — ������ �������� �� ���. ��������� � ��� ����� �� ��������� ������. ���� ����� ���������, ������������ ����������.

      ������� �������� ����� (����������� ��������)

      ������ ����� ���������� ������� �������� ���� �����, �.�., ��������� ���� ������ ������ �� ������. ��������, � ��� ���� ������ �������� �������. ��������� ������, ��� ������� ���������� ���������������, ������ ���������. ��� ���� ����� ������, ��� ���� ����� ������� �������� ����� ���� �������� ��-�������: ���������� 2� � ��������� 2. ��������, ��� ��������� ���� ����� � ��� ������ �� ����: ������ �������, ������ �������.

      ������ ����� ������������� ��� ��������� ��������. ��� ������ � ��� ���������. ����������� �������� ��������� ���������� ������� �������� ���� ��������:

      • k � ��� ����������� �� 0 �� 1;
      • a � ���������� ��������� � ������ ���������;
      • b � ���������� ��������� �� ������ ���������;
      • c � ���������� ����� ��������� � ���� ����������.

      ������� ������� �� ������:

      � ������ �������� �.�. ������ ���������, ����� ����� �� ��� �������, � ��� ���� � ������. �������� ��������, ��� ��� ������� ������� �� �������� ������� �����, ��������� �������� � ��������. ��� ������, ��� ������ ����� ����� ���������� ������, �������, ������� � ������ ���������:

      �������, ������ ������������ ����� ����������� � ����. ��������, ��������� ����������� ����������� ������ ������� ��� ���������� ������ � ���������� ��������. � �������, ����� ����������� �������� � �������.

      ����������� � ������ �������:

      �������� 0.85 ������� � ���, ��� ��� �������� ��������� �� ���� � ��� �� �����. ������, �� ������ ����� �� ������ ������ ������� ��� �������.

      Similar_text — ��������� ������� ��������� ���� �����

      (PHP 3 >= 3.0.7, PHP 4, PHP 5)

      similar_text — ��������� ������� ��������� ���� �����

      �������� int similar_text ( string first, string second [, float percent] )

      ��������� ������� ��������� ���� ����� �� ���������, ���������� Oliver [1993]. ��� ���������� ��������� �� ���������� �����, ��������������� � ���������, ������ ����� ����������� ����������� ������, ��� � ��������� ������� ����� �������� �������. ��������� ��������� ���������� O(N**3), ��� N — ����� ����� ������� �� ���� �����.

      ��� �������� �� ������ �������� ���������, ��� ������������� ������� ��������� ���� ����� � ���������. ������������ ���������� ����������� �������� � ���� �������.

      similar-text — ������� PHP

      (PHP 3 >= 3.0.7, PHP 4, PHP 5)

      similar_text — ��������� ������� ��������� ���� �����

      ��������

      ��������� ������� ��������� ���� ����� �� ���������, ���������� Oliver [1993]. ��� ���������� ��������� �� ���������� �����, ��������������� � ���������, ������ ����� ����������� ����������� ������, ��� � ��������� ������� ����� �������� �������. ��������� ��������� ���������� O(N**3), ��� N — ����� ����� ������� �� ���� �����.

      ��� �������� �� ������ �������� ���������, ��� ������������� ������� ��������� ���� ����� � ���������. ������������ ���������� ����������� �������� � ���� �������.

      Илон Маск рекомендует:  Что такое код constant
Понравилась статья? Поделиться с друзьями:
Кодинг, CSS и SQL