使用php为SEO提取关键字对

Question

我目前正在研究长尾SEO的一些新想法。我有一个网站，人们可以创建自己的博客，这已经带来了相当不错的长尾流量。我已经在文章的标题标签中显示文章标题。

但是，标题通常与内容中的关键字不匹配，我有兴趣在标题中添加一些 php 实际确定的最好的关键字。

我试着用我制作的脚本来计算页面上最常见的单词是什么。这还可以，但问题是它会出现一些无用的单词。

我想到了一个有用的方法，那就是编写一个php脚本，提取频繁出现的单词对(或3个单词的集合),然后将它们放入一个按出现频率排序的数组中。

我的问题是：如何以更动态的方式解析文本，以寻找重复出现的成对或三元组单词。我该怎么做？

function extractCommonWords($string, $keywords){
  $stopWords = array('i','a','about','an','and','are','as','at','be','by','com','de','en','for','from','how','in','is','it','la','of','on','or','that','the','this','to','was','what','when','where','who','will','with','und','the','www');

  $string = preg_replace('/\s\s+/i', '', $string); // replace whitespace
  $string = trim($string); // trim the string
  $string = preg_replace('/[^a-zA-Z0-9 -]/', '', $string); // only take alphanumerical characters, but keep the spaces and dashes too…
  $string = strtolower($string); // make it lowercase

  preg_match_all('/\b.*?\b/i', $string, $matchWords);
  $matchWords = $matchWords[0];

  foreach ( $matchWords as $key=>$item ) {
      if ( $item == '' || in_array(strtolower($item), $stopWords) || strlen($item) <= 3 ) {
          unset($matchWords[$key]);
      }
  }   
  $wordCountArr = array();
  if ( is_array($matchWords) ) {
      foreach ( $matchWords as $key => $val ) {
          $val = strtolower($val);
          if ( isset($wordCountArr[$val]) ) {
              $wordCountArr[$val]++;
          } else {
              $wordCountArr[$val] = 1;
          }
      }
  }
  arsort($wordCountArr);
  $wordCountArr = array_slice($wordCountArr, 0, $keywords);
  return $wordCountArr;
}

Answer 1

为了包含一些代码，这里有另一个原始改编，它返回给定长度和出现次数的多词关键字，而不是去掉所有常见的单词，它只过滤关键字开头和结尾的单词。它仍然会返回一些废话，但这确实是不可避免的。

function getLongTailKeywords($str, $len = 3, $min = 2){ $keywords = array();
  $common = array('i','a','about','an','and','are','as','at','be','by','com','de','en','for','from','how','in','is','it','la','of','on','or','that','the','this','to','was','what','when','where','who','will','with','und','the','www');
  $str = preg_replace('/[^a-z0-9\s-]+/', '', strtolower(strip_tags($str)));
  $str = preg_split('/\s+-\s+|\s+/', $str, -1, PREG_SPLIT_NO_EMPTY);
  while(0<$len--) for($i=0;$i<count($str)-$len;$i++){ 
     $word = array_slice($str, $i, $len+1);
    if(in_array($word[0], $common)||in_array(end($word), $common)) continue;
    $word = implode(' ', $word);
    if(!isset($keywords[$len][$word])) $keywords[$len][$word] = 0;
    $keywords[$len][$word]++;
  }
  $return = array();
  foreach($keywords as &$keyword){
    $keyword = array_filter($keyword, function($v) use($min){ return !!($v>$min); });
    arsort($keyword);
    $return = array_merge($return, $keyword);
  }
  return $return;
}

在随机的BBC新闻文章上运行代码^*

忽略普通单词、语法和标点符号的问题是，它们在句子中仍然有意义。如果你去掉它们，最好的情况是改变意思，最坏的情况是产生难以理解的短语。甚至提取“关键词”的想法本身也是有缺陷的，因为单词可能有不同的含义——当你把它们从句子中删除时，你就脱离了上下文。

这不是我的领域，但对自然语言有复杂的研究，没有简单的解决方案——尽管一般理论是这样的：计算机无法破译单个文本的含义，它必须依赖于交叉引用相关材料的语义标记语料库（这是一个巨大的开销）。