php 判斷skip32 加密後是否有重複

$max = 1000000000 - 500000000;
$file_str = array();
$page = 1;
$page_count = 1000000;
for( $i = 0; $i < $max; $i++ )
{
    $key = skip32_encode( $i );
    $str = $i.':'.$key."\n";
    $file_name = $key % 10000;
    if( !isset( $file_str[ $file_name ] ) )
    {
        $file_str[ $file_name ] = "";

    }

   //將結果保存到大小1000000的數組中，然後一次性寫入文件中

    $file_str[ $file_name ] .= $str;
    unset( $key, $str );
    if( $i > ( 3000000000 + $page * $page_count ) )
    {
        $page++;
        foreach( $file_str as $key => $value )
        {
            file_put_contents( "/data/work/lzz/niu4/tmp/skip32/{$key}.log", $value, FILE_APPEND );
            unset( $file_str[ $key ], $key, $value );
        }
        clearstatcache( true );
        unset( $file_str );
        $file_str = array();
    }
}
echo "結束了";

exit();

在skip32目錄下運行  ls | xargs cat | awk -F ':' '{print $2}' | uniq -d  這樣就可以判斷是否有重複的了