MySql crc32&&crc64函数提高字符串查询效率

二：MySQL里如何利用CRC32来加快查询？？？

CRC32的基本特征：

#1.CRC32函数返回值的范围是0-4294967296（2的32次方减1)

#2.相比MD5，CRC32函数很容易碰撞

CRC32的使用场景：

由上述两个基本特性可知，MySQL CRC32 生成整型结果使用用bigint存储，而MD5需要varchar来存储。但是CRC32很容易碰撞，这适合做索引么？

场景：我们在做一个爬虫，对于一个URL，先去数据库里查询是否存在，如果不存在，插入到数据库中。大家都知道这种类型应用表会增长非常迅速，如果简单的

SELECT * FROM urls WHERE url = ‘http://wwww.shopperplus.com‘;

会每次全表扫描，效率非常低。如果在url列上面加索引会快一些，但由于url是varchar类型，字段本身的存储空间和索引占用的存储空间都比较大。

SELECT * FROM urls WHERE crc_url = 907060870 AND url = ‘hello‘;