免费注册 查看新帖 |

Chinaunix

  平台 论坛 博客 文库
最近访问板块 发新帖
查看: 4126 | 回复: 6
打印 上一主题 下一主题

2个数据集如何进行相似性匹配 [复制链接]

论坛徽章:
0
跳转到指定楼层
1 [收藏(0)] [报告]
发表于 2012-07-05 14:30 |只看该作者 |倒序浏览
数据库中存在A,B两张表,它们都存在Address字段,假设AB表都存在 博物馆,但是它们的Address并非一样 A表中 "杭州市曙光路73号" B表中“杭州市西湖区曙光路73号”,通过计算Address相似性得出它们是同一个地方。

未解决问题:
1.A和B表都存在大量数据,它们之间如何进行匹配,A表的中“杭州市曙光路73号”就需要跟B表中的所有数据进行匹配。感觉效率不太高。
2.AB表都是存储在mysql中,进行匹配的时候是写入内存中还是使用其他的数据结构?

各位大牛们给小弟指点下吧!

论坛徽章:
14
巨蟹座
日期:2013-11-19 14:09:4615-16赛季CBA联赛之青岛
日期:2016-07-05 12:36:0515-16赛季CBA联赛之广东
日期:2016-06-29 11:45:542015亚冠之全北现代
日期:2015-07-22 08:09:472015年辞旧岁徽章
日期:2015-03-03 16:54:15巨蟹座
日期:2014-12-29 08:22:29射手座
日期:2014-12-05 08:20:39狮子座
日期:2014-11-05 12:33:52寅虎
日期:2014-08-13 09:01:31巳蛇
日期:2014-06-16 16:29:52技术图书徽章
日期:2014-04-15 08:44:01天蝎座
日期:2014-03-11 13:06:45
2 [报告]
发表于 2012-07-05 15:58 |只看该作者
能不能通过 市 区 路 号 进行字符切分?

论坛徽章:
0
3 [报告]
发表于 2012-07-06 15:09 |只看该作者
计算相似度我采用了lcs,但是2张表进行对比现在不知道怎么弄

论坛徽章:
5
狮子座
日期:2013-08-20 10:12:24午马
日期:2013-11-23 18:04:102015年辞旧岁徽章
日期:2015-03-03 16:54:152015亚冠之德黑兰石油
日期:2015-06-29 18:11:1115-16赛季CBA联赛之新疆
日期:2024-02-21 10:00:53
4 [报告]
发表于 2012-07-06 15:35 |只看该作者
回复 4# gaowenbinmarr


    lcs肯定是不行的,电脑会觉得“杭州市曙光路73号”和“杭州市曙光路74号”是一个地址的。

最好还是按照省市路巷号这种来匹配。

论坛徽章:
1
2015年辞旧岁徽章
日期:2015-03-03 16:54:15
5 [报告]
发表于 2012-07-06 15:40 |只看该作者
首先进行归一化,然后就简单的和 1 一样了。

论坛徽章:
2
CU大牛徽章
日期:2013-04-17 11:46:28CU大牛徽章
日期:2013-04-17 11:46:39
6 [报告]
发表于 2012-07-06 18:52 |只看该作者
这玩意儿貌似很有挑战性,期待答案

论坛徽章:
0
7 [报告]
发表于 2012-07-06 20:21 |只看该作者
我觉得光是匹配就是一个大问题了。就你问题中所说的两个地名,还真有可能不是一个地方。
您需要登录后才可以回帖 登录 | 注册

本版积分规则 发表回复

  

北京盛拓优讯信息技术有限公司. 版权所有 京ICP备16024965号-6 北京市公安局海淀分局网监中心备案编号:11010802020122 niuxiaotong@pcpop.com 17352615567
未成年举报专区
中国互联网协会会员  联系我们:huangweiwei@itpub.net
感谢所有关心和支持过ChinaUnix的朋友们 转载本站内容请注明原作者名及出处

清除 Cookies - ChinaUnix - Archiver - WAP - TOP