`
bayaci
  • 浏览: 266100 次
  • 性别: Icon_minigender_1
  • 来自: 北京
社区版块
存档分类
最新评论

集群速度问题

 
阅读更多

CREATE TABLE `urllog` (
`ID` int(11) NOT NULL AUTO_INCREMENT,
`url` varchar(435) NOT NULL DEFAULT '',
`create_time` datetime NOT NULL,
`groupid` int(11) DEFAULT NULL,
PRIMARY KEY (`ID`)
) ENGINE=ndbcluster DEFAULT CHARSET=utf8


ndb_mgm> show
Cluster Configuration
---------------------
[ndbd(NDB)] 2 node(s)
id=2 @192.168.1.16 (Version: 5.1.21, Nodegroup: 0, Master)
id=3 @192.168.1.19 (Version: 5.1.21, Nodegroup: 0)

[ndb_mgmd(MGM)] 1 node(s)
id=1 @192.168.1.79 (Version: 5.1.21)

[mysqld(API)] 1 node(s)
id=4 @192.168.1.76 (Version: 5.1.21)


mysql> select * from urllog order by id desc limit 10;
+---------+--------------------------------------------------------------------------+---------------------+---------+
| ID | url | create_time | groupid |
+---------+--------------------------------------------------------------------------+---------------------+---------+
| 6665000 | 24A4FEAE-C03C-4812-92C8-95F897B4B4BFFECFF505-1CA3-4CBD-9973-498F72D126EF | 2007-09-10 17:18:02 | NULL |
| 6664999 | 9F78EDC2-B6B5-46C8-AB96-51163DCA97AD98C20E4A-EC46-4346-A49E-E58606DB8E63 | 2007-09-10 17:18:02 | NULL |
| 6664998 | AF8380D3-D981-45D7-869D-C27F11C5AEA67B9DDB33-9D44-485F-9324-501E1756DE07 | 2007-09-10 17:18:02 | NULL |
| 6664997 | 77F3E385-E51D-43FC-AAC6-2C7800777514DB4449F6-A6C7-4121-8151-D1D8F6838954 | 2007-09-10 17:18:02 | NULL |
| 6664996 | 5E62CEF1-393C-4C22-8A36-07E3216A3ECF529312C2-1BA3-46C5-9E0B-BC98DF628319 | 2007-09-10 17:18:02 | NULL |
| 6664995 | 7B5CED98-BF92-40DD-AEFF-8E916C3CA72993276733-D783-4B42-973E-3FF9DBFE7ACC | 2007-09-10 17:18:02 | NULL |
| 6664994 | 2D7D4AFE-5DF7-4328-AC0D-0CAF5B36B90D9B1A7CC3-2751-46F0-897D-1BCCB1B77F13 | 2007-09-10 17:18:02 | NULL |
| 6664993 | BE7D1713-3C45-4C04-82EA-D4D40C2258F59FCC0E29-646D-49B4-92EB-2E0811769DDC | 2007-09-10 17:18:02 | NULL |
| 6664992 | 6977E64C-D803-44F7-90D8-98557CE615299F327E89-D9FC-4803-BE49-9E0CB9CF8C1B | 2007-09-10 17:18:02 | NULL |
| 6664991 | 16535A8D-2E8D-4464-A133-56CBE2F11D84AAA90EF6-8D5D-417E-8FA5-4D4FC466F77F | 2007-09-10 17:18:02 | NULL |
+---------+--------------------------------------------------------------------------+---------------------+---------+
10 rows in set (0.01 sec)

mysql> select count(*) from urllog;
+----------+
| count(*) |
+----------+
| 1124607 |
+----------+
1 row in set (0.00 sec)

mysql> select length(url) l ,count(*) c from urllog group by l order by c desc limit 10;
+----+--------+
| l | c |
+----+--------+
| 72 | 659375 |
| 44 | 139094 |
| 57 | 81129 |
| 47 | 55902 |
| 43 | 46841 |
| 55 | 24807 |
| 59 | 17602 |
| 48 | 10642 |
| 41 | 7889 |
| 56 | 6968 |
+----+--------+
10 rows in set (2 min 27.79 sec)


百万数据量上面就会出现这么慢的问题,难道我有什么没有设置成功?

分享到:
评论

相关推荐

    linux集群软件mosix

    MOSIX的另外一个特性就是它的监测算法能够监测每个节点的速度、负载、可用内存、IPC 以及I/O rate 。系统使用这些信息来决定将进程发送到哪个具体的节点上。当在某个节点上创建了一个进程以后,该进程就在这个节点上...

    Linux集群加快心脏成像速度.pdf

    Linux集群加快心脏成像速度.pdf

    Apache+Tomcat服务器集群配置详细步骤

    在实际应用中,如果网站的访问量很大,为了提高访问速度,可以与多个Tomcat服务器与Apache服务器集成,让他们共同运行servlet/jsp 组件的任务,多个Tomcat服务器构成了一个集群(Cluster)系统,共同为客户提供服务...

    solr集群安装维护.docx

    本文档用于solr集群的搭建,在liunx系统中搭建solr集群利用生成的索引文件提高查询速度此文档可以帮助你快速完成集群的搭建。

    photoscan集群操作.docx

    photoscan网络集群操作方法,建立服务器与各运算节点的联系,实时监控数据处理进度,提高空三数据处理的速度。

    实达集群打印软件

    基于Windows系统的实达集群打印软件可以把各种中低速度的激光打印机虚拟成一个高速打印系统,对于应用系统而言虚拟出一个高速打印系统,让应用系统具备强大的海量打印能力,为广大用户提供一个低成本构建海量打印...

    基于城市创新的产业集群生态系统共生机制研究

    为了提高系统内共生体间物质流动、能量转换及信息交流的速度与效率,需要建立起共生关系生成机制、共生关系反应机制及共生能量调节机制等共生机制来确保系统功能的实现。在特定的城市创新的环境下建立起有效的共生...

    武汉新赛集群简介

    武汉新赛集群简介,相对与单机进行数据处理,集群处理有更高的可靠性和容错率,当群组中一 ...和数据处理速度都提出极大考验,将普通的计算机进行集群则可有效降低硬件成 本,发挥与高性能计算机相当的运算能力。

    论文研究-遥感数据集群处理作业调度管理系统研究.pdf

    高性能遥感数据集群处理技术提高了遥感数据处理的速度和精度。作业调度管理是集群处理系统的核心组成部分,有助于提高系统的吞吐率和资源使用率。常用调度管理系统通用性强,但针对性差,自动化程度低,资源使用存在...

    hadoop集群间免秘钥配置

    Hadoop 是高效的,因为它以并行的方式工作,通过并行处理加快处理速度。所以我们需要部署集群,然而集群之间的通讯每次都要输入密码的话很麻烦,所以我们配置集群免秘钥。

    elasticsearch集群部署配置

    我们建立一个网站或应用程序,并要添加搜索功能,但是想要完成搜索工作的创建是非常困难的。我们希望搜索解决方案要运行速度快,我们希望能...因此我们利用Elasticsearch来解决所有这些问题及可能出现的更多其它问题。

    SpringBoot+ElasticSearch集群+RocketMQ+Codis集群架构,满足亿级流量实时计算,实时监控的系统

    一个满足亿级流量实时计算,实时监控的系统,SpringBoot+ElasticSearch集群+RocketMQ+Codis集群架构实现,项目经过严格测试,确保可以运行! 主要功能是通过ElasticSearch实现实时计算、实时分析海量数据,聚合处理...

    跟老男孩学Linux运维:Web集群实战(高清完整版)

    老男孩也是国内NLP心理学运维思想体系创始人,将心理学运维思想大量应用于教学培训实践,取得了显著效果,所教学生平均就业工资及后期发展速度连续多年在国内Linux同行业中处于领先地位。 授课注重理论结合企业真实...

    ElasticSearch集群及应用

    假如我们建了一个web站点或者是一个应用程序,你就可能会需要添加搜索功能(因为这太有必要了),而事实上让搜索跑起来是有难度的,我们不仅想要搜索的速度快,而且还要安装方便(最好是无痛安装),另外模式定义要...

    Linux服务器集群详细配置【简介+分类+配置】.docx

    计算机集群简称集群是一种计算机系统,它通过一组松散集成的计算机软件和/...集群计算机通常用来改进单个计算机的计算速度和/或可靠性。一般情况下集群计算机比单个计算机,比如工作站或超级计算机性能价格比要高得多。

    Linux服务器集群详细配置【简介+分类+配置】

    计算机集群简称集群是一种计算机系统,它通过一组松散集成的计算机软件和/...集群计算机通常用来改进单个计算机的计算速度和/或可靠性。一般情况下集群计算机比单个计算机,比如工作站或超级计算机性能价格比要高得多。

    DarkShell_Linux-Win集群版V2014年

    支持多模式同时进行压力测试,独有的UDP攻击,采用新型的内核技术,发送数据包不经过缓存区直接对目标发送,且仅占CPU%5左右,自动探测系统是否支持raw发包提升攻击效率30%,安全稳攻击速度一流。为企业IDC提高自身...

    大数据云计算技术 Hadoop集群监控与Hive高可用-暴风影音技术团队分享(共17页).ppt

    优点 监控每台服务器的详细数据 SNMP采集数据可以自己定义 相比zabbix:无需客户端 安装配置简单 spine采集速度快 模板众多 支持IPMI 缺点 SNMPD为UDP协议,不够稳定 无法获知集群整体运行状况

    PostGIS教程二十:索引集群_postgis_PostGIS索引集群_

    以索引相同的顺序对磁盘上的数据进行排序可以加速数据访问速度。

    大型集群上的快速和通用数据处理架构

    大型集群上的快速和通用数据处理架构 过去的几年中,计算系统经历着重大的变革,为了满足不断增长的数据量和处理速度需求, 越来越多的应用向分布式系统扩展。如今,从互联网到企业运作,再到科技设备,不尽其数的 ...

Global site tag (gtag.js) - Google Analytics