• 内存表是DolphinDB数据库的重要组成部分。内存表不仅可以直接用于存储数据,实现高速数据读写,而且可以缓存计算引擎的中间结果,加速计算过程。本教程主要介绍DolphinDB内存表的分类、使用场景以及各种内存表在数据操作以及表结构(schema)操作上的异同。1. 内存表类别根据不同的使用场景以及功能特点,DolphinDB内存表可以分为以下四种:常规内存表键值内存表流数据表MVCC内存表1.1
    DolphinDB

    发布于:1 天前

  • 前言量化金融的研究和实盘中,越来越多的机构需要根据高频的行情数据(L1/L2以及逐笔委托数据)来计算量价因子。这些因子通常是有状态的:不仅与当前的多个指标有关,而且与多个指标的历史状态相关。以国内的股票市场为例,每3秒收到一个快照,每个股票每天得到4800个快照,计算因子时可能会用到之前若干个快照的数据,甚至之前若干天的数据。若研发环境系统(例如Python)与生产环境系统(例如C++)不同,要维
    DolphinDB

    发布于:4 天前

  • 1. 概述当系统准备上线前,我们会评估和规划硬件平台的容量,并且尽可能的留出余量。可是现实往往是不能预料的,随着业务的扩张,系统的数据容量和计算能力都会变得不堪重负,我们就不得不面对一个问题:如何为现有系统增加数据容量和计算能力?由于DolphinDB的节点是集计算和存储于一体的,所以要增加计算能力和数据容量对DolphinDB的集群来讲就是一件事 : 增加节点。当然,DolphinDB也支持对原
    DolphinDB

    发布于:5 天前

  • DolphinDB提供了多种灵活的数据导入方法,来帮助用户方便的把海量数据从多个数据源导入。具体有如下4种途径:通过文本文件导入通过二进制文件导入通过HDF5接口导入通过ODBC接口导入1. DolphinDB数据库基本概念和特点本章中多处使用到DolphinDB的数据库和表的概念,所以这里首先做一个介绍。在DolphinDB里数据以结构化数据表的方式保存。数据表按存储介质可以分为:内存表:数据保
    DolphinDB

    发布于:9 天前

  • DolphinDB实现了一系列常用的机器学习算法,例如最小二乘回归、随机森林、K-平均等,使用户能够方便地完成回归、分类、聚类等任务。这篇教程会通过具体的例子,介绍用DolphinDB脚本语言进行机器学习的流程。本文的所有例子都基于DolphinDB 1.10.9。1. 第一个例子:对小样本数据进行分类我们用UCI Machine Learning Repository上的wine数据,用来完成第
    DolphinDB

    发布于:10 天前

  • DolphinDB提供了从基于Java的GUI, VS Code Extension, Web界面,到命令行等各种灵活友好的交互界面,具体包括以下6种客户端交互方式。1. DolphinDB GUIDolphinDB GUI是基于Java的功能最齐全的图形化编程以及数据浏览界面。 DolphinDB GUI可以在任何支持Java的操作系统上使用,例如: Windows, Linux, 以及Mac。
    DolphinDB

    发布于:12 天前

  • 背景生产上选用repmgr给PostgreSQL数据库做高可用集群,在给生产上一套库做高可用改造时发现standbyclone时报错,无法复制备库,报错内容如下:原因先说原因,是因为对PG和pg_basebackup比较了解的同学可能自己就可以想出解决方案,不需要再继续往下看了。原因是由于创建的独立表空间指定的目录放在$PGDATA目录下,repmgr的standbyclone调用的是pg_bas
    hbxztc

    发布于:27 天前

  • 学习一个技术,通常只接触了零散的技术点,没有在脑海里建立一个完整的知识框架和架构体系,没有系统观。这样会很吃力,而且会出现一看好像自己会,过后就忘记,一脸懵逼。
    MageByte

    发布于:2021-01-26 19:51:36

  • 本文重点讲解了FastList 与ConcurrentBag 的优化原理,通过 ThreadLocal 将连接池中的连接按线程做一次预分配,避免直接竞争共享资源,减少并发CAS带来的CPU CACHE的频繁失效,达到显著提升性能的效果。
    vivo互联网

    发布于:2021-01-26 09:29:38

  • 本文描述了在一次压测过程中,由于Index Merge优化导致的死锁,详细描述了死锁产生的原因以及解决方案,并顺便介绍了Mysql索引结构及加锁机制。通过本文,大家可以掌握死锁分析的基本理论和一般方法,为工作中快速解决实际出现的死锁提供思路。
    vivo互联网

    发布于:2021-01-25 10:19:54

  • 源码剖析golang的数据库连接池实现,分析容易引起连接池工作异常的操作,引导正确使用连接池以及一些复杂操作
    暮回_zz

    发布于:2020-12-29 21:11:39

  • 一、背景在早期从MySQL到TiDB实施同步操作过程中,我们大多数用的是mydumper+loader进行整体全量备份的导出,之后拿到meta信息后,通过syncer实现增量同步,整体操作起来比较麻烦,涉及的配置文件较多,其基本原理就是Syncer通过把自己注册为一个MySQLSlave的方式,和MySQLMaster进行通信,然后不断读取MySQLBinlog,进行BinlogEvent解析,规
    dbapower

    发布于:2020-11-11 09:25:35

    阅读 10000+ 评论 2 收藏 1
  • 详解.Redis Cluster 工作原理和集群创建和使用
    已注销

    发布于:2020-10-25 22:05:09

  • 搞懂 Redis 持久化,RDB模式AOF模式工作原理详解及操作
    已注销

    发布于:2020-10-25 20:24:11

  • 在数据库的发展过程中,安全-->稳定-->高效-->低成本四个有序的要点一直如影随形,后者离开前者就是空谈。10月19日晚上MySQL发布了8.0.22版本,其中一个新功能(AutomaticconnectionfailoverforAsyncReplicationChannels)引起我的注意,也很感兴趣,作为一个DBA老兵,百感交集,在过去的20多年,故障切换功能一直是三方后
    AIOPS_DBA

    发布于:2020-10-20 14:11:08

  • 刷脉脉,发现一个帖子讨论幻读问题:https://maimai.cn/web/gossip_detail?src=app&webid=eyJhbGciOiJIUzI1NiIsInR5cCI6IkpXVCJ9.eyJlZ2lkIjoiN2JmMjA4ZDZjNzU0MTFlYWExOTk4MDE4NDRlNTAxOTAiLCJ1IjoyMjM0MjgzMTksImlkIjoyNjc0NDU3
    hcymysql

    发布于:2020-10-10 16:14:47

  • 线上某集群峰值TPS超过100万/秒左右(主要为写流量,读流量很低),峰值tps几乎已经到达集群上限,同时平均时延也超过100ms,随着读写流量的进一步增加,时延抖动严重影响业务可用性。经过一些列性能优化,该集群性能得到了数十倍的性能提升,效果明显,本文是上篇,下篇更精彩。
    y123456yzzyz

    发布于:2020-10-06 10:57:17

    阅读 10000+ 评论 3 收藏 2
  • 某核心JAVA长连接服务使用mongodb作为主要存储,客户端数百台机器连接同一mongodb集群,短期内出现多次性能抖动问题,此外,还出现一次“雪崩”故障,同时流量瞬间跌零,无法自动恢复。本文分析这两次故障的根本原因,包括客户端配置使用不合理、mongodb内核链接认证不合理、代理配置不全等一系列问题,最终经过多方努力确定问题根源。
    y123456yzzyz

    发布于:2020-10-04 12:51:05

  • 一、背景集群容量不够了,这些年各大公司都在做机器资源利用率的事情,我司也不例外,好不容易申请了5台机器加入集群扩容,balance的正欢乐呢,RegionBalanceRatio经过了1天半的时间刚刚降到93%,结果接到通知,5台机器的交换机升级,需重启机器,网卡要做bond。集群配置集群版本:v3.0.5集群配置:普通SSD磁盘,128G内存,40核cputidb21TiDB/PD/pump/p
    dbapower

    发布于:2020-09-24 14:45:03

  • 最近在做zabbix的数据库MySQL5.6升级5.7时,出现主从延迟问题,这个问题困扰了很久没有解决,昨天终于解决了,整理了一下整个排查过程,分享给大家。环境说明:mysql主库为5.6的版本,有四个从库,三个为5.6的版本,一个为5.7的版本,所有主从的库表结构均一致,5.7的从库出现大量延迟,5.6的没问题,业务为zabbix监控,基本全部为insert批量插入操作,每条insertSQL插
    AIOPS_DBA

    发布于:2020-09-01 13:55:28

  • 本文带您重点理解GC原理,以及gc引起的磁盘不回收故障分析总结
    dbapower

    发布于:2020-08-11 16:31:20

  • 全球访问量最大的 20 家网站,绝大多数使用 MySQL,有两个特例的 live.com 和 bing 是微软旗下的网站。它使用的是 MSSQL,并不是他们使用不了 MySQL,而是他要支持自己的数据库。毫无疑问MySQL是当今非常流行的关系数据库之一 ...
    wavebeed

    发布于:2020-07-21 13:50:06

    阅读 10000+ 评论 1 收藏 5
  • insert带来的TiDB集群hang死血案
    dbapower

    发布于:2020-07-09 10:08:05

  • 一篇文章带你玩转TiDB灾难恢复一、背景`高可用是TiDB的另一大特点,TiDB/TiKV/PD这三个组件都能容忍部分实例失效,不影响整个集群的可用性。下面分别说明这三个组件的可用性、单个实例失效后的后果以及如何恢复。TiDBTiDB是无状态的,推荐至少部署两个实例,前端通过负载均衡组件对外提供服务。当单个实例失效时,会影响正在这个实例上进行的Session,从应用的角度看,会出现单次请求失败的情
    dbapower

    发布于:2020-05-11 09:50:46

  • 这里主要记录项目中使用基于redis的分布式锁所遇到的问题及解决方案;业务场景我的业务场景是这样的,我们服务有库存模块,而我的服务又是多节点部署,要高峰期会存在库存差异,后面分析问题之后,打算采用redis实现分布式锁(主要的原因是服务已经集成了redis,不需要做额外的配置)问题1.数据库事务超时不要感觉奇怪,分布式锁怎么会导致数据库事务超时呢?我的代码大概是这样的:伪代码@Transactio
    石小令

    发布于:2020-04-15 15:01:06

  • 一、报错信息近期项目实施同事对系统升级,对test.test_tab_t1的某个字段进行变更,SQL语句如下:ALTERTABLETEST.TEST_TAB_T1MODIFYBXXXVARCHAR(200);在该项目项目在做系统升级之后,出现MySQL主从同步报错,报错信息如下:mysql>showslavestatus\GMaster_Log_File:binlog.000233Read_Mas
    朱wei

    发布于:2020-03-29 20:00:27

  • TiDB 在 360的落地及实战干货分享,全网最全DM实战教学
    dbapower

    发布于:2020-03-09 18:55:10

    阅读 10000+ 评论 3 收藏 3 赞赏 1
  • 本文介绍了使用Float或Real数据类型的危险。
    wx5d39183e901c5

    发布于:2020-03-05 17:35:24

  • 该脚本主要用于大致诊断MYSQL主机和数据库配置及性能收集,脚本部分功能展示如下:实现该上述展示功能的shell脚本如下:file_output='os_mysql_summary.html' td_str='' th_str='' myuser="root" mypasswd="password" myip="192.168.11.101" myport="3307" mysql_cmd="my
    朱wei

    发布于:2019-08-01 10:13:23

    阅读 10000+ 评论 1 收藏 12
  • 完全备份mysqldump-A-F--single-transaction--master-data=2>/backup/fullbak`date+%F`.sqlless/backup/fullbak2019-07-11.sql模拟2点到18点的数据修改模拟存放数据库的硬盘损坏,所有数据库丢失还原数据库已经故障确保用户无法访问vi/etc/my.cnf#添加一行systemctlrestartma
    流年灬似水

    发布于:2019-07-11 21:08:19

    阅读 10000+ 评论 4 收藏 7
推荐作者 更多
最新热评文章
51cto_blog:您的许多公式都没有展示出哦~
51cto_blog:博主大大,您的内容很优秀,如果整体更系统一些,公式都显示出来,会容易上推荐哦~
cisco_learner:大佬666
wx5fa649a288d1f:希望对您有帮助
写文章 申博娱乐现金网
网站地图 申博现金网址 盛618网址 申博百家乐 太阳城会员登入
申博管理网登入 申博在线开户登入 菲律宾太城申博 申博游戏微信账号
太阳城网址 老虎机游戏 ag真人娱乐 申博娱乐登入
申博直营网 申博太阳城登入 太阳城网址 申博游戏登入不了
申博真人游戏 澳门星际赌场 申博 百家乐真人游戏