2016年5月中旬，由于急着项目上线，cassandra3.4版本在没有很多测试的情况下就使用了，当时部署在3台16G的windows系统服务器上。几个月使用下来，多数问题都是OOM导致的宕机 。特别是有一次宕机，在重启数据库后发现内存不断上升，多次重启也都是如此。通过观察判断可能原因是数据库采取的 ...
一.USB无限网卡 使用Kali linux，先准备好一个适合Kali系统的USB外置无限网卡，注意内置网卡并不适合渗透测试。 Linux系统的指令相对于一般人来说比较晦涩难懂，最好选择免驱动类型，省去各种配置的繁琐步骤。 二.常用芯片类型 用于抓取无线数据包稳定和兼容比较好的三款芯片： 1.RT3 ...
分类：
系统相关 时间：
2018-02-19 19:00:33
阅读次数：
559
【故障描述】某法院的一台HP-P4500的存储系统，底层是12块1TB的硬盘组的RAID。其中每6个1TB的盘一组，第一组的前面一部分组了一个RAID0+1，是存放HP-P4500嵌入式系统，接着组了一个RAID5存放数据，第二组组了一个RAID5。在存储系统上层一共分了两个卷，卷大小一个为3TB，一个为5TB。后来因磁盘故障导致存储不可用，客户先请HP的工程做更换磁盘，强制上线，但存储还是不可用
分类：
其他好文 时间：
2018-02-09 17:33:24
阅读次数：
153
上次我们添加了一个add_layer函数，这次就要创建一个神经网络来预测/拟合相应的数据。 下面我们先来创建一下虚拟的数据，这个数据为二次曲线数据，但同时增加了一些噪点，其图像为： 相应的创建这些伪造数据的代码为： 有了虚拟的数据之后，我们假装不知道这个数据的规律，因此我们想要通过一个神经网络来根据 ...
分类：
其他好文 时间：
2018-02-02 11:56:15
阅读次数：
229
Tushare是一个免费、开源的python财经数据接口包。主要实现对股票等金融数据从数据采集、清洗加工 到 数据存储的过程，能够为金融分析人员提供快速、整洁、和多样的便于分析的数据，为他们在数据获取方面极大地减轻工作量，使他们更加专注于策略和模型的研究与实现上。考虑到Python pandas包在 ...
分类：
其他好文 时间：
2018-01-31 11:39:35
阅读次数：
6134
场景20亿分钟K线数据的更新及查找 1，了解数据使用情况 这些k线数据用于回测，而对于分钟k线回测： 大部分回测周期在近几个月或近几年 热门股票几多沪深300、上证50等 分钟回测需要一定的实时性既在开盘时间进行回测，需要最近的数据 数据增量每日几百MB ※初始热数据的划分需要对业务进行深入了解 ※ ...
分类：
其他好文 时间：
2018-01-28 16:31:43
阅读次数：
305
数据方案： 在Elasticsearch中通过code及time字段查询对应doc的mongo_id字段获得mongodb中的主键_id 通过获得id再进入mongodb进行查询 1，数据情况： 全部为股票及指数的分钟K线数据（股票代码区分度较高） Elasticsearch及mongodb都未分片 ...
分类：
其他好文 时间：
2018-01-28 16:25:59
阅读次数：
882
主要包括以下几大块： 大数据基础课程 离线数据分析 离线数据分析hbase 实时数据分析 Scala函数式编程 Spark内存计算 机器学习增强 前五天的课程都是基础课，主要包含Linux基础，shell编程基础以及Java中的多线程、JVM等基础知识，如果你没有相关的基础知识，请自己提前学习。 离 ...
分类：
其他好文 时间：
2018-01-11 20:40:40
阅读次数：
159
l 操作环境：win7 64位操作系统，office 2016 64位，ArcGIS 32位，C#程序 l 问题描述：客户提出“管线数据入库”功能，将外业数据（CAD质检程序导出的标准库）转成空间数据库geodatabase时，提示外业数据库为不可识别的数据库。 l 解决过程： Access数据格式 ...
分类：
数据库 时间：
2018-01-08 18:30:39
阅读次数：
210
客户在win7 64位系统中安装32位的ora客户端,NET 安装后连线数据库 引发BadImageFomatException. 按客户机安装64位ora客户端也不现实,可能会影响其他应用的正常使用,网速也不允许. oci.dll 有分32与64.于是网上搜寻64 的oci.dll .将其放置程序 ...
分类：
数据库 时间：
2017-12-28 11:55:07
阅读次数：
195
