VIKA的技术小站

VIKA的技术小站

coding coding coding

  • Home
  • Archives

Put data to HBase

将股票数据存入HBase使用的数据文件为Setup single-node Hadoop and load stock data中从网易财经导出的csv文件,文件名为数据日期, 例如2016-08-26.csv。 创建HBase表参考The Apache HBase Shell,

2016-08-28

Access HBase via thrift API

下载thrift开发环境是在windows下,apache thrift 提供了windows的预编译文件,直接下载即可。使用如下命令由__*.thrift__文件生成python代码, 在子文件夹gen-py下, 在python代码中需要将该文件夹路径添加至sys.path。

2016-08-28

Run HBase Program

参考HBase官方文档,setup一个单机环境,使用HDFS。 这里主要记录下编译运行java代码访问HBase的相关的步骤, 都是从文档里参考而来。 依赖的jar包访问HBase的代码也需要Hadoop相关的library, 所以我直接借用访问HDFS的工程,在里面添加了一个C

2016-08-26

Setup single-node Hadoop and load stock data

搭建单节点Hadoop, 加载股票数据到HDFS使用的环境为Ubuntu 16 64/位系统。 环境搭建首先参照Hadoop的官方文档搭建单节点的系统,下载压缩包之后解压, 配置JDK即可运行。这里使用在单机运行的伪集群模式,如下修改configuration文件,

2016-08-24

从outlook导出邮件存储在MailStore

export message from outlook using python script, and import to MailStore

2015-11-26

APK反编译工具

list some tools to analyse apk file

2015-11-22

Convert Jekyll markdown post to Hexo

这两天配置了Hexo来生成博客,其文档中的迁移部分指示说将jekyll的@_post@路径下的文件直接复制到hexo的目录下即可。但由于jekyll post 有些使用了自定义的插件,在hexo generate时会抛了异常,于是写了个脚本来完成插件标签的处理。 代码共享在[gi

2015-10-16

Redis安装及代理与集群

Redis是简单易用的内存缓存,支持多种数据类型及其操作

2015-06-22

VirtualBox network modes and Vagrant configure

There are 4 network modes in Virutalbox, and you can configure in Vagrant easily

2015-06-21

使用Echarts可视化数据

analyze data from one location based application, show chart with ECharts

2015-06-15
« Prev1…45678…10Next »

分类

  • Linux1
  • Ruby1
  • Web1
  • java2
  • linux3
  • python12
  • site1
  • tool10
  • web7
  • words1
  • 技术聚会1

标签

  • ArchLinux1
  • ClassNotFound1
  • DNS2
  • E2211Hb1
  • Flutter1
  • GAE1
  • Ghost1
  • Grafana1
  • HBase3
  • HDFS1
  • Hadoop3
  • JNI1
  • Linux1
  • MailStore1
  • MeleA1001
  • PDF1
  • Protothreads1
  • React1
  • Ruby1
  • Rust7
RSS 订阅

Powered by hexo and Theme by Pacman © 2025 Vika Zhou     备案号:粤ICP备15096900号-1