Dennis' Blog

欢迎各位领导前来指导工作


  • 首页

  • 关于

  • 标签

  • 分类

  • 归档

  • 搜索

Git stash的用处

发表于 2018-12-02 | 分类于 git |
应用场景1 当正在dev分支上开发某个项目,这时项目中出现一个bug,需要紧急修复,但是正在开发的内容只是完成一半,还不想提交,这时可以用git stash命令将修改的内容保存至堆栈区,然后顺利切换到 ...
阅读全文 »

使用Python unittest来测试项目

发表于 2018-11-10 | 分类于 python |
Example比如,我在Airflow上新增了一个feature,我想测试一下,就需要在tests目录下新增一个功能测试。目录结构大概是这样的:1234├── airflow│ ├── model ...
阅读全文 »

Ubuntu的.so文件问题

发表于 2018-11-06 | 分类于 运维 |
前言昨天在anaconda的虚拟环境py3 下装uwsgi 但执行uwsgi命令的时候报错提示:uwsgi: error while loading shared libraries: libpcre ...
阅读全文 »

Hive UDF 快速教程

发表于 2018-08-02 | 分类于 大数据 |
正文Step1首先,我们创建一个目录 udf_test/;创建子目录org/dennis/udf在子目录里创建一个MyUpper.java文件。里面内容为:123456789101112package ...
阅读全文 »

Zookeeper的用途

发表于 2018-08-01 | 分类于 zookeeper |
数据发布与订阅(配置中心)发布与订阅模型,即所谓的配置中心,顾名思义就是发布者将数据发布到ZK节点上,供订阅者动态获取数据,实现配置信息的集中式管理和动态更新。例如全局的配置信息,服务式服务框架的服务 ...
阅读全文 »

Hive 优化

发表于 2018-06-02 | 分类于 大数据 |
对于如果join中有小表的话,可以开启map Dynamic Partition Pruning for Hive Map JoinsYou can enable dynamic partition ...
阅读全文 »

Git rebase的一些运用场景

发表于 2018-06-02 | 分类于 git |
Git rebase的使用场景最近在为github开源项目修修bug。提了几个Pull Request。又巩固了下git的知识,熟练了git的使用。 我在提交PR后,发现有个地方改错了。那怎么改呢,其 ...
阅读全文 »

Hadoop 基础学习笔记

发表于 2018-05-02 | 分类于 hadoop |
Secondary和standbySecondary Namenode: 主要在1.x 版本中使用。这相当于一个辅助 Standby Namenode:只要是2.x版本使用。如果用Standby的时候 ...
阅读全文 »

Kafka Introduction

发表于 2018-03-02 | 分类于 大数据 |
最近面试经常会被问到Kafka的问题。看了很多Kafka的介绍,发现还是美团技术团队总结的最清楚易懂。下面转了美团的关于Kafka的一篇文章 Kafka是什么Kafka是最初由Linkedin公司 ...
阅读全文 »

Python Dict Internal

发表于 2018-02-14 | 分类于 python |
前言:最近在知乎上看到很多Python职位的面试都会问Python的数据结构。很多大公司,比如知乎,在面试python的工程师的时候都会很注重基础;比如会问:python内置的list dict se ...
阅读全文 »
1…456…8
Dennis

Dennis

Hi, I'm a data engineer for several years being enthusiastic about programming (Python and Java), studying and making money. Regarding entertainments, I enjoy playing badminton and travelling.

74 日志
23 分类
41 标签
GitHub 知乎 StackOverflow Quora
© 2021 Dennis
由 Hexo 强力驱动
|
主题 — NexT.Mist v5.1.4