Mac通过SSH转发端口在本地访问内网HBase集群

操作背景

目的:想要在本地debug和hbase有关的服务,但hbase在内网没有外网IP无法直连,通过部署看日志的方式效率又比较低,而且难以通过断点方式直观下判断。所以想要可以在本地就能直接连接内网中的hbase集群。

现有条件:

  • hbase集群,2个节点,同一个端口
  • 一台跳板机,有外网IP可以本机连接,同时也能访问hbase集群
  • 一台mac笔记本,为什么要强调是mac呢,因为后面一条命令跟OS有关系

操作流程

首先明确,需要做的就是,能让我的请求通过跳板机转发到hbase集群的对应端口,那么依赖的端口有什么呢,hbase的服务包括zk的端口2181和集群本身的端口60020。其实本来从需要的配置文件上来看只需要zk的端口的,但是实际操作中程序会跳 UnknownHostException ,提示Hbase的域名未知,应该是信息是存储在ZK中,程序先去ZK中取回了Hbase集群的端口信息回来本地,在从本地区访问的集群,所以Hbase的IP信息也是需要配置的。

  1. 首先使用SSH命令打通SSH隧道 ssh -N -L 2181:zk域名:2181 跳板机user@hostname,这里我没有加-f挂在后台,因为只是调试用,调试结束要关闭把端口让出来的,挂后台容易忘了杀进程。
  2. 测试是否可用,telnet localhost 2181,测试通过
  3. 编辑本机的/etc/hosts文件,添加对hbase域名的解析,这里说下为什么前面的ZK不需要解析。其实也可以解析,但是我在程序的配置文件中将ZK的域名已经修改为localhost了,所以就不用,而hbase的域名是zk去取回来的无法配置,只能通过hosts文件做DNS劫持为本机回环IP。
127.0.0.1 hbase1
127.0.0.2 hbase2
  1. ping自己的127.0.0.2发现无法访问,这里和操作系统有关系了,OSX似乎是因为防火墙的关系,这里执行这个命令可以打开127.0.0.2sudo ifconfig lo0 alias 127.0.0.2 netmask 0xFFFFFFFF,测试ping通。
  2. 最后再做hbase两个域名的隧道即可
ssh -N -L 127.0.0.1:60020:hbase1:60020 跳板机user@hostname
ssh -N -L 127.0.0.2:60020:hbase2:60020 跳板机user@hostname

完事收工

©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 203,772评论 6 477
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 85,458评论 2 381
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 150,610评论 0 337
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 54,640评论 1 276
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 63,657评论 5 365
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 48,590评论 1 281
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 37,962评论 3 395
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 36,631评论 0 258
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 40,870评论 1 297
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 35,611评论 2 321
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 37,704评论 1 329
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 33,386评论 4 319
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 38,969评论 3 307
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 29,944评论 0 19
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 31,179评论 1 260
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 44,742评论 2 349
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 42,440评论 2 342