Hadoop 学习 - ZooKeeper
配置文件123cd apache-zookeeper-3.8.0-bin/conf/cp zoo_sample.cfg zoo.cfgvim zoo.cfg 1234567891011121314151617181920212223242526272829303132333435363738394041# The number of milliseconds of each ticktickTime=2000# The number of ticks that the initial # synchronization phase can takeinitLimit=10# The number of ticks that can pass between # sending a request and getting an acknowledgementsyncLimit=5# the directory where the snapshot is stored.# do not use /tmp for storage, /tmp here is just # example sa ...
Hadoop 学习:环境搭建
环境要求此次流程记录是 Ubuntu Server 20.04 系统下 Hadoop 集群的搭建。Linux 和 Windows 所需软件包括:(1)Java 1.5.x 及以上,必须安装,建议选择 Java 8 版本。(2)ssh 必须安装并且保证 sshd 一直运行,以便用 Hadoop 脚本管理远端 Hadoop 守护进程。 软件下载Mobaxterm:一款多功能的远程连接工具,支持多种协议,自带 SFTP 功能,下载链接;Java:Java 8 是目前使用最为广泛的版本(可能是因为 Java 版本迭代所带来的学习成本问题),自此安装也是选择 Java 8 为运行环境,方便维护,下载链接; SSH:集群的工作环境需要远程连接进行管理,通过对 master 和 slaves 安装 SSH 服务,方便管理。Ubuntu 安装 SSH 服务命令 apt-get install openssh-server。 Hadoop:此次安装的重头戏,前往 Apache 官方网站下载即可,https://www.apache.org/dyn/closer.cgi/hadoop/common/had ...
Hadoop 学习:虚拟机的安装
虚拟机及 Linux 安装所需工具和相关软件PC 机一台、Windows 11 操作系统、Ubuntu 20.04 镜像、VMware Workstation 软件。 下载 VMware Workstation 软件的下载:前往官网 https://www.vmware.com/cn/products/workstation-pro/workstation-pro-evaluation.html,点击下载即可,本人下载的是官网所提供的最新版 VMware Workstation 16 Pro。 Ubuntu 镜像的下载:前往官网下载链接 https://ubuntu.com/download/desktop/thank-you?version=20.04.4&architecture=amd64,下载的是 LTS(长期支持)版本。 安装 VMware Workstation 16 Pro 的安装:双击下载的 Workstation 16 Pro 进行安装,可能会出现要求重启完成安装配置的要求,点击 “是” 重启其即可。重启后并没有继续安装进程,再次双击安装包进行安装。 接下 ...
NAT 穿透 - CloudFlare
前言过年在家,闲来无事到处翻一翻,竟然发现一台十年前的老机子,准备搞一波事情 —— 内网穿透。思索良久,最终选择了 CloudFlare 家的 Argo Tunnel 服务,因为其配置较为方便,而且免费。其实一开始考虑使用 frp,但是其工作时需要一台具有公网 IP 的主机做监听和转发服务,集群式的应用场景不满足我目前的需求。 系统安装系统选择 OS 选择 Windows 需求是内网穿透做服务器,2H2G 的小老机并不适合安装 Windows Ubuntu 服务器首选,但是在安装时总是卡死 (猜测是硬件问题) Arch 安装配置较为繁琐,虽然有一键安装脚本,但是考虑到十年前的机器,还是算了 Manjaro 安装成功,却总因为网络问题卡死 Mint 安装成功,运行效果尚可 启动盘制作Rufus、U 盘 (32GB)、Linux Mint 20.3 Cinnamon Edition 使用 Rufus 以 DD 方式制作镜像。 安装 Mint进 BIOS 花费了本人不少时间(大无语事件),启动时左下角显示 F12 进入 BIOS 设置,可是怎 ...
储 “物” 间(五)
物联网头条商汤科技正式登陆港交所商汤科技昨日在港交所上市,涨幅一度扩大至超 20%,总市值超 1400 亿港元。据悉,经历此前 12 轮融资后,商汤科技已成为全球估值最高、最有价值的人工智能创业公司。,截至今日收盘,商汤科技报 4.130 港元 / 股,总市值为 1374.56 亿港元(约合人民币 1124.39 亿元)。 底层技术、通信、网络安全SK 海力士完成接管英特尔闪存业务及国内工厂日前,国内监管部门批准了 SK 海力士 90 亿美元收购 Intel 闪存业务的交易,至此双方的法律审核阶段已经完成。SK 海力士昨日完成了第一阶段的后续流程,包括从英特尔接管 SSD 业务及其位于中国大连 NAND 闪存制造厂的资产,作为对价,SK 海力士将向英特尔支付 70 亿美元。 美国法院判决 6GHz 频段无需授权在美国,6GHz 频段原本是受限制的,FCC 联邦通信委员会去年 4 月份宣布释放 6GHz 频段,开放 6GHz 频段的 1200MHz 频谱为非授权使用,但美国运营商 AT&T 对此决定表示不满,认为开放 6G 频段会影响他们的智能电表、消防甚至微波、电视广播等服 ...
储 “物” 间(四)
物联网头条詹姆斯・韦布空间望远镜点火发射北京时间 12 月 25 日 20 点 20 分,美国国家航空航天局(NASA) 的詹姆斯・韦布空间望远镜点火发射,在未来几个月,这个人类历史上最大、耗资近 100 亿美元的太空天文台将飞到地球和太阳之间的引力平衡点,展开折叠的天线、遮阳板、镜片,对宇宙起源进行探索。该空间望远镜原计划于 2007 年发射,它的 “前辈” 哈勃空间望远镜于 1990 年成功发射,曾在 2019 年传回了迄今最完整的 7500 张星空照片拼接而成的宇宙图谱。 底层技术、通信、网络安全华为海思首次公开自研越影 ISP 日前,上海海思首次公开展示了自研的 “越影” AI ISP,支持超感光降噪,利用神经网络深度学习,实现了低照度场景的智能降噪,可以让 “伸手不见五指” 的黑夜变成 “白天”。同时还结合了多光谱融合技术,有效融合可见光与红外光谱,低照图像达到了色彩与细节平衡。 曝苹果 A16 处理器无缘 3nm有消息曝出,iPhone 14 系列将不会全系升级到新的 A16 处理器,而是继续沿用今年的 iPhone 13 的 A15 芯片。此外 A16 处理器似乎也将 ...
储 “物” 间(三)
物联网头条高通发布四款芯片 第四季度上市 其中,骁龙 778G Plus 5G 移动平台是骁龙 778G 的后续产品,CPU 主频升级到了 2.5GHz;骁龙 695 5G 移动平台可提供全球 5G 支持,支持毫米波和 sub-6 GHz 频段,与骁龙 690 相比具有高达 30% 的 GPU 图形渲染速度和 15% 的 CPU 性能提升;骁龙 480 Plus 将频率从前代的 2.0GHz 提高到了 2.2GHz;骁龙 680 4G 移动平台基于 6nm 工艺技术打造。据悉,OPPO 和小米都会推出基于骁龙 695 的新品。 底层技术、通信、网络安全张忠谋:半导体在美国本土制造不可能成功据台媒报道,台积电创办人张忠谋 10 月 26 日表示,美国半导体供应链不完整,生产成本高,他认为美国要推动半导体在美国本土制造不可能会成功。对于英特尔积极鼓吹美国政府补贴以美国为总部的半导体厂,张忠谋表示,英特尔的动机是瞄准美国政府的补贴,只是这对亚洲,甚至是全世界的半导体厂都是挑战。 AMD 锐龙、显卡价格创新高AMD 昨日发布了 Q3 季度财报,营收为 43.13 亿美元,与上年同期的 28.0 ...