这篇文章主要介绍怎么合理设置Navigator Metadata Server的Heap,文中介绍的非常详细,具有一定的参考价值,感兴趣的小伙伴们一定要看完!1.文档编写目的在Cloudera Manager管理中部署了Navigator服务后,随着集群数据量的增加Navigator Metadata处理的元数据量会相应的增加,这时会遇到Navigator Metadata服务反复崩溃或启动失败。2.Navigator Metadata Heap推算推算Navigator Metadata服务的Heap大小,主要依赖该服务的log,在log中检索关键的日志信息计算Heap的大小。1.当Navigator Metadata Server启动时,会记录其内部Solr索引中包含的文档数, 香港云主机登录Navigator Metadata Server服务所在服务器,进入其日志目录检索日志文件2.在日志文件中检索如下信息nav_elements和nav_elements,如下脚本为获取到最新的文档数(可左右滑动)(可左右滑动)3.在上一步获取到nav_elements和nav_elements的文档数(选择最大的一条数据),根据如下计算公式推算出合理的Heap大小,计算公式如下:((nav_elements+nav_elements)* 200 bytes) + 2GB通过该公式推算出Navigator Metadata Server的Heap大小约为:(12633+12652) * 200 + 2 * 1024 * 1024 = 7154152 bytes 约为6~7GB4.登录CM修改Navigator Metadata Server的Java Heap大小保存配置并重启Navigator Metadata Server服务。以上是“怎么合理设置Navigator Metadata Server的Heap”这篇文章的所有内容,感谢各位的阅读!希望分享的内容对大家有帮助,更多相关知识,欢迎关注开发云行业资讯频道!
本篇内容介绍了“怎么提高Python爬虫效率 香港云主机”的有关知识,在实际案例的操作过程中,不少人都会遇到这样的困境,接下来就让小编带领大家学习一下如何处理这些情况吧!希望大家仔细阅读,能够学有所成!在爬取海量的网络数据时,一方面我们需要确保爬虫不被网站服务…
免责声明:本站发布的图片视频文字,以转载和分享为主,文章观点不代表本站立场,本站不承担相关法律责任;如果涉及侵权请联系邮箱:360163164@qq.com举报,并提供相关证据,经查实将立刻删除涉嫌侵权内容。