15 天前 / 闲鱼技术
背景 在电商类APP里，图片到现在为止仍然是最重要的信息承载媒介，不得不说逛淘宝的过程，其实就是一个看图片的过程。而商品详情页中的图片，通常是页面中内存占用最多的内容，占用了整个页面内存的超过 50%，因此是通常容易引起app闪退的场景之一。 闲鱼在Flutter化的过程中，选择了商品详情页作为第一个落地的场景。通过多版本的迭代完善，基于Flutter的详情页已经在闲鱼稳定运行。然而正因为详情页的图片量大，导致Flutter里图片相关的问题一直挥之不去。 1：内存问题 --- 连续push flutter界面内存累积 2：安装包问题 --- 过渡时期两份......
25 天前 / Lucky_man
写在前面(常见面试题) 基本问题介绍下 Java 内存区域（运行时数据区）Java 对象的创建过程（五步，建议能默写出来并且要知道每一步虚拟机做了什么）对象的访问定位的两种方式（句柄和直接指针两种方式） 拓展问题String类和常量池8种基本类型的包装类和常量池 一 概述对于 Java 程序员来说，在虚拟机自动内存管理机制下，不再需要像C/C++程序开发程序员这样为内一个 new 操作去写对应的 delete/free 操作，不容易出现内存泄漏和内存溢出问题。正是因为 Java 程序员把内存控制权利交给 Java 虚拟机，一旦出现内存泄漏和溢出方面的问题，如果不了......
26 天前 / 印小洛
背景我们的额监控方案为：Kubernetes（K8S）+cAdvisor+Prometheus+Grafana。 然后，用 cAdivor 是要监控容器的运行时信息（比如CPU、内存、网络流量等）。 cAdvisor 是基于 Golang 编写的，性能高稳定性也好。 其实，cAdivor 其实到现在的主流K8S版本中，Kubelet进程已经将其内置了，但是我们没有这么用，因为没有必要因为让Prometheus定期去 Kubelet上采集容器信息，平白增添对Kubelet的压力。相反，我觉得，还是应该还是应该单独部署 cAdvisor，这样一来，不论是定制化cAdvisor，还是版本更新，都会更方面。所以，我使用 K8S 的 DaemonSet 部署......
38 天前 / 饶全成
Go语言内置运行时（就是runtime），抛弃了传统的内存分配方式，改为自主管理。这样可以自主地实现更好的内存使用模式，比如内存池、预分配等等。这样，不会每次内存分配都需要进行系统调用。 Golang运行时的内存分配算法主要源自 Google 为 C 语言开发的 TCMalloc算法，全称 Thread-CachingMalloc。核心思想就是把内存分为多级管理，从而降低锁的粒度。它将可用的堆内存采用二级分配的方式进行管理：每个线程都会自行维护一个独立的内存池，进行内存分配时优先从该内存池中分配，当内存池不足时才会向全局内存池申请，以避免不同线程对全局内存池......
41 天前 / 逗逗
文 | 张俊 on 大数据 在使用 Spark 进行计算时，我们经常会碰到作业 (Job) Out Of Memory(OOM) 的情况，而且很大一部分情况是发生在 Shuffle 阶段。那么在 Spark Shuffle 中具体是哪些地方会使用比较多的内存而有可能导致 OOM 呢？ 为此，本文将围绕以上问题梳理 Spark 内存管理和 Shuffle 过程中与内存使用相关的知识；然后，简要分析下在 Spark Shuffle 中有可能导致 OOM 的原因。 一、Spark 内存管理和消费模型在分析 Spark Shuffle 内存使用之前。我们首先了解下以下问题：当一个 Spark 子任务 (Task) 被分配到 Executor 上运行时，Spark 管......
47 天前 / 啃源码
随着runtime越来越常用，iOSer对runtime的理解要求也越来越高，大家都热衷于runtime源码理解，这篇我带领大家理解下关于Ivar的内容。 1.内存对齐在分析Ivar之前，我们要了解下内存对齐的概念。每个特定平台上的编译器都有自己的默认“对齐系数”，而iOS里这个参数是8。我们测试一下： @interface Dog : NSObject{int age; //4个字节BOOL sex; //1个字节NSString* name; //8个字节的指针地址short lifeTime; //2个字节NSString* style; //8个字节的指针地址}@end这是我们新建的类Dog，里面有各种各样的成员变量，如果不存......
62 天前 / 恒生技术君
Jvm运行时数据区Java虚拟机（Java Virtual Machine 简称JVM）是运行所有Java程序的抽象计算机，是Java语言的运行环境；因此所有的java的内存都是通过JVM来管理的(本文都是基于HotSpot虚拟机)，要了解java的内存，就需要了解jvm的内存结构。 JVM内存结构如图： 方法区：方法区存储虚拟机加载的类信息，常量，静态变量，即时编译器编译后的代码等数据；是jvm规范中的一部分，并不是实际的实现，在实际实现上并不相同（HotSpot在1.7版本以前和1.7版本，1.7后都有变化）。当方法区无法满足内存分配需求时，将抛出OutOfMemoryError异常。Java......
63 天前 / 杀死那个程序员
常言说得好，每个成功男人背后都有一个为他默默付出的女人，而对于MySQL来说，这个“人”就是InnoDB存储引擎。 MySQL区别于其他数据库的最为重要的特点就是其插件式的表存储引擎。而在众多存储引擎中，InnoDB是最为常用的存储引擎。从MySQL5.5.8版本开始，InnoDB存储引擎是默认的存储引擎。 InnoDB存储引擎支持事务，其设计目标主要面向在线事务处理(OLTP)的应用。其特点是行锁设计、支持外键，并支持非锁定读，即默认读操作不会产生锁。 InnoDB通过使用多版本并发控制(MVCC)来获取高并发性，并且实现了SQL标准的4中隔离级别，默认为REPEATABLE......
63 天前 / Sound2gd
上一节JVM拾遗(3): 类装载机制讲了JVM如何将类装载到虚拟机以供后续使用那么JVM是如何创建类的实例呢该对象是如何分配内存的
1. 实例化1.1 创建对象的方式Java对象的创建, 有多种方式，最简单就是new XXClass, 还可以通过反射，xx.clone(),反序列化以及黑科技Unsafe.allocateInstance等方法.
new和反射创建对象实例的时候，会初始化实例字段.
如果类没有构造器，会默认添加构造器，并且编译成
66 天前 / 横云断岭
ArthasArthas是Alibaba开源的Java诊断工具，深受开发者喜爱。 从Arthas上个版本发布，已经过去两个多月了，Arthas 3.1.0版本不仅带来大家投票出来的新LOGO，还带来强大的新功能和更好的易用性，下面一一介绍。 Github： https://github.com/alibaba/arthas 文档：https://alibaba.github.io/arthas 在线教程 在新版本Arthas里，增加了在线教程，用户可以在线运行Demo，一步步学习Arthas的各种用法，推荐新手尝试： Arthas基础教程: https://alibaba.github.io/arthas/arthas-tutorialslanguage=cn Arthas进阶教程: https://alibaba.github......
66 天前 / 半亩方田
一般的Java应用主要使用的堆内内存为主，少量的堆外内存（主要是Netty或者解压缩的时候需要），使用到的文件一般也就是日志文件。这类应用的特点就是进程在运行一段时间后内存使用量趋于稳定，有少量的文件写入，无文件读取。对于这样的应用场景如何配置Linux系统内存参数呢。 vm.swapiness（范围0-100，Linux的默认值60）。该参数值越小表示当内存不足时，倾向于通过回收cache区域，而不是把进程内存交换到Swap区域。对于Java进程来说，如果把堆内内存交换到Swap区域，在GC的时候可能出现GC 时间飙升（需要把堆内内存再次从Swap区域置换到物......
75 天前 / buildupchao
0. 背景不论是单体应用还是分布式应用，总是会有些许迭代或者紧急Fix bug上线的神操作。但是如果不是那么幸运，当时还存在大量核心内存中数据在进行计算等逻辑，此时终止项目，就会出现核心数据或者状态丢失的不利情况，后续即使上线完成也要尽快追加数据。 123那是否存在某种技巧：在需要终止应用的时候，能够监听到终止操作，并保存核心数据现场，然后再终止应用，而后在应用恢复后，再进行核心数据恢复。答案是肯定的。0.1 技术储备1Runtime.getRuntime().addShutdownHook(Thread thread);我们可以借助于JDK为我们所提供的上述钩子方法。这个方......
110 天前 / 叹稀奇
Java的内存管理是一个老生常谈的问题，虽然Java号称可以自动管理自己的内存，使程序员从内存管理的围墙解放出来，但是一连串的内存泄漏和溢出方面的问题，使得我们不得不去深入了解Java的内存管理机制。本篇文章将从Java的内存区域开始剖析Jvm的内存机制，阐述内存溢出异常产生的原因。 运行时数据区域众说周知，Java程序是运行在Java虚拟机中的，虚拟机顾名思义，就是一个虚拟的计算机。所以Java虚拟机也拥有一些与真实计算机相近的概念，比如栈，堆，程序计数器等，通常我们在这些概念面前加上虚拟机，以表明特指Java虚拟机的栈。 Java程序运行......
127 天前 / 虞大胆
在写完《使用Memcached实现抽奖活动》这篇文章后，发现自己虽然很早就使用过 Memcached，但已经很久没有关注它的进展了，所以就全面看了下它的官方 Wiki，打算写几篇文章去理解它，今天就简单聊聊它的内存分配。 Memcached 所有的操作都是在内存中进行的，这也是它高性能和延迟低的原因之一，如果使用 malloc() 机制动态的分配内存，会产生很多的内存碎片，所以 Memcached 是自己管理内存的，在启动的时候就开启了一大块内存，然后根据规则进行分配使用，这种机制也称为 Slab allocation。 在启动的时候可以通过 -m 参数分配内存，这些内存都用于......