我们在 Linux 下进行开发时，有时也需要知道当前的硬件信息，比如：CPU几核？使用情况？内存大小及使用情况？USB设备是否被识别？等等类似此类问题。下面良许介绍一些常用的硬件查看命令。

lshw

lshw 这个命令是一个比较通用的工具，它可以详细的列出本机的硬件信息。但这个命令并非所有的发行版都有，比如 Fedora 就默认没有，需要自己安装。

lshw 可以从各个 /proc 文件中提取出硬件信息，比如：CPU、内存、usb 控制器、硬盘等。如果不带选项的话，列出的信息将很长，加上 -short 选项时，将只列出概要信息。

从JVM的角度看Map和Reduce

Map阶段包括：

第一读数据：从HDFS读取数据

1、问题:读取数据产生多少个Mapper？？

Mapper数据过大的话，会产生大量的小文件，由于Mapper是基于虚拟机的，过多的Mapper创建和初始化及关闭虚拟机都会消耗大量的硬件资源；

Mapper数太小，并发度过小，Job执行时间过长，无法充分利用分布式硬件资源；

2、Mapper数量由什么决定？？

1. Squeeze-and-Excitation Network

SENet 是 Squeeze-and-Excitation Networks 的简称，拿到了 ImageNet2017 分类比赛冠军，其效果得到了认可，其提出的 SE 模块思想简单，易于实现，并且很容易可以加载到现有的网络模型框架中。SENet 主要是学习了 channel 之间的相关性，筛选出了针对通道的注意力，稍微增加了一点计算量，但是效果比较好。

Image generated by AI

TMTPOST -- China is closing in on the U.S. in the AI industry-academia-research race, with new data shedding light on evolving talent flows, publication output, and shifting research focus across the globe’s top innovation hubs.

好久没有发表文章了，前两天刚好写一个微服务的方案，在这里与大家分享一下。

这篇文章只是一些概念的介绍，后续我会根据这个设计方案，将实现过程一步一步记录下来，与大家分享。

1 系统设计

在应用系统日常运维过程中，我们经常需要对应用的日志进行检索，以便快速地定位到故障点的位置及其原因，现在主流的方案有ELK和EFK。下面就Java应用日志如何接入ELK or EFK的技术方式进行说明。

ELK 已经成为目前最流行的集中式日志解决方案，它主要是由Filebeat、Logstash、Elasticsearch、Kibana等组件组成，来共同完成实时日志的收集，存储，展示等一站式的解决方案。本文将会介绍ELK常见的架构以及相关问题的解决。

这是在 Ubuntu14.04 上使用ELK集中化日志系列教程中的第二篇。该系列共有4篇，其他2篇敬请期待～

关于 Topbeat

Topbeat定期收集系统信息如每个进程信息、负载、内存、磁盘等等，然后将数据发送到Elasticsearch进行索引。当你使用ELKStack 的时候，Topbeat可以作为其他服务监控系统（如 Prometheus 或 Statsd ）的替代品。

写在前面

这篇文章建立在你已经按照本系列教程的第一篇文章完成了 ELKStack 的配置，如果你还没有 ELK Stack 的配置，请你先按照第一篇文章配置好 ELK Stack 之后，再参照这篇文章进行 Topbeat 的配置。

Linux 日志系统维护的实战示例，涵盖常见场景和工具：

1. 日志轮转与清理（Logrotate）