2017-06-19 工程技术 机器学习专题 | Overview of Machine Learning 摘要机器学习是人工智能的一个分支。机器学习算法提供了一类从数据中自动分析获得规律,并利用规律对未知数据进行预测的方法。机器学习已广泛应用于数据挖掘、计算机视觉、自然语言处理、搜索引擎、医学诊断、证券市场分析、DNA 测序、战略游戏和机器人等诸多领域。 继续阅读全文 »
2017-06-16 工程技术 网络数据包的捕获、过滤和分析(Packet Capturing) 摘要 Packet Capturing Overview What is Packet Capturing How can it be used What is libpcap Debug Tools: tcpdump & WinPcap & snoop What is BPF What is gopacket 继续阅读全文 »
2017-06-12 工程技术 开源架构技术漫谈:基于Kafka构建事件溯源模式的微服务 概要本文中我们将讨论如何借助 Kafka 实现分布式消息管理,使用事件溯源(Event Sourcing)模式实现原子化数据处理,使用CQRS模式(Command-Query Responsibility Segregation )实现查询职责分离,使用消费者群组解决单点故障问题,理解分布式协调框架Zookeeper的运行机制。整个应用的代码实现使用Go语言描述。 第一部分 引子、环境准备、整体设计及实现 第二部分 消息消费者及其集群化 第三部分 测试驱动开发、Docker部署和持续集成 继续阅读全文 »
2017-05-29 工程技术 How Linux Works:Boots 摘要 一、How the Linux Kernel Boots 二、How User Space Starts 三、The Initial RAM filesystem 继续阅读全文 »
2017-05-26 站长信息 RiboseYim's Blog Root Catalog 摘要 一、Autobiography | 我的自传 二、过程改进 & 方法论 三、Information Technology 继续阅读全文 »
2017-05-24 工程技术 开源技术架构漫谈:应用程序的日志管理及可视化 摘要程序中记录日志的首要目的:Troubleshooting。通过记录程序中对外部系统与模块的依赖调用、重要状态信息的变化、关键变量、关键逻辑等,显示基于时间轴的程序运行轨迹,显示业务是否正常、是否存在非预期执行,在出问题时方便还原现场,推断程序运行过程、理清问题的方向。 本文将讨论在实现日志功能过程中常见的一些问题,包括基础API、格式化、日志转发及可视化等方面,代码采用Go语言描述。 继续阅读全文 »
2017-05-23 工程技术 开源技术架构漫谈:基于Go语言快速构建RESTful API服务 摘要 What is a JSON API? 启动一个RESTful服务 抽象数据模型 增加路径分发功能 重构:Handlers & Router 继续阅读全文 »
2017-05-12 工程技术 数据可视化(五)基于网络爬虫制作可视化图表 摘要 基于网络爬虫的可视化图表:golang,goquery 案例:最近十年全国彩票销售变化情况 案例:中国科学院院士分布 数据可视化技术方案:基于 SVG (D3、Raphael)、基于 Canvas(Echarts) 继续阅读全文 »
2017-05-12 工程技术 数据可视化(四)开源地理信息系统简史 摘要 开源 GIS 技术简史 1.1、GIS 的起源: MOSS and GRASS 1.2、GIS 的发展:GeoTools, GDAL, PostGIS 和 GeoServer 1.3、创新和教育:开源项目驱动 1.4、开源 GIS 的商业支持 Demo:A Full Stack Geo-enabled Internet of Things (IoT) Solution 继续阅读全文 »
2017-05-12 工程技术 Cyber-Security:国家队 防御 DDoS Protection With IPtables: The Ultimate Guide 道高一尺,墙高一丈:互联网封锁是如何升级的(2008-2015) 攻击 揭秘中国网络战部队 | DAVID E. SANGER, DAVID BARBOZA, NICOLE PERLROTH |2013年2月19日 Open Source IPFire | A hardened open source Linux distribution that primarily performs as a router and a firewall 扩展阅读《The Cyber-Security Master》 Cyber-Security: Linux 容器安全的十重境界 Cyber-Security: 警惕 Wi-Fi 漏洞 Cyber-Security: Web应用安全:攻击、防护和检测 Cyber-Security: IPv6 & Security Cyber-Security: OpenSSH 并不安全 Cyber-Security: Linux/XOR.DDoS 木马样本分析 浅谈基于数据分析的网络态势感知 Packet Capturing:关于网络数据包的捕获、过滤和分析 新一代Ntopng网络流量监控—可视化和架构分析 Cyber-Security: 事与愿违的后门程序 | Economist Cyber-Security: 美国网络安全立法策略 Cyber-Security: 香港警务处拟增设网络安全与科技罪案总警司 参考文献 数据包频度分析的网络代理加密流量特征提取方法 一种数据包频度分析的网络代理加密流量特征提取方法:本发明涉及一种基于数据包频度与数据包长度和时间戳之差聚类的机器学习Shadowsocks代理的加密流量特征提取方法,旨在为识别Shadowsocks加密过后的网页流量提供区分度大的流量特征。 Top VPNs secretly owned by Chinese firmsAlmost a third (30%) of the world’s top virtual private network (VPN) providers are secretly owned by six Chinese companies, according to a study by privacy and security research firm VPNpro.
2017-05-12 工程技术 SDN 技术指南(一):架构概览 摘要 Background:为什么需要 SDN SDN的主要解决方案 SDN的整体应用架构 SDN与网络安全 OpenFlow工作原理 OpenFlow在SDN架构中的角色 继续阅读全文 »
2017-05-09 工程技术 Cyber-Security:黑客与技术、产业及其精神世界 理解计算机的关键,则是要理解计算机背后的人。表面上这是一个机器的时代,但是实际上机器的社记者决定了我们的时代。 摘要 读书笔记|《黑客与画家》 继续阅读全文 »
2017-05-09 工程技术 概率论基础:从马尔可夫模型(Markov Model)到贝叶斯网络 摘要 马尔可夫模型(Markov Model ) 隐含马尔可夫模型( Hidden Markov Model ) 隐含隐马尔可夫模型的应用 马尔可夫链的扩展 —— 贝叶斯网络(Bayesian Network) 继续阅读全文 »