周其仁:停止改革,我们将面临三大麻烦

抛开立场观点不谈,且看周小平写一句话能犯多少语病

罗马尼亚的声明:小事件隐藏着大趋势——黑暗中的风:坚持做对的事相信未来的结果

布林肯突访乌克兰,为何选择去吃麦当劳?

中国不再是美国第一大进口国,贸易战殃及纺织业? 美国进一步延长352项中国商品的关税豁免期

自由微信安卓APP发布,立即下载! | 提交文章网址

腾讯技术工程

微信万亿数据仓库架构设计与实现

作者:remy没有足够的特征数据,安全策略将是"无根之木,无源之水"。微信安全数据仓库应运而生,成为整个安全业务的特征数据存储中心,每天服务了万亿级的特征数据读写请求,为整个微信安全策略提供了可靠的数据支撑,是微信安全基石之所在。然而,微信安全数据仓库不仅仅是一个存储中心,更是一个特征管理和数据质量管理的中心。在演进过程中,数据仓库一直致力于提升特征管理能力和数据质量保障,实现了特征的管理、共享、分析和数据质量检测等功能。本文将介绍安全数据仓库的起源、演进、当前的架构设计和数据质量保证系统的实现。业务背景安全策略开发流程安全业务的核心逻辑在安全策略中实现。整个的策略开发流程包括特征数据的收集,安全策略的编写实现,和策略的反馈评估。其中特征数据的收集是必不可少的环节,数据的质量将直接影响安全策略的效果。特征数据收集主要包括:数据接入、特征的计算、特征的存储。在数据仓库还未建立时,业务同学通过消费离线存储mmdata和tdw接入数据,通过Flink流式计算或者自定义模块对数据进行加工,计算出需要的特征,最终存储到自行维护的KV,然后在安全策略平台上编写安全策略,读取KV中的数据,
7月4日 下午 6:00

用ChatGPT搭建代码知识库,提升开发效率

算力支持,且调试过程耗时较长。第二种方法是利用嵌入技术(embedding)。通过嵌入模型,将特定知识转化为向量,然后将这些向量存入相应的向量数据库中。在查询阶段,通过相似度查询,匹配出关联的
6月29日 下午 6:01

减少40%“浪费”,软硬件一体项目敏捷管理新思路

鱼快创领是一家面向商用车领域的车联网公司,提供以车为中心的数字化服务,为交通运输物流行业带来更加绿色、安全、高效的智能网联解决方案,用科技推动行业进步。本文整理自鱼快创领项目管理专家唐骥在TAPD思享汇上的分享,为大家介绍鱼快创领如何专注于产品价值,通过TAPD探索出多场景软硬件一体化敏捷项目管理新思路。
4月28日 下午 6:00

写给开发同学的 AI 强化学习入门指南

基本上一窍不通,但是好在身处在这个信息爆炸的时代,去网上随便一搜发现大把的学习资料。像这个链接里面:https://github.com/ty4z2008/Qix/blob/master/dl.md
4月28日 下午 6:00

教会你使用AI绘画利器Stable Diffusion

上可以直接下载模型。用户只需要把CHECKPOINT格式的模型下载下来并放到stable-diffusion-webui/models/Stable-diffusion这个路径下就可以直接使用。在
4月25日 下午 6:00

开源图像模型Stable Diffusion入门手册

的工作方式是从以随机高斯噪声起步,向符合提示的图像一步步降噪接近。随着步数增多,可以得到对目标更小、更精确的图像。但增加步数也会增加生成图像所需的时间。增加步数的边际收益递减,取决于采样器。一般开到
4月11日 下午 6:00

微信、QQ 等600+业务都在用的PAG动效方案揭秘

内部设计了视频序列帧的格式,充分利用了视频的极限帧间压缩能力。另外视频的格式还可以在运行时利用硬件加速解码,从而获得更高的渲染性能。但它也有一个明显缺点,就是不支持透明通道。我们会在导出时,会将一张
4月4日 下午 5:51

如何与ChatGPT4结对编程提升研发效率

工具,并结合结对编程方法,从而在研发过程中实现显著的效率提升。重要提示:大家在作相应尝试的时候,一定要注意信息安全。场景一:正则表达式编写我们团队负责
3月30日 下午 6:00

GitHub重磅编程助手Copilot X上手体验

快速准确的生成你想要的代码,比如你要在提示词中定义好需要完成的功能、对任务进行拆分、确定输入输出、表达准确避免歧义等等,所以提示词的编写本身就会变得十分的重要,未来程序员的第一课可能并不是学习
3月27日 下午 6:00

腾讯发布AIGC发展趋势报告|64页PDF下载

模型加速成为新的技术平台,模型即服务(Model-as-a-Service,MaaS)开始成为现实,预计将对商业领域产生巨大影响。第三层是应用层,依托底层模型和中间层的垂直模型,各厂商进一步开放面向
3月23日 下午 6:00

谈谈架构设计

层。缺点:系统之间的交互要使用远程通信,接口开发增大工作量,但是利大于弊。3、微服务紧接着业务模式越来越复杂,订单、商品、库存、价格等各个模块都很深入,比如价格区分会员等级,访问渠道(app
3月21日 下午 6:00

GPT-4 重磅发布,有哪些升级和变化?

是一个大型多模态模型(接受图像和文本输入,输出为文本),目前虽然在许多现实世界场景中的能力不如人类,但在各种专业和学术基准上表现出人类水平。例如它通过模拟律师考试,分数在应试者的前
3月16日 上午 9:06

程序员“起名”头痛根治指南

名字无法表现含义时读者才会阅读文档。名字应该是有信息量的、无歧义的。以下一些策略可以增加名字的准确度:可读最基本的语法原理,是一个类(Class/Record/Struct/...
3月10日 下午 6:00

2023年最新AIGC绘画水平发展

的论文,在这之前让程序模仿任意一张图片画画是没法想象的。(来源:https://zhuanlan.zhihu.com/p/26746283)从纹理到图片风格其实只差两步。第一步也是比较神奇的,是
3月9日 下午 6:12

经典论文解读——布隆过滤器

后台开发工程师布隆过滤器是一种具有空间优势的概率数据结构,用于回答一个元素是否存在于一个集合中这样的问题,但是可能会出现误判——即一个元素不在集合但被认为在集合中。相信大家对布隆过滤器(Bloom
3月7日 下午 4:17

大牛书单 | 缓存系列好书推荐

在计算中,缓存是一种存储数据的硬件或软件组件,以便可以更快地满足未来对该数据的请求;存储在缓存中的数据可能是早期计算的结果或存储在其他地方的数据副本。当可以在缓存中找到请求的数据时发生缓存命中,而当找不到时发生缓存未命中。缓存命中是通过从缓存中读取数据来提供的,这比重新计算结果或从较慢的数据存储中读取要快;因此,缓存可以处理的请求越多,系统执行的速度就越快。为了具有成本效益并能够有效地使用数据,缓存必须相对较小。尽管如此,缓存已经在许多计算领域证明了自己,因为典型的计算机应用程序访问具有高度局部引用的数据。这种访问模式表现出时间局部性,其中请求的数据最近已经请求过,而空间局部性,其中请求的数据物理上存储在已经请求的数据附近。缓存可以说是无处不在,比如:PC电脑中的内存、CPU中有二级缓存、http协议中的缓存控制、CDN加速技术,无不都是使用了缓存的思想来解决性能问题。缓存是用于解决高并发场景下系统的性能及稳定性问题的银弹。本期《大牛书单》,我们请来了几位鹅厂同事,聚焦不同类型的缓存,为大家推荐一些相关的书籍。
3月2日 下午 6:00

ClickHouse 查询优化详细介绍

}}其中InterpreterSelectQuery::executeFetchColumns()函数是读取所需列的阶段。从代码中可以看到它也做了很多的优化:count()优化只有
1月6日 下午 6:00

腾讯云OCR性能是如何提升2倍的

响应到客户链路的传输耗时在测试过程中发现波动很大。文字识别业务场景下请求传输的都是图片数据,受客户网络带宽和质量的影响大。而且客户请求的文字识别服务在广州,请求需要跨地域,进一步增加了传输耗时。●
1月4日 下午 6:00

刷屏朋友圈的QQ小世界二次元生成器原理解密

是一个逐步地将正态分布的噪声叠加到图片上的过程,最终得到一张看起来完全是噪声的图片。可以不严谨地想象成往一块牛排上不断撒椒盐,直到它看起来完全被椒盐覆盖,看不清原来的纹路。而从左到右的
2022年12月22日

十多年前祖传代码重构——从25万到5万行

数组,发现不了问题,因为数组的变幻直接不符合基本法。解决此类问题,需联系上下文分析,最好是将代码单独提取出来,在单元测试/本地客户端测试复现,缩小代码范围,可以更快定位问题。而当代码量较少,编译器的
2022年12月1日

深入解读Raft算法与etcd工程实现

单成员变更-解决集群成员变更问题单成员变更的意思就是集群每次只变更一个节点。如下图所示,在单成员变更的方式中,变更前后的两个多数派一定存在交集,也就是变更过程中不可能产生两个
2022年11月24日

当谈论协程时,我们在谈论什么

CPU,性能较高,但因为处理都是基于回调,逻辑代码过于分散,导致代码开发效率不高,代码逻辑不易懂也容易出错。那是否有一种方式,可以综合二者的优点,同时又不会引入太高的复杂度,就可以解决
2022年11月18日

20场分享亮点抢先看!2022服务创新大会攻略出炉

如今,数字化的力量正深入生活的方方面面,为社会经济民生的发展带来肉眼可察的变化,在科技的助力下,实体经济不断焕发新机。在这数字浪潮下,互联网技术与服务设计如何惠及更多弱势小众领域?2022年AND服务创新大会聚焦技术公益领域,邀请了来自技术志愿者、公益机构、创投领域专家、科学界和公益领域媒体人等同台分享交流、探讨合作,与你一同探索服务创新如何创造更多的社会价值。《以人为本,关注技术公益背后的志愿者们》技术专才,是技术公益最核心的组成要素。腾讯技术公益为他们搭建连接公益机构的公益志愿者平台,为他们提供服务于公益机构的数字工具箱,以及即将推出的腾讯技术公益创投计划第二季让他们更好施展智慧与专业。只有把技术专才照顾好,技术+公益才会越来越好。《数字化赋能老年人精神心理健康管理》老年精神心理健康行动致力于让规范的老年精神心理健康服务走进社区,让更多的老年人就近获得有品质的服务。行动工作过程中形成了老年人精神心理健康全流程管理项目,并通过数字化能力孵化为信息整合平台,帮助提升老年精神心理健康行动的管理效率,并有效辅助开展效果评估。《科技让荒漠化防治更精准》荒漠化防治议题是自SEE基金会成立以来就所关注的。该议题下所做的工作应对于联合国发布的17个可持续发展目标中的13--气候行动和目标15--陆地生物。在近14年的项目实施过程中,项目团队先后将地理空间分析、遥感数据解译、大数据库管理等国内外主流先进的技术应运至项目管理、执行、监测评估的全过程中,大幅度的提升了项目的科学性和内伸性,为更加全面科学的开展荒漠化防治提供的有利保障。《科技为桥,弭平数字鸿沟》面对中国信息化快速发展与老龄化逐渐凸显的问题,夕阳再晨团队通过完善的孵化、教学、课程和管理体系,为高校青年志愿者赋能,开创了一套超大规模社区科技助老工作方法,用科技助老的方式,服务最需要的老年人,将志愿服务规模化。《本土NGO在海洋生物多样性主流化与互联网公益中的探索》在海洋生物多样性主流化进程中,不同保护主体普遍面临数据壁垒、参与方式单一、技术能力有限等挑战,尤其是对于国内公益机构以及NGO。以爱海豚公益计划(iDOLPHIN)为例,讲述社会机构如何更好的参与到生物多样性治理,将成为未来公共治理的巨大挑战。《云游长城背后的故事》“云游长城”小程序基于游戏技术,毫米级地复刻了位于河北的潘家口-喜峰口段长城,让大家在手机上就能身临其境地领略长城的美景,同时还能通过丰富的互动形式,学习科学修缮知识。让我们一起来了解数字技术应用在传统文化保护与传播领域探索背后的故事。《云开发助力技术公益》从技术公益的角度来讲,云开发可以降低开发门槛、提高开发效率,和微信生态的高适配性,又能为开发小程序提供极大便利。无论是青少年、残障人士还是非专业人士,都能用好云开发,把想法付诸现实,让更多人能参与到公益项目中。《所有的公益都需要技术公益》更主动更好地去拥抱信息技术甚至技术前沿,将会是很多公益项目进一步提升的机会,但是这个拥抱并不容易实现。本次将从媒体人角度谈公益组织该如何一步步的成为一个被“技术公益”赋能的面向未来的公益组织。《包容共益:企业如何通过利他的商业模式来改变世界?》创新,在工业时代往往表现为以效率为前提的范式突破。然而,随着数字资产成为全新的生产要素纳入经济体系,从效率优先向兼顾公平成为了可能。如何创造一个更包容、共同受益的世界?从“股东利益最大化“向”相关利益者利益最大化“的改变,重构服务设计普惠更广泛的人群,在技术向善的路径下有了可能,利他的商业模式如何改变世界?我们一起来探索吧。除了来自各行业的大咖外,大会还有八位来自腾讯CDC不同专业领域的优秀代表,带来他们在技术公益探索所得的经验分享。说到公益,怎能少了我们人见人爱的小红花呢?除了以上的精彩内容,2022年AND服务创新大会更有腾讯公益小红花首次担任TALK主持。在虚拟技术的支持下,小红花从平面走向立体,带你进入大会的每一个环节。如不方便莅临现场,欢迎参与线上直播,点击下方卡片即可预约哦。主办方合作伙伴福利环节即日起至11月15日,分享本文到朋友圈,集齐15个赞,将集赞截图发送至“腾讯CDC体验设计”公众号,并注明“AND服务创新大会”,即可获得60Q币,一共10个名额,先到先得。
2022年11月15日

万字图文讲透数据库缓存一致性问题

如果设置得太长,那么在触发双删之前,新请求看到的都是脏数据。更新数据库后删除缓存那如果我们把更新数据库放在删除缓存之前呢,问题是否解决?我们继续从读写并发的场景看下去,有没有类似的问题。时间线程
2022年11月15日

「递归」第三季Ep4:深耕源于热爱

我们为什么叫「递归」“递归”
2022年11月9日

大牛书单 | Redis好书推荐

2007年,他和朋友一起创建了一个网站,为了解决这个网站的负载问题,他自己定制了一个数据库——这个便是Redis。这位意大利程序员是萨尔瓦托勒·桑菲利波(Salvatore
2022年11月4日
2022年10月24日

从无栈协程到 C++异步框架

协程和调度器主要带来了以下这些优点:避免大量中间类的定义和使用.基于逻辑过程本身用串行的方式实现相关代码即可(可参考后续切场景的例子).更容易写出数据驱动向的实现.还有比较关键的一点,
2022年10月11日

虚拟内存 & I/O & 零拷贝

将指令分为特权指令和非特权指令,对于那些危险的指令,只允许操作系统及其相关模块使用,普通应用程序只能使用那些不会造成灾难的指令。区分内核空间和用户空间本质上是要提高操作系统的稳定性及可用性。2.1
2022年9月27日

CPU 是如何与内存交互的

这样的协议来维护一个状态机保证数据在多核之间是一致的。为了访问数据安全,便捷,迅速所以加了一层虚拟内存,每个程序在启动的时候都会维护一个页表,这个页表维护了一套映射关系。CPU
2022年9月22日

​探秘 Web 水印技术

数据,用作水印承载元素的背景图片平铺展示即可。这种方式不需要服务端配合,在前端就可以完成,且有助于减少请求和服务端资源开销。曾经面临的浏览器兼容问题现在也不再是问题,该方案已逐渐流行起来。SVG
2022年9月13日

终极 C++避坑指南

&&,而auto选择的是里面最简单的那一种。auto还可以跟指针符、引用符结合,而这种时候它还是满足上面“最简单”的这种原则,并且此时指的是“auto本身最简单”,举例来说:int
2022年9月6日

了解 HTTP 看这一篇就够

规定了八种方法,单词都必须是大写的形式,下面就来看看这些方法:GET:获取资源,可以理解为读取或者下载数据;HEAD:获取资源的元信息;POST:向资源提交数据,相当于写入或上传数据;PUT:类似
2022年8月11日

以小窥大:IO 卡顿探寻苹果文件系统

接口同步查本地图片是否存在,有则直接展示,否则从网络下载图片,下载完成时再尝试删除可能已有的旧文件。这完全是一个非常简单的图片缓存和加载逻辑。通过搜寻卡顿报告,发现子线程都疑似存在大量的并发
2022年8月4日

如何写一份高可读性的软件工程设计文档

42%”更为可信,也更方便读者做出自己的判断。忌佶屈聱牙例如上文,应改为“不要使用过于生僻的词汇,不要过度使用书面语”千万不要写文言文造句使用短句,不要使用多从句的复杂句式。-
2022年7月28日

数据仓库开发 SQL 使用技巧总结

后得执行逻辑,反推就可以得到以上结果。谓词下推谓词下推将查询语句中的过滤表达式计算尽可能下推到距离数据源最近的地方,以尽早完成数据的过滤,进而显著地减少数据传输或计算的开销。谓词下推案例--
2022年7月18日

​浅谈协程

该协程的时候,协程之前保存的栈内容,会被重新拷贝到运行时栈中,这就是所谓的共享栈的原理。测试代码具体的测试代码如下:stackless_co/stackless_co_test.cc#include
2022年6月30日

GPU 渲染管线和硬件架构浅谈

架构对移动端设备而言,控制功耗是非常重要的。功耗高意味着耗电、发热、降频,这会导致我们的游戏出现严重的卡顿或者帧率降低。带宽是功耗的第一杀手,大量的带宽开销会带来明显的耗电和发热。移动端
2022年6月6日

月活 12.8 亿的微信是如何防止崩溃的?

时,则通过,否则决绝。3.自适应优先级调整在大规模微服务场景下,服务器的负载是变化非常频繁的,所以服务器的准入优先级是需要动态变化的,微信分了几十个业务优先级,每个业务优先级下有
2022年5月25日

C++17 在业务代码中最好用的十个特性

严格来说,结构化绑定的结果并不是变量,c++标准称之为名字/别名,这也导致它们不允许被
2022年5月23日

【揭秘】那些当了程序员后才知道的事!

当程序员之前,江湖上总是流传着这些传说:格子衫忠实用户、个个都是黑客、不苟言笑、每天的工作就只是不停地敲键盘...当了程序员之后,才发现这些传说与现实差距这么大。今天他二哥就来吐槽一下,那些当了程序员后才知道的事!不知道大家是否都有同样的感受?欢迎来评论区分享!
2022年5月20日

在腾讯工作十年是什么体验

坚持以技术服务伙伴的理念。在这十年,不仅看到了我们的自研技术产品能够服务好公司内业务,同时也看到我们的技术走出去,为各行各业的客户带来了很多价值。希望能始终保持对技术包容和开放的心态,在新的十年把
2022年5月18日

一文带你了解 Prometheus

metrics_path:/metrics,所以如果暴露的指标抓取路径不同或者是动态的服务注册,最好加上这两个配置。不然会报错“INVALID“
2022年5月9日

从0到1详解ZooKeeper的应用场景及架构

节点有“临时节点”这个类型,它会随着客户端连接的断开而消失,同时节点类型可以选择顺序性,组合起来就是“临时顺序节点”,如下图所示:在根目录“/”下创建分布式锁“/Lock”节点目录,/Lock
2022年4月20日

2021年,腾讯研发人员增长41%,Go首次超越C++成为最热门语言

腾讯人最爱的编程语言是什么?这么多的程序员每天提交多少行代码,改bug要耗费多长时间等等?这些大家关心的问题,在今天刚刚发布的《2021年腾讯研发大数据报告》中给出了答案。这份由腾讯技术委员会出品的报告,全面披露了2021年腾讯在研发投入、研发效能、开源协同和技术公益等方面的重要数据。研发人员数量同比增长41%,持续投入基础技术研发2021年我国全社会研发投入达到2.79万亿元,其中76%由企业投入。腾讯也在研发领域持续加码,坚定投入基础技术研发。据报告数据显示,2021年腾讯研发人员数量同比增长41%,研发队伍不断壮大。新增研发项目超6000个,增量同比2020年增长51%;新增代码32亿行,增量同比2020年增长60%。作为网络安全的基石,操作系统一直是腾讯研发投入的重点领域,已经研发国产操作系统发行版TencentOS超十年。2021年,腾讯对外发布行业首家全域治理的分布式云操作系统遨驰,单集群支持10万级服务器、百万级容器规模,管理的CPU核数超过1亿。
2022年3月21日

C++ 学习笔记

模板参数推断1.函数模板的模板参数可以通过传递的函数参数进行推断。2.函数推断时会用到参数类型转换,规则如下:a.如果函数参数是按引用传递的,任何类型转换都不被允许。(此处有疑问,const
2022年2月28日

Golang 简洁架构实战

的参数传递还是通过结构体的变量传递?使用一个数据库的全局变量引用传递是否安全?是否存在过度耦合?在代码实现过程中几乎全部都是依赖于实现,而不是依赖于接口,那么将
2022年2月21日

2022年十大科技应用趋势 | 万字报告PDF

过去的一年是极不平凡的一年,新冠肺炎疫情持续延宕,世界经济复苏震荡不定;与此同时,数字科技正前所未有地渗透到经济社会的方方面面,一个更加智能泛在、虚实共生的时空正在全面展开。腾讯研究院近期访谈了重点领域的科学探索奖获奖人、业界权威专家,以及腾讯8大科技实验室的科学家和重点业务方向的专家,凝练出三大类、十个有望落地的科技趋势重点方向:云原生、人工智能、云网融合、云安全、量子计算等领域的新变革有望重塑信息基础设施;星地协同智能化、能源互联网、复杂任务服务机器人与信息技术的融合正迸发出强劲的跨界创新势能;万物孪生、扩展现实将进一步连通虚实世界,为人们创造全新的体验和数字生产力,让虚拟世界更真实、让真实世界更丰富。对十大技术趋势做了进一步的打开,根据技术成熟度和影响力,细分为IT重塑、网络革命、智能世界和
2022年1月12日

微信图片翻译技术优化之路

可以发现,图文合成的结果对于最终的图片翻译体验尤为重要。与正常图文合成不同,这里第一步需要擦除原图文字内容、保留原图的背景,之后将翻译文字贴回原图位置,而且文字清晰可阅读。2.5.1
2021年12月23日

C++ 智能指针最佳实践&源码分析

C++开发者而言,经常会使用静态单例来使得对象常驻内存,避免析构带来的问题。这势必会造成内存泄露,当单例对象比较大,或者程序对内存非常敏感的时候,就必须面对这个问题了。先以一个常见的
2021年12月20日