深圳幻海软件技术有限公司 欢迎您!

  • 2023 年云计算将走向何方?

    云计算市场发展迅速,预计在未来数年内将继续保持这一势头。随着需求的增长,了解最新的趋势和技术非常重要,这样您才能充分利用可用的机会。以下是您在2023年应该关注的一些云计算趋势:边缘计算的普及度越来越高边缘计算由于能够在更靠近数据生成位置的地方处理数据而迅速受到关注。随着越来越多的设备连接起来,边缘

  • 【论文导读】- Communication-Efficient Learning of Deep Networks from Decentralized Data(高通信效率的去中心化的深度网络学习)

    文章目录论文信息摘要主要内容(contributions)FederatedAveraging联邦学习隐私联邦优化联邦平均算法(FedAVG)论文信息Communication-EfficientLearningofDeepNetworksfromDecentralizedDataProceedin

  • 风控核心子域——名单服务构建及挑战

    引言名单服务是风控架构中重要子域,对风险决策的性能、用户体验、成本管控、风险治理沉淀都有重要影响,本文将详细介绍名单服务设计思路和实现。背景什么是名单?名单服务通常有几个部分组成:风险类型黑名单:绝对会被拒绝的用户。大部分是历史数据清洗出来作弊或者破坏业务的用户,这部分用户对企业无价值且放之进入会破

  • 基于 iframe 的微前端框架 —— 擎天

    vivo互联网前端团队-JiangZuohan一、背景VAPD是一款专为团队协作办公场景设计的项目管理工具,实践敏捷开发与持续交付,以「项目」为核心,融合需求、任务、缺陷等应用,使用敏捷迭代、小步快跑的方式进行开发及质量跟踪,简化工作流程,帮助团队快速迭代并高效完成产品开发交付。但早期VAPD以“一

  • chatgpt的一些思考

    中文RLHF大模型开发阶段,谁愿意手上有高性能的显卡可以支持文章评论处聊(审核不允许通讯方式)代码中,6B参数模型调试中,现在受显卡影响进度很严重结论国内同行对chatgpt的认识是不够的,太轻视这个模式的颠覆性认知chatgpt是对思维过程的仿真,rlhf过程就是通过强化学习方式在利用人思维过程训

  • 人工智能时代八大类算法你了解吗?(文末包邮送书6本)

    文章目录本文导读1.关联规则分析2.回归分析3.分类分析4.聚类分析5.集成学习6.自然语言处理7.图像处理8.深度学习9.书籍推荐(包邮送书6本)本文导读从零带你了解人工智能时代需要掌握的8大类算法,包括基础理论、关联规则分析、回归分析、分类分析、聚类分析、集成学习、自然语言处理、图像处理和深度学

  • 生产环境MQ集群一个非常诡异的消费延迟排查

    ​1、问题现象某一天,项目组一个同事向我反馈,他们使用公司的数据同步产品将MySQL数据同步到MQ集群,然后使用消费者将数据再同步到ES,反馈数据同步延迟严重,但对应的消费组确没有积压,但最近最近几分钟的数据都没有同步过来。那问题来了,消费端没有消费积压,而且通过查看数据同步平台该通过任务的同步状态

  • 如果让你自己设计一个分布式架构的中间件系统,该怎么做?

    ​这篇文章,给大家来聊一个生产级的中间件系统的架构设计实践,希望给对中间件系统感兴趣的同学一点启发。1、Master-Slave架构这个中间件系统的本质是希望能够用分布式的方式来处理一些数据,但是具体的作用涉及到核心技术,所以这里不能直接说明。但是他的核心思想,就是把数据分发到很多台机器上来处理,然

  • 数据质量动态探查及相关前端实现

    ​作者|董哲需求背景数据探查上线之前,数据验证都是通过写SQL方式进行查询的,从编写SQL,到解析运行出结果,不仅时间长,还会反复消耗计算资源,探查上线后,只需要一次探查,就可以得到整张表的探查报告,但后续我们还发现了一些问题,主要有三点:无法看到探查的数据明细以及关联的行详情,无法对数据进行预处理

  • API接口架构REST vs GraphQL

    无论是创建网站,还是移动应用程序,我们都需要通过API来传递数据,通过API我们可以获取到数据库中的数据,可以操作数据库,可以处理一些业务逻辑。现在最流行的API架构是REST。但是,GraphQL正在逐渐追赶着它。GraphQL是一种新型的API架构,它比REST更灵活、更高效,并且具有声明式数据

  • 一篇带给你Node.js 的Perf_Hooks

    前言:perf_hooks是Node.js中用于收集性能数据的模块,Node.js本身基于perf_hooks提供了性能数据,同时也提供了机制给用户上报性能数据。文本介绍一下perk_hooks。一、使用首先看一下perf_hooks的基本使用。复制const{PerformanceObserver

  • 裁员、减薪、项目延迟,疫情影响下,哪些行业在逆势增长?

    本文转自雷锋网,如需转载请至雷锋网官网申请授权。一场突如其来的新型冠状病毒感染肺炎给我们的经济生活、社会生活甚至是精神生活都带来了巨大的影响。但在整个过程中,并非所有行业都遭到了重创。据相关数据显示,本次疫情只在个别行业的局部损失较重。在Candor(一个美国调查机构)首页显示了实时名单,上面列出了

  • Netflix是如何实现每秒200万次的数据处理?

    Netflix是如何实现每秒200万次的数据处理,并查询超过1.5万亿行的数据?在推动技术创新升级的同时,还要确保Netflix始终如一的良好体验,这并非易事。如何才能确保更新不会影响到用户呢?如果确保我们的改进是可度量的呢?Netflix使用来自回放设备的实时日志作为事件源来获得度量,以便理解和量

  • 详解微服务架构中的数据一致性

    在微服务中,一个逻辑上原子操作可以经常跨越多个微服务。即使是单片系统也可能使用多个数据库或消息传递解决方案。使用多个独立的数据存储解决方案,如果其中一个分布式流程参与者出现故障,我们就会面临数据不一致的风险-例如在未下订单的情况下向客户收费或未通知客户订单成功。在本文中,我想分享一些我为使微服务之间

  • 高并发几十万的写入,Kafka是如何实现的?

     开篇当下流行的MQ有很多,因为我们公司在技术选型上选择了使用Kafka,所以我就整理了一篇关于Kafka的入门知识。通过技术选型我们对业界主流的MQ进行了对比,Kakfa最大的优点就是吞吐量高。Kafka是高吞吐低延迟的高并发、高性能的消息中间件,在大数据领域有极为广泛的运用。配置良好的

  • 不可不知的数据科学入门数学指南

    数学就像一个章鱼:它的「触手」可以触及到几乎所有学科。虽然有些学科只是沾了点数学的边,但有些学科则被数学的「触手」紧紧缠住。数据科学就属于后者。如果你想从事数据科学工作,你就必须解决数学问题。如果你已经获得了数学学位或其它强调数学技能的学位,你可能想知道你学到的这些知识是否都是必要的。而如果你没有相

  • 民生银行数据中台体系的构建与实践

    在大数据、人工智能、区块链等新兴技术的驱动下,各家银行纷纷利用新技术制定数字转型改革战略,寻找差异化经营的可行模式。民生银行积极推进改革转型,2018年在“民营企业的银行、科技金融的银行、综合服务的银行”战略指导下,民生银行从科技视角制定了“技术+数据”双轮驱动的改革方案,全力打造以客户为中心的数字

  • 起薪2万的爬虫工程师,Python需要学到什么程度才可以就业?

    爬虫工程师的的薪资为20K起,当然,因为大数据,薪资也将一路上扬。那么,Python需要学到什么程度呢?今天我们来看看3位前辈的回答。1、前段时间快要毕业,而我又不想找自己的老本行Java开发了,所以面了很多Python爬虫岗位。因为我在南京上学,所以我一开始只是在南京投了简历,我一共面试了十几家企

  • 用大白话告诉你小白都能看懂的Hadoop架构原理

     Hadoop是目前大数据领域最主流的一套技术体系,包含了多种技术,例如HDFS(分布式文件系统),YARN(分布式资源调度系统),MapReduce(分布式计算系统)等等。有些朋友可能听说过Hadoop,但是却不太清楚它到底是个什么东西,这篇文章就用大白话给各位阐述一下。 假如

  • 你还在盲目跟风学Python?你真的了解吗?某华大学教授有话要说

    你觉得Python真的好吗?或许你在漫天的宣传中看到了这些:接近英语的简单语法;开发环境简单,能打字就能写代码;众多的第三方库;解释执行,不需要编译;跨平台,方便移植;但是作为一个负责任的假程序媛,要跟你说的是:就算再简单的语言,也得学才会会,不要在好不好,真的好不好这些事情上下功夫,要在怎么学如何

推荐阅读