自研Java分布式产品如何技术选型，有哪些比较好的技术推荐？ (云数据库 选型）

本文导航

自研Java分布式产品如何技术选型，有哪些比较好的技术推荐？

一个非常好的问题。推荐Java + Spring Boot，详细功能组件介绍如下。Java是主流开发语言，应用普遍，Spring Boot是常用框架，有丰富的组件和易用功能，在电商系统、信息管理系统、各种企业应用开发中处于垄断地位。一，系统架构基本框架可分为接口服务、数据层、异步任务调度、业务处理、日志监控等几大模块。 1，集成ActiveMQ消息队列，平滑高峰期负载高峰期时，为了及时处理响应客户端请求，系统架构中引入ActiveMQ消息队列，异步处理业务数据，将瞬间高负载平滑，保障运行稳定，架构易扩展。2，集成Redis缓存系统，提高数据读写效率，并支持故障恢复数据保存到Redis缓存中，和使用内存相比有两个优点：1）在架构上支持集群扩展，多个服务器节点时，处理业务逻辑读写数据时，通过Redis系统保持一致。2）在服务重启或者发生故障时，可以恢复当前处理的业务数据。3，集成WebSocket，实时更新数据到后台管理页面，又不增加服务器负载如何更新显示数据或者状态信息到后台管理页面中？有两个方案可选。1）定时调用接口，为了及时显示，定时任务执行频率会设置的比较高。这样就带来两个问题，首先是增加服务器负载，其次是在没有新数据时，仍然需要频繁的调用接口。2）WebSocket推送数据，业务处理服务在收到新请求或者状态发生变化时，推送数据到后台管理页面，不仅做到了信息实时显示，而且占用服务器资源非常少，在多个管理后台打开页面时，不额外增加服务器负载。二，功能组件介绍1. 数据层，MySQL数据库，MyBatis持久层，Flyway版本化管理数据库SQL脚本，Ali Druid连接池等框架。Hibernate是另一个经常使用的持久化框架。MyBatis Plus对MyBatis做了进一步增强、简化开发和提高效率，并且提供了简单易用的代码生成器。 2. 缓存系统，最常使用Redis，也可选用MongoDB等其他NoSQL数据库。3. 异步消息队列，常用ActiveMQ，RocketMQ，RabbitMQ，Kafka，考虑部署维护的复杂度，根据项目的业务量选择。 4. JSON数据处理，常用Fastjson，Gson，Jackson，Json-lib，推荐Fastjson。5. 开发工具包，常用Apache Commons套件，lang, collections, codec, io等功能库。6. 异步任务调度，复杂耗时任务，使用Quartz框架异步执行。小型项目可以使用Spring框架自带的Schedule。 7. 单元测试JUnit + Mockit，覆盖功能函数，保障代码质量。 8. 日志系统，集成LogBack，接入LogStash配合ELK分析处理。 9. 服务监控，使用Actuator等框架实现运行信息收集和报警，配合图像化展示工具，比如Prometheus + Grafana + AlertManager10. Swagger接口文档，将代码和文档融合一体，在修改代码的同时维护文档。11. Postman接口调试工具，导出脚本文件方便团队协作，并且可以自动化运行。三，功能组件列表 四，部署运维推荐使用Docker容器，启动本地开发环境，自动化运维部署。阿里云容器镜像服务+Git+Docker镜像自动构建系统。 我是工作多年的Web应用架构师，陆续发布关于软件开发方面的文章，欢迎关注我，了解更多IT专业知识。

分布式任务调度框架选型，如何选择一个合适的框架？

这类开源的项目很多，给你推荐2个我之前分享，都是基于.NetCore的开源项目：1、ScheduleMaster 项目简介这是一个基于.Net Core构建的简单、跨平台、模块化的分布式任务调度系统。界面清爽大气、功能完备、高可用、数据安全，代码结构清晰，开发效率高，整体来说一个非常不错的系统。技术架构1、跨平台：这是基于.Net Core开发的系统，可以部署在Docker, Windows, Linux, Mac。2、数据库支持：Microsoft SQL Server, PostgreSQL, MySQL。3、技术栈：ASP.NET Core3.1、EntityFramework Core3.0、Mysql5.7、Quartz.Net。详细介绍：推荐一个基于.NET Core 3.1开发开源的分布式任务调度系统2、Host 前后端分离架构项目简介这是一个基于.Net 5+Quartz.NET 3构建的简单、跨平台任务调度系统。系统业务简单、代码清晰，如果您只是单纯只需简单任务执行、监控、提醒这套系统就非常适合。没有多余的功能，简单扩展下基本可以满足日常需求。技术架构1、跨平台：这是基于.Net Core开发的系统，可以部署在Docker, Windows, Linux, Mac。2、数据库支持：MySQL、Oracle、Sqlserver、Sqlite、Npgsql、Firebird、SQLServerMOT。3、采用前后端分离框架。4、接口支持RESTful风格，配置简单。5、基于.Net 5+Quartz.NET 3 + Docker + Angular开发。详细介绍：.NET5.0和Quartz.NET开发的极简任务调度平台

阿里云和华为云谁技术好？

个人觉得是阿里云，因为从阿里云和华为云的技术战略定位上，很容易就能分出高下。前两天看新闻的时候，刚好看到阿里云召开的北京峰会上，阿里云新上任的总裁张建锋多次提到，“未来阿里巴巴100%的业务要跑到公共云上”、“未来阿里巴巴的所有技术输出、产品输出、2B的服务都要通过阿里云”。不知道大家看了什么感受，反正我从这些话中能清晰地感受到阿里巴巴向外界传达的声音：阿里巴巴会大力支持云的发展，未来整个阿里巴巴集团的技术就是一盘棋，都会在云的基础上实现统一。 不得不说，阿里云在技术战略定位上一直是非常坚定不移的，早在2008年，许多人还没有意识到云计算的巨大潜力时，马云就坚定地认为应该做云计算，并且开始布局。当阿里云的发展面临困境，内部出现质疑声的时候，马云又宣布要给云计算每年投入10个亿，再次坚定地表达了要做云计算的决心。也正因如此，在阿里巴巴集团内部，阿里云一直有很高的地位。但是华为云就不一样了，我还记得前段时间在华为心声社区看见过一篇帖子，刚才又去搜了一下，帖子是华为云的一位员工写的，题目叫做《#华为云#听从你心，无问西东》。在帖子里，这位员工毫不避讳地指出了华为云存在的很多问题，比如云战略不清晰，混合云、私有云、公有云山头林立等，言语间透露着失望与怀疑。看了这个帖子，我都替华为云捏一把汗。毕竟，华为云从开始筹备到现在才刚走过3年，内部的分化就已经这么严重，今后又该何去何从……如果大家有兴趣，还可以搜索一下华为高管涉及云计算话题时对外演讲的关键词，你就会发现，不一致的地方其实有很多。从这之中也能看出，华为高层做云计算的决心并不坚定。员工不理解，高层不坚定，华为云的技术又怎么可能超过阿里云呢？所以当然是阿里云的技术更好了。

如果mysql社区版也收费，会有人用国产数据库吗？

收费不收费与数据库的国籍并没有什么关系，与业务的处理能里和效率等等所涉及到的数据库的选型有关。如果国产数据能达到国外数据库的性能以及稳定性，以及支撑服务或高于国外的数据库，相信，有很多场景会优选国产数据库，否则，将没有市场，只能靠政策强推产品

有什么好用的数据可视化软件？

干货预警，全文12288字，配图100+，阅读需要20分钟。赶时间的朋友先点赞▲收藏★评论~给大家推荐四款免费的可视化工具分别是：Excel、Power BI,Fourish网站、镝数图表。E01.Excel数据可视化到底有多强大？1-1.到底什么是数据可视化？数据可视化，可以帮助我们更具象地了解一个事物的特性。例如中国的人口东多西少，利用地图就能很好理解，差异大概有多大。中国县级市/区分布图1-2.零基础有哪些值得学习的可视化工具？给大家安利了2款软件和2个网站工具，通过接触这4款工具，也能快速做到举一反三，迅速上手其他可视化工具。工具1：Excel推荐Excel的理由有很多：01.普及率高、可定制；02.入门简单、自由操作度高；03.方便与PPT结合展示，工作场合最广泛。也建议日常要处理报表同学都是从Excel学起。有人会觉得Excel的可视化比较差，那是因为绝大多数同学不知道：主题配色、排版，装饰元素等等细节问题。下面就给大家看看Excel的作品：工具2：Power BIPower BI也是微软出品的可视化工具，原来是基于Excel的三大插件:Power Query、Power Pivot Power View组成。它图表丰富、有第三方图表库，可在线分享报表。可视化作品如下：工具3：flourish网页网址：https://flourish.studio/这是一个国外的动态可视化网站，只需要导入数据，就可以实现一些超棒可视化效果，如下：工具一、Excel对于普通的白领职员，刚开始还是建议学习Excel可视化表达。其实不管你学习什么工具，基础图表的原理都是相通的。如果简单的数据可视化，Excel的普及率、兼容性和在数据储存、数据分析、数据呈现都有着坚实的基础。还有最重要的一条是，某些领导就是要看Excel文件。对于基础的可视化需求，Excel就足以实现了。太难的图表即使自己会做，还经常要跟领导/观众解释一番。最近整理了关于Excel数据可视化表达的知识点，并且做了相关案例演示和配套练习资料。文笔差，直接上课件案例（部分）01五种主流可视化表达形式01.REPT函数02.条件格式03.迷你图04.三维地图全国地级市（台湾除外）全国县城/区分布（台湾除外）05.Excel图表还想了解更多的内容，请参加我们的课程呐~由于每个行业都有很深的学问、甚至每个公司的表格、数据输出的列都不一样。这里建议同学们好好学习数据看板制作的原理，再根据自己公司的业务需求和自己对业务的理解，制作属于自己的可视化报表。一、Excel数据大屏，自动化 Excel方面就是普及率高，每个人电脑几乎都有Excel，打开就可以浏览或修改。Excel也可以做错出挺棒的自动化模板，如下：我在2020年根据自己工作经验制作的《Excel数据大屏，自动化模板》受到许多同学的认可，因为之前很多工作内容就是搞表格和搞PPT的。说到制作自动化数据看板，还是Power BI 功能会更出色。不管Excel也好、Power BI也罢，甚至Tableau，Python……，它们都是工具，大家根据自己实际情况学习和使用就好。个人不太建议，原来没有编程基础的同学，因为临时偶尔不重要的一个工作任务去学习Python类可视化报表哈。虽然我日常也会恰这类的饭。如临时需求，建议找一些专业的外援制作效果应该更好哦。二、Power BI 自动化模板 许多同学看过我做的Excel自动化模板，其实Power BI自动化模板也不错。它比Excel的可容纳数据量更多，可视化功能更简单和丰富、可以发布网页上等优于Excel的特点。《Power BI自动化模板》下面的Power BI网红动态条形图模板，就是利用Power BI制作。如果又新的数据，刷新即可生成新的报表。可能大家对Power BI还是挺陌生的，它是由微软出版的商业可视化报表软件，而且是完全免费。制作数据看板，它可以轻松跨越多个报表之间，实现数据关联。图表之间也能轻松交互。Power BI主要有三大模块功能组成。分别是Power Query、Power Pivot和Power View。 01.Power Query功能 Power Query主要功能是获取数据、整理数据。用了12节课演示了常用的数据处理技巧、数据有哪些问题，和如何进行数据清洗。教大家如何爬取电商手机商品数据、豆瓣电影TOP250数据。 02.Power Pivot功能 Power Pivot主要是数据关联和数据建模的内容。如在多对多关系如何搭建维度表链接2个数据源。如何建立一个最高频的维度表，日期表。 03.Power View功能 在Power View介绍了各种基础图表是如何绘制的，如何从第三方视觉对象。一共介绍了25个系统图表的绘制。列举了分组、筛选和排序功能的重要性。如何制作出让人看得明白的可视化报表。 04.综合实践，自动化数据看板 最后是综合所有的内容，完整做出一个系统的，多数据报表关联的数据看板。此处列举了社区团购、知乎号、公众号三个系统报表的制作。这个公众号从19年8月还是21个粉丝，到目前的3.5万粉丝。也感谢大家的关注和支持呢。（1个月，我的Excel公众号从23粉丝涨到1088知乎er！）阅读量也从最开始的200涨到下载的1800左右叻。知乎是从15年就注册玩了，也是经历好久才达到了5万粉丝呐，好久也没有复盘过知乎的内容。就借着这个做课程的机会，顺便把自己的粉丝也盘点了一下。当然，后续我们还会添加补充同学们反馈比较多的问题，让大家在这一门课程就能够轻松上手Power BI并能完成难度一般的数据报表制作。

企业ERP、BIM选型，是否也需要一个“大众点评”？

做为一个业内人士，我首先要强烈的表达出一个意思，那就是反对！反对！反对！原因很多，待我逐条分析。一、对于这种专业的关系型数据库的企业信息化管理软件，没有专业知识的普通人是无法评判其好坏，也无法分出孰高孰低。二、专业的软件，需要专业的管理人才和管理团队的。人和团队不专业，使用效果会大打折扣，甚至可能会影响正常的运营。三、相关行业没有有足够的能力和影响力的组织能组织起一场公平公正公开的评判。四、公正的让人信服的，让人认可的裁判哪里找。五、经费哪里来？人员哪里来？办公地点在哪里？这种团体是公益组织还是以盈利为目的的公司，还是费盈利性组织？评比结束后是否长期存在。六、评比后是否能对产业产生积极向上的促进作用。由于目前国内的类似软件良莠不齐，参赛的门槛低了，没有意义。参赛门槛高了，又无法服众。何况还有企业根本不会参与这种无聊的活动。即使办成功了，也不会有影响力。我是七零后，一个信息化从业者。同意我的观点请点赞加关注！私信交流。

数据可视化工具有哪些？

市面上的数据可视化工具很多，大体分为3类：1、专业图表制作类，专业的图表制作网站/软件，针对性的制作一些可视化图表，一般不带有数据处理功能2、开发工具，比如python，调用第三方可视化库可以制作非常个性化的可视化图表，门槛高，要会写代码3、零代码可视化分析工具，比如BI工具，操作简单，门槛低，自带数据处理功能，适合普通的业务人员或者数据分析师专业图表制作网站1、Flourish推荐人群：可视化爱好者我用过最好用的免费可视化在线网站，拥有非常丰富的可视化模板，操作非常便捷，个性化程度稍微差一点，唯一的缺点是界面全英文，看起来有点费劲2、图表秀国内免费的在线图表制作工具，支持自由布局与联动交互分析。主要看中它几点：图表新颖丰富，操作简单一键替换，支持一键导出PPT、在线动态数据展示。不过和大部分图表制作网站一样，个性化程度不高，样式受模板限制。除了这种综合性的图表制作网站，还有针对地图、词云图等特殊图表制作的网站，比如：数据地图：PolyMaps词云图：微词云开发工具1、E charts百度出品的开源免费的javascript数据可视化工具，专为大数据量可视化设计的，数据实时展现，需要一定的代码能力2、D3.js开源的可视化库，在 JS 绘图界的地位很靠前。功能非常强大，灵活性高，很多其他的库都是基于它所开发。非常适合开发者学习研究，需要牛逼的编程功底，门槛较高。3、Highcharts国外的产品，对标的是E charts，两者用起来差不多，图表种类也很丰富，不过和E charts一样都需要进行二次开发，它的优点是它有详细的文档，示例和详细的 CSS，产品稳定性好，缺点是商用版付费。零代码工具1、tableau全球知的数据可视化工具，除了可视化图表制作，还带有数据处理、数据连接功能，是一个专业的数据分析工具，操作简单，图表设计也比较简洁，个性化程度高用。入门门槛低，一般的业务人员就能上手，缺点是免费版功能有限，收费版对于个人用户来说有点贵。2、FineBI和tableau类似的一款数据分析工具，国产的，图表制作方法和tableau基本差不多，也带有数据处理、数据链接功能，主打的是数据分析，可视化图表非常丰富，而且带有智能图表推荐功能。操作相比于tableau更加符合中国人的使用习惯，而且个人版免费，功能和收费版相比，没有阉割

为什么传统行业几乎都用Oracle，而互联网行业几乎都不用Oracle呢？

首先银行要求绝对稳定性，使用付费不开源产品可以完全责任委托，而且数据库厂商还会有专门维护，省心，省力，安全。mysql呢，开源产品，稳定性没有o高，如果要深度开发倒是很省事，不过使用mysql就完全要看自己了，银行不会为了一个随时都有可能出现意外的定时炸弹找专门团队维护，而且银行交易量很大，但并非像互联网应用一样超级并发，大部分都是内部接口使用，而且分地区都是不同的服务器，每个地区只存储自己相关的数据，比如你从广东给山东异地转账，原始山东账户里并不存你的记录，转了之后山东数据库才有记录，在依赖oracle商业委托的基础下，银行还会有对账，来保证数据一致性。但是反观互联网企业就不一样了，超级并发，小型机已经不满足这种并发条件了，哪怕oracle足够优秀，所以要使用应对更高并发特制的mysql，需要有专业的团队进行维护，稳定性不如oracle，不过分布式集群可以避免这种情况。而且mysql因为开源还可以针对自己的需求特制功能。不过大部分企业用不上[捂脸]，小公司用啥都一样。阿里重新开发mysql除了自己用外还可以卖服务。再说一句，阿里其实弃o选m其实除了并发问题，还因为oracle太贵，因为企业要考虑收支，就算阿里利润率也比不上银行[灵光一闪]