智能大数据平台介绍

智能公共安全大数据平台的介绍ETL PaaS平台（ESB企业服务总线）多合一（逻辑）服务接口（通过策略配置）多合一（逻辑）所有类型的公共安全公共安全数据社会数据其他数据各种智慧城市应与Hadoop集群应用程序集成. 公共安全应该是该国的永久居民. 国家安全罪犯不能纳入公共安全应用程序. 请求服务接口请求服务接口. 大数据系统整体架构设计. 其他省份数据公共安全大数据价值公共安全大数据应用可以更改的内容: 大数据集成和数据干预大数据软件和硬件有效地，广泛地响应国家协作请求（现场数据查询许可）数据干预方法: 从“国家合作请求”中的数据应用经验中学习，并就本地数据进行性行为干预. 多个数据源ETL数据转换数据分类数据提取字段映射数据提取数据清理生产其他数据源文本文​​件其他数据源异常数据清理规则数据过滤待清理数据转换有效数据错误文件数据清理转换规则目标模型匹配有效数据数据转换和导出规则，中间结果，文本文件，文件数据收集，并导出到数据仓库以供其他用途. 数据提取过程中，掌握典型乡镇的干预措施. 文件系统Hadoop安装，配置，监视，警报部署Map / Reduce磁盘计算框架Oracle 11G大数据软件和硬件加速多合一性能领先的服务器比较服务器类型硬件配置单个查询效率比较查询效率相关查询效率普通机架类型服务器的32核CPU，32GB，10Krpm SAS硬列表表为2亿个，自定义条件查询约为100秒，精确的ID卡查询为2.4秒.

1000万和1000万数据的比较大数据esb，至少30分钟，一个2亿数据的表，单人与酒店同房检查3.5秒. （批处理执行速度非常慢. ）一个表中有2亿只多核32核CPU，128GB，15Krpm SAS硬盘，自定义条件查询约10秒，准确ID查询约0.5秒. 比较1000万和1000万个数据，在10秒内完成一个2亿个数据的表，然后在300秒内与酒店在同一房间内检查170,000维族人. 单查询0.1快速查询或分析: 速度如何？算法越复杂，速度就快十秒钟: 一个数据加速设备，在10秒内完成各种查询，在100秒内完成各种自定义条件数据以接触实际应用: 170,000维吾尔，以及与酒店运行同一房间，结果670,000条记录（太重），300秒，酒店数据超过2.3亿个大数据软硬件加速情报协作: 由新疆霸州局，16个省市发起响应共享数据查询权限，共享数据应用经验城市3昌口，临时，车辆嫌疑人，出入境城市1稳定（关系）人员信息城市2轨迹信息验证信件策略共享C2C模型案例数据高风险人群轨迹数据互联网资源策略共享，数据共享，多种应用模式服务是什么: 高级查询，数据收集集成了各种查询技术之后，可以进行相关查询，关系查询等高级请求服务.

策略=超过一百种服务实际数据应用经验. 每种策略都可以用作发布可以集成的公共安全服务（某些资源）的服务. 资源名称数据量提供服务5,000万到5,000万到2.2亿以上的元素服务文本服务（文本）关系服务自定义服务被拘留者的基本信息与监狱相同的信息以及常规口数据的相同单元格信息旅馆的临时居住地信息的公共安全信息中的相同家庭关系临时安全数据的含义1，与旅馆相同的时间段信息2，相同的旅馆和相同的房间字母3，相同的来源和相同的酒店同期信息网吧信息相同网吧同期信息铁路信息1大数据esb，同一列车同一列车号2，同一列车同一列车号同一车民航信息同期飞行分析，警察综合信息，共同参与人员信息，嫌疑人，列表信息，类似，普通电话号码溶解，车辆通过信息，同时期，车辆，信息，流动人口，居留证，信件，亲属关系以及的形式和手段. 不断变化的战术模型本身也需要不断发展. 战术配置器不需要编写任何程序代码，而只需选择实体，拖放关系和设置参数，系统就会自动生成相应的后台程序. 提供服务集成而无需仁慈，并且具有强大的可视化分析能力. 需要通过ESB补充服务请求服务资源名称. ESB支持功能. 国家常住人口ETLPaaS平台（ESB企业服务总线）多合一机器（逻辑）服务接口（通过策略配置）多合一机器（逻辑）各种公共安全内部应该是公共安全数据社会数据其他各种智能城市的数据应该是Hadoop集群应用程序，可以集成到公共安全中应该是该国的永久人口，全国范围内的罪犯不能集成到公共安全应用程序中请求服务接口请求服务接口系统总体架构设计省级数据适用于公共安全应用程序无法集成的ESB可用于集成外部应用程序. 企业服务总线（ESB）服务门户Web接口总线互连外联网用户内联网用户服务控制服务日志服务配置服务监控服务管理业务流程引擎服务服务目录数据存储公共安全八个其他服务服务适配器交通警察灵活配置动态刷新高加快存储和转发ESB的要求: 安全，稳定，高效，便捷的高速公路要发布的非侵入性服务和各种请求服务执行合并的PaaS服务发布监视平台支持电子邮件，SMS和其他警报PaaS平台应用程序监视PaaS系统报告查询PaaS平台安全认证设计安全认证中心Tcp访问SSLTcp访问通道安全配置数据认证通道信息ESB域认证中心与ESB数据交换: 1.认证中心获取安全配置​​信息来自ESB的频道.

2. 认证中心将认证的数据发送到ESB，以便ESB可以控制服务调用. Tcp访问Jms访问Http访问认证通道信息缓存系统A系统B认证中心与ESB之间的数据交换: 1.认证中心从ESB获取通道的安全配置信息. 2.认证中心将认证后的数据发送到ESB，以便ESB可以控制服务调用. 系统还可以根据ESB认证规范来实现客户端认证. 使用ESB客户端完成身份验证和服务调用. PaaS平台权限管理设计

本文来自电脑杂谈，转载请注明本文网址：
https://www.pc-fly.com/a/jisuanjixue/article-266343-1.html