摘要：本发明提出了一种数据访问方法、数据访问装置、计算机装置与计算机可读存储介质，其中，数据访问方法包括：接收任一端节点发送的数据访问请求；提取任一端节点的端节点标识，将端节点标识分配至数据访问请求；根据API接口的配置规则判断数据访问请求的安全性；当数据访问请求的安全性合格时，响应数据访问请求，并将响应结果发送至与端节点标识相匹配的任一端节点；当数据访问请求的安全性不合格时，驳回数据访问请求。本发明提出的数据访问方法，保证了数据访问的安全性，实现由外部网络通过API接口接入内部网络，并且，由于API接口函数能够根据灵活设置，因此，可以灵活定制配置规则，满足不同的业务需求。

摘要：本发明提出了一种目标群体的显著特征的计算方法、系统、计算机设备及计算机可读存储介质，其中目标群体的显著特征的计算方法包括：获取目标群体的多个维度特征，其中每个维度特征包括多个类别特征；计算目标群体与每个维度特征之间的相关性，获取多个相关性系数；根据相关性系数对多个维度特征进行筛选，获取多个第一类维度特征；计算第一类维度特征的每个类别特征的群体偏好度指数；比较群体偏好度指数与第一预设阈值的大小关系，将大于第一预设阈值的群体偏好度指数对应的类别特征作为目标群体的显著特征。本发明可以大大缩短TGI指数的计算时间并且不需要人工的干预，极大的提升了效率，降低了业务门槛。

摘要：本发明提出了一种大数据计算方法、大数据计算系统、计算机设备、计算机可读存储介质。其中，大数据计算方法包括：获取待处理任务，根据待处理任务提交计算作业至Spark计算引擎；将计算作业提交至作业列队中；判断Spark计算引擎中是否具有调度计算作业所需的物理资源；在Spark计算引擎中具有物理资源时，调度计算作业；控制计算作业加载计算数据，并对计算数据进行计算，以生成计算结果；存储计算结果。本发明基于大数据Spark的分摊计算引擎，充分利用了Spark强大的分布式并行处理和内存计算能力、快速查询的优势，提高了计算任务的并发数量，提升了多维度分析计算的效率。

摘要：本发明提供了一种多维数据动态关联查询方法、装置、计算机设备和介质，其中，多维数据动态关联查询方法，包括：根据业务需求信息、需要显示的字段信息和业务数据库，构建多维数据关联模型；根据所述多维数据关联模型，按照预设规则，拼接查询语句，并生成查询结果集；根据所述多维数据关联模型，确定业务关联数据集中写入字段的位置索引；将所述查询结果集中的值信息对应的写入业务关联数据集中写入字段的索引位置中。通过本发明的技术方案，可以实现在不修改表结构和增加开发工作量的同时，实现多维数据动态关联展现，实现更加简单有效，灵活性更高。

摘要：本发明提供了一种分布式锁生成方法、装置、计算机设备和可读存储介质，其中，分布式锁生成方法，包括：获取对共享资源的锁定操作请求；当共享资源未被锁定时，根据锁定操作请求，生成第一锁定操作请求信息，并存储于对应的第一分布式节点；发送第一锁定操作请求信息至除第一分布式节点外的多个第二分布式节点并获取对应的第一反馈信息；根据第一反馈信息，确定是否生成对应的分布式锁。通过本发明的技术方案，各个分布式节点自动协商来决定分布式锁的生成，减少了因单一的集中式锁故障导致的业务整体瘫痪问题，提高了共享资源的利用效率，减少了多个分布式节点的相同锁定操作请求被重复执行的问题，节省了资源，提升了服务器性能。

摘要：本发明提出了一种Web数据采集方法、Web数据采集系统、计算机设备、计算机可读存储介质。其中，Web数据采集方法包括：布置待加入虚拟机的爬虫环境；获取待加入虚拟机的IP地址，并将IP地址添加至主节点配置中；控制主机更新运行脚本，以使待加入虚拟机和已加入虚拟机获取最新运行代码；当接收到待加入虚拟机的任务启动指令，根据最新运行代码执行任务启动指令，以使待加入虚拟机加入至爬取网站的集群中并开始Web数据采集。本发明实现了数据源大量增加时，Web数据爬取上和存储上的横向扩展，提高了爬取数据和存储数据的效率，在有限的时间内完成数据的采集。

摘要：本发明提出了一种作业调度方法、作业调度系统、计算机设备、计算机可读存储介质。其中，作业调度方法包括：根据运行环境配置相应的调度作业；获取一个或多个调度作业，将获取的调度作业配置为工作流；设置工作流中调度作业的执行顺序；按照执行顺序对调度作业调度执行，以生成调度执行结果。本发明充分利用了少资源低成本来进行调度，实现了简单轻量的调度，避免了很多繁多的调度工具，避免了资源的浪费，节省了成本。

摘要：本发明提出了一种数据库扩展控制方法、控制系统、计算机装置及计算机可读存储介质，其中，数据库扩展控制方法包括：在业务系统正常运行时获取用户请求，获取数据库中与用户请求相对应的第一对象实体；对第一对象实体进行处理，判断第一对象实体中是否存在需扩展字段；当第一对象实体中存在需扩展字段时，判断需扩展字段相对应的扩展表是否存在；当扩展表存在时，在扩展表内扩展需扩展字段；当扩展表不存在时，在数据库内扩展扩展表，并在扩展后的扩展表内扩展需扩展字段。本发明提供的数据库扩展控制方法可以在不宕机的情况下更高效更安全地对数据库进行动态扩展，能够快速轻便地实现“用户定制”，提升数据库的性能，便于用户使用。

摘要：本发明提供了一种数据缓存优化方法、装置和计算机设备。一种数据缓存优化方法，包括：将一级缓存和二级缓存进行整合，得到缓存服务，并通过接口方式对外发布缓存服务；为缓存服务创建缓存配置文件；根据缓存配置文件对缓存数据进行配置，并对配置后的缓存数据进行缓存。通过本发明的技术方案，只要通过统一的API接口调用，并根据缓存配置文件对缓存数据进行简单设置即可实现多种场景的数据缓存。

摘要：本发明提出了一种对等资源分配方法、对等资源分配系统、计算机装置及计算机可读存储介质，其中对等资源分配方法包括：接收资源请求，并获取资源池共享的全局节点列表；遍历资源池列表内的节点；当遍历到资源池列表内的任一节点时，判断节点是否满足资源请求；当满足资源请求的节点的数量达到容忍上限时，在满足资源请求的节点中选取匹配度最高的节点作为资源请求的资源分配节点；将资源分配节点上的资源分配至资源请求的请求方。本发明只需要获取资源池共享的全局节点列表，就可以在分布式环境中的多个对等节点间自动协商来决定资源的分配，能够有效的以请求匹配节点的方式解决因为集中式资源分配导致的业务整体瘫痪的问题。