Spring Boot - 优雅实现支持通配符和IP段的IP访问黑白名单机制
System
2024-09-09
所有,java



import org.springframework.context.annotation.Bean;
import org.springframework.context.annotation.Configuration;
import org.springframework.core.annotation.Order;
import org.springframework.core.env.Environment;
import org.springframework.core.env.MapPropertySource;
import org.springframework.security.config.annotation.web.builders.HttpSecurity;
import org.springframework.security.config.annotation.web.configuration.WebSecurityConfigurerAdapter;
import org.springframework.security.web.util.matcher.IpAddressMatcher;
 
import java.util.HashMap;
import java.util.Map;
 
@Configuration
public class IpAccessControlConfiguration {
 
    @Bean
    public IpAccessControlExtension ipAccessControlExtension() {
        return new IpAccessControlExtension();
    }
 
    @Configuration
    @Order(1)
    public static class IpAccessControlConfig extends WebSecurityConfigurerAdapter {
 
        private final IpAccessControlExtension ipAccessControlExtension;
 
        public IpAccessControlConfig(IpAccessControlExtension ipAccessControlExtension) {
            this.ipAccessControlExtension = ipAccessControlExtension;
        }
 
        @Override
        protected void configure(HttpSecurity http) throws Exception {
            // 应用IP访问控制规则
            http.authorizeRequests()
                    .anyRequest().access("@ipAccessControlExtension.hasIpAccess(request, authentication)");
        }
    }
 
    public static class IpAccessControlExtension {
        private Map<String, String> whiteList = new HashMap<>();
        private Map<String, String> blackList = new HashMap<>();
 
        public IpAccessControlExtension() {
            // 初始化白名单和黑名单
            whiteList.put("192.168.1.0/24", "白名单IP段");
            blackList.put("10.0.0.0/8", "黑名单IP段");
        }
 
        public boolean hasIpAccess(Object request, Object authentication) {
            String remoteAddr = ((javax.servlet.http.HttpServletRequest) request).getRemoteAddr();
            IpAddressMatcher ipAddressMatcher = new IpAddressMatcher(whiteList.keySet());
            // 设置白名单规则
            ipAddressMatcher.setNegated(false);
- 阅读更多 -
数据库如何用命令执行文件插入大量数据到数据库用oracle和mysql举例
System
2024-09-09
所有,数据库

在Oracle和MySQL中，你可以使用不同的方法来插入大量数据。

  1. Oracle: 使用PL/SQL的INSERT ALL语句或者BULK COLLECT。



-- 使用INSERT ALL
BEGIN
  INSERT INTO your_table (column1, column2) VALUES ('value1', 'value2');
  INSERT INTO your_table (column1, column2) VALUES ('value3', 'value4');
  -- 重复以上语句插入更多数据
  COMMIT;
END;
/
 
-- 使用BULK COLLECT (需要先声明一个变量数组，填充数据后再使用)
DECLARE
  TYPE column1_arr IS TABLE OF your_table.column1%TYPE;
  TYPE column2_arr IS TABLE OF your_table.column2%TYPE;
  col1_val column1_arr := column1_arr('value1', 'value3', ...); -- 填充数据
  col2_val column2_arr := column2_arr('value2', 'value4', ...); -- 填充数据
BEGIN
  FOR i IN 1 .. col1_val.COUNT LOOP
    INSERT INTO your_table (column1, column2) VALUES (col1_val(i), col2_val(i));
  END LOOP;
  COMMIT;
END;
/
  1. MySQL: 使用LOAD DATA INFILE或者INSERT ... VALUES, VALUES可以包含多组值。



-- 使用LOAD DATA INFILE
LOAD DATA INFILE '/path/to/your/data.csv'
INTO TABLE your_table
FIELDS TERMINATED BY ','
ENCLOSED BY '"'
LINES TERMINATED BY '\n'
IGNORE 1 ROWS;
 
-- 使用INSERT ... VALUES (需要多次执行)
INSERT INTO your_table (column1, column2) VALUES
('value1', 'value2'),
('value3', 'value4'),
-- 重复以上语句插入更多数据
('valueN', 'valueN+1');

在Oracle中，使用PL/SQL的INSERT ALL语句或者BULK COLLECT可以批量插入数据，并且可以通过批处理和事务控制来优化性能。在MySQL中，LOAD DATA INFILE是一种更快的方法，适合大规模数据导入，特别是从文件中导入数据。

注意：在实际应用中，你可能需要调整表的索引、事务的大小或者使用其他性能优化技巧来处理大量数据的插入。

- 阅读更多 -
postgresql插件开发
System
2024-09-09
所有,数据库

PostgreSQL 插件（也称为扩展）开发通常涉及以下步骤：

  1. 创建模块基础结构。
  2. 实现必要的函数和类型。
  3. 编写安装脚本。
  4. 编译和安装模块。

以下是一个简单的例子，展示了如何创建一个简单的 PostgreSQL 插件。




/* plugin_example.c */
#include "postgres.h"
 
#ifdef PG_MODULE_MAGIC
PG_MODULE_MAGIC;
#endif
 
PG_FUNCTION_INFO_V1(example_function);
 
Datum
example_function(PG_FUNCTION_ARGS)
{
    PG_RETURN_TEXT_P(cstring_to_text("Hello, World!"));
}
 
/* 安装脚本 example.sql */
CREATE EXTENSION example;
 
/* 编译和安装 */
gcc -shared -o example.so plugin_example.c
psql -d your_database -f ./example.sql

在这个例子中，我们定义了一个名为 example_function 的函数，它简单地返回一个 Hello World 文本。然后，我们在 example.sql 中定义了安装该插件的 SQL 脚本。最后，我们使用 gcc 来编译代码，并通过 psql 将插件安装到指定的数据库中。

请注意，实际的插件开发可能需要更复杂的代码和更详细的步骤，包括处理事务、状态管理、资源管理和错误处理。

- 阅读更多 -
推荐 7 个超牛的 Spring Cloud 实战项目
System
2024-09-09
所有,java

以下是一些超牛的 Spring Cloud 实战项目，它们涵盖了微服务架构的方方面面，包括服务发现注册、配置中心、负载均衡、断路器、微服务安全等内容。

  1. Spring Cloud Samples

    这是一个由 Pivotal 团队维护的项目，提供了大量的 Spring Cloud 用例。

  2. Spring Cloud for Alibaba

    这是由 Alibaba 开源的 Spring Cloud 版本，提供了服务发现注册、配置中心等功能。

  3. Spring Cloud Netflix

    这是一个由 Netflix 开源的项目，提供了一系列的微服务工具，包括 Eureka、Hystrix、Zuul 等。

  4. Spring Cloud Kubernetes

    这是一个用于在 Kubernetes 上运行 Spring Boot 应用的项目，提供服务发现注册、配置中心等功能。

  5. Spring Cloud Security

    这是一个提供安全保护的 Spring Cloud 项目，提供了 OAuth2 客户端和服务端的实现。

  6. Spring Cloud Data Flow

    这是一个用于构建数据处理管道的工具，可以在 Spring Cloud 的基础上运行。

  7. Spring Cloud Zookeeper

    这是一个用于服务发现和配置管理的项目，结合了 Zookeeper 和 Spring Cloud 的功能。

每个项目都有详细的文档和实例代码，可以帮助开发者快速理解和应用这些技术。

- 阅读更多 -
Oracle——概要文件DBA_PROFILES解析
System
2024-09-09
所有,数据库

Oracle数据库中的DBA\_PROFILES视图包含了数据库中所有用户配置文件的详细信息。这个视图列出了资源限制和密码策略等信息。

以下是一个简单的SQL查询示例，用于查看DBA\_PROFILES视图中的一些关键列：




SELECT profile, resource_name, resource_type, limit
FROM dba_profiles;

这个查询将展示所有配置文件的名称、资源名称、资源类型和设置的限制值。

如果你想要查看特定用户的配置文件中的资源限制，可以使用以下查询：




SELECT profile, resource_name, resource_type, limit
FROM dba_profiles
WHERE profile = '用户的配置文件名';

请将'用户的配置文件名'替换为实际的配置文件名称。

如果你想要查看哪些用户没有指定配置文件，可以使用以下查询：




SELECT username
FROM dba_users
WHERE profile = 'DEFAULT';

这个查询将列出所有未指定特定配置文件而使用默认配置文件的用户。

- 阅读更多 -
SpringBootWebProject学习maven配置
System
2024-09-09
所有,java

在Spring Boot项目中，Maven配置主要涉及以下几个方面：

  1. 设置项目打包方式为jar，因为Spring Boot建议你打包为可执行的jar文件。
  2. 添加Spring Boot的parent，用于管理Spring Boot的版本和依赖。
  3. 添加Spring Boot的starter依赖，它是一系列依赖的集合，简化了项目配置。
  4. 配置Maven插件，用于打包和运行Spring Boot应用。

以下是一个简单的Maven配置示例：




<project xmlns="http://maven.apache.org/POM/4.0.0"
         xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance"
         xsi:schemaLocation="http://maven.apache.org/POM/4.0.0 http://maven.apache.org/xsd/maven-4.0.0.xsd">
    <modelVersion>4.0.0</modelVersion>
 
    <groupId>com.example</groupId>
    <artifactId>my-spring-boot-project</artifactId>
    <version>1.0-SNAPSHOT</version>
 
    <!-- 设置打包方式为jar -->
    <packaging>jar</packaging>
 
    <!-- 继承Spring Boot的parent，管理版本 -->
    <parent>
        <groupId>org.springframework.boot</groupId>
        <artifactId>spring-boot-starter-parent</artifactId>
        <version>2.3.1.RELEASE</version> <!-- 请使用最新的稳定版本 -->
        <relativePath/>
    </parent>
 
    <!-- 添加Spring Boot的starter web依赖 -->
    <dependencies>
        <dependency>
            <groupId>org.springframework.boot</groupId>
            <artifactId>spring-boot-starter-web</artifactId>
        </dependency>
    </dependencies>
 
    <!-- 配置Maven插件 -->
    <build>
        <plugins>
            <plugin>
                <groupId>org.springframework.boot</groupId>
                <artifactId>spring-boot-maven-plugin</artifactId>
                <executions>
                    <execution>
                        <goals>
                            <goal>repackage</goal>
                        </goals>
                    </execution>
                </executions>
            </plugin>
        </plugins>
    </build>
</project>

在这个配置中，我们指定了项目的打包方式为jar，继承了Spring Boot的parent项目，这样可以自动管理Spring Boot的版本。我们还添加了spring-boot-starter-web依赖，它是用于创建具有Spring MVC的Web应用程序的起步依赖。最后，我们配置了spring-boot-maven-plugin插件，以确保我们可以使用Maven打包和运行Spring Boot应用。

- 阅读更多 -
Redis中5种数据结构解析
System
2024-09-09
所有,redis

Redis 中的数据结构包括：字符串、哈希表、列表、集合、有序集合。

  1. 字符串（String）

    字符串是 Redis 最基本的数据类型。




SET key value  # 设置字符串值
GET key       # 获取字符串值

  1. 哈希表（Hash）

    哈希表用于存储键值对集合。




HSET hash field value  # 设置哈希表字段
HGET hash field       # 获取哈希表字段值

  1. 列表（List）

    列表用于按插入顺序保存字符串值。




LPUSH list value  # 在列表头部插入值
LRANGE list start stop  # 获取列表指定范围内的元素

  1. 集合（Set）

    集合是字符串的无序集合。




SADD set member  # 向集合添加一个成员
SMEMBERS set    # 获取集合中的所有成员

  1. 有序集合（Sorted Set）

    有序集合是字符串的有序集合。




ZADD sortedSet score member  # 向有序集合添加成员
ZRANGE sortedSet start stop [WITHSCORES]  # 获取有序集合指定范围内的成员

以上代码是 Redis 命令的示例，并未提供完整的解决方案，因为需要根据具体问题进行定制。

- 阅读更多 -
Redis机制-Redis互斥锁、分布式锁
System
2024-09-09
所有,redis

Redis 提供了 SETNX 命令，可以实现分布式锁。SETNX 是 "SET if Not eXists" 的缩写，也就是只有键不存在时，才会设置值。

以下是使用 SETNX 命令实现 Redis 分布式锁的伪代码：




def acquire_lock(lock_name, acquire_timeout=5, lock_timeout=10):
    end_time = time.time() + acquire_timeout
    lock_name = 'lock:' + lock_name
    while time.time() < end_time:
        if redis_client.setnx(lock_name, 'locked'):
            redis_client.expire(lock_name, lock_timeout)
            return True
        time.sleep(0.001)
    return False
 
def release_lock(lock_name):
    lock_name = 'lock:' + lock_name
    redis_client.delete(lock_name)

在这个例子中，acquire_lock 尝试获取锁，如果在指定时间内未能获得锁，则返回 False。release_lock 释放锁，使得其他等待的进程可以获取锁。

注意，这个实现没有考虑可能的 Redis 故障或网络分区问题，在这种情况下，锁可能不会被释放。因此，在生产环境中，通常会结合使用 Redlock 算法来更安全地实现分布式锁。

- 阅读更多 -
ImportError: lxml.html.clean module is now a separate project lxml_html_clean
System
2024-09-09
所有,python

解释：

这个错误表明你尝试导入的lxml.html.clean模块已经变成了一个独立的项目。在旧版本的lxml库中，lxml.html.clean是lxml的一部分，但现在它已经被分离出来，作为一个独立的第三方库。

解决方法：

  1. 你需要安装新的lxml独立版本，可以通过pip安装：

    


pip install lxml-clean

  2. 修改你的代码，将导入语句从from lxml.html.clean import Cleaner

    改为from lxml_clean import Cleaner。

  3. 如果你的代码中还有其他lxml.html.clean相关的引用，也需要做出相应的修改。

确保在修改代码后，重新运行你的程序以验证问题是否已经解决。

- 阅读更多 -
Oracle-RAC集群PRIVATE网络IPV4转IPV6操作方法
System
2024-09-09
所有,数据库

在Oracle RAC环境中，将PRIVATE网络从IPv4迁移到IPv6需要遵循以下步骤：

  1. 确保所有节点上的操作系统支持IPv6。
  2. 配置IPv6地址。
  3. 更新Oracle Clusterware配置。
  4. 测试并验证。

以下是一个示例操作步骤：

  1. 在每个节点上配置IPv6地址。编辑网络配置文件，例如/etc/sysconfig/network-scripts/ifcfg-eth0（具体文件名可能因系统而异），添加IPv6配置。



IPV6INIT=yes
IPV6ADDR=<IPv6地址>/<前缀长度>
  1. 重启网络服务或者整个节点来应用更改。
  2. 使用Oracle的srvctl工具更新CRS配置。



srvctl modify nodeapps -n <节点名> -A "{{PRIVATE_IPV6}[{<IPv6地址>%<网络接口>}]"
srvctl modify scan -n <节点名> -A "{{PRIVATE_IPV6}[{<IPv6地址>%<网络接口>}]"
  1. 确认配置更新后，重新启动CRS。



srvctl stop nodeapps -n <节点名>
srvctl start nodeapps -n <节点名>
  1. 检查IPv6配置是否成功，可以使用ping6命令测试IPv6连接。



ping6 -I <网络接口> <IPv6地址>
  1. 验证SCAN是否正常工作。



srvctl config scan

请注意，实际的IPv6地址和网络接口需要替换为您环境中的具体值。在执行任何操作前，请确保您已经备份了所有关键配置信息，并且有恢复计划以防操作出现问题。

- 阅读更多 -
Copyright © 2025 Tech Blog
All Right Reserved | 京ICP备19053165号