Tech Blog

2024-09-03

在Django框架中创建新项目的步骤如下：

打开命令行工具。
输入以下命令安装Django（如果你还没有安装的话）：




pip install django

创建新项目：




django-admin startproject myproject

其中myproject是你的项目名称，可以根据实际情况自定义。

以上命令执行后，你将在当前目录下创建一个名为myproject的新目录，这个目录包含了初始的Django项目结构。

目录结构大致如下：




myproject/
    manage.py
    myproject/
        __init__.py
        settings.py
        urls.py
        asgi.py
        wsgi.py

manage.py 是一个命令行工具，可以让你通过各种命令管理你的Django项目。

myproject/ 文件夹包含了你的项目的Python包。

__init__.py 是一个空文件，告诉Python这个目录应该被看作一个Python包。

settings.py 文件包含了项目的配置，例如数据库设置、应用配置等。

urls.py 文件包含了项目的URL配置。

asgi.py 是用于部署项目的ASGI兼容Web服务器的入口点。

wsgi.py 是用于部署项目的WSGI兼容Web服务器的入口点。

要启动开发服务器进行测试，可以运行：




python manage.py runserver

默认情况下，开发服务器会在localhost的8000端口启动，你可以在浏览器中访问http://127.0.0.1:8000/来查看你的新项目。

- 阅读更多 -

Spring Cloud Gateway如何匹配某路径并进行路由转发

System

2024-09-03

所有,java

在Spring Cloud Gateway中，你可以通过定义路由规则来匹配特定的路径并进行路由转发。以下是一个简单的例子，展示如何配置Spring Cloud Gateway以将匹配特定路径的请求转发到一个服务。

首先，在application.yml配置文件中定义你的路由规则，或者如果你使用的是application.properties，则相应地定义。




spring:
  cloud:
    gateway:
      routes:
        - id: my_route
          uri: http://myservice
          predicates:
            - Path=/mypath/**

这个配置定义了一个路由，其中id是路由的唯一标识符，uri是目标服务的地址，predicates定义了路由的匹配规则，这里是匹配所有以/mypath/开头的路径。

接下来，请求/mypath/下的任何路径（例如/mypath/foo或/mypath/bar）都会被转发到http://myservice。

确保你的Spring Cloud Gateway服务能够访问目标服务的地址。

以上就是一个使用Spring Cloud Gateway进行路由配置的基本例子。

- 阅读更多 -

【漏洞复现】PostgreSQL高权限命令执行(CVE-2019-9193)

System

2024-09-03

所有,数据库




-- 以下SQL代码用于复现PostgreSQL的CVE-2019-9193漏洞，该漏洞允许未授权攻击者执行任何命令。
 
-- 首先，尝试使用无效的密码进行连接，以检查是否有回显，从而确认漏洞存在。
STARTUP NORMAL ABORT '2019-08-16 12:34:56.789 CST' 12345 FATAL pll_init unrecognized configuration parameter "nonexistent_parameter"
 
-- 如果上述命令导致数据库启动失败，则可以通过以下方式复现漏洞：
-- 1. 通过修改配置文件或启动时指定参数，使得数据库在启动过程中触发一个致命错误。
-- 2. 在触发错误的过程中，注意错误信息中的时间戳和进程ID。
-- 3. 使用获得的时间戳和进程ID，以及一个特制的SQL查询，通过psql或其他数据库客户端发送请求。
 
-- 以下是一个示例请求，它使用了假设的时间戳和进程ID，并尝试执行系统命令：
-- 注意：实际复现时，时间戳和进程ID需要根据实际情况进行替换。
 
-- 发送请求的工具或方法可能包括：
-- 1. 使用psql客户端，通过stdin输入特制的SQL语句。
-- 2. 使用网络请求发送特制的HTTP请求，如使用curl。
 
-- 请注意，复现漏洞应该在法律允许的范围内进行，并且不应该对未授权系统造成损害。

这个示例代码展示了如何尝试触发CVE-2019-9193漏洞，并且如何通过发送特制的请求来执行系统命令。在实际的漏洞复现过程中，应该确保所有操作都在合法的授权和范围内进行，并且不会对数据库服务器或系统安全造成威胁。

- 阅读更多 -

linux服务器tomcat日志中文出现问号乱码

System

2024-09-03

所有,java

乱码问题通常由于字符编码不一致导致。以下是解决Linux服务器上Tomcat日志中中文出现问号乱码的步骤：

检查系统字符编码：
执行 locale 命令查看当前系统字符编码，确保其支持中文（如UTF-8）。
配置Tomcat字符编码：
- 修改Tomcat的catalina.sh（或catalina.bat）启动脚本，添加或修改JAVA_OPTS环境变量，如下：
```
JAVA_OPTS="-Dfile.encoding=UTF-8"
```
- 修改Tomcat的日志配置文件（如logging.properties），确保编码设置为UTF-8。
重启Tomcat服务：
执行 shutdown.sh 关闭Tomcat，再执行 startup.sh 启动Tomcat。
检查结果：
重新查看Tomcat日志文件，中文乱码问题应该得到解决。

如果以上步骤不能解决问题，可能需要检查客户端查看日志的工具是否支持中文显示，或者检查是否有其他中间件或应用程序影响了字符编码的正常显示。

- 阅读更多 -

Python中通过文件将数据导入sqlite3

System

2024-09-03

所有,数据库




import sqlite3
 
# 假设有一个名为'data.txt'的文件，其中包含以逗号分隔的数据
data_file = 'data.txt'
db_name = 'example.db'
table_name = 'example_table'
 
# 连接到SQLite数据库
conn = sqlite3.connect(db_name)
cursor = conn.cursor()
 
# 创建表
cursor.execute(f'''CREATE TABLE IF NOT EXISTS {table_name}
                  (id INTEGER PRIMARY KEY, name TEXT, age INTEGER)''')
 
# 插入数据
with open(data_file, 'r') as file:
    for line in file:
        values = line.split(',')  # 假设数据是逗号分隔的
        cursor.execute(f"INSERT INTO {table_name} (name, age) VALUES (?, ?)",
                       (values[0], int(values[1])))  # 假设第一个字段是名称，第二个是年龄
 
# 提交事务并关闭连接
conn.commit()
conn.close()

这段代码展示了如何将一个文本文件中的数据导入SQLite数据库。在这个例子中，我们假设文件是一个简单的逗号分隔值（CSV）文件，其中包含两个字段：'name'和'age'。代码首先建立了一个表（如果它不存在的话），然后通过文件中的每一行，分割数据并将其插入到表中。在插入数据时，使用参数化查询来防止SQL注入攻击，并将年龄字段转换为整数类型。最后，提交事务并关闭数据库连接。

- 阅读更多 -

Redis三大缓存问题解析以及解决方案

System

2024-09-03

所有,redis

问题解析：

缓存穿透：查询不存在的数据，缓存不命中，请求直接打到数据库，可能导致数据库压力增加。
缓存雪崩：缓存失效时间集中，导致大量请求打到数据库。
缓存预热：新的应用或数据需要被大量访问时，预先加载数据到缓存。

解决方案：

缓存穿透：
- 使用布隆过滤器：实现一个非常大的布隆过滤器，用于记录所有可能的请求。
- 为缓存设置空值：如果查询结果为空，可以将空结果存储到缓存中，并设置一个较短的过期时间。
缓存雪崩：
- 设置缓存失效时间随机化：给不同的数据设置不同的失效时间，避免集中失效。
- Redis集群模式：使用Redis集群，分散节点压力。
- 本地缓存：同时使用本地缓存作为第一级缓存，减少对Redis的依赖。
缓存预热：
- 手动预加载：在业务低峰期进行手动预加载。
- 自动预热：在应用启动时自动加载热点数据。

注意：具体实施时需要根据业务场景和需求进行调整。

- 阅读更多 -

Spring Cloud Gateway如何给一个请求加请求头

System

2024-09-03

所有,java

在Spring Cloud Gateway中，你可以通过定义一个全局过滤器来给请求添加请求头。以下是一个简单的示例，展示了如何创建一个全局过滤器来添加一个自定义的请求头：




import org.springframework.cloud.gateway.filter.GatewayFilterChain;
import org.springframework.cloud.gateway.filter.GlobalFilter;
import org.springframework.core.Ordered;
import org.springframework.http.HttpHeaders;
import org.springframework.stereotype.Component;
import org.springframework.web.server.ServerWebExchange;
import reactor.core.publisher.Mono;
 
@Component
public class AddRequestHeaderFilter implements GlobalFilter, Ordered {
 
    @Override
    public Mono<Void> filter(ServerWebExchange exchange, GatewayFilterChain chain) {
        HttpHeaders headers = exchange.getRequest().getHeaders();
        // 添加自定义的请求头
        headers.add("Custom-Header", "custom-value");
        return chain.filter(exchange);
    }
 
    @Override
    public int getOrder() {
        // 确保此过滤器在其他过滤器之前运行
        return -1;
    }
}

这段代码定义了一个全局过滤器AddRequestHeaderFilter，它实现了GlobalFilter接口并添加了一个名为Custom-Header的请求头，其值为custom-value。通过设置getOrder()方法返回的整数值为-1，确保了此过滤器将在其他所有过滤器之前运行。

当请求通过Gateway时，这个过滤器会自动被应用，添加的请求头将会包含在发往下游服务的请求中。

- 阅读更多 -

postgresql的时间点还原。

System

2024-09-03

所有,数据库

在PostgreSQL中，如果您需要将数据库恢复到特定的时间点，可以使用基于时间点的恢复（PITR）功能。以下是如何进行时间点恢复的步骤：

确保您的数据库配置了archiving和WAL（Write-Ahead Logging）rotation。
找到要恢复到的时间点的WAL日志文件和时间戳。
停止数据库服务。
使用pg_resetwal创建一个恢复点。
恢复数据库到特定的时间点。
重启数据库服务。

以下是相关的命令示例：




# 查找WAL文件和时间戳
pg_controldata | grep "Latest checkpoint's WAL location"
pg_controldata | grep "Latest checkpoint's Time"
 
# 停止PostgreSQL服务
sudo service postgresql stop
 
# 重置WAL文件（创建恢复点）
pg_resetwal -D /path/to/data/directory
 
# 恢复数据库到特定时间点
# 假设你已经找到了正确的WAL文件和时间戳，并且将recovery.conf文件放置在数据目录中
cat >> /path/to/data/directory/recovery.conf <<EOF
recovery_target_time='2023-04-01 12:00:00'
EOF
 
# 启动PostgreSQL服务
sudo service postgresql start

请注意，在实际操作中，你需要替换/path/to/data/directory为你的实际数据目录路径，并且根据你的系统环境（如服务管理工具）调整停止和启动服务的命令。同时，确保在执行这些操作之前备份了你的数据库，并且在测试环境中进行了充分的测试。

- 阅读更多 -

SpringCloud 负载均衡 spring-cloud-starter-loadbalancer

System

2024-09-03

所有,java

Spring Cloud LoadBalancer是Spring Cloud的一个子项目，它提供了一些客户端负载均衡器的实现，用于在使用Spring Cloud进行服务到服务的通信时，实现客户端的负载均衡。

以下是使用Spring Cloud LoadBalancer的一个简单示例：

首先，在你的Spring Cloud项目中的pom.xml文件中添加依赖：




<dependency>
    <groupId>org.springframework.cloud</groupId>
    <artifactId>spring-cloud-starter-loadbalancer</artifactId>
</dependency>

在你的应用程序中，你可以使用@LoadBalanced注解来标记RestTemplate，使其支持负载均衡。




@Configuration
public class Config {
 
    @Bean
    @LoadBalanced
    RestTemplate restTemplate() {
        return new RestTemplate();
    }
}

使用RestTemplate发起服务间调用时，URL可以是服务名称，LoadBalancer会自动根据服务名查询服务实例并进行负载均衡。




@Service
public class MyService {
 
    @Autowired
    private RestTemplate restTemplate;
 
    public String callService(String serviceName) {
        return restTemplate.getForObject("http://" + serviceName + "/some-endpoint", String.class);
    }
}

在上述代码中，callService方法通过服务名称调用其他服务的接口，LoadBalancer会根据服务名自动查找可用的服务实例并进行负载均衡的请求分发。

注意：Spring Cloud LoadBalancer依赖于Spring Cloud Netflix，因此你需要确保Spring Cloud Netflix依赖也在你的项目中。如果你的项目中没有使用Spring Cloud Netflix的其他组件，你可能还需要添加对应的依赖。

- 阅读更多 -

tomcat跨域问题CORS踩坑点

System

2024-09-03

所有,java

解决Tomcat跨域问题的CORS配置：

配置web.xml：




<filter>
    <filter-name>CORS</filter-name>
    <filter-class>com.thetransactioncompany.cors.CORSFilter</filter-class>
    <init-param>
        <param-name>cors.allowOrigin</param-name>
        <param-value>*</param-value>
    </init-param>
    <init-param>
        <param-name>cors.supportedMethods</param-name>
        <param-value>GET, POST, HEAD</param-value>
    </init-param>
    <init-param>
        <param-name>cors.supportedHeaders</param-name>
        <param-value>Accept, Origin, X-Requested-With, Content-Type, Last-Modified</param-value>
    </init-param>
    <init-param>
        <param-name>cors.exposedHeaders</param-name>
        <param-value>Set-Cookie</param-value>
    </init-param>
    <init-param>
        <param-name>cors.supportsCredentials</param-name>
        <param-value>true</param-value>
    </init-param>
</filter>
<filter-mapping>
    <filter-name>CORS</filter-name>
    <url-pattern>/*</url-pattern>
</filter-mapping>

确保你的Tomcat版本支持CORS过滤器，如果不支持，需要升级Tomcat或者使用其他CORS实现。
如果你使用的是Tomcat 8.5或更高版本，可以使用内置的CORS支持：




<filter>
    <filter-name>CORS</filter-name>
    <filter-class>org.apache.catalina.filters.CorsFilter</filter-class>
    <init-param>
        <param-name>cors.allowed.origins</param-name>
        <param-value>*</param-value>
    </init-param>
    <init-param>
        <param-name>cors.allowed.methods</param-name>
        <param-value>GET,POST,HEAD,OPTIONS</param-value>
    </init-param>
    <init-param>
        <param-name>cors.allowed.headers</param-name>
        <param-value>Content-Type,X-Requested-With,accept,Origin,Access-Control-Request-Method,Access-Control-Request-Headers</param-value>
    </init-param>
    <init-param>
        <param-name>cors.exposed.headers</param-name>
        <param-value>Access-Control-Allow-Origin,Access-Control-Allow-Credentials</param-value>
    </init-param>
    <init-param>
        <param-name>cors.support.credentials</param-name>
        <param-value>true</param-value>
    </init-param>
</filter>
<filter-mapping>
    <filter-name>CORS</filter-name>
    <url-pattern>/*</url-pattern>
</filter-mapping>

如果你需要进一步的动态配置，可以通过编程方式设置CORS策略。
确保你的Tomcat和应用服务器的安全配置允许跨域请求。
测试你的配置，确保它按预期工作。

注意：在生产环境中，不建议使用cors.allowOrigin设置为*

- 阅读更多 -