码农知识堂 - 1000bd
  •   Python
  •   PHP
  •   JS/TS
  •   JAVA
  •   C/C++
  •   C#
  •   GO
  •   Kotlin
  •   Swift
  • 【用户画像】Redis_Jedis测试、将人群包存放到Redis中、挖掘类标签处理过程、决策树、用SparkMLLib实现决策树


    文章目录

    • 一 Redis_Jedis_测试
      • 1 Jedis所需要的jar包
      • 2 连接Redis注意事项
      • 3 测试相关数据类型
        • (0)测试连接
        • (1)Key
        • (2)String
        • (3)List
        • (4)set
        • (5)hash
        • (6)zset
        • (7)连接池
    • 二 将人群包存放到Redis中
      • 1 思路分析
      • 2 代码实现
        • UserGroupMapper.java
        • UserGroupServiceImpl.java
      • 3 结果验证
    • 三 挖掘类标签
      • 1 挖掘类标签与机器学习
      • 2 模型建立过程
        • (1)数据预处理
        • (2)特征工程
        • (3)算法选取
        • (4)模型训练
        • (5)评估优化
        • (6)投放使用、验证优化
    • 四 决策树算法
    • 五 用SparkMLlib实现决策树的使用
      • 1 利用流水线完成模型训练
      • 2 数据准备
        • (1)建表语句
        • (2)模拟数据
      • 3 模块搭建
      • 4 创建流水线对象
      • 5 增加流水线组件(三个徒弟,一个师傅)
        • (1)创建标签索引
        • (2)创建特征集合
        • (3)创建特征向量索引
        • (4)创建分类器
      • 6 初始化对象
      • 7 训练和预测
      • 8 调用工具类,进行测试
    • 六 完整代码
      • 1 MyPipeline
      • 2 StudentGenderTrain

    一 Redis_Jedis_测试

    1 Jedis所需要的jar包

    
        redis.clients
        jedis
        3.2.0
    
    
    • 1
    • 2
    • 3
    • 4
    • 5

    2 连接Redis注意事项

    禁用Linux的防火墙:Linux(CentOS7)里执行命令
    systemctl stop/disable firewalld.service   
    redis.conf中注释掉
    bind 127.0.0.1
    然后将安全模式关闭
    protected-mode no
    
    或者不关闭安全模式,设置密码在配置文件中的requirepass中修改
    然后执行命令前需要先输入密码
    AUTH 密码 之后再执行命令
    
    • 1
    • 2
    • 3
    • 4
    • 5
    • 6
    • 7
    • 8
    • 9
    • 10

    新建工具类 user_profile_manager_0224\src\main\java\com\atguigu\userprofile\utils\RedisUtil.java

    3 测试相关数据类型

    (0)测试连接

    public class RedisUtil {
       
        public static void main(String[] args) {
       
            Jedis jedis = new Jedis("hadoop101", 6379);
            System.out.println(jedis.ping());  // 输出PONG
        }
    }
    
    • 1
    • 2
    • 3
    • 4
    • 5
    • 6
    • 7
    • 8

    (1)Key

    public static void main(String[] args) {
       
        Jedis jedis = new Jedis("hadoop101", 6379);
        System.out.println(jedis.ping());  // 输出PONG
    
        jedis.set("k1000","v1000");
        jedis.set("k2000","v2000");
        jedis.set("k3000","v3000");
        Set<String> keys = jedis.keys("*");
        System.out.println(keys.size());
        for(String key:keys){
       
            System.out.println(key);
        }
        System.out.println(jedis.exists("k3000"));
        System.out.println(jedis.ttl("k2000"));
        System.out.println(jedis.get("k1000"));
    }
    
    • 1
    • 2
    • 3
    • 4
    • 5
    • 6
    • 7
    • 8
    • 9
    • 10
    • 11
    • 12
    • 13
    • 14
    • 15
    • 16
    • 17
    • 18

    (2)String

    public static void main(String[] args) {
       
        Jedis jedis = new Jedis("hadoop101", 6379);
        System.out.println(jedis.ping());  // 输出PONG
    
        jedis.mset("str1", "v1", "str2", "v2", "str3", "v3");
        System.out.println(jedis.mget("str1", "str2", "str3"));
    }
    
    • 1
    • 2
    • 3
    • 4
    • 5
    • 6
    • 7
    • 8

    (3)List

    public static void main(String[] args) {
       
        Jedis jedis = new Jedis("hadoop101", 6379);
        System.out.println(jedis.ping());  // 输出PONG
    
        jedis.lpush("mylist","v1","v2","v3");
        List<String> list = jedis.lrange("mylist", 0, -1);
        for(String element : list){
       
            System.out.println(element);
        }
    }
    
    • 1
    • 2
    • 3
    • 4
    • 5
    • 6
    • 7
    • 8
    • 9
    • 10
    • 11
    • 12

    (4)set

    public static void main(String[] args) {
       
        Jedis jedis = new Jedis("hadoop101", 6379);
        System.out.println(jedis.ping());  // 输出PONG
    
        jedis.sadd("sets1","set01","set02","set03","set04");
        jedis.sadd("sets2","set02","set03","set04","set05");
        Set<String> smembers = jedis.smembers("sets1");
        for (String set : smembers) {
       
            System.out.println(set);
        }
        System.out.println("===================");
        jedis.srem("sets1","set02");
        System.out.println(jedis.scard("sets1"));
        Set<String> sinter = jedis.sinter("sets1", "sets2");
        for (String s : sinter) {
       
            System.out.println(s);
        }
        System.out.println("===================");
        Set<String> sunion = jedis.sunion("sets1", "sets2");
        for (String s : sunion) {
       
            System.out.println(s);
        }
        System.out.println("===================");
        Set<String> sdiff = jedis.sdiff("sets1", "sets2");
        for (String s : sdiff) {
       
            System.out.println(s);
        }
    }
    
    • 1
    • 2
    • 3
    • 4
    • 5
    • 6
    • 7
    • 8
    • 9
    • 10
    • 11
    • 12
    • 13
    • 14
    • 15
    • 16
    • 17
    • 18
    • 19
    • 20
    • 21
    • 22
    • 23
    • 24
    • 25
    • 26
    • 27
    • 28
    • 29
    • 30
    • 31
    • 32
    • 33

    (5)hash

    public static void main(String[] args) {
       
        Jedis jedis = new Jedis("hadoop101", 6379);
        System.out.println(jedis.ping());  // 输出PONG
    
        jedis.hset("hash1","userName","zhangsan");
        System.out.println(jedis.hget("hash1", "userName"));
    
        HashMap<String, String> map = new HashMap<>();
        map.put("userName","lisi");
        map.put("age","20");
        map.put("gender","nv");
        jedis.hmset("hash2",map);
        List<String> res = jedis.hmget("hash2", "userName", "age", "gender");
        for (String re : res) {
       
            System.out.println(re);
        }
    }
    
    • 1
    • 2
    • 3
    • 4
    • 5
    • 6
    • 7
    • 8
    • 9
    • 10
    • 11
    • 12
    • 13
    • 14
    • 15
    • 16
    • 17
    • 18
    • 19

    (6)zset

    public static void main(String[] args) {
       
        Jedis jedis = new Jedis("hadoop101", 6379);
        System.out.println(jedis.ping());  // 输出PONG
    
        jedis.zadd(
    • 1
    • 2
    • 3
    • 4
    • 5
  • 相关阅读:
    常见的linux命令
    一张小图看尽 Nginx
    PostgreSQL 文章下架 与 热更新和填充可以提升数据库性能
    selenium--获取页面信息和截图
    vue3(二)- - - - vite3.1 + vue3.2配置axios
    IIC 实验
    6-2 顺序表操作集分数 20
    spinnaker 持续部署
    51单片机外设篇:红外通信
    【Redis】Zset有序集合
  • 原文地址:https://blog.csdn.net/weixin_43923463/article/details/127959013
  • 最新文章
  • 攻防演习之三天拿下官网站群
    数据安全治理学习——前期安全规划和安全管理体系建设
    企业安全 | 企业内一次钓鱼演练准备过程
    内网渗透测试 | Kerberos协议及其部分攻击手法
    0day的产生 | 不懂代码的"代码审计"
    安装scrcpy-client模块av模块异常,环境问题解决方案
    leetcode hot100【LeetCode 279. 完全平方数】java实现
    OpenWrt下安装Mosquitto
    AnatoMask论文汇总
    【AI日记】24.11.01 LangChain、openai api和github copilot
  • 热门文章
  • 十款代码表白小特效 一个比一个浪漫 赶紧收藏起来吧!!!
    奉劝各位学弟学妹们,该打造你的技术影响力了!
    五年了,我在 CSDN 的两个一百万。
    Java俄罗斯方块,老程序员花了一个周末,连接中学年代!
    面试官都震惊,你这网络基础可以啊!
    你真的会用百度吗?我不信 — 那些不为人知的搜索引擎语法
    心情不好的时候,用 Python 画棵樱花树送给自己吧
    通宵一晚做出来的一款类似CS的第一人称射击游戏Demo!原来做游戏也不是很难,连憨憨学妹都学会了!
    13 万字 C 语言从入门到精通保姆级教程2021 年版
    10行代码集2000张美女图,Python爬虫120例,再上征途
Copyright © 2022 侵权请联系2656653265@qq.com    京ICP备2022015340号-1
正则表达式工具 cron表达式工具 密码生成工具

京公网安备 11010502049817号