码农知识堂 - 1000bd
  •   Python
  •   PHP
  •   JS/TS
  •   JAVA
  •   C/C++
  •   C#
  •   GO
  •   Kotlin
  •   Swift
  • Databend 开源周报第 116 期


    Databend 是一款现代云数仓。专为弹性和高效设计,为您的大规模分析需求保驾护航。自由且开源。即刻体验云服务:https://app.databend.cn 。

    What's On In Databend

    探索 Databend 本周新进展,遇到更贴近你心意的 Databend 。

    特性预览:使用 SQL 管理后台任务

    此前,Databend 引入了 后台服务(Serverless Background Service)以允许 Databend 执行后台单次作业或以守护进程模式运行 cron 作业,从而简化数据维护任务管理的复杂性。

    为了便于创建、管理和维护后台任务,Databend 近期支持了包括 CREATE TASK, ALTER TASK 和 SHOW TASK 在内的一系列 SQL 语句。

    例如,下面的 SQL 语句要求 Databend 在每天早上 6 点(PST 时区),执行名为 MyTask1 的任务,将 (1, 2) 和 (3, 4) 插入到表 t 中。

    CREATE TASK IF NOT EXISTS MyTask1 SCHEDULE = USING CRON '0 6 * * *' 'America/Los_Angeles' COMMENT = 'serverless + cron' AS insert into t (c1, c2) values (1, 2), (3, 4)

    后台服务 需要升级至 企业版 。如需了解升级信息,请联系 Databend 团队 。

    如果您想了解更多信息,请查看下面列出的资源。

    • PR #13316 | feat: impl create task sql parser and planner
    • PR #13344 | feat: add SQL syntax support for alter, execute, describe, show, drop task

    Code Corner

    一起来探索 Databend 和周边生态中的代码片段或项目。

    理解 Databend 中的配置映射

    对于 Databend 这样复杂的数据库服务端程序,往往需要支持大量的可配置选项,以帮助运维人员根据实际使用需要管理和调优系统。近期发布的博客解释了 Databend 中命令行选项、环境变量、配置文件以及代码之间的映射关系。

    Databend 目前支持三种配置方式:命令行、环境变量和配置文件,优先级依次递减。

    • 命令行用于调整本地环境下的少数冲突配置。
    • 对于 K8S 集群,为了灵活变更部分配置(比如,特性开关),使用环境变量可能是更优雅的形式。
    • 一般情况下,推荐使用配置文件来记录和管理各种配置。

    值得注意的是,Databend 通过 opendal 内置的回滚机制,支持了像 AWS_ACCESS_KEY_ID 和 AWS_SECRET_ACCESS_KEY 这样云服务开发者常用但并未在 Databend 配置中进行显式声明的环境变量,简化代码并且降低用户学习成本。

    如果您想了解更多信息,请查看下面列出的资源。

    • Blog | Navigating Databend's Configuration Maze: A Guide for Developers and Operators

    Highlights

    以下是一些值得注意的事件,也许您可以找到感兴趣的内容。

    • 新增表函数 fuse_encoding 。
    • 新增字符串函数 split 和 split_part 。
    • SQLsmith 支持 MERGE INTO 。
    • databend-metactl 支持查看集群状态。

    What's Up Next

    我们始终对前沿技术和创新理念持开放态度,欢迎您加入社区,为 Databend 注入活力。

    为 z3 求解支持更多类型比较

    此前 Databend 引入 z3.rs 来解决约束问题,即给定部分约束条件寻求一组满足条件的解。Z3 求解器是微软研究院开发的定理证明器,通常用于解决 SMT 问题。但是目前 Databend 的 z3 求解只支持整数类型的比较,还需要覆盖更多类型。

    例如,在支持字符串比较后,select * from t1 left join t3 on t3.e = t1.a where t3.f >= '2000-08-23';中的 t3.f >= '2000-08-23' 可以下推至 t3 表。

    Issue #13236 | Feature: z3 supports more type comparision

    如果你对这个主题感兴趣,可以尝试解决其中的部分问题或者参与讨论和 PR review 。或者,你可以点击 We need more stateless-test to test corner cases of differents timezone in the future · Issue #5214 · datafuselabs/databend · GitHub 来挑选一个随机问题,祝好运!

    Changelog

    前往查看 Databend 每日构建的变更日志,以了解开发的最新动态。

    地址:https://github.com/datafuselabs/databend/releases

    Contributors

    非常感谢贡献者们在本周的卓越工作。

    Connect With Us

    Databend 是一款开源、弹性、低成本,基于对象存储也可以做实时分析的新式数仓。期待您的关注,一起探索云原生数仓解决方案,打造新一代开源 Data Cloud。

    • Databend Website
    • GitHub Discussions
    • Twitter
    • Slack Channel
  • 相关阅读:
    JavaScript笔记
    C# JSON转为实体类和List,以及结合使用
    安培龙冲刺创业板上市:收入依赖美的,邬若军、黎莉夫妇为实控人
    C++类成员初始化顺序(声明初始化,初始化列表初始化和构造函数初始化)
    APK反编译流程学习[1]
    如何用WiFi实现无线定位
    RHCSA认证考试---17.编写Shell脚本查找文件
    C++中栈数组、堆数组和vector向量的效率比较
    Debian install MySQL if use root remove command ‘sudo‘
    Mybatis的生命周期和作用域
  • 原文地址:https://blog.csdn.net/Databend/article/details/134018496
  • 最新文章
  • 攻防演习之三天拿下官网站群
    数据安全治理学习——前期安全规划和安全管理体系建设
    企业安全 | 企业内一次钓鱼演练准备过程
    内网渗透测试 | Kerberos协议及其部分攻击手法
    0day的产生 | 不懂代码的"代码审计"
    安装scrcpy-client模块av模块异常,环境问题解决方案
    leetcode hot100【LeetCode 279. 完全平方数】java实现
    OpenWrt下安装Mosquitto
    AnatoMask论文汇总
    【AI日记】24.11.01 LangChain、openai api和github copilot
  • 热门文章
  • 十款代码表白小特效 一个比一个浪漫 赶紧收藏起来吧!!!
    奉劝各位学弟学妹们,该打造你的技术影响力了!
    五年了,我在 CSDN 的两个一百万。
    Java俄罗斯方块,老程序员花了一个周末,连接中学年代!
    面试官都震惊,你这网络基础可以啊!
    你真的会用百度吗?我不信 — 那些不为人知的搜索引擎语法
    心情不好的时候,用 Python 画棵樱花树送给自己吧
    通宵一晚做出来的一款类似CS的第一人称射击游戏Demo!原来做游戏也不是很难,连憨憨学妹都学会了!
    13 万字 C 语言从入门到精通保姆级教程2021 年版
    10行代码集2000张美女图,Python爬虫120例,再上征途
Copyright © 2022 侵权请联系2656653265@qq.com    京ICP备2022015340号-1
正则表达式工具 cron表达式工具 密码生成工具

京公网安备 11010502049817号