听风de歌_社区达人页

备案控制台
个人头像照片
听风de歌
已加入开发者社区391天

勋章 更多

个人头像照片
专家博主
专家博主
个人头像照片
星级博主
星级博主
个人头像照片
乘风问答官
乘风问答官
个人头像照片
技术博主
技术博主
个人头像照片
一代宗师
一代宗师

成就

已发布624篇文章
281条评论
已回答2206个问题
28条评论
已发布0个视频
github地址

我关注的人 更多

碳基肥宅
碳基肥宅
游客44yag4ft7nckq
游客44yag4ft7nckq
悟空聊架构
悟空聊架构
liuyunshengsir
liuyunshengsir
游客ogeeqvh5vfa5q
游客ogeeqvh5vfa5q
Mr.anla
Mr.anla
游客bl53zvy3izljy
游客bl53zvy3izljy
游客5fdji2pvmf8888
游客5fdji2pvmf8888
北京宏哥
北京宏哥
你都不懂
你都不懂
小王老师呀
小王老师呀
GR鲸鱼
GR鲸鱼

粉丝 更多

某某智商有限
某某智商有限
ShaFaChuang-36210
ShaFaChuang-36210
听白
听白
大碗儿
大碗儿
1592440288735793
1592440288735793
兀码
兀码
游客ynn7umjhnsasi
游客ynn7umjhnsasi
aliyun1160684647-37161
aliyun1160684647-37161
游客7l
游客7l
游客5fdji2pvmf8888
游客5fdji2pvmf8888
GUODJ
GUODJ
游客dg5afdhnenoi60
游客dg5afdhnenoi60

技术能力

兴趣领域
擅长领域
技术认证

暂无个人介绍

暂无精选文章
暂无更多信息
  • 发表了文章 2024-05-29

    hadoop节点HDFS数据块基本概念

  • 发表了文章 2024-05-29

    Hadoop节点HDFS元数据与数据块的关系

  • 发表了文章 2024-05-29

    Hadoop节点HDFS数据块的作用

  • 发表了文章 2024-05-28

    hadoop节点HDFS数据块（Block）

  • 发表了文章 2024-05-28

    hadoop节点HDFS数据分片过程

  • 发表了文章 2024-05-28

    hadoop节点HDFS数据分片（Data Splitting）

  • 发表了文章 2024-05-27

    hadoop节点HDFS（Hadoop Distributed File System）数据分片

  • 发表了文章 2024-05-27

    Hadoop节点数据节点（DataNode）

  • 发表了文章 2024-05-27

    Hadoop节点名称节点（NameNode）

  • 发表了文章 2024-05-24

    Hadoop节点数据分片

  • 发表了文章 2024-05-24

    Hadoop节点数据副本

  • 发表了文章 2024-05-24

    Hadoop节点选择策略

  • 发表了文章 2024-05-23

    Hadoop节点的任务重试机制

  • 发表了文章 2024-05-23

    Hadoop节点的心跳检测与自动故障恢复

  • 发表了文章 2024-05-23

    Hadoop中的数据冗余备份

  • 发表了文章 2024-05-22

    Hadoop节点数据局部性

  • 发表了文章 2024-05-22

    Hadoop节点数据可靠性

  • 发表了文章 2024-05-22

    hadoop节点容错性

  • 发表了文章 2024-05-21

    Hadoop节点冗余

  • 发表了文章 2024-05-21

    Hadoop的网络容错

正在加载, 请稍后...
滑动查看更多
  • 回答了问题 2024-05-29

    最近大模型降价潮，哪家才是真的“价美”也“物美”？

    1image.png

    2

    1. GLM-4：它在自然语言处理方面表现出色，尤其在处理中文文本时具有很好的效果，能够支持文本分类、情感分析、机器翻译等任务，并且具有强大的智能体能力，可以自主理解和执行复杂指令。
    2. internLM2-latest：在超长上下文理解能力、综合性能、对话和创作体验等方面表现出色，并且提供了多阶段的训练流程，包括预训练、监督和基于人类反馈的强化学习，确保了模型的指令遵循和符合人类价值观。
    踩0 评论0
  • 回答了问题 2024-05-29

    一条SQL语句的执行究竟经历了哪些过程？

    在数据库管理系统的内部，一条看似简单的SQL查询语句背后，实际上隐藏着一系列复杂而精细的执行过程。这些过程不仅确保数据的准确性，也追求高效性，以响应用户的快速查询需求。下面，我将详细阐述一条SQL语句从输入到输出结果所经历的七个主要步骤。

    客户端请求：用户通过客户端（如应用程序或命令行界面）输入SQL查询语句，这一请求被发送到数据库服务器。

    连接与验证：服务器接收到请求后，通过连接器（如MySQL中的connector）进行连接管理，包括验证用户的身份和权限。如果验证失败，将返回错误信息。

    查询缓存：如果数据库支持查询缓存（如MySQL），服务器会首先检查缓存中是否存在相同的查询结果。如果命中缓存，则直接返回结果，跳过后续步骤，这是提高查询性能的有效方式。

    解析：如果缓存未命中，服务器将开始解析SQL语句。这包括词法分析、语法分析和语义分析，确保SQL语句的合法性和正确性。

    优化：在解析成功后，优化器会根据统计信息、索引等信息生成最优的执行计划。这一步对于提高查询性能至关重要。

    执行：执行器根据优化后的执行计划，从存储引擎（如InnoDB、MyISAM）中读取数据，进行计算和操作，并将结果返回给客户端。在执行过程中，数据库系统还会进行并发控制、锁管理、日志记录等操作，以确保数据的一致性和安全性。

    结果返回：最终客户端接收到数据库服务器返回的数据结果，并在屏幕上展现出来。
    image.png

    踩0 评论0
  • 回答了问题 2024-05-29

    当AI“复活”成为产业，如何确保数字生命技术始终用于正途？

    当AI“复活”技术，即克隆数字化人物形象的能力，逐渐成熟并可能形成产业时，我们必须对其潜在的伦理和法律影响进行深入的探讨。这项技术，如《流浪地球2》中所描绘的那样，虽给予了人们重温和纪念的可能，但也同时触动了人类对于生命、意识和道德边界的敏感神经。

    要让数字生命向善发展，我们需要明确技术的边界和限制。数字生命的“复活”并非真正意义上的生命再生，而是一种模拟和再现。因此我们必须明确这种模拟的界限，避免将其与真实生命混为一谈。同时，对于涉及个人隐私和尊严的信息，必须得到严格的保护，避免滥用和侵犯。我们应建立严格的监管机制，确保这项技术始终用于正途。这包括制定明确的法律法规，对技术的使用进行规范和限制。同时，建立专门的监管机构，对技术的研发和应用进行监督和审查，确保技术的健康发展。

    我们还需加强公众的科技伦理教育。通过教育和宣传，提高公众对于这项技术的认识和理解，引导公众形成正确的价值观和道德观。让公众明白，虽然技术能够带来许多便利和可能性，但我们也必须对其潜在的负面影响保持警惕。我们还应关注技术发展的长远影响。随着技术的不断进步，数字生命可能会越来越接近真实生命。在这种情况下，我们需要对生命的本质和定义进行更深入的思考和探讨。我们也需要考虑这项技术对于社会、经济和文化等方面的影响，确保其发展能够符合人类的共同利益和价值观。
    image.png

    踩0 评论0
  • 回答了问题 2024-05-28

    请教一个大数据计算MaxCompute问题，是不是也只能等待至少一个task释放资源，才可以运行？

    是的，当您的MaxCompute（MC）任务长时间处于"Waiting for cluster resource"状态时，这意味着当前集群中没有足够的资源来运行您的任务。即使任务优先级较高，任务也需要等待其他任务完成或释放资源后才能开始执行。MaxCompute会根据任务的优先级和资源调度策略来分配资源，高优先级的任务在资源紧张时可能会优先获得资源。

    踩0 评论0
  • 回答了问题 2024-05-28

    大数据计算MaxCompute是不是Transaction Table2.0啊？改名了？

    不是的，MaxCompute中的"Delta Table"和"Transaction Table2.0"是两个不同的概念。"Delta Table"通常是指一种支持事务和版本控制的数据表类型，它在其他数据处理系统（如Databricks的Delta Lake）中使用，提供了ACID（原子性、一致性、隔离性和持久性）特性。

    在MaxCompute中，与"Delta Table"类似的概念是"Transactional Table2.0"，它是一个支持事务特性的表类型。Transactional Table2.0是MaxCompute在2020年推出的一种新功能，它提供了类似于传统数据库的事务处理能力，包括读已提交（Read Committed）隔离级别和多版本并发控制（MVCC）。

    踩0 评论0
  • 回答了问题 2024-05-28

    大数据计算MaxCompute什么方法可以实现 将 一个表的分区吗？

    在阿里云MaxCompute中，你可以使用MULTI INSERT命令来实现将一个表的分区数据插入到另一个表的多个分区。以下是使用MULTI INSERT的语法示例，与您给出的示例类似：

    MULTI INSERT
FROM table2
INSERT OVERWRITE TABLE table1 PARTITION (pt = 20240521)
SELECT * FROM table2 WHERE pt = 20240522
INSERT OVERWRITE TABLE table1 PARTITION (pt = 20240520)
SELECT * FROM table2 WHERE pt = 20240522
INSERT OVERWRITE TABLE table1 PARTITION (pt = 20240519)
SELECT * FROM table2 WHERE pt = 20240522;

    具体可参考如下MULTI INSERT
    使用

    踩0 评论0
  • 回答了问题 2024-05-28

    现在常用易用的爬虫库有哪些

    现在常用且易用的爬虫库：Scrapy，BeautifulSoup，Requests，Selenium，PyQuery，lxml，Puppeteer（非Python）。都有对应的官方文档，你可以从网上搜索一下

    踩0 评论0
  • 回答了问题 2024-05-28

    站在爬虫的角度，如何反爬？

    遵守网站的robots.txt文件，这是网站对爬虫的指南，通常会列出禁止爬取的页面和目录。Robots协议屏蔽搜索引擎抓取网站内容。
    image.png

    踩0 评论0
  • 回答了问题 2024-05-28

    如果定时每天执行一次爬虫程序，怎么知道当前新增的数据呢？

    你可以定时SQL任务执行后，您可以在定时SQL任务的执行实例区域查看执行情况。这里会显示任务执行时间、处理的数据量等信息，帮助您了解每次执行处理了多少新数据。
    image.png

    踩0 评论0
  • 回答了问题 2024-05-27

    DataWorks上有没有共同协作的excel,类似于钉钉的共享文档?

    这个电子表格就可以多人编辑，也可以共享
    image.png

    踩0 评论0
  • 回答了问题 2024-05-27

    DataWorks电子表格只可以5个人编辑吗？

    电子表格最多支持10个人编辑
    image.png

    踩0 评论0
  • 回答了问题 2024-05-24

    对象存储开启合规保留策略期间是否可以删除存储空间

    不可以的，开启合规保留策略后在规定的保留策略时间范围内是不允许删除存储空间的，必须要等过了保留策略的时间后才可删除
    image.png

    踩0 评论0
  • 回答了问题 2024-05-24

    DTS数据传输可以跨VPC或区域同步吗

    可以的
    image.png

    踩0 评论0
  • 回答了问题 2024-05-24

    DTS可以修改同步库内的某个表吗

    dts的同步的表，源端的可以做增加或是移除，据我了解但是表的结构不能修改，修改了dts同步链路会失败。
    image.png

    踩0 评论0
  • 回答了问题 2024-05-24

    MaxCompute项目操作入口找不到

    登录MaxCompute控制台，项目管理页签下的MaxCompute项目名。具体可参考项目空间操作来找
    image.png

    踩0 评论0
  • 回答了问题 2024-05-24

    负载均衡出方向和入方向带宽一样吗

    入方向带宽：阿里云会分配与购买的带宽峰值相等的入方向带宽。
    出方向带宽：阿里云会分配与购买的带宽峰值相等的出方向带宽。
    在各地域可购买的最大公网带宽会有差别，请以实例购买页为准。
    image.png

    踩0 评论0
  • 回答了问题 2024-05-23

    什么是数据倾斜？通常发生在哪些环节？

    可参考阿里云官方文档上的解释：https://help.aliyun.com/zh/maxcompute/use-cases/data-skew-tuning?spm=a2c4g.11186623.0.i9
    image.png

    踩0 评论0
  • 回答了问题 2024-05-23

    什么是Mapjoin，它的主要好处是什么？

    mapjoin是当您对一个大表和一个或多个小表执行join操作时，可以在select语句中显式指定mapjoin Hint提示以提升查询性能。它的好处如下图介绍
    image.png

    踩0 评论0
  • 回答了问题 2024-05-23

    热点数据单独处理/SkewJoin的核心思路是什么？

    当两张表Join存在热点，导致出现长尾问题时，您可以通过取出热点key，将数据分为热点数据和非热点数据两部分处理，最后合并的方式，提高Join效率。SkewJoin Hint可以通过自动或手动方式获取两张表的热点key，分别计算热点数据和非热点数据的Join结果并合并，加快Join的执行速度。
    https://help.aliyun.com/zh/maxcompute/user-guide/skewjoin-hint

    踩0 评论0
  • 回答了问题 2024-05-23

    什么是灰度发布，它有哪些优点？

    灰度发布就是分批次发布，它的优点就是减少一次性发布带来的安全风险隐患，把发布中导致的风险降到最低。
    image.png

    踩0 评论0
正在加载, 请稍后...
滑动查看更多
正在加载, 请稍后...
暂无更多信息
勋章
关注
粉丝
http://www.vxiaotou.com