版权说明:本文档由用户提供并上传,收益归属内容提供方,若内容存在侵权,请进行举报或认领
文档简介
1/1容器化内核优化第一部分容器化内核配置优化 2第二部分资源限制和隔离优化 4第三部分调度策略和优先级优化 6第四部分内存管理和调度优化 8第五部分I/O性能优化 10第六部分安全性和合规性优化 12第七部分监控和诊断优化 16第八部分容器化内核升级和维护 18
第一部分容器化内核配置优化容器化内核配置优化
在容器化环境中,内核配置对于容器的性能和安全性至关重要。通过优化内核配置,可以提升容器的整体效率并减少安全风险。
优化策略
*禁用不需要的内核模块:容器环境通常只运行有限数量的应用程序,因此可以禁用不必要的内核模块,从而减少开销和潜在的安全漏洞。
*优化内存管理:调整内存管理参数,例如slab分配器和页面大小,可以提高容器的内存利用率和性能。
*优化网络栈:优化网络栈配置,例如TCP缓冲区大小和拥塞控制算法,可以提高容器间的网络性能。
*优化调度器:根据容器的负载和资源需求调整调度器配置,可以优化容器的性能和响应时间。
*安全增强:启用内核安全模块,例如SELinux或AppArmor,可以增强容器的安全防御能力,防止未经授权的访问和特权提升。
具体配置参数
以下是需要考虑的具体内核配置参数:
*CONFIG_MODULE_SIG:启用内核模块签名,以防止未经授权的模块加载。
*CONFIG_SLAB:调整slab分配器参数,以优化内存使用。
*CONFIG_PAGEALLOC_COSTLY_ORDER:启用成本昂贵的大页分配,以提高大内存容器的性能。
*CONFIG_TCP_CONGESTION_CONTROL:选择合适的TCP拥塞控制算法,例如CUBIC或BBR,以优化网络性能。
*CONFIG_SCHED_CFS_BANDWIDTH:配置cgroup带宽限制,以控制容器的CPU使用。
*CONFIG_CGROUPS:启用cgroup功能,以隔离和管理容器的资源。
*CONFIG_SECURITY_SELINUX:启用SELinux,以强制执行基于角色的访问控制。
*CONFIG_SECURITY_APPARMOR:启用AppArmor,以实施细粒度的访问控制策略。
最佳实践
*定期优化内核配置:随着容器技术和应用程序需求的不断发展,定期优化内核配置是至关重要的。
*针对特定工作负载优化:根据容器的特定工作负载和资源需求进行定制内核配置,以获得最佳性能。
*使用配置管理工具:利用Chef、Puppet或Ansible等配置管理工具,以自动化内核配置过程。
*遵循安全最佳实践:在优化内核配置时,始终优先考虑安全,启用适当的安全模块并关闭不必要的服务。
结论
优化容器化内核配置对于提高容器的性能、安全性和可管理性至关重要。通过遵循最佳实践并根据特定工作负载进行调整,可以创建高效且安全的容器环境。第二部分资源限制和隔离优化关键词关键要点CPU优化
1.通过限制容器的CPU使用时间,避免资源过度消耗,提高集群稳定性。
2.使用CPU亲和性设置,将容器分配到特定的CPU核上,减少上下文切换,提升性能。
3.监控容器的CPU使用情况,及时发现异常,采取必要的措施进行优化。
内存优化
1.设置容器的内存限制,防止其过度占用内存,导致系统不稳定。
2.使用内存请求和限制,确保容器获得足够的内存资源,避免因内存不足而崩溃。
3.定期清理容器中的缓存和临时文件,释放内存空间,提高性能。资源限制和隔离优化
在容器化环境中,资源限制和隔离对于确保容器安全、高效和隔离至关重要。以下是对文章《容器化内核优化》中介绍的资源限制和隔离优化的内容摘要:
资源限制
*CPU配额和限制:限制容器可以使用的CPU时间片或内核百分比,防止容器过度使用资源。
*内存限制:指定容器可使用的最大内存量,防止内存泄漏和容器崩溃。
*BlockIO配额和限制:控制容器可以执行的磁盘读写操作数量,防止磁盘风暴。
*网络带宽限制:限制容器可以使用的网络带宽,防止容器占用过多的网络资源。
*用户命名空间(UTS):隔离容器的内核主机名和域名,确保容器彼此独立运行。
隔离
*进程名称空间(PID):为每个容器创建独立的进程树,防止容器之间相互干扰。
*网络名称空间(NET):为每个容器创建独立的网络栈,包括IP地址、路由表和端口范围,确保容器之间的网络隔离。
*文件系统名称空间(MNT):为每个容器创建独立的文件系统根目录,防止容器之间访问彼此的文件。
*IPC名称空间(IPC):隔离容器之间的IPC机制,例如管道、消息队列和信号量。
*用户名称空间(USER):为每个容器创建独立的用户ID和组ID映射,防止容器之间以特权身份运行进程。
优化策略
*最小特权原则:仅向容器授予运行所需的最少权限。
*资源配额和限制:根据容器的工作负载和可用资源配置适当的资源限制。
*隔离:通过强制实施名称空间隔离来防止容器之间的交互。
*监控和审计:定期监控容器资源使用情况和隔离状态,并审计容器活动以检测异常行为。
*容器沙盒:使用容器沙盒技术为容器提供额外的隔离层,例如Docker的seccomp和AppArmor。
通过实施这些优化策略,可以提高容器化内核的安全性和效率,确保容器独立运行且不受其他容器的影响,同时最大限度地利用系统资源。第三部分调度策略和优先级优化调度策略和优先级优化
在容器化环境中,调度策略和优先级优化至关重要,可确保工作负载有效且高效地运行。
调度策略
调度策略决定了容器如何分配给节点上的CPU和内存资源。常见的调度策略包括:
*先来先服务(FIFO):按照容器到达的顺序分配资源。
*加权公平调度(CFS):基于容器分配的权重公平分配CPU时间。
*完全公平调度(CFS):与CFS类似,但确保所有容器在平均情况下获得相同数量的CPU时间。
*实时调度(RT):为实时任务提供保证的性能,即使在资源不足的情况下也是如此。
优先级优化
优先级优化涉及将不同优先级的容器分配到具有不同资源限制的节点。优先级可以基于以下因素:
*业务关键程度:高优先级容器对于业务运营至关重要。
*资源需求:资源需求高的容器需要更多资源。
*SLA:某些容器有明确的服务级别协议(SLA),需要满足特定的性能目标。
优化技巧
以下是一些优化调度策略和优先级的技巧:
*使用适当的调度策略:根据容器的工作负载要求选择最合适的调度策略。
*分配合适的大小和资源限制:为每个容器分配足够且合理的CPU和内存资源。
*设置优先级:根据容器的业务关键性设置优先级。
*使用亲和性和反亲和性规则:将具有类似资源需求或互补功能的容器放置在同一节点上,或将需要隔离的容器放置在不同节点上。
*启用cgroup:使用cgroup隔离和限制容器资源使用。
*监视和调整:定期监视容器性能并根据需要调整调度策略和优先级。
容器引擎优化
Docker
*--cpu-shares:用于设置容器的CPU权重。
*--memory:用于设置容器的内存限制。
*--pids-limit:用于设置容器中允许的最大进程数。
*--blkio-weight:用于设置容器的块I/O权重。
Kubernetes
*节点选择器:用于根据特定标签或分配策略将Pod调度到特定节点。
*亲和性和反亲和性规则:用于确保Pod在同一节点上一起运行或分开运行。
*Pod优先级和预留:用于设置Pod的优先级并为其预留资源。
*资源配额和限制:用于限制容器和Pod使用的资源量。
容器调度器
*KubernetesScheduler:Kubernetes中默认的调度器,可配置各种调度策略和优先级规则。
*Borg:Google开发的调度器,专注于大规模容器编排。
*Mesos:一个分布式资源管理平台,可用于调度容器和其他工作负载。
*Nomad:一个轻量级的容器调度器,专注于简化性和可用性。
通过优化调度策略和优先级,组织可以确保容器化工作负载的高性能和可用性,并根据业务需求有效利用资源。第四部分内存管理和调度优化内存管理优化
容器化环境中的内存管理优化至关重要,它可以提高性能,减少资源消耗,并确保容器稳定性。以下是一些常见的内存管理优化技术:
*透明大页(THP):THP通过合并相邻的页帧来减少页表条目,从而减少内存开销和TLB未命中。
*内存去重:内存去重技术通过识别和合并重复的内存页面来减少内存占用,这在运行相似应用程序或共享库的容器中尤为有效。
*cgroup内存控制器:cgroup内存控制器允许管理员对容器的内存使用情况进行限制,防止容器耗尽可用内存并影响其他容器的性能。
*内存节点感知调度:这种技术根据容器的内存节点亲和性将其调度到适当的NUMA节点,从而减少内存访问延迟并提高性能。
*动态内存分配:动态内存分配算法可以根据容器的工作负载需求动态分配内存,避免内存过度分配或不足。
调度优化
容器化环境中的调度优化可确保公平资源分配,并最大限度地提高系统的吞吐量和响应时间。以下是一些常见的调度优化技术:
*基于优先级的调度:基于优先级的调度器根据容器的优先级为其分配CPU时间,确保关键任务容器优先获得资源。
*公平调度:公平调度器确保所有容器获得公平的CPU时间共享,防止某些容器独占资源并饿死其他容器。
*基于隔离的调度:基于隔离的调度器将容器隔离到不同的核或CPU插槽上,从而减少噪声和干扰,并提高容器的性能和稳定性。
*cgroupCPU调节器:cgroupCPU调节器允许管理员限制容器的CPU使用量,防止容器超出其分配的共享。
*CFS调度器:完全公平调度器(CFS)是Linux内核中默认的调度器,它使用红黑树来跟踪每个进程的运行时间,确保公平的CPU时间分配。
其他优化
除了内存管理和调度优化之外,还有其他一些技术可以用于优化容器化内核:
*挂载传播:挂载传播允许容器访问主机的文件系统,而无需在容器内部重新挂载这些文件系统,从而减少开销和提高性能。
*性能事件:性能事件提供了有关内核操作的详细信息,可以用来识别性能瓶颈并进行相应的优化。
*内核模块卸载:卸载未使用的内核模块可以释放内存资源并提高性能,尤其是在运行多个容器的情况下。
*容器暂停和恢复:容器暂停和恢复技术允许管理员在不终止容器的情况下保存和恢复容器的状态,从而节省资源并加快容器重启。
持续监控和优化容器化内核对于确保其性能和稳定性至关重要。通过实施上述优化技术,管理员可以最大限度地提高容器化环境的效率,并满足不断变化的工作负载需求。第五部分I/O性能优化I/O性能优化
容器化内核的I/O性能优化旨在提高容器应用程序对存储资源的访问效率,从而减少延迟并提高整体系统性能。以下是一些常见的优化技术:
文件系统优化
*Union文件系统(UnionFS):UnionFS是一种联合多个底层文件系统的文件系统,它允许在容器中透明地合并只读和可写层。这可以提高读性能,同时保持对数据的写访问。
*OverlayFS:OverlayFS是一种联合文件系统,它为容器提供了一个可写的上层,同时保留对底层只读文件系统的访问。这允许容器修改文件系统,而无需复制整个文件系统。
*tmpfs:tmpfs是一种内存文件系统,用于存储临时数据。将容器的临时目录挂载到tmpfs上可以显着提高写入性能,因为写入操作发生在内存中,而不是缓慢的物理存储。
块设备优化
*devicemapper:devicemapper是一个内核模块,它允许创建设备映射,从而抽象出底层存储设备。这允许容器使用logicalvolumemanager(LVM)等高级存储管理工具。
*iSCSI和NFS:iSCSI和NFS是网络文件系统协议,允许容器访问远程存储卷。这可以为容器提供访问高性能存储设备或集中存储的灵活性。
*RDMA(远程直接内存访问):RDMA是一种协议,它允许容器直接访问远程服务器的内存。这可以显著提高块设备访问的性能,因为它消除了网络协议开销。
I/O调度程序
*noop调度程序:noop调度程序是一个简单的调度程序,它不执行任何I/O调度。这可以提供最低的延迟,但可能导致I/O吞吐量降低。
*CFQ(完全公平队列)调度程序:CFQ调度程序对I/O请求进行排队,以确保公平地访问存储设备。这可以提高吞吐量,但可能会增加延迟。
*deadline调度程序:deadline调度程序为每个I/O请求设定一个截止时间。如果请求在截止时间内没有完成,则请求将被丢弃并重新提交。这可以确保高优先级请求得到及时处理。
其他优化
*内核中的I/O优化:Linux内核中引入了多项I/O优化,例如DMA(直接内存访问)、设备轮询和I/O合并。这些优化可以提高容器I/O性能。
*容器编排工具集成:容器编排工具,如Kubernetes,提供各种功能来优化容器I/O,例如自动发现存储卷和自动弹性扩展。
*监控和性能分析:监控容器I/O性能并识别瓶颈对于进一步优化至关重要。可以使用工具,如Prometheus和Grafana,来收集和分析性能指标。
实施这些优化可以显着提高容器化内核的I/O性能。但是,重要的是要根据具体用例和系统配置选择最合适的优化。第六部分安全性和合规性优化关键词关键要点安全漏洞管理
*容器化环境中漏洞管理工具的集成,如Clair或Anchore。
*定期扫描容器镜像和运行时漏洞,并采取适当的补救措施。
*实施自动化漏洞修复流程,以快速响应威胁。
恶意软件检测
*集成容器化反恶意软件解决方案,如ClamAV或Malwarebytes。
*定期扫描容器镜像和运行时是否存在恶意软件。
*设置入侵检测系统(IDS)或入侵预防系统(IPS)以检测和阻止恶意活动。
权限和隔离
*最小化容器内特权,使用容器运行时特权(CRTs)。
*限制容器之间的资源访问,使用网络命名空间和控制组。
*隔离容器化应用程序与主机系统资源,使用命名空间和卷装载。
合规性审计
*确保容器化环境符合监管要求,如PCIDSS或ISO27001。
*实施审计工具和流程,以跟踪和报告合规性活动。
*定期进行合规性审查,以确定改进领域。
安全配置管理
*建立容器化环境安全配置基线。
*强制执行安全配置,使用工具如Kubernetesadmissioncontrollers或Helmcharts。
*定期监控和审计配置更改,以确保合规性和安全性。
安全DevOps
*将安全实践集成到容器化软件开发生命周期中,使用安全DevOps工具和技术。
*实施持续集成和持续交付(CI/CD)管道,以自动化安全检查和漏洞修复。
*促进开发人员和安全团队之间的协作,以提高整体安全性。安全性与合规性优化
容器化内核优化涉及加强容器安全性和合规性的措施,以保护应用程序和基础设施免受威胁。
安全增强Linux(SELinux)
SELinux是一种内核安全模块,它提供强制访问控制(MAC),限制进程对系统资源的访问。通过对容器配置SELinux策略,可以限制容器之间的交互并防止特权提升。
AppArmor
AppArmor是另一个内核安全模块,它强制实施进程对系统资源的访问控制。与SELinux类似,AppArmor策略可以配置为限制容器的行为,防止未经授权的访问和执行。
容器运行时安全(CRS)
CRS是一种框架,提供容器运行时的安全功能,例如隔离、权限管理和审计。通过实施CRS,可以加强容器之间的隔离,防止恶意软件传播并提高可见性。
漏洞管理
保持容器和内核软件的最新状态对于防止利用已知漏洞至关重要。自动化修补和定期安全扫描有助于检测和修复漏洞,降低安全风险。
合规优化
CISKubernetes基准
CISKubernetes基准是一组安全最佳实践,针对Kubernetes环境进行了优化。通过遵循这些基准,组织可以提高其Kubernetes集群的安全性合规性。
PCIDSS
支付卡行业数据安全标准(PCIDSS)是一套安全要求,适用于所有处理、存储或传输支付卡数据的组织。实施PCIDSS合规性措施对于保护敏感数据和避免处罚至关重要。该标准适用于Kubernetes环境中的容器化应用程序。
GDPR
通用数据保护法规(GDPR)是一项欧盟法规,规定了组织处理个人数据的规则。在Kubernetes环境中处理个人数据的组织需要实施GDPR合规性措施,例如数据加密、访问控制和数据保护影响评估。
安全最佳实践
最小化特权
只向容器授予运行所需的最少特权。这减少了容器被攻击或利用的可能性。
限制网络访问
使用网络策略限制容器之间的网络通信。这有助于防止恶意软件传播和未经授权的访问。
使用可信镜像
仅从受信任的来源提取和使用容器镜像。这有助于防止恶意软件感染容器。
实施审计和日志记录
启用审计和日志记录功能,以跟踪容器活动并检测可疑行为。
持续监控
使用容器监视工具持续监控容器活动,检测异常和安全事件。
通过实施这些优化措施,组织可以提高容器化环境的安全性并确保合规性。这降低了安全风险,保护了应用程序和数据,并确保了监管合规性。第七部分监控和诊断优化关键词关键要点【诊断优化】
1.启用调试日志,例如auditd和syslog,以捕获错误并进行故障排除。
2.利用诊断工具,如strace和ptrace,来跟踪进程和内核活动,识别性能瓶颈。
3.集成监控解决方案,例如Prometheus和Grafana,以跟踪重要指标、检测异常并发出警报。
【监控优化】
监控和诊断优化
容器化环境的监控和诊断至关重要,可确保应用程序的可靠性和性能。本文将介绍优化容器监控和诊断的最佳实践。
1.指标监控:
*使用普罗米修斯或Grafana等工具收集和可视化容器指标。
*监视关键指标,如CPU使用率、内存使用率和网络带宽。
*设置阈值和警报以检测异常情况。
2.日志收集:
*通过Fluentd或Loki等工具集中收集和处理容器日志。
*启用容器日志记录,并确保日志级别足够详细。
*分析日志以识别错误、警告和性能问题。
3.跟踪:
*使用Jaeger或Zipkin等工具实现分布式跟踪。
*跟踪端到端请求,并识别性能瓶颈。
*可视化跟踪数据以了解应用程序的行为。
4.健康检查:
*使用Liveness和Readiness探测来确定容器是否健康。
*配置探测器定期检查容器的可用性和响应能力。
*根据探测结果自动重新启动不健康的容器。
5.调试工具:
*使用Kubectl命令行工具获取容器状态和事件信息。
*利用DockerInspect命令查看容器配置和资源使用情况。
*集成调试工具,如pdb或debugger,以交互式地调试容器代码。
6.性能优化:
*优化容器镜像,删除不必要的依赖项和优化代码。
*限制容器的资源请求和限制,以防止争用。
*调整内核参数(如容器CPU配额)以提高性能。
7.安全性:
*监视容器中的异常活动,并设置警报以检测安全威胁。
*定期扫描容器映像以查找漏洞和恶意软件。
*限制容器特权,并实施安全最佳实践。
8.工具集成:
*集成监控和诊断工具,如Prometheus和Grafana,到Kubernetes仪表板。
*利用云提供商提供的托管监控服务(如AWSCloudWatch或AzureMonitor)。
*探索无服务器日志记录和监控平台,如AWSCloudTrail或AzureLogAnalytics。
通过实施这些最佳实践,可以显著提高容器化环境的监控和诊断能力。这将确保应用程序的可靠性和性能,并有助于快速识别和解决问题。第八部分容器化内核升级和维护容器化内核升级和维护
容器化技术通过在单个操作系统实例上隔离多个应用程序,实现了资源利用效率和应用程序可移植性。然而,随着时间的推移,底层内核需要升级和维护以保持安全性和性能。
内核升级
容器化内核升级涉及将基础操作系统内核更新到新版本。建议定期进行内核升级,以解决安全漏洞、引入新功能并提高稳定性。
升级过程
内核升级过程通常涉及以下步骤:
1.备份数据:在开始升级之前,备份所有重要数据以防止意外数据丢失。
2.更新容器镜像:从新内核版本创建新的容器镜像,并部署这些新镜像。
3.重启容器:重启容器以加载新内核。
4.测试和验证:测试容器以验证升级过程是否成功,并确保应用程序正常运行。
内核维护
除了升级之外,内核还需要持续维护以保持其安全性和性能。这包括以下任务:
安全补丁:定期应用安全补丁以解决已发现的漏洞和安全风险。
性能优化:根据工作负载需要进行性能优化,例如调整内核参数或启用性能优化功能。
日志分析:分析内核日志以识别潜在问题并及早采取补救措施。
监控和警报:实施监控和警报机制以及时检测和响应内核问题。
最佳实践
渐进式升级:一次只升级一个内核组件,以减少升级风险。
回滚计划:制定回滚计划,以便在升级失败时可以轻松恢复到以前的内核版本。
测试和验证:在生产环境中部署新内核之前,彻底测试和验证所有更改。
自动化:尽可能自动化升级和维护任务,以提高效率并减少人为错误。
潜在挑战
内核升级和维护可能会带来以下挑战:
应用程序兼容性:新内核版本可能与某些应用程序不兼容,需要修改或重新编译。
重新启动时间:升级内核需要重新启动容器,可能会导致应用程序停机。
安全风险:升级过程本身可能会引入新的安全漏洞,需要仔细规划和测试。
结论
容器化内核升级和维护对于保持容器化环境的安全性和高效运行至关重要。通过遵循最佳实践、解决潜在挑战并实施持续监控和维护策略,可以确保内核保持最新状态并优化性能。定期升级和维护内核是任何容器化基础设施必不可少的一部分,有助于最大限度地提高安全性和应用程序可用性。关键词关键要点【容器化内核配置优化】
关键词关键要点主题名称:调度策略优化
关键要点:
1.选择适当的调度器:根据容器化应用的特点选择最佳的调度器,如CFS(完全公平调度器)或Cgroupv2(控制组版本2),优化资源利用率和性能。
2.调整调度参数:修改调度器的参数,如权重、优先级等,以满足特定应用程序的性能需求。例如,为关键任务应用程序分配更高的优先级,以确保其优先获得资源。
3.定制调度策略:开发自定义的调度策略,利用容器组、namespace和资源配额等机制,精细控制容器之间的资源分配和调度行为。
主题名称:优先级优化
关键要点:
1.设定清晰的优先级:为容器化应用程序定义明确的优先级级别,根据其业务重要性或资源要求进行分类。例如,高优先级应用程序获得优先访问CPU、内存等资源。
2.动态调整优先级:实现动态优先级调整机制,根据实时性能指标或业务策略自动调整容器的优先级。这有助于适应不断变化的工作负载和业务需求。
3.容器组优先级管理:利用容器组功能,对一组相关的容器设置统一的优先级策略。通过管理容器组的优先级,可以简化优先级管理并提高资源分配的灵活性。关键词关键要点主题名称:内核内存管理优化
关键要点:
1.优化容器内存分配算法,提升内存利用率,减少内存碎片。
2.采用内存共享技术,如页共享和透明大页,降低容器内存占用。
3.提供内存限定和资源配额功能,确保容器内存安全和隔离。
主题名称:内核调度优化
关键要点:
1.优化任务调
温馨提示
- 1. 本站所有资源如无特殊说明,都需要本地电脑安装OFFICE2007和PDF阅读器。图纸软件为CAD,CAXA,PROE,UG,SolidWorks等.压缩文件请下载最新的WinRAR软件解压。
- 2. 本站的文档不包含任何第三方提供的附件图纸等,如果需要附件,请联系上传者。文件的所有权益归上传用户所有。
- 3. 本站RAR压缩包中若带图纸,网页内容里面会有图纸预览,若没有图纸预览就没有图纸。
- 4. 未经权益所有人同意不得将文件中的内容挪作商业或盈利用途。
- 5. 人人文库网仅提供信息存储空间,仅对用户上传内容的表现方式做保护处理,对用户上传分享的文档内容本身不做任何修改或编辑,并不能对任何下载内容负责。
- 6. 下载文件中如有侵权或不适当内容,请与我们联系,我们立即纠正。
- 7. 本站不保证下载资源的准确性、安全性和完整性, 同时也不承担用户因使用这些下载资源对自己和他人造成任何形式的伤害或损失。
最新文档
- GB/T 44596-2024中文域名编码技术要求
- 关注食品安全的演讲稿
- 国旗下讲话稿荐
- 关于新学期的计划模板集合七篇
- 天英学校家政服务员(中级)理论练习卷附答案
- 2017年四川省绵阳市中考语文试卷(教师版)
- 2024-2025学年上海外国语大学附属外国语学校松江云间中学八年级(上)月考数学试卷(10月份)(含解析)
- 语文统编版(2024)一年级上册汉语拼音-⑪ɑo ou iu 教案
- 第3章 水与膳食纤维课件
- 会计数据分析 TestBank Richardson1e-Chapter07-TB-AnswerKey
- 爱护公物-珍爱校园精选课件
- 内部审核检查表(采购部)
- 道路货物运输企业安全生产检查表参考模板范本
- DB11T 1998-2022 既有公共建筑节能绿色化改造技术规程
- 税负计算表(增值税)
- 2017年8月11日公安部遴选公务员面试真题及答案解析
- 2021年骨科规培考试试卷含答案
- 从美国投顾业务及头部公司特点看国内基金投顾业务发展
- 湘少版五年级上册英语阅读理解专项精选练习
- 01511现代管理实务 自考重点
- DB22∕T 2646.1-2017 吉林省水利工程定额 第1部分:工程设计概(估)算编制规定
评论
0/150
提交评论