linux python 新建脚本文件夹,遍历Linux文件夹下文件的Shell（及python）脚本

女爷i 2023-01-19 08:23 250阅读 0赞

1、脚本查看

nisjdeMacBook-Pro:Downloads nisj$ cat traveDir.sh

\#!/usr/bin/env bash

function read\_dir()\{

for file in \`ls $1\`

do

if \[ -d $1"/"$file \]

then

read\_dir $1"/"$file

else

cat $1"/"$file|grep "command=sh /data/etl/sh/agr\_common.sh dim"|awk -F" " '\{print $3\}'>>/Users/nisj/Downloads/runigJob.sql

fi

done

\}

rm -rf /Users/nisj/Downloads/runigJob.sql

read\_dir $1

2、调用示例

sh traveDir.sh /Users/nisj/WptWork/gitOnline/azkaban-job/src/etl-scheduler-subflow

3、注意说明

3.1、调用格式是：\[sh traveDir.sh 要遍历的路径\]

3.2、\[awk -F" " '\{print $3\}'\]的使用

3.3、Shell函数的使用

3.4、结果文件查看

nisjdeMacBook-Pro:Downloads nisj$ cat runigJob.sql

dim\_regist\_sc\_1d

dim\_sale\_id\_snap\_1d

dim\_sale\_uri\_snap\_1d

dim\_sc\_webtype\_1d

dim\_seller\_base\_snap\_1d

dim\_seller\_cfc\_organization\_full\_1d

dim\_share\_documents\_full\_chain\_1d

dim\_template\_category\_chain\_1d

dim\_user\_base\_curr\_snap\_1d

dim\_userinfo\_snap\_full\_1d

dim\_user\_yj\_artisan\_full\_1d

dim\_userinfo\_address\_full\_1d

dim\_userinfo\_basic\_info\_full\_1d

dim\_product\_category\_full\_1d

nisjdeMacBook-Pro:Downloads nisj$

3.5、一个查找文件中包含固定字符串的python脚本

/Users/nisj/Documents/wptDataGit-nisj/wptData/pyScript/love/findFile.py

\# encoding: utf-8

import os

def find(find\_text):

os.system("""find /Users/nisj/WptWork/gitOnline/etl/sql -maxdepth 1 -type f -name '\*.sql'|xargs grep -n '\{find\_text\}'|grep -v '\\--'>>/Users/nisj/Downloads/ods\_dependent.sql""".format(find\_text=find\_text));

find\_text\_list=\['ods\_activity\_sale\_apply\_full\_1d',

'ods\_activity\_sale\_apply\_full\_1d\_old',

'ods\_alcohol\_alcohol\_exchange\_full\_1d',

'ods\_alcohol\_alcohol\_full\_1d',

'ods\_alcohol\_alcohol\_order\_full\_1d',

'ods\_alcohol\_alcohol\_pay\_full\_1d',

'ods\_alcohol\_currency\_exchange\_full\_1d'\]

os.system(

"rm -rf /Users/nisj/Downloads/ods\_dependent.sql");

for find\_text in find\_text\_list:

find(find\_text=find\_text)

发表评论取消回复

表情：

评论列表（有 0 条评论，250人围观）

还没有评论，来说两句吧...

相关阅读

相关【shell】备份文件夹内文件的脚本

实现：（1）备份文件（2）添加日期后缀 !/bin/bash suffix=`date +%Y%m%d` for f in `f

水深无声/ 2024年03月02日 08:48/ 0 赞/ 14 阅读

相关 Python3遍历指定文件夹下所有文件及文件夹

import os def get_filelist(dir): for home, dirs, files in os.walk(dir):

约定不等于承诺〃/ 2023年10月05日 15:17/ 0 赞/ 16 阅读

相关 python-新建文件夹

import tensorflow as tf import os categories = ['folder1', 'folder2']

「爱情、让人受尽委屈。」/ 2023年08月17日 15:17/ 0 赞/ 101 阅读

相关 linux python 新建脚本文件夹,遍历Linux文件夹下文件的Shell（及python）脚本

1、脚本查看 nisjdeMacBook-Pro:Downloads nisj$ cat traveDir.sh \!/usr/bin/env bash function

女爷i/ 2023年01月19日 08:23/ 0 赞/ 251 阅读

相关 linux shell 脚本复制特定后缀文件到另外一个文件夹下

linux shell 脚本复制特定后缀文件到另外一个文件夹下 linux shell 特定后缀 linux复制一个文件夹下所有图片到内存卡 linux复制

曾经终败给现在/ 2023年01月12日 11:58/ 0 赞/ 196 阅读

相关 python（遍历）读取文件或文件夹

文章目录例子 os.listdir os.walk 遍历读取代码搞机器学习或者深度学习算法很多时候需要遍历某个目录读取文件，特别是经常需要读

超、凢脫俗/ 2022年12月10日 04:52/ 0 赞/ 186 阅读

相关 Shell脚本：linux构建大量测试文件或文件夹

文章目录 1、构造文件和文件夹 2、只构造文件 -------------------- 1、构造文件和文件夹

野性酷女/ 2022年09月08日 14:51/ 0 赞/ 168 阅读

相关 shell 脚本检测文件夹

01 测试，目录下是不是存在文件 packages if ! test ./packages ; then echo "not exist pac

Love The Way You Lie/ 2022年08月21日 04:12/ 0 赞/ 203 阅读

相关 shell脚本遍历文件夹下及其子文件下所有文件，本且替换指定文本

今天写了一个需求，在linux上，对一个文件夹下的所有文件中，指定的文本内容进行替换，比如把 www.baidu.com 替换成 www.google.com 1.先熟悉

左手的ㄟ右手/ 2022年05月09日 17:56/ 0 赞/ 743 阅读

相关 python 遍历文件夹文件

![复制代码][copycode.gif] import os import os.path rootdir = “d:\data”

分手后的思念是犯贱/ 2022年02月01日 01:47/ 0 赞/ 352 阅读