0.內核配置：
CONFIG_FUNCTION_TRACER
CONFIG_FUNCTION_GRAPH_TRACER

一、 function graph tracer的使用

1.掛載debugfs文件系統
mount -t debugfs none /sys/kernel/debug

2.進入tracing調試目錄
cd /sys/kernel/debug/tracing

3.設置為function_graph功能
echo function_graph > ./current_tracer

4.添加需要跟蹤的函數blk_update_request
echo ‘phytium_lpc_probe’ > ./set_graph_function

5.開啟跟蹤
echo 1 > ./tracing_on

6.執行自己的操作或者腳本，等待函數運行或者bug出現

7.關閉跟蹤
echo 0 > ./tracing_on

8.取出log
cp ./trace ~/log.txt

優化：
1.設置函數過濾
echo vfs_open > ./set_ftrace_filter

2.設置當前進程pid過濾
echo $$ > /sys/kernel/debug/tracing/set_ftrace_pid

3.函數結束的反括號后帶函數入口的注釋
echo 1 > ./options/funcgraph-proc
echo 1 > ./options/funcgraph-tail

4.使能trace子進程
echo 1 > /sys/kernel/debug/tracing/option/function-fork

二、kprobe的使用

1.掛載debugfs文件系統
mount -t debugfs none /sys/kernel/debug

2.進入tracing調試目錄
cd /sys/kernel/debug/tracing

3.設置配置屬性獲取函數傳入參數和返回值
echo ‘p:myprobe do_fork clone_flags=%r0 stack_start=%r1 stack_size=%r2 parent_tidptr=%r3 child_tidptr=+0($stack)’ > /sys/kernel/debug/tracing/kprobe_events
echo ‘r:myretprobe do_fork $retval’ >> /sys/kernel/debug/tracing/kprobe_events

4.開啟探測并觸發函數調用
echo 1 > events/kprobes/myprobe/enable
echo 1 > events/kprobes/myretprobe/enable

5.執行自己的操作或者腳本，等待函數運行或者bug出現

6.取出log
cp ./trace ~/log.txt

優化：
1.激活堆棧查看函數調用關系
echo stacktrace > trace_options

2.設置過濾PID信息
echo common_pid!=512 > events/kprobes/myprobe/filter

三、 trace event的使用

1.掛載debugfs文件系統
mount -t debugfs none /sys/kernel/debug

2.進入tracing調試目錄
cd /sys/kernel/debug/tracing

3.設置events跟蹤開關
ehco 1 > ./events/kmem/kmalloc/enable
ehco 1 > ./events/kmem/kfree/enable

4.開啟跟蹤
echo 1 > ./tracing_on

5.執行自己的操作或者腳本，等待函數運行或者bug出現

6.關閉跟蹤
echo 0 > ./tracing_on

7.取出log
cp ./trace ~/log.txt

優化：
1.設置內存內存過濾信息
echo bytes_alloc==4096 > ./events/kmem/kmalloc/filter