New public API for lttng control

Introduce the lttng domain that is used to identify the tracer.

Remove all 'kernel' from the functions name and now take the domain
struct as first parameter.

Add channel feature is removed and merged with enable-channel.

Move kernel specific data structure from lttng.h to lttng-kernel.h which
is copied from the LTTng kernel modules ABI. Genereic structures are
used to create a generic view of lttng event and attributes (agnostif of
the Kernel and user-space).

Default channel is NOT created unless it is needed.

A lot of comments has been added to lttng.h

Fix a bug in the liblttngctl. A return value was not set correctly.

Signed-off-by: David Goulet <david.goulet@polymtl.ca>

Remove connect/disconnect sessiond from lttng API

Those actions are made internally when a command to the session daemon
is done so no need for them to be public.

Move code around to make things clearer and fit static declaration.

Signed-off-by: David Goulet <david.goulet@polymtl.ca>

quickstart guide review

Signed-off-by: Mathieu Desnoyers <mathieu.desnoyers@efficios.com>

Makes kprobe attribute specific to kernel

Signed-off-by: David Goulet <david.goulet@polymtl.ca>

Fix tracing events data structure

Make lttng_kernel_output generic to user-space and kernel becoming
lttng_event_output.

Renaming enum to fit kernel ABI.

Add comments.

Signed-off-by: David Goulet <david.goulet@polymtl.ca>

Remove libustctl and libustcomm

Those libs are part of the soon to be deprecated user-space tracer. The
code is removed but not the directories and Makefile.am.

lttng-tools will only support UST 2.0 which is not yet released at this
point in time. Thus, this is not useful anymore and will be readded
later on to support the new user-space tracer.

Also disable a small portion of code in the session daemon that uses
libustctl. This code however remains relevant for future UST
integration.

Signed-off-by: David Goulet <david.goulet@polymtl.ca>

Remove not working test

Signed-off-by: David Goulet <david.goulet@polymtl.ca>

Add quick start tracing guide

First draft of a quick start guide. For now, there is only the kernel
tracing guide since ust 2.0 is not released at this point.

Signed-off-by: David Goulet <david.goulet@polymtl.ca>

Add session daemon model RFC

Signed-off-by: David Goulet <david.goulet@polymtl.ca>

Add short option for no sessiond feature

Signed-off-by: David Goulet <david.goulet@polymtl.ca>

Add error message if event not found

Signed-off-by: David Goulet <david.goulet@polymtl.ca>

Fix return code to 0 on success and 1 on error

Signed-off-by: David Goulet <david.goulet@polymtl.ca>

Fix session list locking

The session list lock was not used correctly when a client requested the
session list. The session counter and iteration over the list is
protected by a single critical section now.

Move get_lttng_sessions to the main.c in order to remove lttng.h
dependency to session.c/.h and to make easier for the session list
locking.

Remove the get_session_count which is useless since the counter is now
in the session list structure. Access the counter by locking the list
and reading 'count'.

This adds two function to lock and unlock the session list.

Reported-by: Mathieu Desnoyers <mathieu.desnoyers@efficios.com>
Signed-off-by: David Goulet <david.goulet@polymtl.ca>

Fix bad cleanup of context structure

Signed-off-by: David Goulet <david.goulet@polymtl.ca>

Fix bad exit conditions

Signed-off-by: David Goulet <david.goulet@polymtl.ca>

Clean exit cleanup of the session daemon

Remove the pthread_cancel and introduce the *thread_quit_pipe* that is
used to tell a thread that it should exit cleanly. This pipe is added to
the pollfd set of the thread and has to be close in order to trigger the
clean exit of the threads.

Signed-off-by: David Goulet <david.goulet@polymtl.ca>

Add version command

Signed-off-by: David Goulet <david.goulet@polymtl.ca>

Force to specify the type with add-context

-t, --type must be used or the help shows up. Also allowed multiple -t
to enable multiple context with one command.

Fix a memory leak.

Signed-off-by: David Goulet <david.goulet@polymtl.ca>

Add comment for the session list lock

Signed-off-by: David Goulet <david.goulet@polymtl.ca>

Fix double mutex unlock

Reported-by: Mathieu Desnoyers <mathieu.desnoyers@efficios.com>
Signed-off-by: David Goulet <david.goulet@polymtl.ca>

lttng command line UI: fix allocation/free

Freeing non-dynamically allocated memory is never a good idea.
Also fixing 2 memory leaks.

Signed-off-by: Mathieu Desnoyers <mathieu.desnoyers@efficios.com>

Fix missing value

Signed-off-by: David Goulet <david.goulet@polymtl.ca>

Add locking for all session data structure

The session daemon is single threaded when processing client command
however the CPU hotplug thread was introduced and uses a lot of session
data structure that are now protected by pthread mutex with this commit.

Signed-off-by: David Goulet <david.goulet@polymtl.ca>

Add CPU hotplug support

This introduce a new thread to the session daemon that poll() on all
channel's fd for an event which indicate a new CPU.

If an even is catched, new streams are created for all channels of all
tracing sessions and kernel consumers are updated.

Signed-off-by: David Goulet <david.goulet@polymtl.ca>

Remove useless kernel session counter

Signed-off-by: David Goulet <david.goulet@polymtl.ca>

Remove dependency on libuuid

The session name is unique across all sessions so no need to use UUIDs
from libuuid anymore.

Signed-off-by: David Goulet <david.goulet@polymtl.ca>

Fix locking dependency problem

Acked-by: Mathieu Desnoyers <mathieu.desnoyers@efficios.com>
Signed-off-by: Julien Desfossez <julien.desfossez@polymtl.ca>

kconsumerd: signals should only set flag and write into pipe (part 1)

Simplify signal reception. Left todo.

Signed-off-by: Mathieu Desnoyers <mathieu.desnoyers@efficios.com>

Locking fix.

Signed-off-by: Mathieu Desnoyers <mathieu.desnoyers@efficios.com>

Fix mutex unprotected list

Reported-by: Mathieu Desnoyers <mathieu.desnoyers@efficios.com>
Signed-off-by: David Goulet <david.goulet@polymtl.ca>

Add a check for duplicate session fd

Signed-off-by: David Goulet <dgoulet@ev0ke.net>

Parse kprobe options with enable-event

Address or offset can be specified in base 8 (beginning with 0), base 10
and base 16 (beginning with 0x).

Signed-off-by: David Goulet <dgoulet@ev0ke.net>

Add new kernel consumer name to gitignore

Signed-off-by: David Goulet <dgoulet@ev0ke.net>

Rename kconsumerd to ltt-kconsumerd

Avoid the confusion with a kernel thread in the process list.

Signed-off-by: Julien Desfossez <julien.desfossez@polymtl.ca>
Signed-off-by: David Goulet <david.goulet@polymtl.ca>

Create a library for the kernel consumer

Kconsumerd functionnalities has been extracted to a library to allow
external tools to implement the kernel consumer functions.
Kconsumerd is now a daemon using the library, everything works as
before for this particular case.

Signed-off-by: Julien Desfossez <julien.desfossez@polymtl.ca>
Signed-off-by: David Goulet <david.goulet@polymtl.ca>

Fix segfault on free() pointer

Reported-by: Julien Desfossez <julien.desfossez@polymtl.ca>
Signed-off-by: David Goulet <david.goulet@polymtl.ca>

Add list-commands and list-options to lttng ui

Those commands are mostly for bash auto completion and does not require
heavy parsing for that matter.

Signed-off-by: David Goulet <david.goulet@polymtl.ca>

Add detection of debugfs and kernel module loading

The session daemon now detects the path of the debugfs mount point or
create and mount it at a default location (/mnt/debugfs).

Then, the kernel module are loaded automatically, if present, and the
kernel tracer fd is opened at the previous detected debugfs path.

The kernel module list is hardcoded for now.

NOTE: There is no module unload at the session daemon cleanup. This is
to avoid removing tracing capabilities when a trace is ongoing and
written to disk.

Signed-off-by: David Goulet <david.goulet@polymtl.ca>

Remove unused header file

Signed-off-by: David Goulet <david.goulet@polymtl.ca>

Disable user-space tracer control

Signed-off-by: David Goulet <david.goulet@polymtl.ca>

Fix missing tracing group when UID=0

Signed-off-by: David Goulet <david.goulet@polymtl.ca>

Change configuration file and trace output dir

The configuration file containing the session name information is now at
the HOME location and named ".lttngrc".

The trace output directory is now at the HOME location and named
"lttng-traces" containing the traces of each sessions identified by the
top level directory called "session_name-date-time".

Also fix the metadata's path that was pointing to the old default path
in /tmp/lttng.

Signed-off-by: David Goulet <david.goulet@polymtl.ca>

Add set session command to lttng cli

This command change the session name in the config file of the config
directory (.lttng).

Signed-off-by: David Goulet <david.goulet@polymtl.ca>

Add session name option to all command

Signed-off-by: David Goulet <david.goulet@polymtl.ca>

Overwrite the config file on create session

Signed-off-by: David Goulet <david.goulet@polymtl.ca>

Don't remove the config directory on destroy

Signed-off-by: David Goulet <david.goulet@polymtl.ca>

Improve trace output path and config path

Now, the default config directory is placed in the home directory and
the trace output directory is set inside that config directory with name
being the session name with date and time.

Add get home functio to utils.

Signed-off-by: David Goulet <david.goulet@polymtl.ca>

Fix comments spacing

Signed-off-by: David Goulet <david.goulet@polymtl.ca>

Add utils.c and recursive mkdir function

This fixes the channel path that was wrong. Each channel has now it's
own trace name file using the channel name.

Signed-off-by: David Goulet <david.goulet@polymtl.ca>

default channel selection cleanup

Signed-off-by: Mathieu Desnoyers <mathieu.desnoyers@efficios.com>

lttng.h cleanup

Signed-off-by: Mathieu Desnoyers <mathieu.desnoyers@efficios.com>

Consume with mmap if enabled

Signed-off-by: Julien Desfossez <julien.desfossez@polymtl.ca>

Add channel output method selection

Sync with kernel code to select the output mode between splice and mmap.
Splice remains the default method.

Signed-off-by: Julien Desfossez <julien.desfossez@polymtl.ca>

Fix infinite loop when enabling all events

Signed-off-by: David Goulet <david.goulet@polymtl.ca>

Fix possible null pointer

Signed-off-by: David Goulet <david.goulet@polymtl.ca>

Add kernel context support

At this point, all context types and perf IDs are hardcoded in the usage
function of the add-context command. Future works will remove them and
port them into the code tree.

Signed-off-by: David Goulet <david.goulet@polymtl.ca>

Add disable kernel channel support

Signed-off-by: David Goulet <david.goulet@polymtl.ca>

Add enable kernel channel support

Fix a null pointer dereference in the kernel session teardown.

Signed-off-by: David Goulet <david.goulet@polymtl.ca>

Add disable all support and fix enable all

Disable all kernel events support.

Fix the enable all kernel events that was not doing the right thing
considering the previous changes in the latest commits.

Signed-off-by: David Goulet <david.goulet@polymtl.ca>

Add enable kernel event using the enable ioctl

Two helper functions are added which are get an event by name and a
channel by name.

The disable and enable event command was modified to use these two
functions.

Overall, it's now possible to enable/disable at will kernel events.

Signed-off-by: David Goulet <david.goulet@polymtl.ca>

Fix comment

Signed-off-by: David Goulet <david.goulet@polymtl.ca>

Add disable kernel event support

Signed-off-by: David Goulet <david.goulet@polymtl.ca>

Add FD_CLOEXEC option to all anonymous FDs

Upon execlp() some anonymous file descriptors from the kernel tracer
could be dup and thus making the refcount always > 1 on the lttng kernel
tracer side.

Acked-by: Mathieu Desnoyers <mathieu.desnoyers@efficios.com>
Signed-off-by: David Goulet <david.goulet@polymtl.ca>

Fix possible error on close

Signed-off-by: David Goulet <david.goulet@polymtl.ca>

Rename and add missing header file

Rename config.c/.h to conf.* to avoid confusion with the autogenerated
config.h from autoconf.

Signed-off-by: David Goulet <david.goulet@polymtl.ca>

Add kernel context ioctl

Signed-off-by: David Goulet <david.goulet@polymtl.ca>

Major changes

ltt-sessiond
-------------

Change command type to add the LTTNG_ prefix. Only kernel command at
this point working with the new kernel tracer lttng 2.0.

Adds support for the default channel.

Kernel tracer session, metadata and streams opening are now handled by
the session daemon by removing the public commands for those options.
This means that the public API of lttng-tools DO NOT permit to control
these three actions anymore.

Adds ulimit setting for open files (65535) for sessiond running as
UID=0.

lttng.h
-------------

As mention before, create_session, create_stream and open_metadata is
removed from the public API.

UUIDs are not exposed anymore by the API. Everything is done with the
session name.

New lttng event structure added in order to support kernel tracepoints,
kprobes and function tracer.

New lttng channel structure to create a kernel channel. Add the lttng
channel attribute structure also where to put the channel attributes.

libkernelctl
-------------

Adds flush buffer function and wait quiescent for kernel tracer.

Uses the new enable/disable kernel ioctl that replaces create event.

lttng
-------------

*MAJOR*: This is the inital import of the git-alike UI.

Some features are still not implemented but all the basics and more are
there.

This commit introduce a new feature where the session name is kept in
the current directory where the create command was executed (or
specified by the user with --path). A .lttng directory is created and a
config file that contains, for now, the session name. So, in order to
apply command on a session, you either specify it on the command line or
go in the directory where your .lttng dir reside.

A lot of code was changed/added/removed from all over the lttng-tools
tree to fit this big change. Consider this commit to be an almost
complete rewrite of the original git command line UI and a big part of
the public API.

Signed-off-by: David Goulet <david.goulet@polymtl.ca>

Fix message argument type

Signed-off-by: Mathieu Desnoyers <mathieu.desnoyers@efficios.com>

Fix mkdir error handling

Signed-off-by: David Goulet <david.goulet@polymtl.ca>

Remove unneeded liburcu symbol check

synchronize_rcu symbol is going away with userspace rcu 0.6. lttng-tools
is not using this library directly anyway, just the list header provided
by urcu. Therefore only check for the list header.

Signed-off-by: Mathieu Desnoyers <mathieu.desnoyers@efficios.com>

Internal librairies not being installed anymore

Signed-off-by: David Goulet <dgoulet@ev0ke.net>

Add lttng-cli.txt RFC

Signed-off-by: Mathieu Desnoyers <mathieu.desnoyers@efficios.com>

Initial import of libustctl and libustcomm

Import and clean the libustctl and libustcomm code from the UST git
tree. This import is done at the ust git head commit:
161239e0409832d65cb773a08d364b29945b18a7

Small modifications was needed but nothing major in the API and basic
functionnalities.

Signed-off-by: David Goulet <david.goulet@polymtl.ca>

Fix wrong include file name in Makefile.am

Fix the line and comment it out so that lttng.h is not being installed
at this moment because of heavy development and possible API breakage.

Signed-off-by: David Goulet <david.goulet@polymtl.ca>

Add TODOs for session daemon

Signed-off-by: David Goulet <david.goulet@polymtl.ca>

Add kernel tracer check on kernel command

Check again at each kernel command for the kernel tracer. If the module
get loaded AFTER the session daemon, kernel tracing will be available.

Signed-off-by: David Goulet <david.goulet@polymtl.ca>

kconsumerd execlp set to verbose for debug

Signed-off-by: David Goulet <david.goulet@polymtl.ca>

Close client socket in sessiond

Signed-off-by: David Goulet <david.goulet@polymtl.ca>

kconsumerd dying when sessiond shutdown cmd socket

Signed-off-by: David Goulet <david.goulet@polymtl.ca>

Core modification and listing kernel event support

File descriptor sent to the kconsumerd are now sent one at a time. The
problem was that there is a maximum packet size once the control buffer
is used with recvmsg/sendmsg. This upper bound can be read and set at :
/proc/sys/net/core/optmem_max.

Also, the kconsumerd execlp is set to verbose at this time for debugging
purpose.

Introduce --list-events to list all kernel events with the -k option
added. NOT supported for user-space at this point.

Signed-off-by: David Goulet <david.goulet@polymtl.ca>

Fix kconsumerd multiple spawn bug

The kconsumerd thread was spawned even if there was already an existing
kconsumerd thread.

Signed-off-by: David Goulet <david.goulet@polymtl.ca>

Fix already exist lttng rundir error

Signed-off-by: David Goulet <david.goulet@polymtl.ca>

Set kconsumerd to quiet on execlp

Signed-off-by: David Goulet <david.goulet@polymtl.ca>

Don't quit when all FD hang up

We now wait for the STOP command to exit the polling thread.
When we receive this command and all FD has hung up (all data is
consumed) then we can exit cleanly.
We also close every fd as soon as they report an error.

Signed-off-by: Julien Desfossez <julien.desfossez@polymtl.ca>

Add listing kernel event support

Introduce the --list-events option which list all tracing event of the
kernel or/and an application.

Only kernel support here. User-space integration is coming.

Signed-off-by: David Goulet <david.goulet@polymtl.ca>

Remove useless zero initialization

Signed-off-by: David Goulet <david.goulet@polymtl.ca>

Modify kconsumerd thread and spawning function

In the kconsumerd thread, the one use case where the kconsumerd tells us
he's ready but we are unable to connect is now validate using the
kconsumerd_pid in the spawn_kconsumerd_thread function.

Also, we do not iterate over and over on the error socket anymore. Upon
receiving an error from the kconsumerd, this means that the daemon will
quit and thus the thread is no longer necessary.

Signed-off-by: David Goulet <david.goulet@polymtl.ca>

Add lttng-kconsumerd.h

This header files contains data shared between the kconsumerd daemon and
the session daemon.

Signed-off-by: David Goulet <david.goulet@polymtl.ca>

Indent fix to switch

Coding style...

Signed-off-by: Julien Desfossez <julien.desfossez@polymtl.ca>

Ignore first SIGINT

Add a counter to ignore the first ctrl+c (especially useful when
sessiond spawn kconsumerd). If the user presses ctrl+c an other time,
kconsumerd dies as expected.

Signed-off-by: Julien Desfossez <julien.desfossez@polymtl.ca>

Add missing open() option to kconsumerd

From: Julien Desfossez <julien.desfossez@polymtl.ca>
Signed-off-by: David Goulet <david.goulet@polymtl.ca>

Cleanup liblttngctl

Cleanup code, function declaration and comments.

Rename the lttng_check_session_daemon function to
lttng_session_daemon_alive.

Signed-off-by: David Goulet <david.goulet@polymtl.ca>

Fix errors due to lttng.h cleanup

Rename lttng/lttng.h to options.h in order to avoid confusion with the
public lttng.h header file.

Signed-off-by: David Goulet <david.goulet@polymtl.ca>

Cleanup lttng.h public header

Signed-off-by: David Goulet <david.goulet@polymtl.ca>

Add kernel trace destroy functions

Adds clean trace data structure cleanup using trace_destroy_kernel_*
functions.

Signed-off-by: David Goulet <david.goulet@polymtl.ca>

Add kernel trace data structure init functions

Adds back trace.c file which contains kernel trace data structure
initialization functions.

This simplifies a lot the kernel data structure creation and makes it
more modular to operate on those data type.

Signed-off-by: David Goulet <david.goulet@polymtl.ca>

Add debug and remove useless fct prototype

Signed-off-by: David Goulet <david.goulet@polymtl.ca>

Fix kconsumerd thread on message error received

Only die if the message is not ALL FD HUNG UP.

Signed-off-by: David Goulet <david.goulet@polymtl.ca>

Add validation to stop a trace without a session name

Signed-off-by: David Goulet <david.goulet@polymtl.ca>

Fix segfault when stoping a kernel session that does not exist

Signed-off-by: David Goulet <david.goulet@polymtl.ca>